Python / SQL など データ分析基盤データ連携/マート定常化作業
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。
以下の作業を行います。
<作業内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer,
DB:Redshift,PostgreSQL,Oracle,MySQL
リポジトリ:Github Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack,Google Workspaces
PCの貸与またはAWS Workspacesを使用
<備考>
テレワーク
<基本時間>
9:30~18:30
<服装>
オフィスカジュアル
【フルリモート】データ分析基盤構築
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
データサイエンティスト
作業内容 ・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
PC貸与はなしです、ご自身の端末からAWS Workspaces上で作業を行います。
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
【Python/AWS】データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 ・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
(稀に月1回あるかないかの頻度で渋谷でミーティングあり)
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
時間は10:00~19:00 応相談
【DBエンジニア】金融系システムのエンハンス作業の求人・案件
作業内容 【概要/作業内容】
・金融系システムのエンハンス作業
・作業内容はAWS構築、ネットワークに関する業務で下記いずれかのポジションを担当
①DBデータ移行
DB(sybaseとoracle)のダンプデータがある状態からクラウドにデータ移行してDB構築
②AWS構築
AWSの設計から環境構築
③データ分析環境構築
Tableauが動くためのインフラ環境構築
データ量が大きいためNWまわり含めたサイジングも実施
【AWS】金融系エンドユーザ向けAWS基盤のPoC/設計実装の求人・案件
業務委託(フリーランス)
PythonDynamoDBNode.jsAWSAmazon S3DynamoGlueAthenaFargateLambda
作業内容 ・お客様にて展開予定のSaaS開発での基盤構築に携わって頂きます。
・DevOpsの流れで、先ずは基本機能の実装を目指しております。
・現在は、主にインフラ面で弊社にて先行してPoCを通じシステム
要求事項とAWS仕様調査、実現性確認を行っております。
・今後は、上記フェーズを踏まえて本番に向けた設計、実装フェーズ
に入って参ります。
Python / AWS アプリケーションエンジニア
PythonAWSGitGlueLambda
アプリケーションエンジニア
作業内容 大手小売企業向けに、旧テーブル構造から新テーブル構造にPythonでコンバートする
移行プログラムの開発を行っていただきます。
対象テーブルは50テーブルで、新旧テーブル定義は存在するのでコンバート仕様を設計いただき、
実装、テストを進めていただきます。
<作業範囲>
設計、構築、実装、テスト
<使用するAWSサービス>
Lambda / RDS / Glue
<開発環境>
・インフラ: AWS
・OS:Lambda
・DB: RDS
・言語:Python
<備考>
基本時間:9時〜17時※調整可能
※※こちらの案件は現在募集を終了しております※※
AWS オンプレシステムのマイグレーション
VBAAccessMySQLDynamoDBAWSRedshiftGlueAthenaFargateCloudFormationAuroraCloudFrontLambda
作業内容 オンプレ(VBA+Access+MySQL)で稼働しているシステムのクラウド化PJです。
インフラおよびWebアプリケーションを含む要件定義・設計・実装に携わって頂きます。
<作業工程>
要件定義、設計構築、実装
<使用するAWSサービス>
CloudFormation / CodeCommit / CodePipeline / CodeDeploy / CodeBuild /
EC2 / ECS /S3 / EKS / Fargate /
RDS / Aurora / DynamoDB / ElastiCache / CloudWatch /
CloudFront / VPC /API Gateway /
Well-Architected / Redshift /
ECR / WAF / SQS / SNS /Control Tower /
Auto Scaling / SES / Athena / IAM /
Lambda / Step Functions/
Route 53 /EFS /GuardDuty / CodeStar
Elastic Beanstalk / Amplify
Direct Connect / VPN / Transit Gateway /Cognito /
Glue / ELB / CloudTrail
<開発環境>
インフラ:AWS
OS:指定なし
ネットワーク:閉域環境にする可能性あり
DB:指定なし
言語:指定なし
<備考>
フルリモート
【AWS/一部リモート】AWSインフラ要員案件
業務委託(フリーランス)
AWSRedshiftGlueAthenaAurora
ネットワークエンジニア
作業内容 ・ご対応いただく作業内容は、下記になります。
➀案件対応
-要件定義~リリースまで随時フェーズに応じた作業
例:AWS ネットワーク構成の検討・構築(VPC、ELIの設計、設定等)
AWS 分析基盤サービスの検討・構築(Redshift,Amazon EMR等の設定)
AWS セキュリティ、可用性検討・構築(リソースアクセス制御、可用性検討)
②保守対応
-現行本番で発生した問題の調査・対応
-積み残し課題の調査・対応
【AWS】Sagemaker構築運用
業務委託(フリーランス)
SparkAWSGlueKubernetes
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
■概要
AWS環境でSagemaker構築および運用を実施していただきます。
■作業場所:東西線木場駅(初期設定後はリモートを予定)
■精算条件:固定
■打ち合わせ回数:2
※週5日〜OKの案件です!
※実務経験1年以上お持ちの方が対象の案件です!
【Python】小売りチェーンシステムDX推進プロジェクト
業務委託(フリーランス)
PythonSQLLinuxSQL ServerAWSGitGlue
作業内容 ・Pythonを用いた大手外食チェーンのDX推進プロジェクトに携わっていただきます。
・主に下記作業をご担当いただきます
- 分析システム向けにデータレイク内のビックデータをクレンジング、加工、集計するシステムの構築
- 要件定義書やプロトタイプを基にした新規システム開発
- AWSサービスを活用したETL処理の構築
データ加工処理マイグレーション検討
HadoopSparkAWSApacheSnowflakeGlue
作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。
現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。
現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。
※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ
クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。
現在想定しているマイグレーション例は、以下の通りです。
-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換
→Databricks、Snowflake(Snowpark)、AWS(Glue,EMR)等の
Spark関連マネージド・サービスにマイグレーション
<就業時間>
9:00ー18:00
※※こちらの案件は現在募集を終了しております※※
【AWS/SQL】サーバーサイドエンジニア
業務委託(フリーランス)
SQLAWS
サーバーサイドエンジニア
作業内容 ソーシャルゲームを運用されている企業様社内にて、
外部開発会社(サーバー)で行う作業の方針(主にセキュリティ、サーバ負荷、コスト周り)を検討/決定する
その他データ分析基盤(AWS Kinesis, AWS Glue, AWS Athena, digdag/python)のメンテナンスなどをお願いいたします。
AWS 大手SIer保険会社のDWH構築
AWSRedshiftGlueAthenaAurora
作業内容 下記における要件定義~設計・構築工程で参画いただける方を募集しております。
・AWSネットワーク構成の検討・構築(VPC, ELIの設計、設定等)
・AWS分析基盤サービスの検討・構築(Redshift, Amazon EMR等の設定)
・AWSセキュリティ、可用性検討・構築(リソースアクセス制御、可用性検討)
<備考>
フルリモート
【リモート可|Python・データ分析】大手コンビニ向けETL処理開発
作業内容 コンビニの顧客分析、商圏分析等の為のAWS Glueを使用したETL処理の
開発
・他システムから連携されるファイルの取り込み(to Athena、to
Snowflake)
・取り込んだデータを使用してのマート作成(Athena、Snowflake)
【Python】データ分析基盤の開発及び運用
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGoogle Cloud PlatformRedshiftBigQueryGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【案件】
データ分析基盤の開発及び運用をご担当いただきます。
通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築をおねがします。
【主な業務内容】
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
【技術スタック】
・AWS:Glue,Lambda,StepFunctions,Redshift,RedshiftSpectrum,
IAM,SageMaker,S3,EC2,CodePipeline,CodeDeploy
・GCP:BigQuery,GCS,CloudFunction,CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:GithubEnterprise,CodeCommit
・コラボレーションツール:JIRA,Confluence,Backlog
・コミュニケーションツール:Slack,GSuite
【条件等】
最寄駅:リモート可/渋谷
※週1の出社が発生する可能性がございます
打合せ回数:1回
時間は10:00~19:00
服装:オフィスカジュアル
精算方法:140-180h上下割
※週5日~OKの案件です!
【Python/SQL】 データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築
主な業務内容は以下を想定しています。
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
(稀に月1回歩かないかの頻度で渋谷でミーティングあり)
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
【AWS】データウェアハウス基盤構築
業務委託(フリーランス)
PythonSQLShellAWSJenkinsRedmineGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
某大手小売企業向けのデータウェアハウス基盤構築プロジェクト
をご担当いただきます。
【開発環境】
Python、SQL
AWS(Lambda、Redshift、S3、DynamoDB)
Jenkins、Redmine、CI/CD
【主に行う業務】
下記のような業務を想定しております。
・ETL処理の開発作業
(設計、設計書作成、実装、単体テスト)
・ETL処理の結合テスト作業以降
(結合テスト、システムテスト)
【求める人物像】
・勤怠/健康状態に問題がなく、中長期的に業務に携わっていける方
・コミュニケーション能力のある方
・ハウスルールなど遵守しつつ業務を遂行できる真面目で責任感のある方
【作業工程】
基本設計~テスト
【場所】
リモート可/日比谷駅
【精算】
150h~200h
【面談】
1回
【服装】
ビジネスカジュアル
※週5日〜OKの案件です!
※実務経験1年以上お持ちの方が対象の案件です!
【Python】データ基盤構築
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGoogle Cloud PlatformRedshiftBigQueryGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
▼概要
通信キャリア会員向けECを運営している
グループ子会社でのデータ基盤構築をご担当いただきます。
▼主な業務内容
・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク,データウェハウス,マートの実装,テスト
※基盤構築作業が主な作業になります。
▼技術スタック
・AWS:Glue,Lambda,StepFunctions,Redshift,RedshiftSpectrum,
IAM,SageMaker,S3,EC2,CodePipeline,CodeDeploy
・GCP:BigQuery,GCS,CloudFunction,CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:GithubEnterprise,CodeCommit
・コラボレーションツール:JIRA,Confluence,Backlog
・コミュニケーションツール:Slack,GSuite
▼条件等
時間:10:00~19:00応相談
場所:リモート可/渋谷
※基本フルリモートです
※週1の出社が発生する場合がございます
清算方法:140-180h上下割
打合せ回数:1回
※週5日~OKの案件です!
【AWS】銀行向けAWS上データ基盤設計/構築案件
業務委託(フリーランス)
AWSAurora
インフラエンジニア
作業内容 ・AWS上でのデータ基盤の設計構築をご担当いただきます。
Python / SQL データパイプライン開発
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 通信キャリア会員向けECを運営しているグループ子会社でのデータ基盤構築
<主な業務内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer
DB:Redshift, PostgreSQL, Oracle, MySQL
リポジトリ:GitHub Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack, Google Workspaces
<備考>
フルリモート
<基本時間>
10:00~19:00
応相談
<服装>
オフィスカジュアル
PM / AWS システム基盤のマイグレーション
VBAAccessMySQLDynamoDBAWSRedshiftGlueAthenaFargateCloudFormationAuroraCloudFrontLambda
PM
作業内容 オンプレ(VBA+Access+MySQL)で稼働しているシステムのクラウド化PJです。
PMとして、インフラおよびWebアプリケーションを含む要件定義・設計・実装に携わって頂きます。
<作業工程>
要件定義、設計構築、実装
<使用するAWSサービス>
CloudFormation / CodeCommit / CodePipeline / CodeDeploy / CodeBuild /
EC2 / ECS /S3 / EKS / Fargate /
RDS / Aurora / DynamoDB / ElastiCache / CloudWatch /
CloudFront / VPC /API Gateway /
Well-Architected / Redshift /
ECR / WAF / SQS / SNS /Control Tower /
Auto Scaling / SES / Athena / IAM /
Lambda / Step Functions/
Route 53 /EFS /GuardDuty / CodeStar
Elastic Beanstalk / Amplify
Direct Connect / VPN / Transit Gateway /Cognito /
Glue / ELB / CloudTrail
<開発環境>
インフラ:AWS
OS:指定なし
ネットワーク:閉域環境にする可能性あり
DB:指定なし
言語:指定なし
<備考>
フルリモート
【AWS/一部リモート】某生命保険会社AWS環境DWH構築案件
業務委託(フリーランス)
AWSGlueAthenaAurora
インフラエンジニア
作業内容 ・某生命保険会社のAWS環境でのDWH構築に携わっていただきます。
・AWS ネットワーク構成の検討、構築(VPC、ELIの設計、設定等)
・AWS 分析基盤サービスの検討、構築(Redshift,Amazon EMR等の設定)
・AWS セキュリティ、可用性検討、構築(リソースアクセス制御、可用性検討)
【Java】カーリース業向けポータルサイト開発案件
業務委託(フリーランス)
JavaSQLAWSGlue
サーバーサイドエンジニア
作業内容 ・Javaを用いたカーリース業向けポータルサイトの開発に携わっていただきます。
・主に設計から製造までの作業をご担当いただきます。
【データエンジニア】オンライン診療システムデータ基盤構築案件
業務委託(フリーランス)
PythonSQLMySQLAWSDockerGlueAthenaLambda
サーバーサイドエンジニア
作業内容 ・オンライン診療システムのデータ基盤構築業務を担っていただきます。
主に下記作業をお任せする想定でございます。
-社内に散らばっている1次データを集約してデータベース化。
【AWS】データ分析基盤の開発(リモート)
業務委託(フリーランス)
SQLAWSGlue
インフラエンジニア
作業内容 ・情報を一元的に管理・可視化するデータ分析基盤の開発・構築
・AWSの各種サービスを活用した実現可能性の調査
・各システムからのデータ収集・データ加工・データ整形機能の設計・実装
・BIツールによるデータ可視化機能の設計・実装
【データアナリスト/Python】小売店舗マスタシステム更改支援案件
業務委託(フリーランス)
JavaPythonAWSGlue
サーバーサイドエンジニアデータアナリスト
作業内容 ・Pythonを用いた小売店舗マスタシステム更改支援案件に携わっていただきます。
・主にデータ連携等の作業をご担当いただきます。
【Python/AWS】データ分析基盤開発案件
業務委託(フリーランス)
PythonSQLAWSGitHubGlue
作業内容 ・会計サービスを一元的に管理および可視化する、
データ分析基盤の開発を行っていただきます。
・AWSの各種サービスを活用した実現可能性の調査や
各システムからのデータ収集、加工を行っていただきます。
・データ整形機能の設計実装を行っていただきます。
Java / AWS 大手ポイントアプリのバックエンドシステム開発
JavaDynamoDBNode.jsSpringAWSAmazon VPCGlueCloudFrontLambda
バックエンドエンジニア
作業内容 大手ポイントアプリのバックエンドシステムにおける新規開発・改修案件の開発業務。
環境はAWS、アプリをはじめ基幹システム他複数システムと連携しています。
<工程>
設計、開発、テスト、リリース
<使用技術>
フレームワーク:Spring Boot/Node.js
使用しているAWSソリューション:
コンピューティング:EC2/Lambda
データベース:RDS/DynamoDB
ストレージ:S3
ネットワーキング/コンテンツ配信:DirectConnect/Amazon VPC/CloudFront/API Gateway
分析/データ抽出:Glue
システム管理:CloudWatch/CloudTrail
チーム体制:社員1名、業務委託9名
ウォーターフォール開発
<備考>
基本リモート
【Azure、AWS/一部リモート/週5日】Azure、AWSハイブリッド環境でのDWH環境構築案件
業務委託(フリーランス)
AWSAzure
アプリケーションエンジニア
作業内容
基本設計から総合テストまで
Azure、AWSで使用するサービス:
・Glue
・StepFunction
・Redshift
・オンプレミスデータゲートウェイ
・PowerBI Service
・Azure Service Bus
・AzueAD
・Sharepoint
・CloudWath
・AWS Backup
・S3
【DB】通信キャリア会員向けデータ基盤構築案件
業務委託(フリーランス)
JavaPythonSQLC#AWSRedshiftGlueLambda
データベースエンジニア
作業内容 ・データベースエンジニアとして通信キャリア会員向けデータ基盤の構築をお任せいたします。
・下記を行っていただきます。
- 通信キャリア会員向けEC運営会社でのデータ基盤構築
- データ連携案件管理
- 基盤構築