【Python/SQL】 データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築
主な業務内容は以下を想定しています。
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
(稀に月1回歩かないかの頻度で渋谷でミーティングあり)
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
【TL/フルリモート】大手ソフトウェア会社のデータ分析基盤開発
業務委託(フリーランス)
AWSRedshiftGlueAthena
サーバーサイドエンジニア
作業内容 下記における仕様策定、要求の明確化、エンジニアのチーミング
・複数のプロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイクやDWHの構築
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【Python(Pandas)】ビッグデータ分析案件
業務委託(フリーランス)
PythonJSONRedshift
データサイエンティスト
作業内容 データ(分析)エンジニア 募集
データ分析基盤の開発(SE)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
SE
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【SQL】共通ポイント関連のデータ活用支援
業務委託(フリーランス)
JavaPHPPythonSQLOracleAWSRedshift
サーバーサイドエンジニア
作業内容 会員情報や提携社情報などほ保持する分析基盤(AWS/Redshift)に携わる業務。
顧客(ロイヤリティマーケティング会社さん)要望に合わせたデータ抽出やデータマート作成を行います。
また、データマート作成の為のETLツール開発も必要に応じて行います。
【SQL,RDB,VBA】若手向け スマホアプリ分析 データクレンジング、データ集計作業
業務委託(フリーランス)
SQLVBAPostgreSQLRedshift
作業内容 スマホアプリの分析チーム内で、依頼に沿ってデータのクレンジング、集計作業を実施
SQL / AWS データ分析基盤の開発及び運用業務
JavaPythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubRedshiftBigQueryGlueLambda
作業内容 通信キャリア会員向けECを運営している、グループ子会社でのデータ基盤構築です。
<主な業務内容>
・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェアハウス、マートの実装、テスト
※基盤構築作業が主な作業になります
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer
DB:Redshift,PostgreSQL,Oracle,MySQL
リポジトリ:GitHub Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack, G Suite
<備考>
フルリモート
MTGの頻度は、月1回またはそれ以下を想定
PCの貸与またはAWS Workspacesを使用
<基本時間>
10:00~19:00 応相談
<服装>
オフィスカジュアル
【Python/Java/C#/~40歳まで/4月稼働開始】データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambda
作業内容 テックビズなら記帳代行無料!仕事に集中して取り組んでいただけます。
■案件情報
・基盤構築:事業要請に応じたデータレイク,データウェハウス,マートの実装, 運用,テスト
■期間:2022年4月~
※3月は最大80%の稼働であれば、4月からは100%で入場も可能
■場所:週4日リモート,週1出社(コロナの状況によって出社しないこともあり)
■技術スタック
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
■希望条件
服装
オフィスカジュアル
備考
PCの貸与またはAWS Workspacesを使用
■契約情報
精算方法
140-180
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・40代以上の方
・外国籍の方(永住権をお持ちの方は問題ございません)
・週5日稼働できない方
--------------------------------------------------------
【Python 】データ分析基盤構築PMO
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambda
PMPMO
作業内容 【概要】
通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築のPMO案件です。
主な業務内容は以下を想定しています。
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
拠点は渋谷ですがフルリモート参画になります。
PC貸与はなしです、ご自身の端末からAWS Workspaces上で作業を行います。
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
時間は10:00~19:00 応相談
■契約情報
契約形態
業務委託契約(準委任)
精算方法
140-180 上下割
渋谷※フルリモート可
打合せ回数1回
※週5日〜OKの案件です!
【Python】転職支援サービス向け開発案件
業務委託(フリーランス)
PythonRedshift
データサイエンティストインフラエンジニア機械学習エンジニア
作業内容 ・転職支援サービスのレコメンドアルゴリズム開発業務に携わっていただきます。
・下記を行っていただきます。
-Webログデータ、事業データのデータ分析
-レコメンドアルゴリズム開発
-システム実装
-クライアントコミュニケーション
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーサイドエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
SQL BIツール(Tableau)及びDBパフォーマンスチューニング
作業内容 DWH(Redshift)及びBIツール(Tableau)のチューニングを実施します。
tableauについてはカスタムクエリ、RedshiftについてはマートやViewの見直しやindexの再生成といったSQLを用いたパフォーマンス改善を行います。
既に対象資源は抽出されております為、アセスメント及びチューニング業務が主となります。
<基本時間>
10:00~19:00
【フルリモート|Python・SQL】データ分析基盤開発案件
作業内容 顧客パッケージのデータ分析基盤を使っての開発案件になります。
基盤導入後にお客様のデータをDWH(主にRedshift)に登録、
SQLまたはPythonを使ったELT処理を行います。
※ETLの処理の割合としてSQLが多いです。
基盤導入後のデータの登録、ETL処理になります。
ジョブを実行する機能があり、そのジョブから実行するプログラム(SQL、Python)を開発するイメージなります。
案件の特性として規模は大きくなく2−3名体制で1-3か月ぐらいの案件が多いです。
そのため複数案件にかかわっていただくことがあります。
【pandas】データ(分析)エンジニアの求人・案件
業務委託(フリーランス)
JSONAWSAmazon S3Redshift
作業内容 pandas ライブラリを利用した ETL 処理
をしていただきます。
担当フェイズ
設計~開発~テスト
【Python】製造業向けデータエンジニアの求人・案件
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
作業内容 クライアントの調達部門にてAWSを利用した購買データのデータパイプライン構築~運用をご担当いただきます。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
RHEL / Windows AWS基盤構築案件(マイグレーションプロジェクト)
WindowsAWSRedshiftFargate
作業内容 AWSによる基盤構築を行っていただきます。
様々なサードパーティー製の製品を導入することになるため、業務理解も必要となります。
基盤を構築するうえで顧客にヒアリングしながら設計・実装を実施いたします。
また、大規模なプロジェクトチームとなるためコミュニケーションスキルおよび積極性が求められます。
<主な業務>
・ドキュメント作成(基本設計書、テスト仕様書、運用設計など)
・単体/結合テスト/障害テスト項目の作成・実施
・EC2(RHEL/Windows)の構築 ※手順あり
・AWSに関するエラー発生に関する調査協力
<作業工程>
AWS基盤 基本設計・詳細設計・構築・テスト・運用設計
<使用するAWSサービス>
NLB / ALB / EC2 / CloudWatch / IAM
AWS Backup,
API Gateway / WAF/ ECS Fargate / ECR / AWS Backup / Redshift / Kinesis
DataFirehose / S3 / KMS/ VPC / Transit Gateway /
Well-Architected / Redshift / Route 53 / Direct Connect
<勤務地>
虎ノ門エリア
<基本時間>
9:30~18:30
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【Tableau,DWH】データ分析システム構築・運用支援
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 使用機種:AWS、Redshift、Talend、Tableau
作業工程:
・TalendによるDWHからのデータ抽出、加工、ジョブ管理
・データマートの設計、開発
・Tableau画面設計、構築
・テスト
・運用監視設計
【Redshift/BigQuery】データマイニング・分析基盤開発
業務委託(フリーランス)
PythonLinuxRedshiftBigQuery
DBA
作業内容 ゲーム事業で蓄積されたビッグデータを用いた
データ分析環境の基盤構築および開発、管理を行っていただきます。
【Python/Amazon Redshift】大手メディアのデータ分析基盤構築
業務委託(フリーランス)
PythonSQLRedshift
サーバーサイドエンジニア
作業内容 下記内容をご担当いただきます。
・実装
SQLおよびPythonにてデータ集計・加工処理を実装、データマート作成
・詳細設計書作成
処理ロジックを詳細設計書として記述
・テスト計画書作成、テスト実施
単体テスト、結合テスト、システムテスト、パフォーマンステスト
・分析基盤の運用保守
日次バッチの運用、データ検証
【Python,ビッグデータ分析基盤】大規模データの分析基盤の開発・運用支援
業務委託(フリーランス)
JavaPythonRHadoopAWSGitGitHubRedshift
アプリケーションエンジニア
作業内容 稼働中の大規模データの分析基盤に対するPythonプログラムの追加改修及び運用
【Python】転職支援サービス向け開発案件
業務委託(フリーランス)
PythonRedshift
データサイエンティストインフラエンジニア機械学習エンジニア
作業内容 ・転職支援サービスのレコメンドアルゴリズム開発業務に携わっていただきます。
・下記を行っていただきます。
-Webログデータ、事業データのデータ分析
-レコメンドアルゴリズム開発
-システム実装
-クライアントコミュニケーション