【SQL/AWS】データ分析基盤インフラ保守/運用支援案件
業務委託(フリーランス)
SQLMySQLAWSRedshift
インフラエンジニアデータベースエンジニア
作業内容 ・下記を行っていただきます。
-マーケティング業務の技術的な提案と情報の連携
-情報不備時、その原因究明とリカバリ対応
-日次更新ジョブ作成(DataSpider)
-顧客情報の連携、定常業務の簡略化(Rest API)
-ETLツール運用
-SQLチューニング、不具合調査
New【分析基盤エンジニア】データ分析基盤実装案件
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud Platform
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy・GCP:BigQuery, GCS, CloudFunction, CloudComposer,・DB:Redshift,PostgreSQL,Oracle,MySQL・リポジトリ:Github Enterprise,CodeCommit・コラボレーションツール:JIRA, Confluence, Backlog・コミュニケーションツール:Slack,Google Workspaces
New【Tableau】データ分析基盤構築の求人・案件
業務委託(フリーランス)
VBARedshiftTableau
作業内容 飲食系クライアント向けのBI(Tableau)構築案件です。
下記の2フェーズで進めており、1月から開始するフェーズのメンバーを募集しております。
・フェーズ1(年末まで):データレイク、RedshiftでのDWH
・フェーズ2(1月以降):データマート作成、BI(Tableau)設計
PJはアジャイルで進めるため、ドキュメンテーションの比率は低いです。
Redshiftから抽出したデータ(数百GB)を2~3GBほどに圧縮しサーバーにパブリッシュします。
※フェーズ1でクレンジングできていないデータをExcel VBAでデータマートに変換するタスクが発生する可能性があります。
SQL Dr.SumからRedShiftへのシステムリプレース
作業内容 小売業でのDr.SumからRedShiftへのシステムリプレース
作業フェーズとして設計、開発、単体テスト、総合テスト、データ移行、リリースを担当していただく
<作業内容>
テーブル設計・作成、glueでのデータ加工の設計・開発・テスト
DB:Dr.Sum+データ加工:Connectで作成しているシステムを
DB:RedShift+データ加工:glueでリプレースする
・対象システム数:7
<基本時間>
9:00~18:00
<服装>
基本的には自由
Web会議でクライアントとお話する時はビジネスカジュアル
【Redshift/Java/Ruby/PHP】データウェアハウス構築案件
業務委託(フリーランス)
JavaJavaScriptPHPRubySQLLinuxAWSRedshift
サーバーサイドエンジニア
作業内容 ・現在運用中のサービスのデータをRedshiftに集約し、
サービスの課題発見、問題解決、新たな価値を創造するための
DWHを構築して頂きます。
・ログの収集から転送、Redshiftの運用管理まで、幅広くご担当頂きます。
・具体的には下記のような業務をして頂きます。
-Redshiftを用いたDWHの構築。
-ログ送信のためのJavaScriptライブラリの作成。
-ログ出力のためのAPI作成。
-ログデータ、DBのデータの転送。
-関連するインフラ環境の構築。
※英語必須※【データエンジニア】外資系企業におけるETL活用※受託案件
作業内容 ■お任せしたいこと概要:
同社が外資系医薬品企業様から受託しているプロジェクトにて、ETLツール(Talend)を使用したデータ管理をお任せします。
グローバルの担当者と英語でコミュニケーションを取っていただく可能性がございます。
■開発環境について/使用技術について:
TalendおよびRedshift
■同社について:
同社はインド系の受託企業となり、外資系企業を中心とした案件を多数抱えています。
【AWS/一部リモート】某生命保険会社AWS環境でのDWH構築案件
業務委託(フリーランス)
AWSRedshift
インフラエンジニアコンサル
作業内容 ・某生命保険会社のAWS環境にて、構築済のDWH基盤を更に拡充し更なるデータ集約、外部サイトのビックデータ収集、Redshift、EMRを使った データ分析を新たに構築する。
[以下補足]
・基盤だけでなくデータマートやスタースキーマ等、分析に適したデータ設計も 実施。
・BIツール等のデータを扱う上での権限制御等も実施
・基盤全体のセキュリティに関する改修も実施可能性有
構築済のDWHサービス
・S3
・Aurora
・QuickSight
・OpenAPI
・Lamda
・Glue
・EventBridge
・Step Functon
・EC2
・Athnea
・監視・通知系サービス(cloudwatch trail SNS)
・CloudFormation
◎新規追加予定のサービス
・Redshift
・EMR
・LakeFormation
・DynamoDB
・Kinesis Firehorse
【Python3/SQL】某大手携帯会社向けDWH基盤構築プロジェクトの求人・案件
業務委託(フリーランス)
PythonSQLAWSAmazon S3DynamoRedshiftGlueLambda
作業内容 ETL処理(設計、実装、単体テスト、結合テスト、システムテスト)
New【BIエンジニア】Tableau ダッシュボード作成・小売業向けPOSデータ可視化PJ
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 ・Tableau ダッシュボード作成・小売業向けPOSデータ可視化■作業内容:Tableauダッシュボードの開発・テスト(単体/結合)
Python / SQL など データ分析基盤データ連携/マート定常化作業
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。
以下の作業を行います。
<作業内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer,
DB:Redshift,PostgreSQL,Oracle,MySQL
リポジトリ:Github Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack,Google Workspaces
PCの貸与またはAWS Workspacesを使用
<備考>
テレワーク
<基本時間>
9:30~18:30
<服装>
オフィスカジュアル
【分析基盤エンジニア】航空会社向けBIシステム データ抽出/加工支援
業務委託(フリーランス)
SQLAWSRedshift
作業内容 航空会社向けBIシステム データ抽出
AWS エンジニアの募集
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 大手財閥系の金融子会社にて、AWSを利用したDWHの構築プロジェクトが立ち上がり、AWSの技術者(RedShiftやGlueなど)が必要で一緒に業務して頂ける方を募集中。
<現状>
・オンプレ環境に基幹システム周辺システムをもっており、そのデータを活用してマーケに活用するが管理するベンダーがばらばらな状態でデータが一元管理できていない状態
⇒各システムを一元化してデータウェアハウス、クラウドで構築したい
・金融機関の為、パブリッククラウドで構築が難しいのでセキュリティに制約ありつつ、既存のAWS環境上にデータレイクの中を構築してほしい
⇒8月~PoCで作業を開発していきたい
<備考>
基本リモート
Python / SQL データパイプライン開発
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 通信キャリア会員向けECを運営しているグループ子会社でのデータ基盤構築
<主な業務内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer
DB:Redshift, PostgreSQL, Oracle, MySQL
リポジトリ:GitHub Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack, Google Workspaces
<備考>
フルリモート
<基本時間>
10:00~19:00
応相談
<服装>
オフィスカジュアル
【Tableau】BIエンジニアの求人・案件
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 ・Tableau ダッシュボード作成/小売業向けPOSデータ可視化
・Tableauダッシュボードの開発・テスト(単体/結合)
■担当工程:
設計~テスト
■役割
メンバー
【DX・データ利活用コンサル】データ利活用推進支援の求人・案件
業務委託(フリーランス)
RedshiftAurora
コンサル
作業内容 大手専門商社のDX管掌部署にて実施中の「データ利活用」をエンドユーザー伴走で推進いただきたい。
≪ポジション≫
①②でそれぞれ1名ずつ
①:各事業部の業務/状況のヒアリング~BIツール(Tableau導入済)活用や見える化の検討~定着化 の支援
②:①と連携し、DWH(Aurora/Redshift導入済)箇所の対応整理・定義・構築
【AWS/データエンジニア】顧客データベース次世代化プロジェクト
業務委託(フリーランス)
PythonSQLAWSRedshift
バックエンドエンジニア
作業内容 【概要】 ・旧データベースの内容を新データベースに名寄せを行うプロジェクト
【対応内容】 ・データの名寄せ・データベースの論理設計・データクレンジング処理プログラムの作成・SQL速度高速化
【開発環境】 ・AWS Glue・AWS Lambda・AWS Redshift
【SQL】大手事業会社でのデータ分析、ビジネス課題解決支援
作業内容 ・立ち上がりフェーズは、Input整備業務(お客様サービスのデータのredshift連携など)データ分析基礎作業(クロス集計のレポート化)
・顧客ビジネス理解が進んだ後は、データ分析結果を利用した課題設定と解決策検討支援
データ分析基盤の開発(SE)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
SE
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
【SQL,RDB,VBA】若手向け スマホアプリ分析 データクレンジング、データ集計作業
業務委託(フリーランス)
SQLVBAPostgreSQLRedshift
作業内容 スマホアプリの分析チーム内で、依頼に沿ってデータのクレンジング、集計作業を実施
【Python】製造業向けデータエンジニアの求人・案件
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
作業内容 クライアントの調達部門にてAWSを利用した購買データのデータパイプライン構築~運用をご担当いただきます。
【Python/AWS】大手キャリア向けMA基盤開発支援
業務委託(フリーランス)
PythonAWSRedshift
サーバーサイドエンジニアバックエンドエンジニア
作業内容 【20代~40代の方向け】
大手キャリア向けMA基盤のポーティング作業に携わっていただきます。
SQL BIツール(Tableau)及びDBパフォーマンスチューニング
作業内容 DWH(Redshift)及びBIツール(Tableau)のチューニングを実施します。
tableauについてはカスタムクエリ、RedshiftについてはマートやViewの見直しやindexの再生成といったSQLを用いたパフォーマンス改善を行います。
既に対象資源は抽出されております為、アセスメント及びチューニング業務が主となります。
<基本時間>
10:00~19:00
【pandas】データ(分析)エンジニアの求人・案件
業務委託(フリーランス)
JSONAWSAmazon S3Redshift
作業内容 pandas ライブラリを利用した ETL 処理
をしていただきます。
担当フェイズ
設計~開発~テスト
【フルリモート|Python・SQL】データ分析基盤開発案件
作業内容 顧客パッケージのデータ分析基盤を使っての開発案件になります。
基盤導入後にお客様のデータをDWH(主にRedshift)に登録、
SQLまたはPythonを使ったELT処理を行います。
※ETLの処理の割合としてSQLが多いです。
基盤導入後のデータの登録、ETL処理になります。
ジョブを実行する機能があり、そのジョブから実行するプログラム(SQL、Python)を開発するイメージなります。
案件の特性として規模は大きくなく2−3名体制で1-3か月ぐらいの案件が多いです。
そのため複数案件にかかわっていただくことがあります。
【Python】転職支援サービス向け開発案件
業務委託(フリーランス)
PythonRedshift
データサイエンティストインフラエンジニア機械学習エンジニア
作業内容 ・転職支援サービスのレコメンドアルゴリズム開発業務に携わっていただきます。
・下記を行っていただきます。
-Webログデータ、事業データのデータ分析
-レコメンドアルゴリズム開発
-システム実装
-クライアントコミュニケーション
RHEL / Windows AWS基盤構築案件(マイグレーションプロジェクト)
WindowsAWSRedshiftFargate
作業内容 AWSによる基盤構築を行っていただきます。
様々なサードパーティー製の製品を導入することになるため、業務理解も必要となります。
基盤を構築するうえで顧客にヒアリングしながら設計・実装を実施いたします。
また、大規模なプロジェクトチームとなるためコミュニケーションスキルおよび積極性が求められます。
<主な業務>
・ドキュメント作成(基本設計書、テスト仕様書、運用設計など)
・単体/結合テスト/障害テスト項目の作成・実施
・EC2(RHEL/Windows)の構築 ※手順あり
・AWSに関するエラー発生に関する調査協力
<作業工程>
AWS基盤 基本設計・詳細設計・構築・テスト・運用設計
<使用するAWSサービス>
NLB / ALB / EC2 / CloudWatch / IAM
AWS Backup,
API Gateway / WAF/ ECS Fargate / ECR / AWS Backup / Redshift / Kinesis
DataFirehose / S3 / KMS/ VPC / Transit Gateway /
Well-Architected / Redshift / Route 53 / Direct Connect
<勤務地>
虎ノ門エリア
<基本時間>
9:30~18:30
【Python/Java/C#/~40歳まで/4月稼働開始】データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambda
作業内容 テックビズなら記帳代行無料!仕事に集中して取り組んでいただけます。
■案件情報
・基盤構築:事業要請に応じたデータレイク,データウェハウス,マートの実装, 運用,テスト
■期間:2022年4月~
※3月は最大80%の稼働であれば、4月からは100%で入場も可能
■場所:週4日リモート,週1出社(コロナの状況によって出社しないこともあり)
■技術スタック
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
■希望条件
服装
オフィスカジュアル
備考
PCの貸与またはAWS Workspacesを使用
■契約情報
精算方法
140-180
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・40代以上の方
・外国籍の方(永住権をお持ちの方は問題ございません)
・週5日稼働できない方
--------------------------------------------------------
【Python 】データ分析基盤構築PMO
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambda
PMPMO
作業内容 【概要】
通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築のPMO案件です。
主な業務内容は以下を想定しています。
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
拠点は渋谷ですがフルリモート参画になります。
PC貸与はなしです、ご自身の端末からAWS Workspaces上で作業を行います。
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
時間は10:00~19:00 応相談
■契約情報
契約形態
業務委託契約(準委任)
精算方法
140-180 上下割
渋谷※フルリモート可
打合せ回数1回
※週5日〜OKの案件です!
SQL / AWS データ分析基盤の開発及び運用業務
JavaPythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubRedshiftBigQueryGlueLambda
作業内容 通信キャリア会員向けECを運営している、グループ子会社でのデータ基盤構築です。
<主な業務内容>
・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェアハウス、マートの実装、テスト
※基盤構築作業が主な作業になります
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer
DB:Redshift,PostgreSQL,Oracle,MySQL
リポジトリ:GitHub Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack, G Suite
<備考>
フルリモート
MTGの頻度は、月1回またはそれ以下を想定
PCの貸与またはAWS Workspacesを使用
<基本時間>
10:00~19:00 応相談
<服装>
オフィスカジュアル
【Tableau,DWH】データ分析システム構築・運用支援
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 使用機種:AWS、Redshift、Talend、Tableau
作業工程:
・TalendによるDWHからのデータ抽出、加工、ジョブ管理
・データマートの設計、開発
・Tableau画面設計、構築
・テスト
・運用監視設計
【Python,ビッグデータ分析基盤】大規模データの分析基盤の開発・運用支援
業務委託(フリーランス)
JavaPythonRHadoopAWSGitGitHubRedshift
アプリケーションエンジニア
作業内容 稼働中の大規模データの分析基盤に対するPythonプログラムの追加改修及び運用
【Python】転職支援サービス向け開発案件
業務委託(フリーランス)
PythonRedshift
データサイエンティストインフラエンジニア機械学習エンジニア
作業内容 ・転職支援サービスのレコメンドアルゴリズム開発業務に携わっていただきます。
・下記を行っていただきます。
-Webログデータ、事業データのデータ分析
-レコメンドアルゴリズム開発
-システム実装
-クライアントコミュニケーション
【Ruby】人工知能を使った分析システムの構築
業務委託(フリーランス)
RubyAWSRedshiftTreasure Data
作業内容 ・大規模データ解析アプリケーションの追加開発案件
(データ解析バッチアプリケーションの開発、及び管理用Webダッシュボードの開発)
【SQL/Python】to B向け売上予測システム開発案件
業務委託(フリーランス)
PythonSQLScalaAccessAWSGitHubRedshift
作業内容 ・Pythonを用いたto B向け売上分析に携わっていただきます。
・主に下記作業をご担当いただきます。
-AWS S3に貯められた購入データをAWS Step FunctionやAWS
Lambdaを用いてAmazon Redshiftへの登録作業
-コードレビュー
-追加機能開発
【SQL/Python】大手金融機関グループ会社向けデータ分析案件
業務委託(フリーランス)
PythonSQLRedshift
データサイエンティスト
作業内容 ・大手グループ会社向けのDX推進プロジェクトに携わっていただきます。
・下記を行っていただきます。
‐SQLやAmazon Redshiftを使用した統計学的なデータ分析
‐ユーザー部門とのMTGでの示唆出し
【週3日~可】【Python】Saas向けデータ連携システム開発案件
業務委託(フリーランス)
PythonSQLLinuxPostgreSQLAWSDockerGitGitHubRedshift
作業内容 ・データ変換仕様を記載した仕様書を元に下記を用いてデータ変換処理を実装していただきます。
-Python
-Bash
-SQL
【SQL】航空会社向けBIシステム データ抽出/加工支援の求人・案件
業務委託(フリーランス)
SQLAWSRedshift
作業内容 セルフBI要件検討
セルフ分析向けデータ設計・開発
マスタ検討、分析項目定義、数値定義検討
セルフ分析デモ プロトタイプ作成
他チームからの問い合わせ対応 (データ調査等)
【SQL,R】アパレル向け分析案件
作業内容 ・現分析体制30名 で常時10個程度のテーマで分析を行っている。(需要予測、マーケティングROI、SNS分析等)
・上記体制の要員不足により3名程度を追加募集している。
・RedShift上のデータをSQLやRで抽出しながら分析を行っている (SASではない)
【ETL/リモート】大手自動車メーカー向けETLツール(IICS)での設計・実装
作業内容 作業内容(上から優先度が高い順)
・詳細設計書作成(バッチ(ETL)設計)
基本設計から詳細設計書を作成する
・Informatica Integration Cloud Service(CDI)(以降、IICS)ツールによる実装
IICSにて詳細設計書から実装を行う
経験者であれば尚可。
新しい技術へのキャッチアップが得意であること。
・単体・結合テスト計画書作成とテスト実施
(単体テスト、結合テスト、システムテスト)
・その他テストに関する計画とテスト実施
(移行テスト、パフォーマンステスト、運用テスト)
【AWS/一部リモート】AWSインフラ要員案件
業務委託(フリーランス)
AWSRedshiftGlueAthenaAurora
ネットワークエンジニア
作業内容 ・ご対応いただく作業内容は、下記になります。
➀案件対応
-要件定義~リリースまで随時フェーズに応じた作業
例:AWS ネットワーク構成の検討・構築(VPC、ELIの設計、設定等)
AWS 分析基盤サービスの検討・構築(Redshift,Amazon EMR等の設定)
AWS セキュリティ、可用性検討・構築(リソースアクセス制御、可用性検討)
②保守対応
-現行本番で発生した問題の調査・対応
-積み残し課題の調査・対応