【SQL/AWS】データ分析基盤インフラ保守/運用支援案件
業務委託(フリーランス)
SQLMySQLAWSRedshift
インフラエンジニアデータベースエンジニア
作業内容 ・下記を行っていただきます。
-マーケティング業務の技術的な提案と情報の連携
-情報不備時、その原因究明とリカバリ対応
-日次更新ジョブ作成(DataSpider)
-顧客情報の連携、定常業務の簡略化(Rest API)
-ETLツール運用
-SQLチューニング、不具合調査
New【分析基盤エンジニア】データ分析基盤実装案件
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud Platform
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy・GCP:BigQuery, GCS, CloudFunction, CloudComposer,・DB:Redshift,PostgreSQL,Oracle,MySQL・リポジトリ:Github Enterprise,CodeCommit・コラボレーションツール:JIRA, Confluence, Backlog・コミュニケーションツール:Slack,Google Workspaces
【Redshift/AWS/フルリモート】データエンジニア募集
業務委託(フリーランス)
SQLAWSGitGoogle Cloud PlatformRedshiftBigQuery
データサイエンティスト
作業内容 【案件】データエンジニア募集
【内容】
HR系企業のデータサイエンス部署にてデータマート開発実務を担当いただきます。
データマート開発実装をメインにご担当いただきますが、要件定義にてクライアントと直接コミュニケーションを取っていただく必要があります。
<具体的な業務内容>
・分析用データマート開発
┗ 要件定義、データマート(テーブル)設計、SQL実装、テスト
・バッチ基盤(digdag)の実装、運用保守
・データエンジニアリング業務
┗ データの収集、加工、集計
・データマートの保守運用
・TableauのViz作成
【必須スキル】
・データマート設計
・Redshift、BigQueryでの大量データのハンドリング(SQL実装、データマート設計)経験
・クラウド(AWS、GCP)、オープンソース(digdag、git)
・要件定義
【尚可スキル】
・顧客折衝
・TableauでのViz作成経験
・Pythonなどのスクリプト経験
・HR系サービスの分析や企画開発経験
【BI】飲食系の顧客向けデータ分析基盤構築|フルリモート
業務委託(フリーランス)
RedshiftTableau
サーバーサイドエンジニア
作業内容 ■案件内容
飲食系クライアント向けのBI(Tableau)構築案件です。
下記の2フェーズで進めており、1月から開始するフェーズのメンバーを募集しております。
・フェーズ1(年末まで):データレイク、RedshiftでのDWH
・フェーズ2(1月以降):データマート作成、BI(Tableau)設計
PJはアジャイルで進めるため、ドキュメンテーションの比率は低いです。
Redshiftから抽出したデータ(数百GB)を2~3GBほどに圧縮しサーバーにパブリッシュします。
※フェーズ1でクレンジングできていないデータを
Excel VBAでデータマートに変換するタスクが発生する可能性があります。
■担当工程:
構築
■役割
メンバー
【AWS】不動産ベースレジストリのプラットフォーム開発
業務委託(フリーランス)
PostgreSQLAWSRedshiftGlueFargateLambda
インフラエンジニア
作業内容 ビッグデータを取り扱うETL環境を構築
【DWH/基本フルリモート】大手インターネットサービス会社様データウェアハウス基盤移行
作業内容 現在稼働中のデータウェアハウス基盤であるTeradata Databaseから、次世代基盤となるAmazon Redshiftへ移行する
※英語必須※【データエンジニア】外資系企業におけるETL活用※受託案件
作業内容 ■お任せしたいこと概要:
同社が外資系医薬品企業様から受託しているプロジェクトにて、ETLツール(Talend)を使用したデータ管理をお任せします。
グローバルの担当者と英語でコミュニケーションを取っていただく可能性がございます。
■開発環境について/使用技術について:
TalendおよびRedshift
■同社について:
同社はインド系の受託企業となり、外資系企業を中心とした案件を多数抱えています。
【AWS/一部リモート】某生命保険会社AWS環境でのDWH構築案件
業務委託(フリーランス)
AWSRedshift
インフラエンジニアコンサル
作業内容 ・某生命保険会社のAWS環境にて、構築済のDWH基盤を更に拡充し更なるデータ集約、外部サイトのビックデータ収集、Redshift、EMRを使った データ分析を新たに構築する。
[以下補足]
・基盤だけでなくデータマートやスタースキーマ等、分析に適したデータ設計も 実施。
・BIツール等のデータを扱う上での権限制御等も実施
・基盤全体のセキュリティに関する改修も実施可能性有
構築済のDWHサービス
・S3
・Aurora
・QuickSight
・OpenAPI
・Lamda
・Glue
・EventBridge
・Step Functon
・EC2
・Athnea
・監視・通知系サービス(cloudwatch trail SNS)
・CloudFormation
◎新規追加予定のサービス
・Redshift
・EMR
・LakeFormation
・DynamoDB
・Kinesis Firehorse
New【BIエンジニア】Tableau ダッシュボード作成・小売業向けPOSデータ可視化PJ
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 ・Tableau ダッシュボード作成・小売業向けPOSデータ可視化■作業内容:Tableauダッシュボードの開発・テスト(単体/結合)
【Python3/SQL】某大手携帯会社向けDWH基盤構築プロジェクトの求人・案件
業務委託(フリーランス)
PythonSQLAWSAmazon S3DynamoRedshiftGlueLambda
作業内容 ETL処理(設計、実装、単体テスト、結合テスト、システムテスト)
【DWH/データ分析】医薬品会社向けデータレイク基盤構築
業務委託(フリーランス)
SQL
サーバーサイドエンジニア
作業内容 医薬品会社向けのデータレイク基盤構築案件となります。
WebFOCUSからMicroStrategyへの置き換え作業となります。
Redshiftでデータレイクを構築予定となっております。
役割はSE/PGとして、設計以降の工程をご担当いただきます。
Python / SQL など データ分析基盤データ連携/マート定常化作業
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。
以下の作業を行います。
<作業内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer,
DB:Redshift,PostgreSQL,Oracle,MySQL
リポジトリ:Github Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack,Google Workspaces
PCの貸与またはAWS Workspacesを使用
<備考>
テレワーク
<基本時間>
9:30~18:30
<服装>
オフィスカジュアル
【フルリモート】データ分析基盤構築
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
データサイエンティスト
作業内容 ・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
PC貸与はなしです、ご自身の端末からAWS Workspaces上で作業を行います。
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
【Python/AWS】データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 ・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
(稀に月1回あるかないかの頻度で渋谷でミーティングあり)
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
時間は10:00~19:00 応相談
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
AWS エンジニアの募集
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 大手財閥系の金融子会社にて、AWSを利用したDWHの構築プロジェクトが立ち上がり、AWSの技術者(RedShiftやGlueなど)が必要で一緒に業務して頂ける方を募集中。
<現状>
・オンプレ環境に基幹システム周辺システムをもっており、そのデータを活用してマーケに活用するが管理するベンダーがばらばらな状態でデータが一元管理できていない状態
⇒各システムを一元化してデータウェアハウス、クラウドで構築したい
・金融機関の為、パブリッククラウドで構築が難しいのでセキュリティに制約ありつつ、既存のAWS環境上にデータレイクの中を構築してほしい
⇒8月~PoCで作業を開発していきたい
<備考>
基本リモート
【分析基盤エンジニア】航空会社向けBIシステム データ抽出/加工支援
業務委託(フリーランス)
SQLAWSRedshift
作業内容 航空会社向けBIシステム データ抽出
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【データマイニング/SQL/AWS/一部リモート】商品在庫データBIシステムリプレース案件
業務委託(フリーランス)
SQLAWSRedshift
データベースエンジニア
作業内容 ・商品在庫データBIシステムリプレース案件に関して、主に下記作業をご担当いただく予定です。
‐AWS上でデータ加工及び移送のバッチファイル作成
‐QuickSightを使用したダッシュボード作成
Python / SQL データパイプライン開発
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 通信キャリア会員向けECを運営しているグループ子会社でのデータ基盤構築
<主な業務内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer
DB:Redshift, PostgreSQL, Oracle, MySQL
リポジトリ:GitHub Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack, Google Workspaces
<備考>
フルリモート
<基本時間>
10:00~19:00
応相談
<服装>
オフィスカジュアル
【DX・データ利活用コンサル】データ利活用推進支援の求人・案件
業務委託(フリーランス)
RedshiftAurora
コンサル
作業内容 大手専門商社のDX管掌部署にて実施中の「データ利活用」をエンドユーザー伴走で推進いただきたい。
≪ポジション≫
①②でそれぞれ1名ずつ
①:各事業部の業務/状況のヒアリング~BIツール(Tableau導入済)活用や見える化の検討~定着化 の支援
②:①と連携し、DWH(Aurora/Redshift導入済)箇所の対応整理・定義・構築
【AWS/データエンジニア】顧客データベース次世代化プロジェクト
業務委託(フリーランス)
PythonSQLAWSRedshift
バックエンドエンジニア
作業内容 【概要】 ・旧データベースの内容を新データベースに名寄せを行うプロジェクト
【対応内容】 ・データの名寄せ・データベースの論理設計・データクレンジング処理プログラムの作成・SQL速度高速化
【開発環境】 ・AWS Glue・AWS Lambda・AWS Redshift
【SQL】大手事業会社でのデータ分析、ビジネス課題解決支援
作業内容 ・立ち上がりフェーズは、Input整備業務(お客様サービスのデータのredshift連携など)データ分析基礎作業(クロス集計のレポート化)
・顧客ビジネス理解が進んだ後は、データ分析結果を利用した課題設定と解決策検討支援
【Tableau】BIエンジニアの求人・案件
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 ・Tableau ダッシュボード作成/小売業向けPOSデータ可視化
・Tableauダッシュボードの開発・テスト(単体/結合)
■担当工程:
設計~テスト
■役割
メンバー
【TL/フルリモート】大手ソフトウェア会社のデータ分析基盤開発
業務委託(フリーランス)
AWSRedshiftGlueAthena
サーバーサイドエンジニア
作業内容 下記における仕様策定、要求の明確化、エンジニアのチーミング
・複数のプロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイクやDWHの構築
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。