【AWS/一部リモート】某生命保険会社AWS環境でのDWH構築案件
業務委託(フリーランス)
AWSRedshift
インフラエンジニアコンサル
作業内容 ・某生命保険会社のAWS環境にて、構築済のDWH基盤を更に拡充し更なるデータ集約、外部サイトのビックデータ収集、Redshift、EMRを使った データ分析を新たに構築する。
[以下補足]
・基盤だけでなくデータマートやスタースキーマ等、分析に適したデータ設計も 実施。
・BIツール等のデータを扱う上での権限制御等も実施
・基盤全体のセキュリティに関する改修も実施可能性有
構築済のDWHサービス
・S3
・Aurora
・QuickSight
・OpenAPI
・Lamda
・Glue
・EventBridge
・Step Functon
・EC2
・Athnea
・監視・通知系サービス(cloudwatch trail SNS)
・CloudFormation
◎新規追加予定のサービス
・Redshift
・EMR
・LakeFormation
・DynamoDB
・Kinesis Firehorse
【Tableau】レポート開発
作業内容 ・既存Excelレポートを参考にSalesforceMarketingCloudや外部システム出力データを使用してTableauレポートのプロト作成する。 ・意見や指摘をプロトレポートへ反映する。 ・システムへの組み込み設計(Redshift Datamart設計) ・Redshift クロスDBクエリ検証ほか
【Python3/SQL】某大手携帯会社向けDWH基盤構築プロジェクトの求人・案件
業務委託(フリーランス)
PythonSQLAWSAmazon S3DynamoRedshiftGlueLambda
作業内容 ETL処理(設計、実装、単体テスト、結合テスト、システムテスト)
SQLエンジニア データ抽出依頼/レポート作成依頼
業務委託(フリーランス)
SQLMySQLRedshiftBigQuery
データベースエンジニア
作業内容 ・別部署(企画や営業)からデータ抽出依頼、レポート作成依頼のが入りますのでそちらの対応とデータ(会員情報、会員の利用履歴、Webデータ等)はDB内にあります。
・SQLを使用して抽出をしていただきます。
・レポートはExcelまたはTableauを使用して提出となります。
【DWH/データ分析】医薬品会社向けデータレイク基盤構築
業務委託(フリーランス)
SQL
サーバーサイドエンジニア
作業内容 医薬品会社向けのデータレイク基盤構築案件となります。
WebFOCUSからMicroStrategyへの置き換え作業となります。
Redshiftでデータレイクを構築予定となっております。
役割はSE/PGとして、設計以降の工程をご担当いただきます。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
AWS エンジニアの募集
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 大手財閥系の金融子会社にて、AWSを利用したDWHの構築プロジェクトが立ち上がり、AWSの技術者(RedShiftやGlueなど)が必要で一緒に業務して頂ける方を募集中。
<現状>
・オンプレ環境に基幹システム周辺システムをもっており、そのデータを活用してマーケに活用するが管理するベンダーがばらばらな状態でデータが一元管理できていない状態
⇒各システムを一元化してデータウェアハウス、クラウドで構築したい
・金融機関の為、パブリッククラウドで構築が難しいのでセキュリティに制約ありつつ、既存のAWS環境上にデータレイクの中を構築してほしい
⇒8月~PoCで作業を開発していきたい
<備考>
基本リモート
Python / SQL など データ分析基盤データ連携/マート定常化作業
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。
以下の作業を行います。
<作業内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer,
DB:Redshift,PostgreSQL,Oracle,MySQL
リポジトリ:Github Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack,Google Workspaces
PCの貸与またはAWS Workspacesを使用
<備考>
テレワーク
<基本時間>
9:30~18:30
<服装>
オフィスカジュアル
【フルリモート】データ分析基盤構築
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
データサイエンティスト
作業内容 ・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
PC貸与はなしです、ご自身の端末からAWS Workspaces上で作業を行います。
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
【Python/AWS】データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 ・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
(稀に月1回あるかないかの頻度で渋谷でミーティングあり)
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
時間は10:00~19:00 応相談
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【Python/リモート】新サービス導入に向けたAWS移行作業
作業内容 既存システムをAWS環境へ移行し、以下の作業をご担当いただきます。
・外部サービスとのAPI構築
・S3からRedshiftへのデータ取込バッチ構築
・Redshiftのデータマート構築
・他システムへのデータ連携
【分析基盤エンジニア】航空会社向けBIシステム データ抽出/加工支援
業務委託(フリーランス)
SQLAWSRedshift
作業内容 航空会社向けBIシステム データ抽出
【Tableau】BIエンジニアの求人・案件
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 ・Tableau ダッシュボード作成/小売業向けPOSデータ可視化
・Tableauダッシュボードの開発・テスト(単体/結合)
■担当工程:
設計~テスト
■役割
メンバー
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【Python/SQL】 データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築
主な業務内容は以下を想定しています。
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
(稀に月1回歩かないかの頻度で渋谷でミーティングあり)
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【Python(リモート)】某ゲーム会社様向け運用中のデータ分析基盤
作業内容 ・バッチ処理コード移行(Java(Spring Boot)→ Google Cloud Composer + Google Data Fusion + dbt) →実装、単体テスト、結合テスト、システムテスト ・SQL構文修正(Redshift(PostgresSQL) → BigQuery) →実装、単体テスト、結合テスト、システムテスト ・テーブルデータ移行(Redshift → BigQuery) →テーブル設計実装、データ移行、データ検証
【AWS/データエンジニア】顧客データベース次世代化プロジェクト
業務委託(フリーランス)
PythonSQLAWSRedshift
バックエンドエンジニア
作業内容 【概要】 ・旧データベースの内容を新データベースに名寄せを行うプロジェクト
【対応内容】 ・データの名寄せ・データベースの論理設計・データクレンジング処理プログラムの作成・SQL速度高速化
【開発環境】 ・AWS Glue・AWS Lambda・AWS Redshift
【SQL】大手事業会社でのデータ分析、ビジネス課題解決支援
作業内容 ・立ち上がりフェーズは、Input整備業務(お客様サービスのデータのredshift連携など)データ分析基礎作業(クロス集計のレポート化)
・顧客ビジネス理解が進んだ後は、データ分析結果を利用した課題設定と解決策検討支援
【DX・データ利活用コンサル】データ利活用推進支援の求人・案件
業務委託(フリーランス)
RedshiftAurora
コンサル
作業内容 大手専門商社のDX管掌部署にて実施中の「データ利活用」をエンドユーザー伴走で推進いただきたい。
≪ポジション≫
①②でそれぞれ1名ずつ
①:各事業部の業務/状況のヒアリング~BIツール(Tableau導入済)活用や見える化の検討~定着化 の支援
②:①と連携し、DWH(Aurora/Redshift導入済)箇所の対応整理・定義・構築
Python / SQL データパイプライン開発
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 通信キャリア会員向けECを運営しているグループ子会社でのデータ基盤構築
<主な業務内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer
DB:Redshift, PostgreSQL, Oracle, MySQL
リポジトリ:GitHub Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack, Google Workspaces
<備考>
フルリモート
<基本時間>
10:00~19:00
応相談
<服装>
オフィスカジュアル
【Python(Pandas)】ビッグデータ分析案件
業務委託(フリーランス)
PythonJSONRedshift
データサイエンティスト
作業内容 データ(分析)エンジニア 募集
データ分析基盤の開発(SE)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
SE
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。
【AWS・DynamoDB、EMR、Redshift】商社の管理会計システムのスクラッチ・ビルド案件
業務委託(フリーランス)
DynamoDBAWSRedshift
サーバーエンジニア
作業内容 構築から10年以上経過しており、アーキテクチャを含めて根本的に作り変える案件でございます。
現システムはMQを使った分散計算処理、計算結果をSQL Serverに格納し、
自前の分析ツールからデータ解析を行っております。
再構築では、AWSサービスを軸にしたアーキテクチャを構築する予定であり、
この候補としてAWSのDynamoDB、EMR、Redshiftの利用を検討しております。
要件定義フェーズでは、技術検証を計画しており、上記技術要素の適合性を確認致します。