【GCP】Redshiftに登録されているデータの移行業務
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 【概要】
Redshiftに登録されているデータをBigQueryに移行する
【場所】
秋葉原※リモート可
【勤務時間】
9:30~18:30
【精算】
150h~200h
【面談】
1回
※週5日〜OKの案件です!
【Python】統合データ分析基盤保守
業務委託(フリーランス)
PythonRedshift
サーバーサイドエンジニア
作業内容 某ゲーム会社様の統合データ分析基盤保守プロジェクト案件となります。
PythonおよびSQLにて詳細設計書から実装を行っていただきます。
【AWS Glue/lambda/Redshift/Quicksite】某SI様向けデータ分析基盤AWS技術支援
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 ETLとしてAWS Glueを利用しておりグローバルのAWS環境でございます。構築自体は別会社の為環境はできており、参画後は保守対応を実施していただきます。AWS Glue、lambda、Redshift、Quicksiteを使用、モニタリングしとてIAM,KMS,cloudTrailを利用しております。
【BI/DWH】データ分析システム(PowerBI,Redshift)保守、運用,要件整理
業務委託(フリーランス)
Redshift
データサイエンティスト
作業内容 ・PowerBIServiceをRedshiftに疎通させるための構成設計
・方針整理
・各工程のテスト計画(単体、結合、統合)
・PowerBIを用いた権限整理(画面、データ)
・運用要件整理(監視項目,障害時対応,ユーザー管理,ログ管理)
【AWS】Redshift登録データのBigQuery移行業務
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
Redshiftに登録されているデータをBigQueryに移行する
【場所】
秋葉原
※リモート
【勤務時間】
9:30~18:30
【精算】
150h~200h
【面談】
1回
※週5日〜OKの案件です!
BIシステム運用保守の求人・案件
作業内容 Business Inteligence(ビジネス・インテリジェンス) システムの運用保守要員として、ダッシュボード構築や新規レポートの要件定義・設計案件の対応などをお願いします。
【現行システム】
UI(ユーザ画面):MicroStrategy
DB(データベース):Redshift
【分析基盤エンジニア】大手卸小売業 データ分析基盤構築、分析
業務委託(フリーランス)
PythonAWSRedshiftTableau
作業内容 大手卸小売業のデータエンジニアとして下記業を担当いただきます。
・AWS等のクラウドサービスを活用したデータ分析
・Redshiftでのデータ分析基盤構築
・各種KPI設計およびTableauなどのBIツールでのダッシュボード作成
【分析基盤エンジニア】AWSのデータレイク基盤(蓄積基盤)の設計、構築(Infrastructure)
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 AWSを用いて実現する蓄積基盤の設計、構築(特にRedshift、Glueまわり)
勘定系システムなどからデータを受け取るAWSのデータレイク基盤(蓄積基盤)の設計、構築
Redshift / Tableau データ分析基盤の構築運用
SQLAWSRedshiftTreasure DataTableau
作業内容 データ分析基盤の構築および運用における上流工程をご担当頂きます。
DWH(RedshiftやTreasureDataといった一般的な製品)とBIツール(TableauやPowerBI)を連携させ、クーポン利用実績やアプリ利用実績の効果測定をする為の基盤構築及び運用をしていくプロジェクトになります。
<備考>
フルリモート
<基本時間>
10:00~19:00
【AWS/20代30代活躍中】大手通信業向けAWS Redshift構築支援
業務委託(フリーランス)
WindowsAWSRedshiftTableau
インフラエンジニア
作業内容 ■仕事内容__:
【案件概要】
大手通信業向けにデータ分析基盤(AWS)とデータ可視化支援(tableau)を行っております。
今回はAWS Redshiftの構築を担当いただける方を求めております。
他サーバーへの接続、tableauへの繋ぎこみも担当いただく予定です。
■作業環境__:Windows/Mac選択可
■開発環境
ツール___:AWS Redshift (Amazon Redshift),Tableau
■体制____:複数人
■人物像___:
・勤怠に問題がない方
・コミュニケーションをしっかり取れる方
■就業時間__:9:00〜18:00
■勤務地___:池袋
■勤務地補足_:基本的にフルリモート
■平均稼働__:170時間前後
■面接回数__:1回
■時間幅___:140時間~ 180時間
■服装____:カジュアル
■営業コメント:
元請けの案件を豊富に保有しているマザーズ上場企業でございます。
様々な案件があるので終了した際にもスライド可能でございます。
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・週5日稼働できない方
--------------------------------------------------------
【AWS】不動産ベースレジストリのプラットフォーム開発
業務委託(フリーランス)
PostgreSQLAWSRedshiftGlueFargateLambda
インフラエンジニア
作業内容 ビッグデータを取り扱うETL環境を構築
AWS 基盤構築
作業内容 AWS基盤 基本設計~構築・テスト(単体+結合)を対応
<作業工程>
基本設計~
<環境>
AWS
ECS, S3, WorkSpaces, Provided DNS, Streaming Gateway, Redshift, Linux, クライアント30台前後
<備考>
リモートあり
<基本時間>
9:00~17:30
<服装>
ビジネスカジュアル
【Python】Web企業でのデータパイプライン構築や可視化業務の求人・案件
業務委託(フリーランス)
PythonSQLAWSRedshiftBigQuerySnowflake
作業内容 ・自社プロダクトであるデータ統合SaaSおよび、AWSやGoogle Cloud等のクラウドサービスを用いたデータ分析基盤構築・データ統合パイプラインの設計および実装
・SQLを用いたデータマート作成、名寄せ、クレンジング等の実施
・BIツールを用いたデータ可視化
・外部サービス(CDP/MA/SFA等)とのデータ連携および活用の支援
【ツール】
AWS(Redshift, QuickSightなど), trocco
■開発環境
言語____:SQL
環境・OS_:AWS (Amazon Web Services)
ツール___:AWS Redshift (Amazon Redshift)
■開発工程__:基本設計|詳細設計|実装・構築・単体試験
New【分析基盤エンジニア】データ分析基盤実装案件
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud Platform
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy・GCP:BigQuery, GCS, CloudFunction, CloudComposer,・DB:Redshift,PostgreSQL,Oracle,MySQL・リポジトリ:Github Enterprise,CodeCommit・コラボレーションツール:JIRA, Confluence, Backlog・コミュニケーションツール:Slack,Google Workspaces
【Python/基本リモート】Pythonによるバッチ開発
業務委託(フリーランス)
PythonAWSRedshiftLambda
サーバーサイドエンジニア
作業内容 ・外部データベースサイトからAPI経由で定期的にデータを取り出し、中間DBに格納します。
・中間DBは、AWS S3に一旦よりこみ、Lambdaを使ってPythonでバッチファイルを作成し、AmazonのDWHであるRedshiftに落とし込んでいきます。
・Redshiftにたまったデータは、他チームにてTableau 等を使ってデータ分析を行います。
・AWS上のLambdaやRedshiftなどのインフラ構築は他チームで行うので範囲外です。
・主な仕事は、Pythonでのバッチファイル作成になります。
・データ取り込み時の設計~開発~検証まで行います。
(注意点)
・本案件はお客様によるENDへの提案中の案件です(複数社が提案しています)。
・9月中旬ごろにベンダが決定し、10月より開発がスタートします。
・そのためベンダ選定から漏れた場合には、本案件はキャンセルになります。
SQL Dr.SumからRedShiftへのシステムリプレース
作業内容 小売業でのDr.SumからRedShiftへのシステムリプレース
作業フェーズとして設計、開発、単体テスト、総合テスト、データ移行、リリースを担当していただく
<作業内容>
テーブル設計・作成、glueでのデータ加工の設計・開発・テスト
DB:Dr.Sum+データ加工:Connectで作成しているシステムを
DB:RedShift+データ加工:glueでリプレースする
・対象システム数:7
<基本時間>
9:00~18:00
<服装>
基本的には自由
Web会議でクライアントとお話する時はビジネスカジュアル
New【BIエンジニア】Tableau ダッシュボード作成・小売業向けPOSデータ可視化PJ
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 ・Tableau ダッシュボード作成・小売業向けPOSデータ可視化■作業内容:Tableauダッシュボードの開発・テスト(単体/結合)
New【Tableau】データ分析基盤構築の求人・案件
業務委託(フリーランス)
VBARedshiftTableau
作業内容 飲食系クライアント向けのBI(Tableau)構築案件です。
下記の2フェーズで進めており、1月から開始するフェーズのメンバーを募集しております。
・フェーズ1(年末まで):データレイク、RedshiftでのDWH
・フェーズ2(1月以降):データマート作成、BI(Tableau)設計
PJはアジャイルで進めるため、ドキュメンテーションの比率は低いです。
Redshiftから抽出したデータ(数百GB)を2~3GBほどに圧縮しサーバーにパブリッシュします。
※フェーズ1でクレンジングできていないデータをExcel VBAでデータマートに変換するタスクが発生する可能性があります。
【DWH/基本フルリモート】大手インターネットサービス会社様データウェアハウス基盤移行
作業内容 現在稼働中のデータウェアハウス基盤であるTeradata Databaseから、次世代基盤となるAmazon Redshiftへ移行する
【BI】飲食系の顧客向けデータ分析基盤構築|フルリモート
業務委託(フリーランス)
RedshiftTableau
サーバーサイドエンジニア
作業内容 ■案件内容
飲食系クライアント向けのBI(Tableau)構築案件です。
下記の2フェーズで進めており、1月から開始するフェーズのメンバーを募集しております。
・フェーズ1(年末まで):データレイク、RedshiftでのDWH
・フェーズ2(1月以降):データマート作成、BI(Tableau)設計
PJはアジャイルで進めるため、ドキュメンテーションの比率は低いです。
Redshiftから抽出したデータ(数百GB)を2~3GBほどに圧縮しサーバーにパブリッシュします。
※フェーズ1でクレンジングできていないデータを
Excel VBAでデータマートに変換するタスクが発生する可能性があります。
■担当工程:
構築
■役割
メンバー
【分析基盤エンジニア】航空会社向けBIシステム データ抽出/加工支援
業務委託(フリーランス)
SQLAWSRedshift
作業内容 航空会社向けBIシステム データ抽出
【Redshift/AWS/フルリモート】データエンジニア募集
業務委託(フリーランス)
SQLAWSGitGoogle Cloud PlatformRedshiftBigQuery
データサイエンティスト
作業内容 【案件】データエンジニア募集
【内容】
HR系企業のデータサイエンス部署にてデータマート開発実務を担当いただきます。
データマート開発実装をメインにご担当いただきますが、要件定義にてクライアントと直接コミュニケーションを取っていただく必要があります。
<具体的な業務内容>
・分析用データマート開発
┗ 要件定義、データマート(テーブル)設計、SQL実装、テスト
・バッチ基盤(digdag)の実装、運用保守
・データエンジニアリング業務
┗ データの収集、加工、集計
・データマートの保守運用
・TableauのViz作成
【必須スキル】
・データマート設計
・Redshift、BigQueryでの大量データのハンドリング(SQL実装、データマート設計)経験
・クラウド(AWS、GCP)、オープンソース(digdag、git)
・要件定義
【尚可スキル】
・顧客折衝
・TableauでのViz作成経験
・Pythonなどのスクリプト経験
・HR系サービスの分析や企画開発経験
【Python3/SQL】某大手携帯会社向けDWH基盤構築プロジェクトの求人・案件
業務委託(フリーランス)
PythonSQLAWSAmazon S3DynamoRedshiftGlueLambda
作業内容 ETL処理(設計、実装、単体テスト、結合テスト、システムテスト)
【Tableau】BIエンジニアの求人・案件
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 ・Tableau ダッシュボード作成/小売業向けPOSデータ可視化
・Tableauダッシュボードの開発・テスト(単体/結合)
■担当工程:
設計~テスト
■役割
メンバー
【AWS/一部リモート】某生命保険会社AWS環境でのDWH構築案件
業務委託(フリーランス)
AWSRedshift
インフラエンジニアコンサル
作業内容 ・某生命保険会社のAWS環境にて、構築済のDWH基盤を更に拡充し更なるデータ集約、外部サイトのビックデータ収集、Redshift、EMRを使った データ分析を新たに構築する。
[以下補足]
・基盤だけでなくデータマートやスタースキーマ等、分析に適したデータ設計も 実施。
・BIツール等のデータを扱う上での権限制御等も実施
・基盤全体のセキュリティに関する改修も実施可能性有
構築済のDWHサービス
・S3
・Aurora
・QuickSight
・OpenAPI
・Lamda
・Glue
・EventBridge
・Step Functon
・EC2
・Athnea
・監視・通知系サービス(cloudwatch trail SNS)
・CloudFormation
◎新規追加予定のサービス
・Redshift
・EMR
・LakeFormation
・DynamoDB
・Kinesis Firehorse
【Python】製造業向けデータエンジニアの求人・案件
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
作業内容 クライアントの調達部門にてAWSを利用した購買データのデータパイプライン構築~運用をご担当いただきます。
【DX・データ利活用コンサル】データ利活用推進支援の求人・案件
業務委託(フリーランス)
RedshiftAurora
コンサル
作業内容 大手専門商社のDX管掌部署にて実施中の「データ利活用」をエンドユーザー伴走で推進いただきたい。
≪ポジション≫
①②でそれぞれ1名ずつ
①:各事業部の業務/状況のヒアリング~BIツール(Tableau導入済)活用や見える化の検討~定着化 の支援
②:①と連携し、DWH(Aurora/Redshift導入済)箇所の対応整理・定義・構築
【AWS/データエンジニア】顧客データベース次世代化プロジェクト
業務委託(フリーランス)
PythonSQLAWSRedshift
バックエンドエンジニア
作業内容 【概要】 ・旧データベースの内容を新データベースに名寄せを行うプロジェクト
【対応内容】 ・データの名寄せ・データベースの論理設計・データクレンジング処理プログラムの作成・SQL速度高速化
【開発環境】 ・AWS Glue・AWS Lambda・AWS Redshift
Python / SQL など データ分析基盤データ連携/マート定常化作業
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。
以下の作業を行います。
<作業内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer,
DB:Redshift,PostgreSQL,Oracle,MySQL
リポジトリ:Github Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack,Google Workspaces
PCの貸与またはAWS Workspacesを使用
<備考>
テレワーク
<基本時間>
9:30~18:30
<服装>
オフィスカジュアル
【フルリモート】データ分析基盤構築
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
データサイエンティスト
作業内容 ・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
PC貸与はなしです、ご自身の端末からAWS Workspaces上で作業を行います。
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
【Python/AWS】データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 ・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
(稀に月1回あるかないかの頻度で渋谷でミーティングあり)
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
時間は10:00~19:00 応相談
データ分析基盤の開発(SE)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
SE
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
AWS エンジニアの募集
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 大手財閥系の金融子会社にて、AWSを利用したDWHの構築プロジェクトが立ち上がり、AWSの技術者(RedShiftやGlueなど)が必要で一緒に業務して頂ける方を募集中。
<現状>
・オンプレ環境に基幹システム周辺システムをもっており、そのデータを活用してマーケに活用するが管理するベンダーがばらばらな状態でデータが一元管理できていない状態
⇒各システムを一元化してデータウェアハウス、クラウドで構築したい
・金融機関の為、パブリッククラウドで構築が難しいのでセキュリティに制約ありつつ、既存のAWS環境上にデータレイクの中を構築してほしい
⇒8月~PoCで作業を開発していきたい
<備考>
基本リモート
SQL BIツール(Tableau)及びDBパフォーマンスチューニング
作業内容 DWH(Redshift)及びBIツール(Tableau)のチューニングを実施します。
tableauについてはカスタムクエリ、RedshiftについてはマートやViewの見直しやindexの再生成といったSQLを用いたパフォーマンス改善を行います。
既に対象資源は抽出されております為、アセスメント及びチューニング業務が主となります。
<基本時間>
10:00~19:00
【pandas】データ(分析)エンジニアの求人・案件
業務委託(フリーランス)
JSONAWSAmazon S3Redshift
作業内容 pandas ライブラリを利用した ETL 処理
をしていただきます。
担当フェイズ
設計~開発~テスト
【フルリモート|Python・SQL】データ分析基盤開発案件
作業内容 顧客パッケージのデータ分析基盤を使っての開発案件になります。
基盤導入後にお客様のデータをDWH(主にRedshift)に登録、
SQLまたはPythonを使ったELT処理を行います。
※ETLの処理の割合としてSQLが多いです。
基盤導入後のデータの登録、ETL処理になります。
ジョブを実行する機能があり、そのジョブから実行するプログラム(SQL、Python)を開発するイメージなります。
案件の特性として規模は大きくなく2−3名体制で1-3か月ぐらいの案件が多いです。
そのため複数案件にかかわっていただくことがあります。
Python / SQL データパイプライン開発
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubRedshiftBigQueryGlueLambdaGoogle Workspace
作業内容 通信キャリア会員向けECを運営しているグループ子会社でのデータ基盤構築
<主な業務内容>
・データパイプラインのPython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
<技術スタック>
AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
GCP:BigQuery, GCS, CloudFunction, CloudComposer
DB:Redshift, PostgreSQL, Oracle, MySQL
リポジトリ:GitHub Enterprise,CodeCommit
コラボレーションツール:JIRA, Confluence, Backlog
コミュニケーションツール:Slack, Google Workspaces
<備考>
フルリモート
<基本時間>
10:00~19:00
応相談
<服装>
オフィスカジュアル
【Python/SQL】 データ分析基盤の開発及び運用業務
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築
主な業務内容は以下を想定しています。
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
拠点は渋谷ですがフルリモート参画になります。
(稀に月1回歩かないかの頻度で渋谷でミーティングあり)
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,G Suite
【SQL】航空会社向けBIシステム データ抽出/加工支援の求人・案件
業務委託(フリーランス)
SQLAWSRedshift
作業内容 セルフBI要件検討
セルフ分析向けデータ設計・開発
マスタ検討、分析項目定義、数値定義検討
セルフ分析デモ プロトタイプ作成
他チームからの問い合わせ対応 (データ調査等)
【SQL/Python】大手金融機関グループ会社向けデータ分析案件
業務委託(フリーランス)
PythonSQLRedshift
データサイエンティスト
作業内容 ・大手グループ会社向けのDX推進プロジェクトに携わっていただきます。
・下記を行っていただきます。
‐SQLやAmazon Redshiftを使用した統計学的なデータ分析
‐ユーザー部門とのMTGでの示唆出し