【分析基盤エンジニア】AWSスペシャリスト Glue導入支援の求人・案件
作業内容 現ツールのEOLに伴い、AWS Glueの導入を進めていますが、社内に専門的な知見のある方がいないため、アドバイザリーとしてご支援いただける方を募集します。
現状の課題/想定内容:
・初期設定に苦労しており、どのような運用をするのが良いか経験者の意見を参考にしたい
・実装に関するアドバイスをいただきたい(一部難関な部分は実装をお願いしたい)
【BIエンジニア】AWS Glue・Tableauの要件定義支援の求人・案件
業務委託(フリーランス)
AWSTableauGlue
作業内容 ・AWS Glue、Tableauの要件定義の残部分~パイプライン設計、外部設計まで(構築はお客様の基盤チームで対応するため、PJは外部設計までは範囲)
・外部設計は設計のエクセルシートをヒアリングして埋めていくイメージ
・15ファイルぐらいのテーブルを想定しているため、パイプラインも15本ぐらい作業想定
【分析基盤エンジニア】AWSのデータレイク基盤(蓄積基盤)の設計、構築(Infrastructure)
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 AWSを用いて実現する蓄積基盤の設計、構築(特にRedshift、Glueまわり)
勘定系システムなどからデータを受け取るAWSのデータレイク基盤(蓄積基盤)の設計、構築
【AWS/20代30代活躍中】AWS Glueに関わる業務
業務委託(フリーランス)
PythonAWSGlue
作業内容 テックビズなら記帳代行無料!仕事に集中して取り組んでいただけます。
■案件概要 :航空会社が所持する個人情報データベースから、個人情報を丸め込んだデータを作成する。
システムはすべてAWS上にあり、S3上のCSVをGlueを利用してデータを加工し、別のCSVで書き出す。
場合によってはS3上のCSVではなく、DynamoDB上のデータを直接加工になる可能性もある。
Glue上のコードはPythonでの開発が指定されている。
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・外国籍の方(永住権をお持ちの方は問題ございません)
・週5日稼働できない方
--------------------------------------------------------
【AWS】データ分析基盤の求人・案件
作業内容 顧客の提供する各プロダクトからのデータ収集、加工・集計・可視化、
分析結果からの将来予測などをお願いします。
【開発環境】
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
【AWS】エンドユーザー内におけるデータ分析・基盤構築支援の求人・案件
作業内容 ■データ分析基盤チーム
エンド会社が提供する各プロダクトからのデータ収集、加工・集計対応。
その後可視化、分析結果からの将来予測など。
データレイク、DWH。
【開発環境】
インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
データベース:RDS(Aurora MySQL)
ETL:AWS Glue
BIツール:QuickSight
言語:Python
コミュニケーション:Slack、Zoom、Backlog、DocBase
データ分析基盤の開発(SE)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
SE
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
Python / Glue データ分析基盤構築
作業内容 データ分析基盤構築
・データ加工、INPUT及びOutput(Tableau)の要件から処理設計及び構築
※Tabelau部分については定例会などでフォローを実施
SQL Dr.SumからRedShiftへのシステムリプレース
作業内容 小売業でのDr.SumからRedShiftへのシステムリプレース
作業フェーズとして設計、開発、単体テスト、総合テスト、データ移行、リリースを担当していただく
<作業内容>
テーブル設計・作成、glueでのデータ加工の設計・開発・テスト
DB:Dr.Sum+データ加工:Connectで作成しているシステムを
DB:RedShift+データ加工:glueでリプレースする
・対象システム数:7
<基本時間>
9:00~18:00
<服装>
基本的には自由
Web会議でクライアントとお話する時はビジネスカジュアル
【AWS】IoTデータ分析基盤(レイクハウス)の設計・構築・テストの求人・案件
業務委託(フリーランス)
PythonAWSGitGlue
作業内容 AWS上にIoTデータを集積したレイクハウスを設計・構築いたします。
設計・構築の依頼はAWS Glue、StepFunctionsによる設計・構築、テストが依頼範囲となります。
データ規模が大きいシステムのため、AWS Glue、Sparkの技術に明るく性能面、コスト面から最適化のアプローチができる方を希望します。
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【AWSGlueなど】大手金融機関向け データ分析基盤構築の求人・案件
業務委託(フリーランス)
AWSGoogle Cloud PlatformGlue
作業内容 クラウドサービスを活用したデータ分析基盤構築をお任せいたします。
【上流/AWS Glue】要件定義支援案件
業務委託(フリーランス)
AWSTableauGlue
ITアーキテクト
作業内容 ・要件定義支援案件に携わっていただきます。
・主に下記作業をご担当いただきます。
-AWS Glue、Tableauの要件定義の残部分~パイプライン設計、外部設計まで
データ分析基盤の開発(テックリード)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
・仕様策定
・要求の明確化
・エンジニアのチーミング
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
【SQLなど】小売業でのDr.SumからRedShiftへのシステムリプレースの求人・案件
作業内容 作業フェーズとして設計、開発、単体テスト、総合テスト、データ移行、リリースを担当していただく作業内容:テーブル設計・作成、glueでのデータ加工の設計・開発・テスト①DB:Dr.Sum+データ加工:Connectで作成しているシステムを
②DB:RedShift+データ加工:glueでリプレースする
③対象システム数:7
AWS データ分析基盤構築支援
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
作業内容 顧客が提供する各プロダクトからのデータ収集、加工・集計・可視化、
分析結果からの将来予測などを行っていただく案件です。
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<備考>
・勤務時間:9:00~18:00(フレックス制度あり)
・円滑なコミュニケーションを図るため、業務中はZoom常時接続となります(マイクON、アバター表示可)
【Python3/SQL】某大手携帯会社向けDWH基盤構築プロジェクトの求人・案件
業務委託(フリーランス)
PythonSQLAWSAmazon S3DynamoRedshiftGlueLambda
作業内容 ETL処理(設計、実装、単体テスト、結合テスト、システムテスト)
New【Python/SQL】AWS/ETL処理開発の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 小売業様向けに、AWS環境でETL処理の追加開発を行う
Amazon RDS/Redshiftに格納されたデータの読み込み
上記データを用いたAWS Glue(Python+SQL)でのETL処理の開発
EC2上に配置されたファイルのAWS Lambda(Python)を用いた取り込み処理の開発
設計書、報告用資料の作成
(リーダのみ)顧客との各種折衝、メンバの管理
【SQL】データ分析基盤の開発支援の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 顧客内の情報を一元的に管理・可視化する、データ分析基盤の開発支援です。
チームメンバーと共に試行錯誤しながら業務を進めていただきます。
下記業務をご担当いただく予定です。
・データソースの収集
・S3への蓄積
・AWS Glueを使用したデータ加工
・外部ツールからのデータ収集/外部ツールへの加工データ連携
・QuickSightを使用したデータ集計
・データ加工の自動化(Lambda、StepFunctionを想定)
・terraformを利用した構成管理(Glueのジョブ、IAMロール、S3
、Quicksight)
【クラウドエンジニア】事業会社向け AWS を用いたETL処理及び開発
業務委託(フリーランス)
PythonSQLAWSRedshiftGlue
作業内容 ■業務内容
大手事業会社向け、AWSを用いたETL処理及び開発業務を担っていただきます。
具体的にお任せしたい業務としては以下の通りです。
└Amazon RDS/Redshiftに格納されたデータの読み込み
└上記データを用いたAWS GlueでのETL処理の開発
└EC2上に配置されたファイルのAWS GlueでのETL処理の開発
└設計書、報告用資料の作成
■同社について
独立系SIer企業として、創業から製造、流通、金融などの幅広い業界分野にわたり、多種多様な業務系システム構築を手がけてこられた企業様です。
お客様先での常駐開発、自社受託開発などの業務系システム構築から、データ統計解析、Iot支援等 幅広く事業展開をされていらっしゃいます。
【リモート】データ分析基盤の開発要員
業務委託(フリーランス)
Glue
データサイエンティスト
作業内容 各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など。
テックリードとSE2名ずつの募集です。
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【TL/フルリモート】大手ソフトウェア会社のデータ分析基盤開発
業務委託(フリーランス)
AWSRedshiftGlueAthena
サーバーサイドエンジニア
作業内容 下記における仕様策定、要求の明確化、エンジニアのチーミング
・複数のプロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイクやDWHの構築
【リモート】データ分析システム
業務委託(フリーランス)
PythonSQLAWSGlue
サーバーサイドエンジニア
作業内容 AWSサービスを用いたデータ分析システム(ETL、DWH、BIなど)の開発・運用を行うチームです。
5名-10名程度のチームで、複数の案件を行っています。
要員離脱に伴い、新規要員募集をしたいです。
【AWS】クラウドデータ分析基盤構築案件
業務委託(フリーランス)
PythonAWS
インフラエンジニア
作業内容 ・クラウドデータ分析基盤の構築に携わっていただきます。
・下記を行っていただきます。
-AWS Glueを活用したデータ連携
-Snowflakeへのデータ活用基盤構築
【TL/フルリモート】大手ソフトウェア会社のデータ分析基盤開発
業務委託(フリーランス)
AWSRedshiftGlueAthena
サーバーサイドエンジニア
作業内容 下記における仕様策定、要求の明確化、エンジニアのチーミング
・複数のプロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイクやDWHの構築
New【SQL】データ分析基盤の開発支援の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 顧客内の情報を一元的に管理・可視化する、データ分析基盤の開発支援です。チームメンバーと共に試行錯誤しながら業務を進めていただきます。
下記業務をご担当いただく予定です。
・データソースの収集
・S3への蓄積
・AWS Glueを使用したデータ加工
・外部ツールからのデータ収集/外部ツールへの加工データ連携
・QuickSightを使用したデータ集計
・データ加工の自動化(Lambda、StepFunctionを想定)
・terraformを利用した構成管理(Glueのジョブ、IAMロール、S3、Quicksight)
AWS / Python IoTデータ分析基盤の設計・構築・テスト
作業内容 AWS上に、IoTデータを集積したレイクハウスを設計・構築いたします。
AWS Glue、StepFunctionsによる設計・構築・テストが依頼範囲となります。
データ規模が大きいシステムのため、AWS GlueやSparkの技術に明るく、性能面、コスト面から最適化のアプローチができる方を募集しております。
<基本時間>
10:00~19:00
【Python】製造業向けデータエンジニアの求人・案件
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
作業内容 クライアントの調達部門にてAWSを利用した購買データのデータパイプライン構築~運用をご担当いただきます。
【Python】顧客社内データ可視化PJの求人・案件
業務委託(フリーランス)
PythonAWSGlueAthena
作業内容 ヘルスケア関連事業を展開されているお客様内で、社内データの可視化PJがスタートしております。
主な作業内容として、各種SQLサーバ-から必要データをDWHに取込み、
QuickSightに流し込むまでをユーザーヒアリングを行いながら
実施していただく予定です。
開発環境 :Python(PySpark, pandas)AWS(RDS、Athena、Lambda、Glue、QuickSight)など
【AWS】データ基盤改善とセキュリティ構築のインフラエンジニア
業務委託(フリーランス)
AWSGlueAthena
インフラエンジニアサーバーエンジニア
作業内容 ■業務内容
人材業界向けのシステムにおいてインフラエンジニアとして以下業務をご担当いただきます。
・データ基盤の改善
└既存データレイクの調査と改善
・ログ管理機能及びセキュリティの設計と構築
【AWS Glue】会計ソフトメーカー向けデータ分析基盤構築PJ
業務委託(フリーランス)
AWSGlue
インフラエンジニアデータベースエンジニア
作業内容 ・会計ソフトメーカー向けデータ分析基盤構築PJに携わっていただきます。
・主にご担当いただきます。
-データ分析基盤の構築
-データを収集、加工するための調査、設計、実装
-機能の設計、実装
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【AWS/フルリモート】AWS移行案件
業務委託(フリーランス)
SQLLinuxAWSGitSVNviGlue
作業内容 ・車検やタイヤ交換など、車の整備専門検索サイトのAWS移行作業に携わっていただきます。
・具体的な作業内容は以下の通りです。
-AWS Glueを用いた開発
【AWS Glue+QuickSight/基本リモート】データ分析基盤構築(データエンジニア)
業務委託(フリーランス)
AWSGlue
データサイエンティスト
作業内容 ①新しく立ち上げるサービスのリリースに向けてデータの収集、加工、可視化対応を行う
②既存のデータ抽出の移行や統合対応
⇒イメージ:要件化したものを自動化し更新できる仕組みづくりを対応いただく
③マーケティング施策のための顧客データ基盤構築対応
Oracle 通貨オプションデータマート案件
作業内容 市況データのデータカタログを作成し、ユーザが2次加工できるようにする対応をご担当いただきます。
例:データの分析、View作成など(SQLでのご対応)
<環境>
AWS Glue / Oracle
※※こちらの案件は現在募集を終了しております※※
AWS データ分析基盤の開発要員募集
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
作業内容 各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測等をご担当頂きます。
会計系のシステムをメインとしてはご担当頂く予定ですが、状況に応じて他業界の業務を担当頂く可能性もあります
<環境>
インフラ:AWS(Athena, Redshift, Glue, QuickSightなど)
DB:RDS(Aurora MySQL)
ETL:AWS Glue
BIツール:QuickSight
言語:Python
その他:Slack, Zoom, Backlog, DocBase
開発手法:アジャイル開発
【SQL/Python】DWH/BIの求人・案件
業務委託(フリーランス)
PythonSQLAWSGlueAthena
作業内容 ・新規データマート要件定義、既存集計フロー効率化ユーザの要望を聞いて新しいデータマートを作成したり既存の集計フローを自動化することで効率化を図ります
・データマート作成
既存帳票(Excel,CSV)からSQL作成、BIでの可視化
・データのETL処理やETL処理のためのスクリプト・システム開発運用改善業務
AWSのGlue・Athena等を使用し、SQL・Pythonでコーディングし、S3にデータレイク、データマートを構築既存の基盤改修・改善
・データマート日次運用保守業務
【開発環境】
プログラミング言語:Python
ライブラリ:PySpark, pandas
データベース:AWS RDS (SQLServer), AWS Athena(trino)
環境・OS:AWS (Amazon Web Services), AWS Lambda, AWS Glue
BIツール:QuickSight
【分析基盤エンジニア】大手金融機関向け データ分析基盤構築の求人・案件
業務委託(フリーランス)
AWSGoogle Cloud PlatformGlue
作業内容 クラウドサービスを活用したデータ分析基盤構築をお任せいたします。
【AWS】クラウド環境システム追加構築案件
業務委託(フリーランス)
AWSGlueAurora
インフラエンジニアサーバーエンジニア
作業内容 ・既存AWS環境へのシステム追加構築における、構築の追加/運用関連作業をご担当いただきます。
【分析基盤エンジニア】AWS・Snowflakeデータ分析基盤構築の求人・案件
業務委託(フリーランス)
SQLAWSSnowflakeGlue
作業内容 ・大手文具メーカーにおけるデータ分析基盤構築案件
・要件定義から設計、開発、リリースまでを担当
・AWSとSnowflakeを用いたデータ分析システム(ETL、DWH、BIなど)の開発を行うチームに参画予定
【環境】
・AWSサービス:S3、Glue、StepFunctions、CloudWatch、QuickSight、DataZone
・DWH:Snowflake
・開発ツール:dbt
【AWS】某製薬会社向け/運用中データ分析基盤の保守運用の求人・案件
業務委託(フリーランス)
PythonAWSGlueLambda
作業内容 ・AWS(Lambda、Glue、Step Functions)を用いた
既存資源の改修、本番環境リリース
障害・仕様変更等発生時の既存資源の修正、リリース
・管理業務、業務改善
ユーザー、DB、ドキュメントのデータ分析基盤内の管理業務
・運用監視
データ分析基盤内エラー監視方針の検討及びエラー時の運用対応
【Java/python】カーリース会社向けメールサービス再構築検証/リモート併用・
業務委託(フリーランス)
JavaPython
バックエンドエンジニア
作業内容 ■概要
AWSのLambda(java)で作成されたメール送信機能を、
AWSのGlueで再構築するPoCを実施。
■勤務体系
リモート併用(週1,2出社(現場は笹塚))
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。