■概要 AWS上に構築するIoTデータを集積したレイクハウスの設計・構築・テストを担当します。大規模データシステムの性能およびコスト最適化を図りながら、AWS GlueやStep Functionsを使用したETL処理の開発を行います。 ■具体的な業務内容 ・AWS Glueを利用したETLプロセスの設計および構築 ・AWS Step Functionsを使用したワークフローの設計および実装 ・レイクハウス環境の性能最適化およびコスト管理 ・データのテストおよび分析基盤の整備 ・Gitを利用した開発フローの維持および改善
・AWS上でのデータ分析基盤を構築した経験 ・AWS Glueを前提としたPython(PySpark)によるETL開発経験 ・Gitを前提とした開発フローの経験
・レイクハウスの設計・構築経験 ・IaC(AWS CDK)の設計・構築経験 ・CI/CDの設計・構築経験 ・Amazon S3、AWS Athena、AWS Lake Formation、Amazon QuickSight等の知見・実績
20日
140?180時間
1回
2024年8月16日
【日本在住の方のみ/ITエンジニア歴2年以上】
3件以上の応募で
ご希望の条件の案件に参画しやすくなります
Midworks
運営会社:株式会社TWOSTONE&Sons
Python / AWS アプリケーションエンジニア
【Python(Web開発系)】データーレイク開発運用保守
【Python】システム開発および基盤構築(リモート)
Python / AWS 広告代理店向け分析開発
【Python(データ分析系)】データウェアハウス構築案件
【PHP(Laravel)】【業務委託(準委任)】BtoB向けシステムエンジニアライティングツール開発
【AWS(リモート)】データ分析基盤構築運用検討
【Python(Web開発系)】【業務委託(準委任)】BtoB向けSEOライティングツール開発案件
【AWS/フルリモート】エネルギー企業向け業務システム開発
【クラウドエンジニア(AWS)】IoTデータ分析基盤(レイクハウス)の設計・構築・テスト の案件・求人情報をご覧の方へ
フリーランスエージェントとクラウドソーシングサイト(サービス)の違い
フリーランスエージェントは企業の案件とフリーランスを検討している人のマッチングをカウンセリングや営業代行を通してサポートするのに対し。クラウドソーシングはサイト上で直接案件を探すものになります。クラウドソーシングサイトを利用する際は、フリーランスと発注者が直接プラットフォームでやり取りするため、エージェントによるサポートはありません。フリーランスHubではフリーランスエージェントの保有する案件を多数掲載しています。フリーランスエージェントとは
フリーランスとして働くことを検討しているエンジニアやクリエイターの方を対象に、各々のスキルや希望条件に合った案件を紹介してくれるサービスのことです。個人で案件を請ける場合に必要となる契約処理なども代行してくれるため、参画する企業とのやり取りに時間が取られることもありません。フリーランスHubでは、フリーランス向けの案件・求人を多数掲載しています。フリーランスエージェントはリモートワークや在宅のフリーランス案件を紹介してくれるの?
最近は在宅/リモートワーク可能な案件が増えており、フリーランスエージェントでもリモート/在宅案件を取り扱っております。ただ常駐案件が多いエージェントやリモート案件が多いエージェントなど、エージェントによって特徴がありますので、リモート案件に強いエージェントを選ぶのがおすすめです。フリーランスHubでは、各エージェントのサービス内容やその比較をサイト内で行うことができます。