Pythonエンジニア データ分析基盤の開発/運用
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
バックエンドエンジニア
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェハウス、マートの実装、テスト
※基盤構築作業が主な作業になります。
【AWS】クラウド環境システム追加構築案件
業務委託(フリーランス)
AWSGlueAurora
インフラエンジニアサーバーエンジニア
作業内容 ・既存AWS環境へのシステム追加構築における、構築の追加/運用関連作業をご担当いただきます。
【分析基盤エンジニア】大手金融機関向け データ分析基盤構築の求人・案件
業務委託(フリーランス)
AWSGoogle Cloud PlatformGlue
作業内容 クラウドサービスを活用したデータ分析基盤構築をお任せいたします。
【AWS(リモート)】データ分析基盤構築運用検討
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェハウス、マートの実装、テスト
※基盤構築作業が主な作業になります
【 S3/Lambda/Glue/EMR/EC2】車製造メーカ系
業務委託(フリーランス)
AWSGlueLambda
サーバーサイドエンジニア
作業内容 ユーザが使いたい分析サービスやデータをAWS上に構築していただきます。
【AWS(リモート)】データ分析基盤構築運用検討
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェハウス、マートの実装、テスト
※基盤構築作業が主な作業になります
【DWH】土地・建物情報データ連携基盤構築の求人・案件
業務委託(フリーランス)
PythonAWSAmazon S3GlueLambda
作業内容 土地・建物に関する情報の収集・クレンジングを行うデータ連携基盤(データレイク/DWH)の構築
【クラウドエンジニア(AWS)】【業務委託(準委任)】環境設計レビュー・改善・実装・メンテナンス
MySQLDynamoDBSparkAWSApacheRedshiftGlue
作業内容 ■概要
環境設計レビュー・改善・実装・メンテナンスをお任せいたします。
■具体的な作業内容
以下の業務をお願いします。
・既存のAWS ETL環境の調査改善
・メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となります。
【Python/フルリモート】データウェアハウス構築案件
業務委託(フリーランス)
PythonSQLShellAWSRedshiftGlueLambda
作業内容 ・某大手小売企業様向けのデータウェアハウス基盤構築 プロジェクトに携わっていただきます。
・作業内容は以下の通りです。
-ETL処理の開発作業
(設計・設計書作成・実装・単体テスト)
(ETL処理の開発テンプレートの理解)
-ETL処理の結合テスト作業以降
(結合テスト、システムテスト)
【AWS】事業会社の合併に際する基盤移行支援の求人・案件
作業内容 某金融機関の吸収合併に伴う事業継承の為、下記基盤移行を行います。
現行オンプレ環境のサーバーOS EOLが2024年7月末、
そのタイミングでAWSへの移行を計画中です。
下記の作業を行うにあたりアーキテクト(テックリード)のような立ち位置で支援していただける方を募集しています。
・AWS SaaSを利用したデータパイプライン環境構築
-Lambda
-Glue
-Step Function etc…
・基本テンプレート開発
・システム監視
・構築する環境
・本番環境
・開発環境
【AWS】データレイク構築(python)
業務委託(フリーランス)
PythonAWSGlue
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
AWS環境でデータレイクの設計および更改対応を行います。PythonやScalaを使用した大規模バッチ処理の開発経験が求められ、ビッグデータに関わる開発意欲のある方が対象です。
■具体的な業務内容
・データレイクの設計および構築
・ドキュメント作成(設計資料、説明資料)
・大規模バッチ処理の開発
・AWSサービス(Glue、EC2、S3)を使用したデータ処理
SQL AWSデータ基盤構築
PythonSQLShellAWSSnowflakeGlueAthenaLambda
作業内容 AWS, Snowflake上にデータ基盤の新規構築を行って頂きます。
主な構成要素は下記となります。
・データ収集I/F(インバウンド)
・データレイク
・データウェアハウス
・データマート
・データ活用I/F(アウトバウンド)
<作業内容>
・I/F系のAPIの設計、開発
・データレイク内のデータ加工、データウェアハウス/データマートへのデータ格納ジョブの設計、開発AWS Glue(Python Shell)/Lambda/Snowflake ストアドプロシージャなどを使い分けます。
ワークフロー/トリガーの定義・設定
・AWS Database Migration Serviceを利用したデータソースのトランザクションログの読み取り処理の設計・実装
※現場メンバーと役割分担の上で上記作業に対応いただく想定です
<開発環境>
AWS(EC2, S3, Lambda, Glue, Athena, CloudWatch, Step Functions, EventBridge 等), Snowflake
<備考>
要件定義や上流工程の作業は出社
他は在宅勤務
<基本時間>
9:30~18:30
【Python】データ分析基盤の開発及び運用業
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク,データウェハウス,マートの実装,テスト
※基盤構築作業が主な作業になります。
【AWS】大手学習塾企業AWSマネジメント保守運用
業務委託(フリーランス)
SQLAWSRedshiftTableauGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
▼案件内容
・大手学習塾企業AWSマネジメント保守運用
・AWSマネジメントと保守運用
・複数テーブル結合におけるデータベース及びView設計
・クエリの設計と作成
・クエリの動作確認におけるテストの実施
・AWSのデータ取り込みの管理、運用
・デイリーバッチの理解と管理
・AWSGlue
・AWSLambda
・AWSRedshift
▼条件等
場所:リモート作業が基本必要に応じて対面打合せあり
清算方法:140-180
打合せ回数:1回
※週5日〜OKの案件です!
※実務経験1年以上お持ちの方が対象の案件です!
【AWS】 ETL環境の設計レビュー・改善・実装・メンテナンス
業務委託(フリーランス)
MySQLDynamoDBSparkAWSApacheRedshiftGlue
インフラエンジニア
作業内容 ・既存のAWS ETL環境の調査改善
・メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となる
【AWS】データ分析基盤構築支援の求人・案件
作業内容 顧客の提供する各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測などをお願いします。
【ETL】基幹システムデータ外部連携対応
業務委託(フリーランス)
AWSGlue
インフラエンジニア
作業内容 お客様基幹システムから外部システムへのデータ連携をご担当頂きます。
お客様と調整頂きながらデータ連携に伴う設計に落とし込んでいただきます。
また、必須ではないですが、メンバー3名のリーダーとしての立ち回りもお願い出来ましたら嬉しいです。
製造をご担当頂くことも可能でございます。
SQL 基幹DBの運用とデータ分析
SQLAWSRedshiftGlueLambda
データアナリスト
作業内容 データアナリストとして、学習塾における基幹DBの運用とデータ分析をして頂きます。
<業務内容>
保守運用
・AWSのデータ取り込みの管理、運用
・デイリーバッチの理解と管理
SQLによるデータ抽出
・複数テーブル結合におけるデータベース及びView設計
・クエリの設計と作成
・クエリの動作確認におけるテストの実施
抽出データの分析
<開発環境>
・AWS Glue
・AWS Lambda
・AWS Redshift
【Java/python】カーリース会社向けメールサービス再構築検証/リモート併用・
業務委託(フリーランス)
JavaPython
バックエンドエンジニア
作業内容 ■概要
AWSのLambda(java)で作成されたメール送信機能を、
AWSのGlueで再構築するPoCを実施。
■勤務体系
リモート併用(週1,2出社(現場は笹塚))
大手メーカー系メディカル商材販売会社におけるSE業務
作業内容 大手メーカー系メディカル商材販売会社における各種製品のマスターマネジメントシステム開発支援
<備考>
週1回程度リモートあり
<基本時間>
9:00~17:40
【AWS/週3以下リモート】某生命保険会社向けAWS環境/SaaS構築案件
業務委託(フリーランス)
AWSGlueAthenaAurora
インフラエンジニア
作業内容 ・生命保険会社向けAWS環境でのSaaS構築に携わっていただきます。
・要件定義~リリースまで随時フェーズに応じた作業をご担当いただきます。
AWS / Tableau データレイク分析環境運用
作業内容 データ分析環境運用
・流通/小売り業におけるクラウド下の分析環境の運用
・Tableauでの開発・運用
<備考>
原則テレワーク
週1程度の出社の可能性あり
【SnowFlake/AWS/リモート】SnowFlake試作開発対応
業務委託(フリーランス)
OracleAWSSnowflake
サーバーサイドエンジニア
作業内容 SnowFlake試作開発対応といたしまして、開発以降をご担当いただきます。
【AWS/フルリモート】エネルギー企業向け業務システム開発
業務委託(フリーランス)
PythonAWSGlueAuroraLambda
インフラエンジニア
作業内容 ・エネルギー業界向けの業務システムの開発を担当して頂きます。
・スクラムチームの中でAWSを利用したETL処理、業務担当者向けWebアプリケーションの開発となります。
【ほぼフルリモート】某大手通信事業者向けデータ加工処理マイグレーション検討
業務委託(フリーランス)
SparkAWSApacheSnowflakeGlue
作業内容 現行加工処理をマイグレーションの計画/方式の検討立案を行っていただきます
【マイグレーション例】
・現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
・ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換する
⇒Databricks、snowflake(snowpark)、AWS(Glue,EMR)等のSpark関連マネージド・サービスにマイグレーション
Python / SQL 大手コンビニ向けETL処理開発
PythonSQLAWSSnowflakeGlueAthena
作業内容 コンビニの顧客分析、商圏分析等の為のAWS Glueを使用したETL処理の開発
・他システムから連携されるファイルの取り込み(to Athena, to Snowflake)
・取り込んだデータを使用してのマート作成(Athena, Snowflake)
<備考>
基本リモートワーク
<基本時間>
9:30~18:00
【Python/SQL(リモート)】データ分析基盤データ連携/マート定常化作業
業務委託(フリーランス)
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambdaGoogle Workspace
バックエンドエンジニア
作業内容 データパイプラインのPythonでの実装作業です。
・データパイプラインのpython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
〜技術スタック〜
・AWS:Glue、Lambda、StepFunctions、Redshift、Redshift Spectrum、IAM、SageMaker、S3、EC2、CodePipeline、CodeDeploy
・GCP:BigQuery、GCS、CloudFunction、CloudComposer、
・DB:Redshift、PostgreSQL、Oracle、MySQL
・リポジトリ:Github Enterprise、CodeCommit
・コラボレーションツール:JIRA、Confluence、Backlog
・コミュニケーションツール:Slack、Google Workspaces
【AWS】データ分析
業務委託(フリーランス)
JavaScriptCPythonSQLC#HTMLAWSTypeScriptGlueTerraformLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
■内容
顧客内の情報を一元的に管理・可視化する、
データ分析基盤の開発支援です。
リーダーとして工程管理、本部横断調整などをお願いします。
各アカウントと連携を取りながら推進していくため、
高いコミュニケーションとBI/ETLの深い知識が必要になります。
■環境
・データソースの収集
・S3への蓄積
・AWSGlueを使用したデータ加工
・外部ツールからのデータ収集/外部ツールへの加工データ連携
・QuickSightを使用したデータ集計
・データ加工の自動化(Lambda、StepFunctionを想定)
・terraformを利用した構成管理(Glueのジョブ、IAMロール、S3
、Quicksight)
■精算:有140-180h
■場所:リモート可/秋葉原駅
■時間:定時9:00~18:00(フレックス相談可)
■面談:1回
■備考:
・初日は機材手続きのため秋葉原または池袋に出社をお願いします
※また、基本リモートですが必要に応じオフィスへ出社頂く可能性あり(応相談)
・円滑なコミュニケーションを図るため業務中はZoom常時接続となります
※週5日〜OKの案件です!
【クラウドエンジニア(AWS)】大手通信系AWS開発支援・クラウドエンジニア募集
業務委託(フリーランス)
JavaPythonMySQLDynamoDBAWSGlueAthenaAuroraLambda
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
大手通信会社の小規模案件対応基盤にて、システム再構築に向けた設計から試験工程までの開発業務を担当いただきます。決定された仕様に基づき、設計・サンプルアプリの作成・オフショア展開・テストまでを実施。AWS環境を活用し、LambdaやGlue、Auroraなど幅広いサービスを使用した開発に携わっていただきます。
■具体的な業務内容
・AWS環境(Lambda、API Gateway、Glue、Athenaなど)での設計・開発
・PythonおよびJavaを用いたアプリケーション開発
・仕様書に基づく設計およびサンプルアプリの作成
・オフショアメンバー向けの展開資料作成・調整業務
・開発後の単体テスト、結合試験の実施
・アジャイル開発での進行(該当時)
【AWS】AWSデータ分析基盤移行プロジェクト(20代〜40代活躍中!・週4日以上稼働可能な方にぴったり!)
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
オンプレミスで運用されているデータ分析基盤をAWSに移行するプロジェクトです。ETL処理にはAWS Glueを活用し、PythonShellを用いてデータ変換スクリプトを作成・運用します。データ処理の効率化を目指し、AWSのサービスを最大限に活用した基盤を構築します。Pythonスクリプトの経験がある方にとって成長の機会となる案件です。
■具体的な業務内容
・オンプレミス基盤のAWS移行における設計および構築
・AWS Glueを使用したETL処理の設計と実装
・PythonShellを活用したデータ変換スクリプトの作成
・データ処理における最適化および改善提案
・移行後のAWS基盤の運用および保守
・関連するドキュメント作成および技術サポート
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。