【データエンジニア】事業会社向けSQL改善検討案件
作業内容 ・性能改善案件 SQL改善検討支援に携わっていただきます。
・主に下記作業をご担当いただきます。
- データ抽出
- データ加工
- Tableau Prep開発
- Talendの処理性能改善に関わる領域の作業
【SQL/Azure Databricks/フルリモート】大手HR事業のデータマート開発/データエンジニア
業務委託(フリーランス)
SQLPL/SQLAzureRedshiftBigQuery
データサイエンティスト
作業内容 【募集背景】
大手HR事業におけるデータ分析および活用を強化するため、データマネジメント体制を拡充する目的で募集しております。
【作業内容】
HR系クライアントのデータマネジメント部署において、データマートの開発業務を担当いただきます。具体的には、分析用データ基盤およびワークフローの開発・保守運用、データマートの開発・保守運用、データに関わる各種調査などを実施していただきます。データエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、データ要件の定義や必要に応じた調査業務も一部お任せいたします。
【求める人物像】
自らドメイン知識などの情報収集を行い、主体的にデータエンジニアとしての業務を推進できる方を求めております。また、周囲と適切にコミュニケーションをとりながら抽象的な課題を整理し、解決に導くスタンスをお持ちの方が望ましいです。
【ポジションの魅力】
大手HR事業のデータ分析・活用プロジェクトに参画し、クラウドDWHや最新のデータ基盤技術を用いたデータマート開発に携わることができます。多様なデータソースを扱う環境で、大量データのハンドリングやワークフロー構築を通じて、データエンジニアとしての専門性を高めることができるポジションです。
【開発環境】
インフラはAzureをメインに、AWSやGoogle Cloudを利用しております。データベースとしてAzure Databricks、Amazon Redshift、BigQueryを使用し、ワークフローにはAirflowおよびdbtを採用しております。コミュニケーションにはOutlook、Teams、Slack、Backlogを利用しております。
【データ分析系(Python/SQL/R/BI)】AWS RedShiftデータベースの開発効率改善プロジェクト
業務委託(フリーランス)
PythonSQLSQL ServerAWSRedshift
作業内容 【案件概要】
AWS RedShiftデータベースのパフォーマンス向上と開発効率改善を目的としたプロジェクトです。
特にマテリアライズドビュー作成に時間がかかっている課題があり、その高速化支援が求められます。
RedShift全体の性能改善やクエリ最適化を通じて、開発効率向上に貢献する業務です。
SQLチューニングやクラスタ設定の最適化など、専門的な知見を活かした改善が中心となります。
プロジェクト全体の効率化とデータ活用の高速化に寄与する重要な役割です。
【作業内容】
・RedShiftのパフォーマンスボトルネック特定と分析
・マテリアライズドビュー作成プロセスのSQLチューニング
・RedShiftクラスタ設定の最適化提案
・高速化のためのRedShiftクエリ最適化
【データ分析系(Python/SQL/R/BI)】Tableauを用いたデータ分析と管理業務
業務委託(フリーランス)
PythonSQLRedshiftTableau
作業内容 【業務内容】
Tableauを用いてデータ分析やダッシュボード作成を行い、案件全体の課題や進捗、スケジュール管理、ユーザー対応や教育も担当します。
【作業内容】
・AWS Redshift上のデータソースの作成、修正
・Tableauを用いたダッシュボードの作成
・プロジェクト管理ツールを用いた課題、進捗、スケジュールの管理
・関係者への問合せ対応、作成レポートの確認、ユーザーへの操作教育、ユーザーヒアリング、各部署との打合せ
【週5日/一部リモート/AWS】インフラエンジニア - 物理サーバAWS移行支援 (JP1/Asteria/GP)
業務委託(フリーランス)
OracleAWSJP1RedshiftGlue
インフラエンジニア
作業内容
【クラウドエンジニア(AWS)】データ分析基盤構築サービスのAWSインフラ構築
業務委託(フリーランス)
AWSGitHubRedshiftGlueLambda
作業内容 【業務内容】
情報通信業界向けのデータ分析基盤構築において、AWSを活用したインフラの設計・構築やCI/CD整備、ドキュメント作成、関係各所との調整業務をご担当いただきます。RedshiftやGlue、Step Functionsを用いたデータパイプライン構築にも携わります。
【作業内容】
・AWSを用いたインフラ設計・構築
・Redshift、Glue、Step Functionsによるデータパイプライン構築
・CI/CD環境の整備
・関係各所との調整業務
・構築手順や設計内容のドキュメント作成
【データ分析系(Python/SQL/R/BI)】金融業界向けデータ基盤の構築プロジェクト
業務委託(フリーランス)
PythonSQLRedshift
作業内容 【案件概要】
金融業界向けのデータ基盤構築支援プロジェクトです。
既存データ基盤の設計・構築を中心に担当します。
必要に応じて関連業務の支援も発生する可能性があります。
クラウド環境(Redshift、QuickSight)を用いたDWH/BI構築がメインです。
中長期的なプロジェクトで安定的にデータ基盤構築を支援します。
【作業内容】
・Amazon Redshiftを用いたデータウェアハウスの設計・構築
・Amazon QuickSightを用いたBIダッシュボードの設計・構築
・データモデル設計
・データクレンジングおよびETL処理
・パフォーマンスチューニング
【クラウドエンジニア(AWS)】メガバンク向けDWHシステムの保守と性能改善
業務委託(フリーランス)
WindowsAWSTableau
作業内容 【業務内容】
大手メガバンクのデータウェアハウスシステムの保守と性能改善を担当します。AWS上のRedShiftやTableauを用いたBI環境において、性能評価や課題特定、改善、検証を行い、既存システムの安定稼働と性能向上を実現します。
【作業内容】
・RedShiftとTableauを用いたBI環境のパフォーマンス測定とボトルネック特定
・SQLクエリ最適化、Tableauダッシュボード最適化などのパフォーマンス改善策の検討・提案
・RedShiftクエリチューニング、Tableauワークブック最適化、インデックス作成などの実装
・実装後のパフォーマンス検証とレポーティング
【クラウドエンジニア(AWS)】AWS環境向けインフラ監視・最適化業務
業務委託(フリーランス)
AWSRedshiftCloudFormationLambda
作業内容 【業務内容】
AWS環境におけるインフラの監視ログ構築やコスト最適化を担当し、既存インフラの運用改善や顧客への提案を通じて、安定的で効率的なクラウド環境の運用を実現します。
【作業内容】
・CloudWatch Logsを用いた監視ログの設計・構築・運用
・RDS、Redshift等の最適化によるコスト削減策の立案・実行
・顧客へのインフラ構成提案(最適化、コスト削減)
【クラウドエンジニア(AWS)】AWSを活用したインフラ構築運用
業務委託(フリーランス)
AWSRedshiftCloudFormationLambda
作業内容 【業務内容】
AWS環境におけるインフラ構築や運用業務に携わり、既存システムの最適化やコスト削減提案を行います。チームでの連携を重視しながら作業を進めます。
【作業内容】
・S3、RDS、Redshift、CloudWatchLog、CloudFormation、Lambdaなどを用いたAWSインフラ環境の構築
・顧客へのインフラ構成提案(最適化、コスト削減含む)
・チームメンバーとの連携による開発作業
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【データ分析系(Python/SQL/R/BI)】銀行向けBI基盤TableauServer構築
業務委託(フリーランス)
PythonSQLTableau
作業内容 【業務内容】
大手銀行関連会社において、BIツール基盤強化のためにTableau Serverを構築し、既存システムの性能改善と効率的なデータ分析環境の構築を行います。AWS Redshiftなどのクラウドサービスと連携したデータ分析基盤の構築も担当します。
【作業内容】
・Tableau Serverの設計・構築
・AWS Redshiftとの連携設定
・SQLを用いたデータ連携処理の実装
・JP1、Shell Scriptを用いた自動化スクリプトの作成
・性能テストの実施と結果分析
・構築手順書、運用マニュアル等のドキュメント作成
・Tableau Desktop、Prep Builderを用いたデータ加工・可視化
【Python/AWS】データレイク基盤構築案件
業務委託(フリーランス)
PythonSQLAWS
SE
作業内容 【作業内容】
・S3上のデータに対する各種処理(クレンジング / 名寄せ / マスキング)を行います。
・データレイク用S3への格納処理を行います。
・Redshift Serverless / EMR Serverlessの比較検証などの技術調査を行います。
・要件定義および一部基本設計対応を行います。
【開発環境】
・AWS(S3, Redshift Serverless, EMR Serverless など)
・Python
・SQL
【データ分析系(Python/SQL/R/BI)】企業向けデータ分析推進プロジェクト
業務委託(フリーランス)
PythonSQLRedshift
作業内容 【案件概要】
データ活用と分析を推進するプロジェクトです。
顧客折衝から基本設計、テストまで一貫して担当します。
少人数チームでリモート環境での作業が中心です。
主体性やコミュニケーション力、進捗の能動的な共有が重要です。
【作業内容】
・データ活用と分析プロジェクトにおける開発業務
・顧客折衝
・基本設計
・テスト
【SQL/Tableau/基本リモート】分析用SQL開発およびTableauダッシュボード継続更新対応
業務委託(フリーランス)
SQLShellPL/SQLLinuxRedshiftTableauSnowflake
データサイエンティスト
作業内容 【作業内容】
ログや他システムのデータベースから取り込んだ各データソースを元に、分析用SQLを作成しSnowflakeへ連携し、Tableauへ表示する業務を行います。新規コンテンツ追加対応、イベント発生時の個別対応、月次処理対応が中心となります。継続的なダッシュボード改善およびデータ抽出ロジックの最適化も含まれます。
【求める人物像】
月次処理等の定型業務を正確に遂行できる方を求めています。
【クラウドエンジニア(AWS)】大手旅行業向けデータ集計分析システム保守運用
業務委託(フリーランス)
MySQLAWSRedshiftGlueLambda
作業内容 【業務内容】
大手旅行業向けのデータ集計・分析システムの保守運用を担当します。AWS環境を利用したアプリケーションの運用管理やデータベース・SQLを用いたデータ処理、シェルスクリプトを活用した自動化作業などを行います。
【作業内容】
・アプリケーションの保守運用
・AWS環境でのシステム管理
・データベース・SQLを用いたデータ処理
・シェルスクリプトによる各種自動化作業
【AWS/Python】国内大手素材メーカー向けデータ基盤保守
業務委託(フリーランス)
PythonSQLAWSRedshiftGlue
インフラエンジニア
作業内容 【募集背景】
国内大手素材メーカーで運用されているデータ基盤の保守をご担当いただきます。
(リモート)【Python/TypeScript】航空管理システム
業務委託(フリーランス)
PythonPostgreSQLNode.jsAWSReactRedshiftTypeScriptLambda
バックエンドエンジニア
作業内容 ・航空管理システム
・フロント:react, typescript
・バック:lambda nodejs python
・DB:posrgresql aws redshift
【クラウドエンジニア(AWS)】流通業向けAWS環境保守とデータベース構築
業務委託(フリーランス)
AWSRedshiftLambda
作業内容 【業務内容】
流通業のお客様のAWS環境保守とPostgreSQL構築準備作業を行います。前任者から保守業務を引き継ぎ、AWS各種サービスの運用保守やデータベース構築準備など幅広く対応します。
【作業内容】
・AWS IAMを用いたユーザーアカウントの追加・削除
・EC2インスタンスのドライブ拡張やセキュリティグループ設定変更
・AWSサポートへの問い合わせ対応
・SQLを用いたテスト対応
・PostgreSQL構築に向けた準備作業
【DBエンジニア(SQL全般)】データベース設計・運用プロジェクト
作業内容 【案件概要】
Aurora Serverlessを中心としたデータベース設計・運用プロジェクトです。
開発初期フェーズにおけるDB設計のガバナンス構築やテーブル構造変更のレビューを中心に進めます。
データ品質管理や用語統一を行い、将来的なデータ活用やBI連携を見据えた設計を行います。
RedshiftやQuickSightを用いた分析基盤との連携やデータ移行設計も含まれます。
【作業内容】
・Aurora Serverlessを用いたデータベース設計・運用
・テーブル変更・追加レビューおよび承認フロー設計、関連ドキュメント作成
・データ品質管理(用語集作成、命名ルール策定・運用)
・オンプレDBや他DBからAuroraへのデータ移行設計・実行
・SQLチューニング、パフォーマンス改善(プロファイリング、インデックス最適化)
・Redshift・QuickSightを用いたデータ活用設計、クエリ作成
【データ分析系(Python/SQL/R/BI)】製薬業界向けデータ可視化Tableau開発
業務委託(フリーランス)
PythonSQLTableau
作業内容 【業務内容】
外資系製薬会社向けにTableauを用いたデータ可視化システムの開発を担当します。RedshiftのDBやSQL Workbench/Jを活用し、Alteryxでデータ加工を行い、分析用ダッシュボード作成や既存ダッシュボードの改善に携わります。
【作業内容】
・Redshift上のデータをSQLで抽出・加工
・Alteryxを用いたデータ加工・整形
・Tableauを用いたダッシュボード作成・改善
・既存ダッシュボードの保守・運用
・分析チームとの要件調整
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
(リモート)【Python、SQL】メーカー向けデータ利活用支援
業務委託(フリーランス)
PythonSQLAWSRedshiftGlue
バックエンドエンジニア
作業内容 ・python(実行はRedshift)からSparkSQLへの移行案件
・SparkSQLの移行実装は終えているが、不具合が発生しているためその修正及び試験を実施
・環 境:AWSGlue/Redshift/SparkSQL/python
-SQL実装経験(サブクエリ・外部結合を構築可能)
【週5日/一部リモート/AWS】インフラエンジニア - 物理サーバ環境からAWSへの移行プロジェクト
業務委託(フリーランス)
OracleAWSJP1RedshiftGlue
インフラエンジニア
作業内容 --------------------------------
※本案件は出社が求められる案件です。出社が可能かどうか事前にご確認の上お応募ください。
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
※20代〜40代の経験者が望ましい案件です
※すでにFindy Freelanceで担当がついている方は、直接ご連絡いただいた方がスムーズです
--------------------------------
- 顧客へのヒアリングを通じた利用状況や課題の抽出
- 抽出した課題に基づく具体的なユースケースの提案
- 業務に合わせた活用方法のレクチャーや効果的なプロンプト作成支援
- 生成AIの最新トレンドや他社事例などの情報提供
- 顧客の要望を社内開発チームへフィードバックし、サービス改善へ貢献
- 伴走支援サービスの導入提案活動
【Java】医療機関向け帳票開発
業務委託(フリーランス)
JavaSQLLinuxUnixPostgreSQLRedshift
作業内容 ・医療機関向け帳票の改修案件
・JavaやSQLの改修、テストなど(任される作業確認中)
利用技術:
[言語]
・STORED PROCEDURE(Redshift、postgreSQL)
・Java11 (FWなし)
[DB]
・Redshift
・RDS(postgreSQL 13.3)
・Db2
[OS]
・Amazon Linux 2
【Python/PostgreSQL】情報連携基盤接続対応開発
業務委託(フリーランス)
PythonPostgreSQLAWSLambda
サーバーサイドエンジニア
作業内容 【作業内容】
・外部システムとのAPI接続対応を行います。
・データレイクに対するデータ抽出の依頼受付等のAPIを作成します(AmazonSQSで依頼受付)。
・データ抽出のアプリケーション基盤を構築します(Lambdaでリクエストパラメータ(JSON)を解析し、Redshift等の各種サービスに連携、Pythonで処理を実装)。
・GlueDataBrewを用いたメタデータクローラーおよびデータプロファイルクローラーの作成を行います。
・IAMなどのクラウド基盤設定を行います。
(リモート)【AWS】MAツール構築顧客支援
作業内容 ・社内利用するMAツールの構築、作業支援
・現状のデータ仕様整理、システム構築に必要な連携方式整理
・顧客先のマーケティング担当者、システム担当者間での技術支援作業
・開発環境:AWS、Amazon Redshift
【データ分析系(Python/SQL/R/BI)】受発注管理システムETL再構築
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 【業務内容】
受発注管理システムにおいて、需要予測システムから出力されたデータを抽出・変換し、DWHからデータマートへの登録を行うETLの設計および開発を担当していただきます。既存のPython Shell実装では性能要件を満たさなかったため、VisualETLおよびPySparkを用いた再構築を行います。
【作業内容】
・ETL設計・開発
・Python Shellでの既存ETL分析
・VisualETLおよびPySparkでのETL再構築
・Redshiftへのデータ登録処理実装
・性能改善・チューニング
・単体・結合テスト実施
・関連資料作成・更新
(フルリモート)【Python/AWS】AWSデータ基盤構築支援
業務委託(フリーランス)
PythonOracleAWS
作業内容 AWSデータ基盤構築支援
・Redshiftの設計・構築およびGlueを用いたETLジョブ開発を担当します。
・S3からRedshiftへのパイプライン構築や、データカタログ設定等のデータ基盤整備を支援いただきます。
【DBエンジニア(SQL全般)】システム基盤の実装推進プロジェクト
作業内容 【案件概要】
AWS上に構築されたデータレイク/DWH基盤の実装を推進するプロジェクトです。
Amazon Redshift、Amazon RDS、Amazon S3を中心としたデータ基盤において、データ処理ロジックの実装を技術的にリードするポジションです。
要件を踏まえたSQL設計から実装方針の検討までを担い、品質とパフォーマンスを意識したデータ基盤構築が求められます。
関係メンバーと連携しながら、安定性と拡張性を兼ね備えたデータ基盤の実現を目指します。
【作業内容】
・Redshift/RDS/S3を用いたデータ処理ロジックの設計および実装リード
・SQLを中心としたデータ加工、集計、変換処理の実装
・データレイク/DWH構成における設計方針の検討およびレビュー
・性能改善やチューニングに関する技術的検討
・他エンジニアへの技術支援およびレビュー対応
【サーバー(Linux系)】医療ビッグデータプラットフォーム構築
業務委託(フリーランス)
SQLLinuxPostgreSQLSparkAWSRedshiftGlueAurora
PL
作業内容 【業務内容】
医療ビッグデータを活用したデータプラットフォーム構築において、プロジェクトリーダーとしてAWS環境での設計、構築、移行、運用を担当します。システム化構想や要件定義から参画し、データベース設計やステークホルダーとの合意形成、ベンダー管理、運用準備まで幅広く携わります。
【作業内容】
・システム化構想や要件定義からのプロジェクト立ち上げ参画
・Redshift、Aurora PostgreSQL、S3、Spark等を用いたデータベース物理設計
・医療データのデータカタログ設計、抽出設計、実データ調査を含む論理設計
・プロジェクトメンバーやベンダー、データ提供元との合意形成
・フェーズレビュー支援(ゲートレビューによる品質確認)
・ベンダーコントロール(設計レビュー、成果物レビュー、受入テスト実施)
・Shell、PowerShell、Pythonを用いた設計作業
・運用準備(運用手順書作成、社内勉強会実施、関係者調整)
【Python(Web開発系)】大手通信系企業向け社内システムの運用改善
業務委託(フリーランス)
PythonAWSJIRAAnsibleRedshift
作業内容 【案件概要】
大手通信系企業における内製開発プロジェクトです。
社内システムの安定運用と継続的改善を目的とした長期案件となります。
開発チームと連携しながら信頼性向上と運用効率化を推進します。
SREとして設計改善から運用高度化まで幅広く関与します。
【作業内容】
・クラウドおよびオンプレ環境の運用改善対応
・CI CD整備および自動化推進
・監視設計および障害対応
・パフォーマンス改善およびキャパシティ管理
・開発チームとの連携による信頼性向上施策推進
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【データエンジニア】データ基盤運用支援案件
業務委託(フリーランス)
PythonSQLAWSRedshift
作業内容 ・データ基盤運用支援に携わっていただきます。
・主に下記作業をご担当いただきます。
- データ基盤の運用業務
- ドキュメント作成の支援
【Python(Web開発系)】AWS上データ分析基盤の統合・移行プロジェクト
業務委託(フリーランス)
PythonAWSGitVSCode
作業内容 【案件概要】
AWS上に構築されたデータ分析基盤を刷新・統合するプロジェクトです。
既存のOSS ETLツール(Pentaho、Java等)で実装されたETL処理を、新しい3層構成(データレイク、DWH、データマート)のDWHへ移行します。
インフラはIaCを活用して構築し、データ分析基盤の効率化と安定稼働を目指します。
ETL処理の刷新やデータパイプラインの改善を通じて、分析環境の信頼性向上を図ります。
【作業内容】
・Pythonを用いたETL処理(データ抽出・変換・ロード)の実装
・AWS Glue、Amazon Redshift、Amazon S3を用いたデータパイプライン構築
・既存Pentaho/Java ETL処理のPythonへの書き換え
・データレイク、DWH、データマート間のデータ連携構築
【DBエンジニア(SQL全般)】流通業向け大規模DB移行および設計
作業内容 【業務内容】
流通業界のシステムにおいて、大規模データベースの移行および設計業務を担当し、Aurora Serverlessを用いたDB設計・運用、BI連携、データ品質管理、ガバナンス構築を行います。
【作業内容】
・Aurora Serverlessを用いたデータベース設計・構築および運用・保守
・Aurora Serverlessへのデータ移行設計と実行(オンプレミス環境や他DBからの移行を含む)
・データモデリング、テーブル設計、SQL作成、パフォーマンスチューニング
・RedshiftおよびQuickSightを用いたBI連携のためのデータ設計と実装
・DB設計ガバナンス構築(レビュー・承認フロー、命名規則、用語標準化を含む)
【データ分析系(Python/SQL/R/BI)】顧客データ向けPython/SQL変換処理開発
業務委託(フリーランス)
PythonSQLAWSRedshiftAthenaLambda
作業内容 【業務内容】
顧客データを変換処理基盤上でSans製品のデータ仕様に適合させるため、個別のデータ形式や内容に対応しながら設計からリリースまでの一貫した開発業務を担当します。データ構造分析に基づいた変換設計書の作成や実装、テスト、リリースまでを行い、安定稼働に向けた対応を行います。
【作業内容】
・データ構造分析に基づく変換設計書作成
・設計書に基づく変換処理の実装
・変換処理の単体テストおよび結合テスト
・本番環境へのリリース対応
・稼働確認および障害対応
【データ分析系(Python/SQL/R/BI)】顧客データ変換処理の設計と開発
業務委託(フリーランス)
PythonSQLDockerGitTerraform
作業内容 【業務内容】
顧客企業から受領したデータの変換処理と集計データの顧客システムへの連携を担当し、PythonやSQLを用いてAWS環境で開発を行います。顧客ごとに異なるデータ形式に対応した変換処理の設計、実装、テスト、リリースまでを一貫して行います。SaaSとのデータ連携も含まれます。
【作業内容】
・顧客データの変換処理設計および実装
・PythonとSQLを用いたAWS環境での開発
・EC2、ECS、StepFunctions、S3、RDS、Redshift、Lambda、Athena、CloudWatchを使用したシステム構築
・データ連携処理のテストおよびリリース
・SaaSとのデータ連携対応
【データエンジニア】データベース調査・設計案件
業務委託(フリーランス)
SQLPostgreSQLRedshiftBigQuery
作業内容 ・DB調査・設計および提言を担うデータ活用エンジニア募集案件に携わっていただきます。
・主に下記作業をご担当いただきます。
- 現行DBおよびシステムを調査・整理
- エンドクライアントへのシステム刷新計画の助言
- DBの再設計・調査作業
【DBエンジニア(SQL全般)】データ分析基盤およびDWH環境における設計開発と検証対応
業務委託(フリーランス)
SQLAzureRedshiftBigQuerySnowflake
データベースエンジニアデータアナリスト
作業内容 【業務内容】
データ分析基盤やデータクリーンルーム環境の設計および開発に参画し、データベースやクラウドベースのデータウェアハウスに関する開発支援、アドホック対応、PoC対応などを担当します。複数の案件チームと連携しながら、SQLを用いたデータ処理やデータ基盤の構築支援を行い、必要に応じてデータベースおよびデータウェアハウスの検証作業も実施し、品質と安定性の向上に貢献します。
【作業内容】
・データ分析基盤およびデータクリーンルームの設計開発支援
・データベースおよびDWH環境の構築および運用支援
・SQLを用いたデータ抽出および加工処理対応
・各種案件における開発サポートおよび技術支援
・PoC対応および技術検証の実施
・アドホック対応およびデータ調査対応
・データベースおよびDWHの検証作業および品質確認
【Python(Web開発系)】海外事業向けAPIとデータパイプライン開発
作業内容 【業務内容】
海外事業向けにAPIやデータパイプラインの開発を行い、PythonやAWSのサーバーレスアーキテクチャを活用して既存システムの機能拡張や新規システム開発を担当します。
【作業内容】
・REST APIの設計、開発、テスト
・AWS Lambda、API Gateway、DynamoDBなどを用いたバックエンド開発
・データパイプラインの構築、運用、保守(AWS Kinesis、S3、Redshiftなど)
・CI/CDパイプラインの構築と運用
(フルリモート)【インフラ】社内データ分析基盤の機能拡張・運用エンジニア
業務委託(フリーランス)
AWSGoogle Cloud PlatformRedshiftSnowflakeTerraform
作業内容 データサイエンティスト向けの分析環境やアプリ開発環境のインフラ設計・運用を担っていただきます。
・AWS/GCP上でのデータ分析環境(データレイクやパイプライン等)のベースとなるインフラ設計・構築
・Terraformを用いたIaC管理およびCI/CD環境の構築・運用
・Databricksを中心とした分析プラットフォームの運用管理(コスト管理、ログ確認、ジョブ管理等)
・社内のデータサイエンティストやエンジニアと連携した新ツール導入の技術検証および運用改善
・将来的なマルチクラウド化(AWS以外)や、Snowflake/Redshift等の別プラットフォーム導入に向けた技術検証・基盤構築
【Python(Web開発系)】既存システムのETL処理改善プロジェクト
業務委託(フリーランス)
PythonMySQLMongoDBSparkAWSJIRARedshiftKafkaLambda
作業内容 【案件概要】
大規模データ処理基盤の構築および既存システムのETL処理改善を行うプロジェクトです。
Pythonを用いたETL開発チームのリーダーとして、要件定義からテストまで幅広い工程を担当します。
SparkやKinesisなどを活用したデータ処理基盤の構築に携わります。
AWS環境での開発を前提とし、アジャイル開発手法でプロジェクトを進めます。
【作業内容】
・ETL処理の詳細設計および設計内容の整理
・Pythonを用いたETL処理のコーディング
・ワークフローシナリオの実装
・単体テスト観点作成およびテストスクリプト作成、実施
・必要に応じたシミュレーターやスタブの開発
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。