【クラウドエンジニア(AWS)】データ処理基盤向けGlue移行の開発支援
業務委託(フリーランス)
ScalaSparkAWSGlue
作業内容 【案件概要】
データ処理基盤において、現行EMRで実装されているデータ処理機能をAWS Glueへ移行するプロジェクトです。
既存処理の移行に加え、Glue環境に適した構成への見直しや周辺機能の改修も実施していただきます。
データ処理基盤の最適化および運用効率向上を目的とした案件です。
既存システムの仕様を理解しながら、移行計画に沿って開発を進めていただきます。
AWSサービスを活用したデータ基盤構築経験を活かせるポジションです。
【作業内容】
・EMRからAWS Glueへのデータ処理移行対応
・既存処理の調査および移行設計対応
・Glue環境向けの処理実装および改修
・周辺機能の変更および連携機能の改修対応
・テスト実施、不具合修正および品質確認対応
【DBエンジニア(SQL全般)】AWS環境を用いたデータ活用基盤の構築支援
作業内容 【案件概要】
複数システムからデータを収集・統合し、データ分析に活用するための統一基盤構築を担当していただきます。
AWSのS3およびRDSを活用し、データの蓄積および管理基盤の設計・構築を行います。
AWS LambdaやAWS Glueを用いたデータ加工処理の開発にも携わっていただきます。
基本設計から運用保守まで一貫して対応するデータ基盤構築案件です。
【作業内容】
・AWS環境におけるデータ活用基盤の設計および構築
・S3およびRDSを用いたデータ蓄積基盤の開発
・LambdaおよびGlueを用いたデータ加工処理の開発
・基本設計、詳細設計およびプログラム開発対応
・テストおよび運用保守対応
【Python】AWS Glue開発支援案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 ・Pythonを用いた開発に携わっていただきます。
・主に下記作業をご担当いただきます。
- 基本設計
- テスト
【Python/AWS】生保向けAI関連システム開発
業務委託(フリーランス)
PythonSQLAWSGlue
SE
作業内容 【募集背景】
生成AI活用に向けたアプリケーション開発およびデータ基盤構築を推進するための募集です。
【作業内容】
AWS環境におけるWeb業務アプリケーションの要件定義、基本設計以降の設計・開発を担当します。あわせて、AI Readyデータ整備およびシステムカタログ基盤整備に向けたデータ基盤の構築を担当します。
【求める人物像】
新しい技術やサービスを自ら調査し、キャッチアップしながら対応できる方を求めています。設計・開発を技術的にリードできる方を歓迎します。
【ポジションの魅力】
生成AI活用案件において、アプリケーション開発とデータ基盤構築の両面に携わることができます。
【開発環境】
AWS、Python、SQL、ETL/ELT、S3、Glue、Snowflakeを使用します。
【ネットワークエンジニア】電力会社向けデータ基盤の構築プロジェクト
作業内容 【案件概要】
電力会社向けのデータ基盤構築プロジェクトにおいて、システムアーキテクトおよびコンフィグスペシャリストを募集しております。
各種パッケージ製品の機能を踏まえたシステムアーキテクチャの具体化をご担当いただきます。
システム連携やデータトレーサビリティ確保に関する技術課題の解決を行っていただきます。
Snowflakeを中心としたデータモデル設計や、AWS-Glue・Dataikuを活用した検証業務にも携わっていただきます。
現行プロジェクト終了後は、並走している別PJへのスライド参画も相談可能です。
【作業内容】
・システムアーキテクチャの設計および具体化
・システム連携およびデータトレーサビリティ課題の解決
・Snowflakeの論理/物理データモデル設計
・AWS-Glue、Dataiku、Snowflakeの環境設定および検証
・データ収集、連携、編集、加工方式の策定および検証
【AWS/PostgreSQL/MySQL/フルリモート】データ移行・同期システム構築エンジニア
業務委託(フリーランス)
WindowsMySQLPostgreSQLAWSGlueLambda
インフラエンジニア
作業内容 【募集背景】
Windows OS上で稼働するPostgreSQLからAWS Aurora(MySQL)への自動データ移行・同期システムの構築を計画しています。
【作業内容】
Windows環境のPostgreSQLから特定データを抽出し、AWS Aurora(MySQL)へ自動で移行・同期するシステムを構築します。要件定義から自動化システムの設計、開発、テスト、導入までを一貫して推進します。データ抽出ロジックの整理、自動データ転送・移行システムの設計開発、データ受け入れ・統合設計、自動化パイプラインの構築および初期テストを担当します。
【求める人物像】
要件定義から設計、開発、テスト、導入までを一貫してリードできる方を求めています。
【ポジションの魅力】
データ移行・同期システムの構築において、上流工程から導入まで一貫して携わることができます。
【開発環境】
Windows OS、PostgreSQL、AWS Aurora(MySQL)を使用します。Lambda、ECS、Glue、Step Functions、EventBridgeなどを利用し、AWS SDK for .NETを用いた開発を行います。
(リモート)【データエンジニア】AWSを活用したデータ分析基盤・ETL構築
作業内容 ・AWS環境におけるデータレイクの設計、およびデータ統合処理の実装
・データ品質改善(データクレンジング)、および名寄せ(MDM)ロジックの構築
・AWS Glue等を用いたETL/ELTパイプラインの開発および運用設計
・Amazon SageMaker Unified Studio等を活用した分析環境・データ利活用基盤の整備
【データ分析系(Python/SQL/R/BI)】AWSを活用したデータ分析基盤構築支援
作業内容 【案件概要】
AWSを活用したデータ分析基盤の構築プロジェクトにおいて、データ基盤の設計・開発をご担当いただきます。
データレイクの設計やデータ統合、データ品質改善、名寄せなど幅広いデータ基盤領域に携わっていただきます。
ETL/ELT開発を通じて、分析に必要なデータを効率的に収集・加工できる環境を整備します。
AWSの各種サービスを活用し、データ活用を支える分析基盤の構築を推進していただくポジションです。
【作業内容】
・AWSを活用したデータ分析基盤の設計および構築
・データレイクの設計およびデータ統合対応
・データ品質改善および名寄せ処理の実装
・ETL/ELT処理の設計、開発およびデータ加工対応
・AWS Glue、Lake Formation、Amazon SageMaker Unified Studioを活用した基盤開発
【Snowflake/Azure/AWS】プラントデータ基盤の構築支援
業務委託(フリーランス)
AWSAzureSnowflakeGlue
作業内容 ・火力発電所のプラントデータを収集・蓄積するための要件定義
・Snowflake、Azure、AWSを用いたデータプラットフォームの実装・検証
・データに基づく意思決定を促す事業環境の整備
・各種諸元システムからのデータ一元管理
・データ編集・加工のためのDataikuの活用
(フルリモート)【データエンジニア】Snowflake×AIを活用した次世代データ基盤の構築・自動化
業務委託(フリーランス)
GitRedshiftBigQuerySnowflakeGlue
AIエンジニア
作業内容 データエンジニアとして、データ利活用環境の拡張および運用の最適化・自動化を担当いただきます。
基盤設計・最適化:Snowflakeのウェアハウス設計、コスト管理、パフォーマンスチューニング。
パイプライン構築:AWS(Glue,Lambda等)やAirbyteを用いた、堅牢なELT/ETLフローの設計。
品質・ガバナンス:dbtを用いたモデル管理、CI/CDの整備、セキュリティ(RBAC等)の実装。
自動化の推進:AI/LLMを活用した異常検知やログ分析など、運用自動化の企画から実行までをお任せします。
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【データ基盤】プラントデータ基盤の構築支援
業務委託(フリーランス)
AWSSnowflakeGlue
作業内容 ・火力発電所のプラントデータを収集・蓄積するための要件定義支援
・Snowflake、Azure、AWSを用いたデータプラットフォームの実装・検証
・データに基づく意思決定を促す事業環境の整備
・各種諸元システムからのデータ一元管理・データ編集・加工のためのDataikuの活用
【クラウドエンジニア(AWS)】AWSデータ分析基盤の構築・運用プロジェクト
業務委託(フリーランス)
JavaPythonSQLAWSRedshiftGlueLambda
作業内容 【案件概要】
AWSを活用したデータ分析基盤の構築および運用検討をご担当いただく案件です。
データレイク、データウェアハウス、データマートの整備を通じて、データ活用基盤の最適化を推進していただきます。
データ供給元と利用者間の調整を行いながら、データ連携案件の管理業務もご担当いただきます。
事業要件に応じたデータ基盤の設計・実装・テストまで幅広く対応いただくポジションです。
データ基盤構築と運用設計の両面を担う重要な案件です。
【作業内容】
・データ連携案件の管理およびスケジュール調整対応
・データ供給元と利用者間の調整および折衝対応
・AWS環境におけるデータレイク構築および運用支援
・データウェアハウスおよびデータマートの設計、実装、テスト対応
・データ基盤の運用検討および改善対応
(フルリモート)【Java】業務用空調機向けクラウドシステムの維持・改修
業務委託(フリーランス)
JavaPythonLinuxPostgreSQLSpringAWSDockerSpringBootGlueAuroraLambda
バックエンドエンジニア
作業内容 ・顧客運用作業(システム監視、ログ調査、障害対応)
・機能改修(要件確認/設計/実装/テスト)
・関連ドキュメントの作成・更新
(リモート)【AWS】クラウドサービス案件
業務委託(フリーランス)
AWSGlueAthenaCloudFormationAurora
インフラエンジニア
作業内容 一般企業及び製薬会社様向けに、クラウドサービス(AWS)を利用したインフラシステムの設計、構築、テスト、運用保守を担当いただきます。
(リモート)【AWS、SQL】ポイント事業者向けDWHシステム
業務委託(フリーランス)
SQLAWSGit
インフラエンジニア
作業内容 ・AWS Glue(PySpark)を利用したETL処理開発
・Step Functions/EventBridgeを利用したワークフロー実装・改修
・GCP環境からAWS環境へのデータ移行対応
・移行後のデータ整合性検証、テスト実施
・現行システムと新システムの比較検証
インフラ・データエンジニア募集
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformBigQueryGlueTerraform
作業内容 ・データレイク / ETL 基盤の構築
・AWS Glue(Apache Spark)による分散処理、ETL 開発
・S3 / Lake Formation を用いたデータ管理、セキュリティ設計
・BigQuery ベースの DWH 環境整備
・AWS → GCP 間データ連携パイプラインの最適化
・BigQuery によるデータモデリング、クエリ最適化
・IaC を軸としたマルチクラウド管理
・Terraform による環境差分管理、自動化
・品質管理、運用効率化
・Airflow などのワークフロー管理と CI/CD 整備
・データ品質テストの自動化
【Python/SQL/AWS/一部リモート可】製薬業向けデータ分析基盤の構築・運用支援
業務委託(フリーランス)
PythonSQLPL/SQLOracleAWSSnowflakeGlueLambda
データサイエンティスト
作業内容 【募集背景】
製薬業向けデータプラットフォームの構築・運用プロジェクトにおいて、データ活用基盤の高度化を推進するためのシニアデータエンジニアを募集しています。
【作業内容】
製薬業向けデータプラットフォームの構築・運用プロジェクトにおいて、AWS・Snowflakeを活用したデータパイプラインの設計・開発・最適化を担当していただきます。SQLを用いた大規模データ処理、データパイプラインの構築・運用、システム間データ連携の実現に加え、従来型データウェアハウスとモダンデータスタック双方の知見を活かしながら、データ活用基盤の高度化を推進していただきます。関係者と連携しながらデータ統合およびデータ活用基盤の構築を推進していただきます。
【求める人物像】
大規模データ処理やデータパイプライン設計に主体的に取り組み、関係者と連携しながらデータ活用基盤の高度化をリードしていただける方を求めています。
【ポジションの魅力】
製薬業向けのデータ分析基盤において、従来型データウェアハウスとモダンデータスタックを組み合わせた先進的なデータプラットフォーム構築に関わることができ、データエンジニアとしての専門性を高めていただけます。
【開発環境】
AWS、Snowflake、Databricks、DBT、Fivetran、Oracle、Python、PL/SQLなどを用いたデータプラットフォーム環境です。
【Python】金融業界向けデータ分析基盤再構築プロジェクト
業務委託(フリーランス)
Python
インフラエンジニア
作業内容 ・既存プログラムの改修後テスト
・結合テストの実施
・テストデータ作成
・検証作業およびエビデンス作成
・不具合調査、品質改善対応
・開発メンバーとの各種調整
【AWS】クラウドサービス利用のインフラシステム設計・構築・運用保守PJ
業務委託(フリーランス)
AWSGlueAthenaCloudFormationAurora
インフラエンジニア
作業内容 クラウドサービス(AWS)を利用したインフラシステムの設計、構築、テスト、運用保守を担当いただきます。
現場のPLからの指示で作業を行う形になります。
・インフラ構築・設定変更
(AWSリソース(S3、SQS、RDS等)の追加、パラメータの変更、新規環境の構築など)
・障害対応・技術調査・検証
(接続トラブルの解決、エラーの調査、新しい仕組みの技術検証、情報整理)
・システム移行・環境整理
(旧環境や不要になったリソース(VPN、監視等)の廃止・削除)
・運用保守・定期タスク
(メンテナンス通知の確認、コスト削減対応、復旧訓練、ライセンス更新、定期連絡)
・証明書・セキュリティ管理
(SSL/TLS証明書(ACM等)の期限管理・更新、IAMユーザーや権限の管理)
・EOSL・ライフサイクル管理
(ソフトウェア(Node.js、.NET等)のサポート終了に伴う対応や、資産の棚卸)
(リモート)【Vue.js、SpringBoot(Java)】車両リース業向けWebアプリ開発
業務委託(フリーランス)
JavaJavaScriptReactVue.jsSpringBoot
作業内容 車両リース業向けWebアプリ開発
作業環境:AWS、SpringBoot(Java)、Vue3、Vuetify、TypeScript
作業範囲:基本設計、詳細設計、製造、テスト
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
(リモート)【AWS/Snowflake】製薬業向けデータ分析基盤の構築・運用支援
業務委託(フリーランス)
PythonSQLPL/SQLOracleAWSSnowflakeGlueLambda
インフラエンジニア
作業内容 製薬業向けデータプラットフォームの構築、運用プロジェクトにおいてAWS/Snowflakeを活用したデータパイプラインの設計/開発/最適化を担当
・SQLを用いた大規模データ処理、データパイプラインの構築/運用、システム間データ連携の実現に加え、従来型データウェアハウスとモダンデータスタック双方の知見を活かしながら、データ活用基盤の高度化を推進
・関係者と連携しながらデータ統合およびデータ活用基盤の構築を推進
・開発環境:SQL/Oracle、AWS、Snowflake、Databricks、Python
【SQL、Linux】証券会社向けデータ連携システム/契約書生成システム保守
業務委託(フリーランス)
PythonSQLGoLinuxPostgreSQLAWSGlue
バックエンドエンジニア
作業内容 既存のデータ連携システムおよび契約書生成システムの改修/保守
【Snowflake】データ基盤の要件定義支援案件
作業内容 ・火力発電所のプラントデータを対象に、Snowflakeを中心としたデータ基盤の要件定義を支援する案件です。
・部門ごとに乱立しているデータ環境を整理し、データの一元管理と活用を進めるための設計・検証を行います。
・Snowflakeのパイロット環境設定、データ収集・連携検証、テーブルやタスク、プロシージャの設計を担当いただきます。
【Python、SQL】クレジット系情報連携システム移行対応
業務委託(フリーランス)
PythonSQL
バックエンドエンジニア
作業内容 汎用機で構成されている現行システムを次期システムへ移行。
現行システムから受けているI/Fを次期システム用に対応。
機能移管によりインターフェースやデータマート処理を作成。
現行仕様の解析を行い、次期システムの要件検討から対応。
【Python(Web開発系)】AWSマネージドサービス活用システムの上流SE・アプリケーション支援
業務委託(フリーランス)
PythonNode.jsAWSVue.js
SE
作業内容 【案件概要】
AWSマネージドサービスを利用して運営しているシステムにおける上流SE・アプリケーション支援案件です。
顧客との打ち合わせを通じて要望や課題をヒアリングし、業務要件を整理します。
整理した内容を要件・仕様として開発側へ落とし込み、システム改修や機能追加を推進します。
AWSインフラの構築・運用ではなく、AWS上で稼働するアプリケーションの上流工程を中心に担当します。
【作業内容】
・顧客との打ち合わせ、要望および課題のヒアリング
・業務要件の整理、要件定義および上位設計
・開発チーム向けの要件、仕様への落とし込み
・既存アプリケーションの改修、調査および機能追加支援
・開発チームとの連携、進捗確認および課題対応
(リモート)データレイク層エンジニア(AWSデータ基盤開発)
業務委託(フリーランス)
AWSSnowflakeLambda
作業内容 既存のWebシステムを高度化・AI化するため、新たにシステムを構築するプロジェクト。
本案件ではデータレイク層の開発を担当し、AWSの各種マネージドサービスを活用して、主にデータ加工・連携処理の実装を行う。
【Salesforce/Node.js】保険会社の顧客向けシステムの運用保守・開発
業務委託(フリーランス)
Node.jsGitSalesforce
作業内容 ・保険会社の顧客向けシステムにおける運用保守と、新機能・新商品のエンハンス開発を担当します。
・Salesforce領域とNode.js領域の両方を扱い、基本設計から開発、テスト、障害対応、問い合わせ対応まで幅広く対応いただきます。
・オフショアとの協業もあり、レビューやサポートを行いながら進める想定です。
【SQL/Linux/AWS】 維持保守(AWSマネージドサービス基盤)案件
業務委託(フリーランス)
SQLLinuxUnixAWS
作業内容 ・通信系システムにおけるAWSマネージドサービス基盤の維持保守案件です。
・既存システムの問い合わせ対応、データ調査、障害切り分けなどの運用保守に加え、機能追加・修正といったエンハンス対応も発生します。
・AWS上で稼働する複数システムを対象に、関係者と調整しながら自走して課題解決を進められる方が求められます。
・今後は新規構築や既存案件の拡張も見込まれています。
【データ基盤】医療DX事業会社におけるDatabricks×Terraformを用いたデータ基盤エンジニア募集
作業内容 医療業界向けDXサービスを展開する事業会社のデータ基盤チームにて、データの利活用の攻めとデータセキュリティの守りの両方の視点を持って、正社員と一緒に中長期に渡って持続可能なデータプラットフォームの開発・運用を担っていただける方を募集しております。
様々なステークホルダーと連携しながら、横断的に影響力のあるデータプラットフォームの機能開発に、要件定義から開発、運用まで一貫して携わっていただきます。
下記のような業務を通じて、全社横断的なデータプラットフォームの開発・運用を担っていただきます。
・データメッシュを実現するためのデータプラットフォームの設計・開発・運用
データメッシュを実現するためには、各ドメインのエンジニアが、自分たちのリソース管理を自分たちで行えるようにする必要があります。
各ドメインのエンジニアがリソース管理をセルフサービスで簡単に行えるような仕組みをTerraformなどを使って設計・開発・運用していただきます。
・データの取り込みや加工のデータパイプラインの設計・開発・運用
各ドメインのエンジニアが高品質なデータを簡単に取り込んだり加工できるように、標準化されたデータの取り込みや加工のデータパイプラインをDatabricks Lakeflowなどを使って設計・開発・運用していただきます。
・運用業務の改善・自動化
データプラットフォームの運用業務の改善や自動化を行っていただきます。
開発環境:
データ分析基盤:Databricks
データソース:AWS(RDS, DynamoDB, Glue Data Catalog, S3, Kinesis Streams)、その他(Kintone, Trello, GCS)
Infrastructure as Code:Terraform
CI/CD:Databricks Data Asset Bundles、GitHub Actions
LLM:OpenAI、Gemini、Claude (Amazon Bedrock)
AI SaaS:GitHub Copilot、Dify、Cursor、Devin、NotebookLM
チーム構成:
・EM/PdM:1名
・エンジニア(正社員):1名
・エンジニア(業務委託):2名
【クラウドエンジニア(AWS)】金融機関向け全銀システムAWS開発
作業内容 【業務内容】
全銀システムにおけるAWS Glueを用いた開発作業を担当します。基本設計からテストまでの工程に携わり、金融機関向けシステム開発の知見を活かしてバッチ処理システムの設計や実装、テストを行う業務です。基本リモートで作業が可能ですが、必要に応じて出社して作業を行います。
【作業内容】
・AWS Glueを用いたバッチ処理システムの基本設計、詳細設計
・AWS Glueジョブの開発、実装
・AWS Glueジョブのテスト、デバッグ
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【クラウドエンジニア(AWS)】データ分析基盤構築サービスのAWSインフラ構築
業務委託(フリーランス)
AWSGitHubRedshiftGlueLambda
作業内容 【業務内容】
情報通信業界向けのデータ分析基盤構築において、AWSを活用したインフラの設計・構築やCI/CD整備、ドキュメント作成、関係各所との調整業務をご担当いただきます。RedshiftやGlue、Step Functionsを用いたデータパイプライン構築にも携わります。
【作業内容】
・AWSを用いたインフラ設計・構築
・Redshift、Glue、Step Functionsによるデータパイプライン構築
・CI/CD環境の整備
・関係各所との調整業務
・構築手順や設計内容のドキュメント作成
【Python(Web開発系)】生命保険向けPythonシステム開発
業務委託(フリーランス)
PythonAWSGlueLambda
作業内容 【業務内容】
外資系生保向けの新システム開発において、Pythonを用いたアプリケーション開発を中心に、AWS環境でのインフラ構築・運用や既存システムの刷新、機能追加対応などを行います。
【作業内容】
・Pythonを用いたアプリケーションの開発・実装
・AWS(S3, lambda, Glue, Kinesis)を用いたインフラ構築・運用
・API設計・開発(必要に応じて)
・SQLを用いたデータベース設計・操作(必要に応じて)
・Gitを用いたバージョン管理
【Python(Web開発系)】予防接種データ管理システム開発
業務委託(フリーランス)
PythonAWSGlueCloudFormation
作業内容 【業務内容】
官公庁向け予防接種関連データ管理システムの開発として、AWS上でデータを管理・配信するシステムの設計から試験までを担当します。
【作業内容】
・AWS S3を用いたデータストレージ設計・実装
・AWS EventBridgeを用いたイベント駆動型アーキテクチャ設計・実装
・AWS StepFunctionsを用いたワークフロー設計・実装
・AWS Glueを用いたデータ変換処理設計・実装
・AWS CloudFormationを用いたインフラ構築・管理
・Python(Web系)を用いたAPI開発
・システムテストの実施
【週5日/一部リモート/AWS】インフラエンジニア - 物理サーバ環境からAWSへの移行プロジェクト
業務委託(フリーランス)
OracleAWSJP1RedshiftGlue
インフラエンジニア
作業内容
【クラウドエンジニア(AWS)】金融プラットフォーム向けAWSクラウド構築・運用
業務委託(フリーランス)
AWSGlueCDKLambda
作業内容 【業務内容】
某メガバンク向けの金融プラットフォームにおけるAWSクラウド環境の構築・運用および既存システムの拡張・改善を行い、要件定義から設計・構築・運用までインフラチームの一員として全工程を担当します。
【作業内容】
・AWS CDKを用いたインフラ環境の設計・構築
・Lambda関数、Glueジョブ、SageMakerモデルなどのAWSサービスを用いた機能実装
・ECS、EC2、RDSなどのAWSマネージドサービスの運用・保守
・アジャイル開発における2週間スプリントでのインフラ環境のエンハンス対応
・インフラ環境に関するドキュメント作成
【Python(Web開発系)】銀行向け情報系システム基盤の構築プロジェクト
業務委託(フリーランス)
PythonSQLAWSGlueLambda
作業内容 【案件概要】
銀行の情報系基盤構築プロジェクトに参画します。
AWS環境を用いた情報系基盤の構築とデータパイプライン設計を担当します。
各システムからのデータ収集、加工、データマート作成、ジョブ作成とテストを実施します。
ジョブ設計書、テーブル設計書、ETL設計書のレビューも行います。
【作業内容】
・AWS環境下でのデータパイプライン構築(EventBridge、StepFunctions、Lambda、Glue等)
・各システムからのデータ収集(インターフェースレイヤ)
・データ登録、加工、データマート作成(物理レイヤ)
・ジョブ作成およびテストの一気通貫対応
・ジョブ設計書、テーブル設計書、ETL設計書のレビュー
【クラウドエンジニア(AWS)】大手旅行業向けデータ集計分析システム保守運用
業務委託(フリーランス)
MySQLAWSRedshiftGlueLambda
作業内容 【業務内容】
大手旅行業向けのデータ集計・分析システムの保守運用を担当します。AWS環境を利用したアプリケーションの運用管理やデータベース・SQLを用いたデータ処理、シェルスクリプトを活用した自動化作業などを行います。
【作業内容】
・アプリケーションの保守運用
・AWS環境でのシステム管理
・データベース・SQLを用いたデータ処理
・シェルスクリプトによる各種自動化作業
【データ分析系(Python/SQL/R/BI)】大手SIベンダー向けデータ連携基盤の構築プロジェクト
作業内容 【案件概要】
大手SIベンダー案件におけるデータ連携基盤構築プロジェクトです。
既存システムとのデータ連携・データ変換・データ品質管理を実施し、データ活用基盤の整備を目指します。
ETLおよびデータ基盤開発の知見が活かせる案件です。
【作業内容】
・Amazon Web Services Glueを用いたETLジョブ設計・開発
・Pythonによるデータ変換スクリプト作成
・データ連携基盤のテストおよび検証
・データ品質管理および連携仕様対応
・データパイプラインの最適化および運用支援
【クラウドエンジニア(AWS)】銀行間決済システムバッチ処理開発
作業内容 【業務内容】
銀行間決済に関わるシステムにおいて、バッチ処理の設計開発業務を担当していただきます。データ処理の効率化を目的とし、クラウド環境上でのバッチ処理基盤の設計から実装までを一貫して対応します。基本設計から詳細設計までを担い、システム全体の最適化と安定稼働を意識した開発を行っていただきます。
【作業内容】
・バッチ処理の基本設計および詳細設計
・バッチ処理の実装および開発
・データ処理ジョブの作成およびテスト
・ジョブのデプロイおよび動作確認
・処理効率改善に向けた最適化対応
【データ分析系(Python/SQL/R/BI)】受発注管理システムETL再構築
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 【業務内容】
受発注管理システムにおいて、需要予測システムから出力されたデータを抽出・変換し、DWHからデータマートへの登録を行うETLの設計および開発を担当していただきます。既存のPython Shell実装では性能要件を満たさなかったため、VisualETLおよびPySparkを用いた再構築を行います。
【作業内容】
・ETL設計・開発
・Python Shellでの既存ETL分析
・VisualETLおよびPySparkでのETL再構築
・Redshiftへのデータ登録処理実装
・性能改善・チューニング
・単体・結合テスト実施
・関連資料作成・更新
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。