Sparkのフリーランス案件・求人一覧
リセット
Sparkの案件・求人一覧
1-40 / 全 659 件
- NEW
【週5】【Python、SQL】メーカー向けデータ利活用支援
750,000円/月
業務委託(フリーランス)
東京都
東京駅
PythonSQLAWSRedshiftGlue
バックエンドエンジニア
作業内容 下記ご確認の上、ご応募お願いいたします。
ーーーーーーーーーーーーーーーーーー
・本案件は、日本人限定
・首都圏の顧客先に出社可能な方
・週5日（月〜金）で稼働可能な方
＊副業、請負案件ではございません。
ーーーーーーーーーーーーーーーーーー
・python(実行はRedshift)からSparkSQLへの移行案件
・SparkSQLの移行実装は終えているが、不具合が発生しているためその修正及び試験を実施
・環 境：AWSGlue／Redshift／SparkSQL／python
-SQL実装経験（サブクエリ・外部結合を構築可能）
【Spark Gear】ソーシャルゲーム系3Dエフェクト制作案件
600,000円/月
東京都
秋葉原駅
SparkUnity
エフェクトデザイナー
作業内容 ソーシャルゲームの3Dエフェクト制作案件に携わっていただきます。
・主に下記作業をご担当いただきます。
-Spark Gearを用いた必殺技及びバトル演出の3Dエフェクト制作
-ゲーム画面における質感及び演出表現の調整、クオリティアップ
-演出担当や開発チームと連携したクオリティ管理及び実装
AI・データ領域におけるデータ基盤構築、データ活用案件
600,000 〜 1,000,000円/月
業務委託(フリーランス)
東京都
リモート
PythonSQLSparkAWSAzureGoogle Cloud PlatformRedshiftBigQueryTableauSnowflake
作業内容 ・AI・データ領域におけるデータ基盤構築、データ活用案件の実装要員募集です。
・データ収集・統合、ETL/ELT処理、データパイプライン構築を中心に、DWH・Lakehouse上でのデータマートや分析用データセットの整備を担当いただきます。
・データ品質や処理性能の改善、BIダッシュボード・レポート構築も含まれます。
複数案件の並行体制です。
言語：SQL、Python
FW：dbt、Spark、Airflow
データベース：Snowflake、Databricks、BigQuery、Redshift
インフラ：AWS、Azure、GCP
開発体制：複数案件並行の実装体制
その他：Tableau、Power BI、Looker
【Python(Web開発系)】Azure SynapseからAzure Databricksへの移行・データ基盤開発
1,000,000円/月
業務委託(フリーランス)
東京都
大崎駅
PythonSparkAzureApache
作業内容 【案件概要】
Azure SynapseからAzure Databricksへの移行に伴うデータ基盤開発プロジェクトです。
Azure、Databricksを用いたシステムの要件定義から設計、開発まで一連の工程を担当します。
テーブル定義・開発やETL処理の設計・開発を行い、データ連携基盤の構築を推進します。
単体テスト、結合テストまで対応し、移行後のデータ基盤の品質確保を行います。
【作業内容】
・Azure、Databricksを用いたシステム要件定義、設計および開発
・Azure SynapseからAzure Databricksへの移行対応
・テーブル定義書の作成およびテーブル開発
・ETL処理の設計、開発およびデータ連携対応
・単体テスト、結合テストおよび移行後の動作検証
【クラウドエンジニア(AWS)】データ処理基盤向けGlue移行の開発支援
650,000円/月
業務委託(フリーランス)
東京都
東京駅
ScalaSparkAWSGlue
作業内容 【案件概要】
データ処理基盤において、現行EMRで実装されているデータ処理機能をAWS Glueへ移行するプロジェクトです。
既存処理の移行に加え、Glue環境に適した構成への見直しや周辺機能の改修も実施していただきます。
データ処理基盤の最適化および運用効率向上を目的とした案件です。
既存システムの仕様を理解しながら、移行計画に沿って開発を進めていただきます。
AWSサービスを活用したデータ基盤構築経験を活かせるポジションです。
【作業内容】
・EMRからAWS Glueへのデータ処理移行対応
・既存処理の調査および移行設計対応
・Glue環境向けの処理実装および改修
・周辺機能の変更および連携機能の改修対応
・テスト実施、不具合修正および品質確認対応
【データ分析系(Python/SQL/R/BI)】大手メーカー向けデータ利活用ETLシステムの改修プロジェクト
900,000円/月
業務委託(フリーランス)
東京都
品川駅
PythonSQLHadoopSparkAWSGlue
作業内容 【案件概要】
大手メーカーにおけるデータ利活用を目的とした、ETLシステムの改修およびインターフェースの追加・変更案件です。
AWS Glueを中心としたデータ基盤上で、データ加工・編集プログラムの開発や運用支援を行います。
既存システムのソース解析や仕様把握から、要件定義・設計・開発・テストまで一貫して担当します。
必要に応じてPower BI等を活用したデータ可視化にも携わり、データ活用基盤の改善を推進します。
【作業内容】
・既存ETLシステムのソース解析および仕様把握
・データ加工・編集プログラムの設計・実装
・インターフェースの追加・変更およびSQL/SparkSQLによるデータ処理開発
・AWS Glue/S3/IAMを活用したデータ基盤の開発・運用支援
・単体・結合テスト、改修対応およびPower BI等によるデータ可視化支援
【Python(Web開発系)】自動車業界向けビッグデータ分析基盤開発
750,000円/月
業務委託(フリーランス)
愛知県
名古屋駅
PythonAWS
作業内容 【案件概要】
自動車関連サービスで利用される車両データ分析基盤の構築プロジェクトです。
車両から収集される大量データを蓄積・加工し、分析やデータ活用を可能にする基盤整備をご担当いただきます。
AWS上の分散処理基盤やストリーミング処理技術を活用し、データ収集からDWH連携までのパイプライン開発を行う案件です。
データ活用環境の高度化や処理性能改善を通じて、サービス価値向上を支援していただきます。
【作業内容】
・車両データ分析基盤におけるデータ収集、蓄積、加工処理の開発
・DWH連携に向けたデータパイプラインの設計、構築
・Pythonを用いたデータ処理プログラムの開発
・AWS（EMR、EKS、Kafka、Spark等）を利用した基盤開発
・データストレージ、処理フローの設計および改善対応
【データ分析系(Python/SQL/R/BI)】インターネット事業会社向け全社データ分析基盤の構築
950,000円/月
業務委託(フリーランス)
東京都
渋谷駅
PythonSQLSparkAWSApacheGoogle Cloud PlatformTerraform
作業内容 【案件概要】
インターネット事業を展開する東証プライム上場企業において、社内に分散する複数商材のデータを統合し、全社データ分析基盤を構築するプロジェクトです。
データ分析基盤のアーキテクチャ設計・構築からデータパイプライン開発、インフラ管理まで幅広くご担当いただきます。
さらに、AIからデータへアクセスするためのMCP/Agent基盤の構築にも携わっていただきます。
データエンジニアとして各領域を主体的にリードし、全社的なデータ活用の推進に貢献していただきます。
【作業内容】
・全社データ分析基盤のアーキテクチャ設計および構築
・社内に分散する商材データの統合およびデータ基盤整備
・データパイプラインの設計および開発
・クラウドインフラの設計、構築および管理
・MCP/Agentを活用したAIデータアクセス基盤の構築
【データエンジニア】 データパイプライン構築運用案件
950,000円/月
業務委託(フリーランス)
東京都
六本木駅
JavaPythonScalaSparkBigQuery
データサイエンティスト
作業内容 ・各種データソースからの収集、加工、蓄積を担う
データパイプラインの設計、構築、運用に携わって頂きます。
- データ分析、機械学習向け基盤の設計、整備
- バッチおよびリアルタイム処理におけるワークフローの設計、最適化
- データ品質管理および可観測性の向上に向けた仕組み構築
- ビジネスサイドや分析チームと連携した要件定義および仕様策定
【データエンジニア】データ分析・基盤構築
900,000円/月
業務委託(フリーランス)
東京都
渋谷駅
OracleSparkApacheGoogle Cloud PlatformBigQuery
作業内容 ・全社データ分析基盤のアーキテクチャ設計・構築
・データレイク / DWH（BigQuery）基盤の設計・運用
・ETL / ELTパイプラインの設計・開発
・クロスクラウドデータ連携（OCI → GCP）の設計・実装
・データモデリング（OBT / mart）の設計
・Terraformを用いたIaCによるインフラ管理
・データ基盤に関わるネットワーク・セキュリティ設計（IAM / VPC / データガバナンス）
・AIデータアクセス基盤（MCP / Agent）の構築
設定していない条件はありませんか？
スキル･リモート･単価などで絞り込み、
効率よく案件を探せます。
(リモート)【データエンジニア】データカタログシステムの保守・開発
600,000円/月
業務委託(フリーランス)
東京都
神谷町駅
PythonSQLHadoop
作業内容 ・ETL基盤（Airflow、Python、Kubernetes）を利用した、データ加工ジョブの開発/改善業務
・分析用データ、MLモデル向けFeatureデータ、決済・金融関連データなどのデータの開発、保守運用業務
・MLツールを利用したベクトルデータ、推定属性データの開発、保守運用業務
・プロダクト運営（会議への参画・ファシリテート、ユーザ問い合わせ対応、システムアラート対応、など）
・作業環境：Laketahoe
・クエリエンジン：Trino、Spark
・ETLツール：Managed Airflow、ACP、IU Vinitus
(リモート)【ITPM】ビッグデータ基盤構築PJ／インフラ基盤PM
900,000円/月
業務委託(フリーランス)
東京都
品川駅
AWSAzure
PM
作業内容 ・自動車メーカー向けビッグデータ基盤構築PJにおけるインフラ基盤PM／リード
・次世代インフラ基盤のビジョン策定、ロードマップ提案
・データ量増加やAI活用を見据えたクラウド／ハイブリッド基盤の最適化提案
・インフラ領域の進捗、課題、リスク、品質管理
・顧客、アプリ開発チーム、外部ベンダーとの調整、合意形成
・Platform Engineeringの推進
・インフラ自動化、共通基盤の高度化
【インフラ】ビッグデータ基盤構築
700,000円/月
業務委託(フリーランス)
東京都
品川駅
LinuxAzure
インフラエンジニアPM
作業内容 下記ご確認の上、ご応募お願いいたします。
ーーーーーーーーーーーーーーーーーー
・本案件は、日本人限定
・首都圏の顧客先に出社可能な方
・週5日（月〜金）で稼働可能な方
＊副業、請負案件ではございません。
ーーーーーーーーーーーーーーーーーー
自動車メーカーの大規模データ集約・利活用プロジェクトにて、インフラ基盤のビジョン策定・ロードマップ提案、インフラマネジメント、新規案件の設計・構築・検証、本番環境の安定運用支援などをご担当いただきます。
【Python(Web開発系)】AI活用データトラスト基盤PaaSのPython開発支援
800,000円/月
業務委託(フリーランス)
東京都
渋谷駅
PythonAWSGitHub
作業内容 【案件概要】
AIに読み込ませるデータの正しさや信頼性を担保するデータトラスト基盤のPaaS開発プロジェクトです。
複数のスクラムチームの一つに参画し、要件定義完了後の実装フェーズから開発メンバーとして携わっていただきます。
スクラムマスターのもと、チームメンバーと連携しながら開発を推進していただきます。
他チームとのAPI連携なども発生するため、チーム間で連携しながらサービス開発を進めていただくポジションです。
【作業内容】
・Pythonを用いたデータトラスト基盤PaaSの実装・開発
・要件定義済みの機能に対する設計・製造・テスト
・AI活用データの信頼性を担保する機能の開発
・他スクラムチームとのAPI連携および仕様調整
・スクラムマスターやチームメンバーと連携した開発推進
【データ分析系(Python/SQL/R/BI)】大手インターネット事業会社向けデータ分析基盤の構築
850,000円/月
業務委託(フリーランス)
東京都
渋谷駅
PythonSQLBigQuery
作業内容 【案件概要】
東証プライム上場の大手インターネット事業会社にて、データ分析基盤の構築を推進する案件です。
社内に分散している複数の商材データを統合し、データの活用・分析を可能にする基盤を整備します。
データエンジニアとして、PythonやSQLを用いたデータ処理・連携や、データ分析基盤の設計・構築に携わっていただきます。
データを活用した事業分析や意思決定を支える仕組みづくりを通じて、データ活用の高度化を推進します。
【作業内容】
・社内に分散する複数商材のデータ統合
・PythonやSQLを用いたデータ抽出・加工・連携処理の開発
・データ分析基盤およびデータパイプラインの設計・構築
・分析用途に応じたデータモデリングやデータ構造の最適化
・データ基盤の運用改善および品質向上
【Python(Web開発系)】学習支援サービス向けデータ分析基盤保守開発
900,000円/月
業務委託(フリーランス)
東京都
東京駅
PythonSQLSparkAzureApache
作業内容 【業務内容】
小中学生向け学習支援サービスのデータ分析基盤において、既存システムの理解と機能把握を行いながら、保守対応や機能追加開発を実施します。クラウドサービスやSQL、Python(PySpark)、Apache Sparkを活用して安定的な分析基盤運用と開発を担当します。
【作業内容】
・既存システムのソースコード、設計書、ドキュメントをもとにシステムの動作を理解
・Azure Data Factoryを用いたデータパイプラインの保守・開発
・Azure Data Lake Storageへのデータ格納、管理、処理
・Azure Databricksを用いたデータ分析処理の開発・保守
・SQLを用いたデータクエリ・加工
・Python(PySpark)とApache Sparkを用いたバッチ処理、データ変換、分析処理
【DBエンジニア（SQL全般）】データ加工基盤刷新データベース開発
1,200,000円/月
業務委託(フリーランス)
東京都
東京駅
SQL
作業内容 【業務内容】
大手SIer向けに老朽化したデータ加工基盤の刷新を目的とし、ApacheSparkで構築された既存システムをDatabricksへ移行する業務です。EOSL対応の一環として、データ加工処理基盤のマイグレーションを推進し、Databricksを活用した新たな開発標準の策定と現場への導入を行います。移行計画の立案から実行管理、チームリードまでを担い、安定したデータ基盤の再構築と運用性向上を実現します。
【作業内容】
・ApacheSparkで記述された既存データ加工処理のDatabricks移行
・Databricks向け開発標準の策定と導入
・移行作業全体の計画立案と実行管理
・プロジェクト進捗管理と課題解決
・メンバーへの作業指示とチームリード
【データ分析系(Python/SQL/R/BI)】大手企業向けデータ分析基盤開発支援
750,000円/月
業務委託(フリーランス)
福岡県
呉服町駅
PythonSQLGoScalaSpark
作業内容 【案件概要】
・大手企業向けデータ分析基盤およびETL基盤のシステム開発支援。
・データ活用を目的としたアーキテクチャ検討から設計・実装までを担当。
・ビッグデータ分析・加工のための分散処理基盤を構築。
・Python／SQL／クラウド基盤／BIなどを活用したデータエンジニアリング業務。
【作業内容】
・データ分析基盤／ETL基盤におけるアーキテクチャ検討（要件整理、方式検討、ツール選定）
・データレイク／DWH／マート構成の設計（スキーマ設計、パイプライン構成、データフロー設計）
・Python／SQLを用いたETL処理の実装（データ抽出、加工、統合、ロード処理の自動化）
・分散処理基盤（Spark、Hadoop、クラウドネイティブ基盤等）の構築・パフォーマンス最適化
・各種データパイプラインのジョブ設計・バッチ開発
・データ品質管理（クレンジング、検証ロジック実装、異常検知処理の整備）
・BIツール向けデータマートの整備、レポート用データセット設計
・基盤運用に向けたドキュメント作成（設計書、データフロー図、運用手順書など）
【開発環境】
・OS（インフラ）／クラウド(GCP、IaaS、PaaS、FaaS)、Spark、Kubernetes、Linux
・DB／Cassandra、Redis、Elasticsearch、mySQL、PostgreSQL
・ツール／JIRA、Confluence、GitLab、Slack、GoogleWorkspace
・運用／IaC(Terraform、Ansible、Helm)、CI/CD(GitLabCI、kubectl)
【DBエンジニア（SQL全般）】電力データ管理システムのクラウド移行と刷新
1,000,000円/月
業務委託(フリーランス)
東京都
東京駅
JavaSQL
作業内容 【業務内容】
電力会社向けのロードカーブ作成システムの刷新を担当します。スマートメーターや子局からの計測値を用いて既存システムをクラウド環境へ移行し、計算ライブラリをSparkからSnowflakeに変更してシステムの性能向上を図ります。
【作業内容】
・既存システムのSnowflake化対応
・クラウド環境へのシステム移行
・ロードカーブ作成システムの設計・構築
・計算ライブラリの変更作業
・オンプレミス環境からクラウド環境へのデータ移行
【Python(Web開発系)】既存システムのETL処理改善プロジェクト
1,000,000円/月
業務委託(フリーランス)
東京都
品川駅
PythonMySQLMongoDBSparkAWSJIRARedshiftKafkaLambda
作業内容 【案件概要】
大規模データ処理基盤の構築および既存システムのETL処理改善を行うプロジェクトです。
Pythonを用いたETL開発チームのリーダーとして、要件定義からテストまで幅広い工程を担当します。
SparkやKinesisなどを活用したデータ処理基盤の構築に携わります。
AWS環境での開発を前提とし、アジャイル開発手法でプロジェクトを進めます。
【作業内容】
・ETL処理の詳細設計および設計内容の整理
・Pythonを用いたETL処理のコーディング
・ワークフローシナリオの実装
・単体テスト観点作成およびテストスクリプト作成、実施
・必要に応じたシミュレーターやスタブの開発
設定していない条件はありませんか？
スキル･リモート･単価などで絞り込み、
効率よく案件を探せます。
【サーバー（Linux系）】医療ビッグデータプラットフォーム構築
1,600,000円/月
業務委託(フリーランス)
東京都
春日駅
SQLLinuxPostgreSQLSparkAWSRedshiftGlueAurora
PL
作業内容 【業務内容】
医療ビッグデータを活用したデータプラットフォーム構築において、プロジェクトリーダーとしてAWS環境での設計、構築、移行、運用を担当します。システム化構想や要件定義から参画し、データベース設計やステークホルダーとの合意形成、ベンダー管理、運用準備まで幅広く携わります。
【作業内容】
・システム化構想や要件定義からのプロジェクト立ち上げ参画
・Redshift、Aurora PostgreSQL、S3、Spark等を用いたデータベース物理設計
・医療データのデータカタログ設計、抽出設計、実データ調査を含む論理設計
・プロジェクトメンバーやベンダー、データ提供元との合意形成
・フェーズレビュー支援（ゲートレビューによる品質確認）
・ベンダーコントロール（設計レビュー、成果物レビュー、受入テスト実施）
・Shell、PowerShell、Pythonを用いた設計作業
・運用準備（運用手順書作成、社内勉強会実施、関係者調整）
【Java(その他FW)】カード基幹系システム向けデータ中継システムの刷新プロジェクト
700,000円/月
業務委託(フリーランス)
東京都
大崎駅
JavaWindowsLinux
作業内容 【案件概要】
クレジットカードシステムおよび加盟店データ中継システムの刷新プロジェクトです。
ホストシステムからHadoop基盤への移行により、大規模データ処理の高速化と効率化を図ります。
カードデータの分析基盤を構築し、安定性と拡張性の向上を目指します。
最新技術を活用し、安全性と信頼性を備えた基幹システムの再構築を推進します。
【作業内容】
・Javaを用いた基本設計および詳細設計
・Hadoop（HDFS、Hive）を活用したデータ中継システムの設計開発
・ホストシステムからのデータ移行プログラム開発
・Sparkを用いたデータ処理プログラム開発
・Parquet形式でのデータ保存設計および管理
・各種テストの実施および本番リリース支援
【Python(Web開発系)】流通業向けAPI開発とAWS環境構築
750,000円/月
業務委託(フリーランス)
神奈川県
天王町駅
JavaPythonAWSSpringBoot
作業内容 【業務内容】
流通業向けアプリケーションの開発を担当し、既存システムの機能拡張や改善を行います。JavaとSpringBootを用いたAPI開発や、AWS環境でのWorkspaces自動構築およびネットワーク設定変更を通じてシステム運用を支援します。
【作業内容】
・JavaとSpringBootを用いたREST APIの設計、開発、テスト
・AmazonWorkspacesの自動構築スクリプト作成と実行
・AWS環境でのネットワーク設定変更
【クラウドエンジニア(その他クラウド)】データウェアハウス移行と基盤構築
800,000円/月
業務委託(フリーランス)
東京都
東京駅
SQLAzure
作業内容 【業務内容】
既存のデータウェアハウスから新しいクラウド基盤へのデータ移行と構築を担当します。Azure Data Factoryを用いたデータ統合・変換処理の設計や実装、移行作業に伴う検証やテスト工程にも携わります。
【作業内容】
・既存データウェアハウスからAzure Data Factoryへのデータ移行
・Azure Data Factoryを用いたデータ変換処理の設計・実装
・SQLを用いたデータ抽出・加工
・各種システムとのデータ連携テスト
【Java(Spring)】メガバンク向けAMLパッケージのカスタマイズ開発
1,200,000円/月
業務委託(フリーランス)
東京都
東京駅
JavaSpring
作業内容 【案件概要】
海外ベンダー製AMLパッケージをメガバンク向けにカスタマイズするプロジェクトです。
海外ベンダーの日本進出に伴う案件で、他の日系金融機関への導入実績もあり今後の拡大が見込まれます。
参画前に2ヶ月間の英語オンライン研修を受講いただき、プロジェクト理解を深めてから参画いただきます。
金融機関の本番データを扱うため、東京駅近辺の客先常駐にて業務を行います。
【作業内容】
・AMLパッケージのカスタマイズ設計および開発
・Java（Spring）を用いた機能改修および追加開発
・海外ベンダーとの仕様確認および調整
・各種テスト対応および不具合修正
・ドキュメント作成および導入支援
【Java(その他FW)】会計システムの機能開発および運用保守
1,000,000円/月
業務委託(フリーランス)
東京都
半蔵門駅
JavaJavaScriptHTMLSpringAngularAWS
作業内容 【業務内容】
会計システムにおける機能開発および運用保守業務をご担当いただきます。既存システムの機能拡張や不具合修正を行いながら、安定したサービス提供を支えます。バックエンドおよびフロントエンドの開発に加え、データベース設計やインフラ構築運用にも携わり、システム全体の品質向上に貢献していただきます。また、大規模データ処理を考慮した設計および開発を行い、パフォーマンス向上にも取り組みます。
【作業内容】
・バックエンド開発
・フロントエンド開発
・データベース設計
・データベース開発
・インフラ構築
・インフラ運用
・パイプライン構築
・パイプライン運用
・結合テスト
・保守対応
【クラウドエンジニア(AWS)】AWSデータ確認を中心としたテスト案件
850,000円/月
業務委託(フリーランス)
東京都
六本木一丁目駅
AWSLambda
作業内容 【業務内容】
開発中のAWS環境のシステムにおいて、外部データソースとの疎通確認や前処理・分析処理の結合テストを実施し、安定稼働に向けた検証作業を行います。
【作業内容】
・AWS外部のデータソースとの疎通確認（結合テスト）
・前処理パイプライン（Step Functions、EMR、Spark）の結合テスト、サイクルテスト、シナリオテスト
・Lambdaを用いた前処理・分析処理の検証
【稼働日数】週5日
【リモート日数】週1のMTGで出社有
【データ分析系(Python/SQL/R/BI)】データ蓄積基盤構築プロジェクのデータパイプラインの設計・構築
850,000円/月
業務委託(フリーランス)
東京都
三田駅
PythonSQLAWSGlueAthenaLambda
作業内容 Databricks on AWS 環境におけるデータ蓄積基盤構築プロジェクトにて、データパイプラインの設計・構築を担当いただきます。
データエンジニアリングの実務経験を活かし、最適なデータフロー設計と処理基盤の整備を推進できる方を募集しています。
【業務内容】
Databricks on AWS 環境でのデータパイプライン設計・構築
データ蓄積基盤の要件定義・設計支援
各種データソースからのデータ収集・加工・統合処理
性能最適化および運用性向上に向けた改善提案
【稼働日数】週5日
【リモート日数】フルリモート
【Python(Web開発系)】設備事業向け統合データ基盤の構築プロジェクト
800,000円/月
業務委託(フリーランス)
東京都
品川駅
Python
作業内容 【案件概要】
既存のTableau環境に対し、Databricksを追加採用し、社内外データを一元的かつ効率的に管理する統合データ基盤を構築するプロジェクトです。
現状はTableauのみが導入されており、分析基盤の拡張およびデータ活用高度化が課題となっています。
Databricksを中核としたデータ基盤を新たに構築し、データレイクとDWH（データウェアハウス）を統合します。
あわせて、周辺のデータ準備処理やワークフローを整備し、持続的に運用可能なBI基盤の実現を目指します。
【作業内容】
・Databricksを活用したデータ基盤環境の設計および構築
・データレイクおよびDWHの統合設計
・Pythonを用いたデータパイプラインの設計および構築
・データ準備処理およびワークフローの整備
・既存Tableau環境と連携したデータ活用基盤の構築
【Python(Web開発系)】道路マネジメントプラットフォームのバックエンド・データ基盤開発支援
1,000,000円/月
業務委託(フリーランス)
東京都
三田駅
JavaPythonSQLNode.jsGit
バックエンドエンジニア
作業内容 【案件概要】
道路マネジメントプラットフォームの構築フェーズにおけるバックエンドおよびデータ基盤開発案件です。
データ志向のシステム設計を前提に、複数データの統合およびモデリングを行います。
社内外システムとの連携を含めたプラットフォーム全体の設計・開発に携わっていただきます。
大量データを扱うデータ基盤の構築を推進するポジションです。
【作業内容】
・Python、Java、Node.jsいずれかを用いたバックエンド開発
・REST APIの設計および開発
・SQLおよびRDBを用いたデータ操作および設計
・ETLおよびデータパイプラインの設計および構築
・大量データ処理およびパフォーマンス改善
・Gitを用いたチーム開発対応
設定していない条件はありませんか？
スキル･リモート･単価などで絞り込み、
効率よく案件を探せます。
【サーバー（Windows/系）】インターネット企業向け新規DWH構築プロジェクト
900,000円/月
業務委託(フリーランス)
東京都
品川駅
WindowsBigQuery
作業内容 【案件概要】
大手インターネット企業にて、社内に点在する各種データを一元管理するための新規DWH構築プロジェクトです。
データ取り込みから加工・集約までを担う基盤を整備し、全社的なデータ活用を支える役割を担います。
BigQueryおよびApache Airflowを活用し、データパイプラインの設計・開発・運用改善までを一貫して対応します。
Google系およびオープンソース技術を組み合わせながら、拡張性と運用性を意識したデータ基盤構築を進める想定です。
【作業内容】
・新規DWH構築に向けた全体アーキテクチャ設計
・BigQueryを用いたDWH設計およびテーブル設計
・Airflowによるデータ取り込み／加工パイプラインの設計および実装
・各種データソースからのデータ連携、加工、集約処理
・データパイプラインの運用設計および改善対応
・性能や安定性を考慮したチューニングおよび最適化
・関係部署との要件調整および技術的な検討支援
【技術環境】
・DWH/分析基盤：BigQuery
・ストレージ：Google Cloud Storage(GCS)
・データ形式：Parquet
・データ処理：Spark
・実行コンテナ：Google Kubernetes Engine（GKE）
・パイプライン制御：Airflow
・連携（ストリーミング/CDC）：Kafka, Debezium
【備考】
・PC貸与：無し（ご自身のPCからVDIで作業。PCのOSやスペック不問）
・本エンドに弊社から10名以上参画中（本PJにも3名参画中）
【Python】ビッグデータ処理分析開発
700,000 〜 900,000円/月
業務委託(フリーランス)
神奈川県
みなとみらい駅
PythonSpark
データサイエンティスト
作業内容 世界的に普及が進んでいる大規模分散処理フレームワークのApacheSpark/Python/Scala
【クラウドエンジニア(AWS)】【業務委託(準委任)】環境設計レビュー・改善・実装・メンテナンス
900,000円/月
東京都
渋谷駅
MySQLDynamoDBSparkAWSApacheRedshiftGlue
作業内容 ■概要
環境設計レビュー・改善・実装・メンテナンスをお任せいたします。
■具体的な作業内容
以下の業務をお願いします。
・既存のAWS ETL環境の調査改善
・メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となります。
【クラウドエンジニア(AWS) / リモート案件紹介可能】AWS・GCPを活用したデータ基盤整備と移行プロジェクト
800,000円/月
業務委託(フリーランス)
東京都
東京駅
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です！！
■概要
AWSデータレイクからBigQueryへのデータ移行作業や、GCPデータ基盤の整備を行うプロジェクトです。PythonやSparkを活用し、データ基盤の設計・開発を進めるとともに、効率的なデータ処理環境を構築します。TerraformやCI/CDツールを利用した開発プロセスにも携わります。
■具体的な業務内容
・AWSデータレイク(S3 + Glue data catalog)からBigQueryへのデータ移行
・GCPデータ基盤の整備およびワークフローエンジンの導入
・PythonやSparkを使用したアプリケーション開発および保守
・TerraformやCI/CDツールを利用した開発環境の整備
・データ基盤設計および運用改善
【クラウドエンジニア(AWS)】【業務委託(準委任)】クラウドを使用した製品利用ログ分析基盤の開発・運用
650,000円/月
東京都
五反田駅
PostgreSQLAWSRedshift
作業内容 ■概要
Redshift (PostgreSQL)上のDBテーブル設計、クエリ開発をお任せいたします。
■具体的な作業内容
・AWS EMRを使用したETL、データ前処理(Python、Spark)
【クラウドエンジニア(AWS) / リモート案件紹介可能】AWSおよびGCPを活用したデータ基盤整備プロジェクト
800,000円/月
業務委託(フリーランス)
東京都
東京駅
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です！！
■概要
AWSおよびGCP環境でのデータ基盤整備プロジェクトです。データレイクからBigQueryへの移行作業や、GCPのデータ基盤整備を担当します。PythonやSparkを活用し、TerraformやCI/CDツールを使用した効率的な基盤開発を進めます。
■具体的な業務内容
・AWSのデータレイク（S3+Glue data catalog）からBigQueryへのデータ移行作業
・GCPデータ基盤の設計および整備（ワークフローエンジン導入など）
・AWS上で動作するアプリケーションの課題発見および解決
・Python、Hive、Sparkを使用したデータ基盤の構築
【Python(Web開発系)】データ基盤サービスの設計開発運用
700,000円/月
業務委託(フリーランス)
東京都
東京駅
PythonSQLSpark
作業内容 【業務内容】
データドリブンでの意思決定を支えるデータ基盤の設計・開発・運用に携わり、データアナリストやマーケティング、アプリケーションエンジニアと協力しながら事業課題の解決を行います。
【作業内容】
・データ基盤の設計
・Pythonを用いたデータ処理・ETL開発
・データ分析用の環境構築
・テストおよび運用フローの整備
・関係者との調整および改善提案
【Python】ビックデータの基盤構築
600,000 〜 800,000円/月
業務委託(フリーランス)
東京都
日暮里駅
PythonSpark
サーバーサイドエンジニア
作業内容 某大手事業会社内でのビックデータ案件になります。現在稼働しているHadoop環境の運用、保守に加え、新規機能の開発などがスタートしたため人員の増員を計画しております。データ分析は別チームが存在しますので、あくまで分析を行うための環境構築を行って頂くポジションとなりますが、現場の状況、また適正次第では分析業務にも関わっていただく可能性がございます。
【Python(Web開発系)】データドリブン意思決定基盤の設計・開発
700,000円/月
業務委託(フリーランス)
東京都
東京駅
PythonSQLSpark
作業内容 【業務内容】
意思決定をデータドリブンで行うための基盤の設計・開発・運用を担当します。データアナリストやマーケティング担当、アプリケーションエンジニアと協力しながら、事業を支えるデータ基盤を整備・改善し、課題解決を行います。
【作業内容】
・データ基盤の設計および構築
・データパイプラインの開発と運用
・データ品質チェックおよび改善
・データ分析・可視化基盤の整備
・関係者との調整および改善提案
【Unity / 3か月以内稼働開始希望の方優先】スマートフォン向けゲームコンテンツのエフェクトデザイン業務
650,000円/月
業務委託(フリーランス)
東京都
都庁前駅
SparkFlashUnitySpriteStudioBISHAMON
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です！！★
■概要
スマートフォン向けゲームのエフェクトデザイナーを募集しています。魔法やスキル、背景エフェクトの制作に加え、画面演出や文字演出の制作も行います。
■具体的な作業内容
・魔法やスキルのエフェクト制作
・背景（環境）エフェクト制作
・画面および文字演出の制作
設定していない条件はありませんか？
スキル･リモート･単価などで絞り込み、
効率よく案件を探せます。
掛け合わせ条件で絞り込む
- 特徴で絞り込む
- Spark × 在宅・リモート
その他の条件で検索する
あなたにピッタリの
フリーランス案件が見つかる
138万件以上のフリーランス案件から一括検索
385,935件※の案件を保有しており、エンジニアやクリエイター向けを中心にたくさんの案件を一括検索可能です。
※ 11月2日(月)更新
2あなたの経験やスキルに適した案件をメールでお知らせ
マイページに入力して頂いた経験や希望条件に合わせて、ご希望にマッチした案件をメールでお送りするので効率的な案件探しが可能です。
Sparkの月額単価相場
Sparkのエージェント別案件数
Sparkのフリーランス案件・求人を保有しているフリーランスエージェントは、①レバテックフリーランス：207件、②フリコン：79件、③Midworks：79件、④BIGDATA NAVI：62件、⑤レバテッククリエイター：45件、⑥フォスターフリーランス：24件、⑦テックリーチ：22件、⑧テックビズフリーランス：21件、⑨HiPro Tech（ハイプロテック）：14件、⑩ビズリンク：12件となっています。（※フリーランスHub調べ/2026年11月) Sparkのフリーランス案件・求人を豊富に保有しているフリーランスエージェントは①レバテックフリーランス、②フリコン、③Midworksであることがわかります。 Sparkのフリーランス案件・求人に参画を希望するフリーランスの方は①レバテックフリーランス、②フリコン、③Midworksを中心に複数のフリーランスエージェントに登録することをおすすめします。
Sparkのエージェント別月額単価相場
Sparkのフリーランス案件・求人を保有しているフリーランスエージェント別の単価相場は、①フリーコンサルBiz：250万円、②チョクフリ：120万円、③Findy Freelance：106.1万円、④PMO NAVI：105万円、⑤Freelance match：100万円、⑥プロエンジニア：100万円、⑦HiPro Tech（ハイプロテック）：98.6万円、⑧フリーランスポート（Freelance Port）：95万円、⑨フリーランスのミカタ：94万円、⑩ビズリンク：93.2万円となっています。（※フリーランスHub調べ/2026年11月) Sparkのフリーランス案件・求人の月額単価が高いフリーランスエージェントは①フリーコンサルBiz、②チョクフリ、③Findy Freelanceであることがわかります。 Sparkのフリーランス案件・求人に参画を希望するフリーランスの方は①フリーコンサルBiz、②チョクフリ、③Findy Freelanceを中心に複数のフリーランスエージェントに登録することをおすすめします。
Sparkの都道府県別案件数
Sparkのフリーランス案件・求人の都道府県別案件数は、①東京都：543件、②大阪府：25件、③神奈川県：10件、④福岡県：10件、⑤愛知県：9件、⑥兵庫県：3件となっています。（※フリーランスHub調べ/2026年11月) Sparkのフリーランス案件・求人が集中している都道府県は①東京都、②大阪府、③神奈川県であることがわかります。 Sparkのフリーランス案件・求人に参画を希望するフリーランスの方は①東京都、②大阪府、③神奈川県を中心にフリーランス案件を探されることをおすすめします。
Sparkの職種別案件数
Sparkのフリーランス案件・求人の職種別案件数は、①バックエンドエンジニア：76件、②データサイエンティスト：68件、③サーバーサイドエンジニア：58件、④インフラエンジニア：48件、⑤エフェクトデザイナー：37件、⑥アプリケーションエンジニア：30件、⑦データベースエンジニア：28件、⑧PM：21件、⑨SE：17件、⑩フロントエンドエンジニア：16件となっています。（※フリーランスHub調べ/2026年11月) Sparkのフリーランス案件・求人は①バックエンドエンジニア、②データサイエンティスト、③サーバーサイドエンジニアが多いことが分かります。
Sparkの職種別平均単価
Sparkのフリーランス案件・求人の職種別の平均単価は、①Webディレクター：162.5万円、②コンサル：112.5万円、③PMO：110.8万円、④テスター：110万円、⑤ITコンサルタント：106.7万円、⑥SRE：105.9万円、⑦PL：104.6万円、⑧機械学習エンジニア：100.2万円、⑨QAエンジニア：97.5万円、⑩フロントエンドエンジニア：96.7万円となっています。（※フリーランスHub調べ/2026年11月) Sparkのフリーランス案件・求人の月額単価が高い職種は①Webディレクター、②コンサル、③PMOであることがわかります。
Sparkの業界別案件数
Sparkのフリーランス案件・求人の業界別案件数は、①サービス：272件、②機械：105件、③広告：77件、④ゲーム：76件、⑤AI：76件、⑥IT：74件、⑦ソーシャルゲーム：48件、⑧通信：47件、⑨SaaS：44件、⑩EC：42件となっています。（※フリーランスHub調べ/2026年11月) Sparkのフリーランス案件・求人は①サービス、②機械、③広告が多いことが分かります。 Sparkのフリーランス案件・求人に参画を希望するフリーランスの方は①サービス、②機械、③広告を中心に複数の業界の案件を検討されることをおすすめします。
Sparkの業界別平均単価
Sparkのフリーランス案件・求人の業界別の平均単価は、①保険：150万円、②Sier：124万円、③コンサル：112.5万円、④医療・福祉：100万円、⑤FinTech：100万円、⑥DX：95.1万円、⑦AI：93.4万円、⑧化学：92.5万円、⑨製薬：90万円、⑩出版：90万円となっています。（※フリーランスHub調べ/2026年11月) Sparkのフリーランス案件・求人の月額単価が高い業界は①保険、②Sier、③コンサルであることがわかります。 Sparkのフリーランス案件・求人に参画を希望するフリーランスの方は①保険、②Sier、③コンサルを中心に複数の業界の案件を検討されることをおすすめします。
Sparkの常駐案件・リモートワーク案件割合
Sparkのフリーランス案件・求人数のリモートワーク案件・常駐案件の割合を分析するとリモートワーク案件が341件(51.7%)、常駐案件が318件(48.3%)となっています。 したがって、Sparkフリーランス案件・求人に関してはリモートワーク案件が多いことがわかります。 （※フリーランスHub調べ/2026年11月)
Spark案件のよくある質問
Sparkの月額単価の相場はどれくらいですか？
Sparkの月額単価の相場は81万円です。スキルやご経験により、
単価が変わります。自分のスキルや経験に合った案件は、こちらの案件一覧ページから検索・応募できます。
Sparkの案件数は何件ですか？
フリーランスHub上でご覧いただけるSparkの案件数は659件です。
尚、応募先エージェントで非公開案件の提案を受けられる場合もあります。
未経験でもSparkのフリーランス案件に応募することは可能ですか？
はい。応募先エージェントが条件を設けていない限り、基本的には未経験でも応募することが可能です。
ただし、中には実務経験を重視する案件もありますので、未経験で参画できる案件があるかどうかは応募先エージェントに確認してみましょう。
Sparkについて
【Sparkの概要】
Spark（Apache Spark）は、大規模データを処理するためのフレームワークです。Sparkの開発はカリフォルニア大学バークレー校で2009年に始まり、現在は非営利団体であるApacheソフトウェア財団が管理しています。Sparkの特徴は、大規模データを高速で処理できること。データをHDDやSSDでなくメモリに格納することで、高速性が実現されました。
Sparkを用いる案件は、データエンジニアやデータサイエンティストといった職種を対象としたものが主です。データ処理ジョブの記述と構築をはじめ、データ分析や機械学習など、フリーランス案件で行うことが想定される幅広い作業にSparkを活用することができます。
【Spark関連案件に必要なスキル】
フリーランス向けのSpark関連案件では、Hadoopを扱うスキルが必要になると考えられます。SparkとHadoopは並列的に活用されており、リアルタイムかつ高速処理を要するデータはSpark、サイズが大きいデータの分散処理はHadoopというように使い分けられる傾向にあるためです。Spark、Hadoop双方のメリットとデメリットを把握したうえでそれぞれの扱いに長けていれば、フリーランス案件参画時にデータ処理作業がスムーズになるでしょう。
※この文章は、2021年4月時点の内容です。
Sparkの案件・求人