Sparkのフリーランス案件・求人一覧 | 5ページ目
リセット
Sparkの案件・求人一覧 5ページ目
161-200 / 全 592 件
【Scala,ApacheSpark】ビックデータ/レコメンド機能等に関する開発支援
700,000円/月
業務委託(フリーランス)
東京都
ScalaSparkApache
アプリケーションエンジニア
作業内容 Webサイトへの導入、機能そのものの改修、データ分析などなど
【Python /一部リモート/週5日】フロー管理システムの開発・保守作業
600,000 〜 700,000円/月
業務委託(フリーランス)
PythonSQL
サーバーサイドエンジニアバックエンドエンジニア
作業内容
フロー管理システムの開発・保守作業
【ほぼフルリモート】某大手通信事業者向けデータ加工処理マイグレーション検討
900,000円/月
業務委託(フリーランス)
東京都
門前仲町駅
SparkAWSApacheSnowflakeGlue
作業内容 現行加工処理をマイグレーションの計画/方式の検討立案を行っていただきます
【マイグレーション例】
・現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
・ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換する
⇒Databricks、snowflake(snowpark)、AWS（Glue,EMR）等のSpark関連マネージド・サービスにマイグレーション
【AWS】データマネジメントシステム更改案件
650,000円/月
業務委託(フリーランス)
東京都
品川駅
HadoopSparkAWS
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・AWSクラウド環境にHadoop/Sparkといった技術を用いデータ連携/
データ収集 を行い、AIによる情報活用基盤の更改をご担当いただきます。
・下記を行っていただきます。
-DaaS環境構築支援
-インフラ構成検討支援
-リアルタイム/機械学習基盤設計支援
-問合せ対応
リモート併用｜【Hadoop/Spark/AmazonKinesis】オンプレミスサーバ運用（バックエンドエンジニア）
700,000円/月
業務委託(フリーランス)
東京都
東新宿駅
HadoopSpark
バックエンドエンジニア
作業内容 【概 要】 Hadoop運用/およびLinuxサーバの運用業務となります。
オンプレサーバ運用かつ、新規運用となりますのでLinux運用経験/運用設計が可能な方を想定しています。
・Hadoopまたは類似システムの運用経験があること
（優先度としては、Hadoop>類似のシステムSpark/AmazonKinesisなど)
【日本語ネイティブの方、活躍中！】
【20代・30代・40代、活躍中！】
【出社可能な方、活躍中！】
【Spark,Tensorflow】産学連携AIシステム開発における基盤構築
800,000円/月
業務委託(フリーランス)
東京都
SparkTensorFlow
組み込みエンジニア
作業内容 広告等の宣伝文章を自動構成するAIシステム開発が進んでおり、
日本語・英語を使用したコピーライティングに関するAIを載せる基盤の構築業務。
言語に関する大規模データの処理
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
600,000 〜 900,000円/月
東京都
浜松町駅
HadoopSparkAWSApache
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
【Java・Python/基本リモート/週5日】某通信会社向け開発支援作業
400,000 〜 550,000円/月
業務委託(フリーランス)
神奈川県
武蔵小杉駅
JavaPythonScalaSparkKafka
サーバーサイドエンジニアバックエンドエンジニア
作業内容
某通信会社向け開発支援作業
【AWS】システム更改における構築支援業務案件
700,000円/月
業務委託(フリーランス)
HadoopSparkAWS
作業内容 ・データマネジメントインフラ支援業務にて以下をご担当いただきます。
-DaaS環境構築支援
-インフラ構成検討支援
-リアルタイム/機械学習基盤設計支援
-問合せ対応
・AWSクラウド環境にHadoop、Sparkを用いてデータ連携/データ収集を行い、
AIによる情報活用基盤の更改を行っていきます。
・またJavaやPHPを用いた一部機能追加も想定しております。
人材業界でのデータエンジニア募集
1,000,000円/月
業務委託(フリーランス)
東京都
JavaSQLScalaHadoopSparkApacheHive
アプリケーションエンジニア
作業内容 ■業務内容
（1）Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯
（2）HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化
（3）Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装
稼 働：週2日~5日 相談可能
時 間：9：30 - 18：30(応相談)
服 装：ビジネスカジュアル・私服
【Python】内製開発：ETLチーム
800,000円/月
業務委託(フリーランス)
東京都
PythonSpark
サーバーサイドエンジニア
作業内容 ・SEからのインプットを基に詳細設計
・ETLコーディング
・ワークフローシナリオ実装
・UT観点項目作成
・UTスクリプト作成
・UT実施
・必要に応じてシミュレーター/スタブ開発
データ加工処理マイグレーション検討
700,000 〜 900,000円/月
東京都
門前仲町駅
HadoopSparkAWSApacheSnowflakeGlue
作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。
現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。
現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。
※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ
クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。
現在想定しているマイグレーション例は、以下の通りです。
-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換
→Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）等の
Spark関連マネージド・サービスにマイグレーション
＜就業時間＞
9:00ｰ18:00
※※こちらの案件は現在募集を終了しております※※
【Python】在庫管理システムデータ基盤構築
800,000円/月
業務委託(フリーランス)
大阪府
福島駅
PythonSQLSparkDockerJIRAGitHub
サーバーサイドエンジニア
作業内容 在庫管理システムのデータ基盤構築に携わっていただきます。
【Python】マーケティングデータ処理開発
670,000 〜 720,000円/月
業務委託(フリーランス)
リモート
JavaPythonRubyScalaHadoopSparkHive
作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！
【概要】マーケティングデータ処理開発
【開発環境】
-言語:Java、Scala(一部:Python、Ruby)
【精算幅】140-180h
【面談】1回
【勤務地】リモート
【備考】
・服装:自由
・就業時間:9:00-17:30
※週5日〜OKの案件です！
【Java】SAPユーザーメーカープロジェクト案件
650,000円/月
業務委託(フリーランス)
東京都
六本木駅
C++JavaPythonScalaHTML5LinuxHadoopSparkCoffeeScriptJadeSAP
アプリケーションエンジニア
作業内容 ・SAPユーザーのメーカーのプロジェクトに携わって頂きます。
【Java/JavaScript】証券システム追加開発案件
950,000円/月
業務委託(フリーランス)
東京都
三軒茶屋駅
JavaJavaScriptNode.jsSpark
作業内容 ・証券会社におけるシステム機能追加開発をご担当いただきます。
・分散処理の作業もご担当頂きます。
【Java,Javascript,MySQL,基本設計,Hadoop】レコメンドエンジン開発
600,000 〜 700,000円/月
業務委託(フリーランス)
東京都
JavaJavaScriptMySQLHadoopSparkJenkinsAnsible
アプリケーションエンジニア
作業内容 ・node.js でのAPI設計・開発・テスト
・Hiveクエリの作成・テスト・チューニング
・Spark プログラムの設計・開発・テスト
・Jenkinsジョブの作成
・Ansible設定ファイルの作成
【AWS/GCP/Python/フルリモート】AWSデータレイクの構築やGCPデータ基盤の整備
600,000 〜 900,000円/月
東京都
六本木一丁目駅
PythonSparkAWSApacheGoogle Cloud Platform
作業内容 データレイクやDWH管理を行っているチームにて、下記業務をご対応いただきます。
・AWSからGCPへの移行作業
・GCPのデータ基盤構築
Python エンドユーザー向けAWS基盤の開発
700,000 〜 800,000円/月
東京都
六本木駅
PythonSparkAWS
作業内容 既存のAWSデータレイク基盤をベースにした追加開発
【AWS】地図広告プラットフォーム開発
750,000 〜 800,000円/月
業務委託(フリーランス)
東京都
虎ノ門駅
リモート
PythonHadoopSparkAWSHiveGlueAthena
作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！
【概要】
【精算幅】140-180h
【面談】1回
【勤務地】虎ノ門※リモート
【備考】
・服装:自由
・就業時間:9:00-18:00
※週5日〜OKの案件です！
【リモート可｜AWS構築・データ処理】新規プロダクトのインフラ構築
500,000 〜 700,000円/月
リモート
PythonNode.jsSparkAWSDocker
作業内容 新規プロダクトである地図広告P/Fのインフラ設計、開発、テストをご担当していただきます。
AWS上でのデータ処理やクエリーワークロードの設計、デプロイ、
監視のためのMapboxのプロセスとツールの簡素化と強化が主要業務となります。
開発、営業、その他チームとの連携も重要となります。
【Spark/Hadoop】美容系サービス向けデータ分析基盤運用案件
720,000円/月
業務委託(フリーランス)
東京都
六本木一丁目駅
JavaPythonScalaHadoopSpark
インフラエンジニアデータベースエンジニア
作業内容 ・美容(コスメ)の口コミサイトに関連する
データ分析基盤の運用や機能改修をご担当いただきます。
【AWS】テレビ視聴データ基盤分析案件
850,000円/月
業務委託(フリーランス)
東京都
田町駅
HbaseHadoopSparkAWSHive
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 システム基盤の運用改善をご担当いただきます。
某大手製造メーカー系会社 データ処理インフラ基盤の構築
800,000円/月
業務委託(フリーランス)
東京都
SparkAWSGoogle Cloud Platform
作業内容 ■業務内容
製造メーカー系会社のデータ処理基盤の設計・構築
→ 大量のログデータを蓄積するクラウド環境及び、製品に埋め込むクライアントの開発運用
【AWS】AWS ETL環境運用案件
800,000円/月
業務委託(フリーランス)
東京都
渋谷駅
MySQLDynamoDBSparkAWSApacheRedshiftGlue
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・下記を行っていただきます。
‐既存のAWS ETL環境の調査改善
‐メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となります
【Python/R/Julia】データプラットフォーム構築運用案件
950,000円/月
業務委託(フリーランス)
東京都
新富町駅
PythonSQLRLinuxMySQLRedisRailsSparkAWSApacheGitBacklogRedshiftBigQueryTreasure DataTensorFlow
作業内容 ・自社の全サービスを横断したデータプラットフォーム構築、
および運用に携わって頂きます。
・データプラットフォームで加工したデータを各種サービス、
および社内スタッフに提供して頂きます。
※担当範囲は、スキルや経験および進捗状況により変動いたします。
【Python/SQL】自社Saasソリューションのデータエンジニア
500,000 〜 900,000円/月
業務委託(フリーランス)
東京都
PythonSQLHadoopSparkApache
作業内容 【募集背景】
大手顧客を中心に幅広い業界の企業へ、自社Saasソリューションを提供している同社。
プロジェクトが並行している中で、データエンジニアのリソース不足のため募集。
【上流/Azure】製造業向けデータレイク基盤構築案件
750,000円/月
業務委託(フリーランス)
東京都
三鷹駅
SQLSparkAzure
インフラエンジニアデータベースエンジニア
作業内容 ・重電/産業用電気機器メーカー向け、データレイクの基盤構築をご担当いただきます。
・下記のツールにてシステム構築を行っていただきます。
-DataFactory
-Azure Datalake Storage Gen2
-Synapse Analytics Service
DMS開発メンバー クレジットカード会社の次世代DWH（DMS）開発支援
440,000 〜 540,000円/月
東京都
PythonSQLSASOracleSparkAWSAzureApacheGoogle Cloud PlatformBigQuery
作業内容 大手小売企業においてグループ全体のマーケティング情報を一元的に集約し、
複数社が持つデータを掛け合わせた分析が可能な、データ分析基盤を構築するPJが進行しています。
・ポジション：DMS開発メンバー
・業務内容：
上記PJにおける大手小売企業の子会社のクレジットカード会社パートの開発において、
グループ会社各社とBigQuery/Databricks間でデータ連携を行えるようにDWH移行を行う。
・開発環境：AWS/Azure上にDatabricksを構築、GCP上にBigQueryを構築
・実施工程：
FY23でオンプレDWH（Oracle、SAS）の一部をGCP（BigQuery）に移行しており、FY24では完全移行を目指す。
※想定工程：2024年7 月～要件定義開始、2025月5月にリリースを目指す
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
600,000 〜 1,000,000円/月
業務委託(フリーランス)
HadoopAWSTerraform
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
【SPARK GEAR】【ソーシャルゲーム向け】エフェクト制作案件
500,000円/月
業務委託(フリーランス)
Spark
エフェクトデザイナー
作業内容 ソーシャルゲーム制作においてSPARK GEARを使用したエフェクト制作をお任せいたします。
※お任せする作業はスキルに応じて異なります。
【Python】大手小売業向けアプリケーション開発案件
800,000円/月
業務委託(フリーランス)
東京都
大手町駅
PythonSparkGoogle Cloud PlatformBigQuery
作業内容 ・大手小売業向けアプリケーションの運用保守、改善開発案件に携わっていただきます。
・作業内容において主に下記作業をご担当いただきます。
-AIモデルの運用保守および改善開発
-GCP上で展開される複数のAIモデルの定期的な運用
-AIモデルにエラーが発生した場合にはその対応
-効果測定
-モデル改善の実装
【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件
700,000円/月
業務委託(フリーランス)
東京都
リモート
JavaPythonKubernetes
バックエンドエンジニア
作業内容 現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。
PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。
データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 （SSL化対応、AD認証連携 etc…)
環境
オンプレサーバー (現地作業等は無し、リモートから接続)
OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…)
データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品
(サポートが付くだけのようなイメージ)
HPE Ezmeral Runtime (≒ Kubernetes)
OpenShift等に⽐べ、より純正Kubernetesに近い
構成
データレイク: HDFS, minio(≒S3), HBase
DWH: Hive or Spark
ワークフロー: NiFi or Airflow
データ加⼯: Hive, Spark (シェルスクリプト/Java or Python)
BI: Tableau, Palantir (本募集スコープの作業範囲外)
体制
アジャイル開発 (スクラム)
メンバー10名程度
デイリーで午前にスクラムミーティング有り
【Python】某大手小売・流通のシステム開発または広告や社内プロダクトの開発
470,000 〜 520,000円/月
業務委託(フリーランス)
東京都
半蔵門駅
リモート
PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud PlatformKubernetes
作業内容 【概要】①某大手小売・流通のシステム開発
②広告や社内プロダクトの開発
上記いずれかにおいてデータエンジニア業務に従事いただきます。
案件カテゴリー： 開発
最寄駅：半蔵門※リモート可
打合せ回数：2回
※週5日〜OKの案件です！
【Java】製造業・建設業SCMパッケージ開発案件
800,000円/月
業務委託(フリーランス)
東京都
六本木一丁目駅
JavaCassandraHadoopSpark
作業内容 ・製造業/建設業向けの次世代ERPパッケージシステム導入における、
SCM(販売/購買領域)のパッケージ開発を行っていただきます。
・機能及び、UI/UXを含む製品設計フェーズにご参画いただきます。
※オフショア開発の可能性がある為、実開発は行わない可能性がございます。
【Azure】公共向けクラウド移行案件
750,000円/月
業務委託(フリーランス)
東京都
豊洲駅
OracleHadoopSparkAzure
ネットワークエンジニアインフラエンジニアセキュリティエンジニア
作業内容 ・クラウド環境における環境設計、構築等をご対応いただきます。
【Java】SCMパッケージ新規開発案件
700,000円/月
業務委託(フリーランス)
東京都
六本木一丁目駅
JavaCassandraHadoopSpark
作業内容 ・SCMパッケージにおける新規開発プロジェクトに携わって頂きます。
・UI/UXを意識した業務機能の画面設計をご担当頂きます。
・各種調整業務を行って頂く可能性もございます。
【Azure】システム保守案件
750,000円/月
業務委託(フリーランス)
大阪府
堺東駅
SparkAzureApache
作業内容 ・Azureを用いたシステム保守案件に携わっていただきます。
・主に下記作業をご担当いただきます。
-機能障害、不足の解消(性能障害の対応)
-新機能への対応
-データの品質管理
-データの取込対応
-システム運用
【Python】ヘルスケア関連システム開発案件
700,000円/月
業務委託(フリーランス)
東京都
品川駅
PythonJSONSparkApache
作業内容 ・ヘルスケア関連システムにおいて、
サーバーサイド開発に携わっていただきます。
・ご参画いただく方のスキルやご経験に応じて、
基本設計～保守まで、幅広くご活躍いただけます。
AWS データレイク・DWH管理等
650,000 〜 750,000円/月
東京都
六本木一丁目駅
PythonSparkAWSGitGoogle Cloud PlatformBigQueryHiveGlueAthenaTerraformCircleCILambda
作業内容 動画やECサイト等、Webコンテンツを数多く提供しているサービス企業において、サービス提供の根幹となるデータレイク・DWH管理などの対応をしていただきます。
主な業務内容は以下を想定していますが、詳細についてはご面談時に説明させていただきます。
1. AWSのデータレイクからBigqueryへのデータ移行作業
2. GCPデータ基盤の整備(ワークフローエンジン導入等)
→2番の作業関しては、ご意向と経験に応じてご相談となります。
＜開発環境＞
言語：Python, Hive, Spark
AWS：EMR, Glue, Athena, Lambda, APIGateway
GCP：BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows
CI・CD・その他：Terraform, CircleCI, GithubActions, digdag, embulk
＜備考＞
基本リモート
＜基本時間＞
10：00～19：00
気になる案件は見つかりましたか？
お探しの条件に合った新着案件をお知らせします
掛け合わせ条件で絞り込む
- 特徴で絞り込む
- Spark × 在宅・リモート
その他の条件で検索する
あなたにピッタリの
フリーランス案件が見つかる
133万件以上のフリーランス案件から一括検索
337,813件※の案件を保有しており、エンジニアやクリエイター向けを中心にたくさんの案件を一括検索可能です。
※ 2月5日(Thu)更新
2あなたの経験やスキルに適した案件をメールでお知らせ
マイページに入力して頂いた経験や希望条件に合わせて、ご希望にマッチした案件をメールでお送りするので効率的な案件探しが可能です。
Sparkの案件・求人