Sparkのフリーランス求人・案件一覧

1-30 / 全 295 件

【Python】データ分析及びDB構築移行案件

リモートオンライン商談OK

650,000円/月

業務委託(フリーランス)

東京都

渋谷駅

JavaPythonSparkAWSDockerJIRA

作業内容・Pythonを用いたデータ分析およびDB構築、移行に携わっていただきます。・主に下記作業をご担当いただきます。　-不動産情報サービス企業様が蓄積している大量データの分析　-DB構築やデータ移行に関わるデータ調査、データクレンジング、名寄せ処理　-AWSのマネージドサービス(Glue、Lambda、MWAA等)を用いたデータレイク、　データウェアハウス構築作業

15日前・提供元: レバテックフリーランス

NEW

【Python(Web開発系)】小売関連分析システム開発

650,000円/月

東京都

ひばりヶ丘駅

PythonSQL

作業内容 ■概要全国展開の小売データをもとにした分析システム構築となります。 ■具体的な作業内容・主にPython、AWS各種サービスを使用し製造～テストをメインに担当いただきますがもし対応できるのであれば設計もおねがいする想定

6時間前・提供元: Midworks

【Python/AWS】データ連携アプリ開発案件※フルリモート

リモート

850,000円/月

業務委託(フリーランス)

東京都

PythonAWSFargate

サーバサイドエンジニア

作業内容開発中のシステムに対する追加機能の設計実装となります。・工程：アプリケーション設計～総合テスト

8日前・提供元: フリエン(furien)

【業務委託】【少年漫画IP新規開発ソーシャルゲーム向け】3Dエフェクト制作案件

600,000円/月

東京都

大崎駅

MayaUnity3ds Max

3Dデザイナーエフェクトデザイナーグラフィックデザイナー

作業内容少年漫画IPを用いたソーシャルゲーム開発において、 3Dエフェクトデザイナーとして作業をお任せいたします。具体的には下記作業を想定しております。・SPARK GEAR、Shuriken等のツールでの演出効果エフェクト制作・エフェクトに関する表現手法の研究並びに検証

3ヶ月前・提供元: レバテッククリエイター

【Azure】在庫管理システムの構築案件/フルリモート

リモート

900,000 〜 1,000,000円/月

業務委託(フリーランス)

東京都

HadoopAzure

作業内容大手小売り企業様にての業務となります。在庫管理等の分散処理システムをHadoop on Sparkで組んでおり DMCから逆輸入による導入を実施して頂きます。【体制】・リーダー：一名 (hadoop有識者、テックリード) ・SIer内hadoopスペシャリストに相談可能・オフショアメンバー（中国）側と連携して進める。【商流】某大手小売流通→大手SIer→同社

1ヶ月前・提供元: i-common tech

AWS / Docker 地図広告P/Fのインフラ設計、開発、テスト

リモート

700,000 〜 800,000円/月

業務委託(フリーランス)

東京都

PythonNode.jsSparkAWSDocker

作業内容新規プロダクトである地図広告P/Fのインフラ設計、開発、テストを推進していただきます。 AWS上でのデータ処理やクエリーワークロードの設計、デプロイ、監視のためのMapboxのプロセスとツールの簡素化と強化が主要業務となります。開発、営業、その他チームとの連携も重要となります。＜工程＞設計、開発、テスト＜備考＞フルリモート＜基本時間＞ 10：00～19：00

3ヶ月前・提供元: フォスターフリーランス

【Python】某大手小売・流通のシステム開発または広告や社内プロダクトの開発

リモート

470,000 〜 520,000円/月

業務委託(フリーランス)

東京都

半蔵門駅

リモート

PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud PlatformKubernetes

作業内容【概要】①某大手小売・流通のシステム開発 ②広告や社内プロダクトの開発上記いずれかにおいてデータエンジニア業務に従事いただきます。案件カテゴリー：開発最寄駅：半蔵門※リモート可打合せ回数：2回 ※週5日〜OKの案件です！

21日前・提供元: テックビズフリーランス

【Python】ビッグデータ処理分析開発

700,000 〜 900,000円/月

業務委託(フリーランス)

神奈川県

みなとみらい駅

PythonSpark

データサイエンティスト

作業内容世界的に普及が進んでいる大規模分散処理フレームワークのApacheSpark/Python/Scala

1年前・提供元: アットエンジニア

NEW

New【データ分析補佐】GPSデータを用いた予測支援

リモート

700,000円/月

業務委託(フリーランス)

リモート

PythonSQLMySQLHadoopSparkAWSAzureApacheGoogle Cloud Platform

作業内容 1.GPSデータを用いた予測支援2.SaaS型プロダクトの開発支援上記いずれかにおいてデータエンジニア業務に従事いただきます。

16時間前・提供元: BIGDATA NAVI

【データエンジニア】

900,000 〜 1,100,000円/月

業務委託(フリーランス)

東京都

大手町駅

SQL

作業内容 DX推進を行っている部署の中で、既存で散らばっている社内のデータを集約する作業を行なっております。既存のデータはAzureの中に入れており、そこのデータパイプラインの保守作業を行いつつ、新規パイプラインの設計・構築を行っていただきます。(Sparkを想定しております。) また、集約したデータをBIツールを活用し、データ可視化も行っています。（既存ダッシュボードの保守、新規ダッシュボード構築など）

13日前・提供元: フリコン

【AWS】AWS ETL環境運用案件

リモートオンライン商談OK

800,000円/月

業務委託(フリーランス)

東京都

渋谷駅

MySQLDynamoDBSparkAWSApacheRedshiftGlue

データサイエンティストインフラエンジニアデータベースエンジニア

作業内容・下記を行っていただきます。 ‐既存のAWS ETL環境の調査改善 ‐メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度) ※対象環境はミッションクリティカルではないデータ処理基盤となります

1ヶ月前・提供元: レバテックフリーランス

【直接取引】【Python】（一部リモート）データエンジニア（クラウド環境上でデータ関連開発経験のある方）

リモート

1,400,000円/月

業務委託(フリーランス)

東京都

PythonHadoopSparkAWSAzureApacheGoogle Cloud Platform

作業内容某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）のデータ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。＜開発環境＞言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

3ヶ月前・提供元: フリエン(furien)

【業務委託】【運用中ソーシャルゲーム】3Dエフェクト作成・ディレクション案件

600,000円/月

東京都

渋谷駅

PhotoshopBlenderMayaUnity3ds MaxAfter EffectsBISHAMON

エフェクトデザイナー

作業内容運用中ソーシャルゲームにおいて、 3Dエフェクトの作成・3Dエフェクト開発におけるディレクション作業をお任せいたします。

3ヶ月前・提供元: レバテッククリエイター

大手キャリア向けPM業務

リモート

700,000 〜 850,000円/月

業務委託(フリーランス)

東京都

PythonNode.jsSparkAWSFargate

作業内容通信会社がポイントを使える街の店舗を紹介するような新規サービスを考えており、そのサービスのうちレコメンド機能部分を開発する。技術要素としては、AWS上でSpark on EMR環境を構築し、その上で機械学習モデルを動かし、これをクライアントアプリから使えるようWeb API化する(AWSのFargate上で動かすことを想定、アプリケーションのプログラム言語やWebフレームワークはまだ決まっていないが、昨今のトレンドからしてPython, Node.js, Goあたりになると思われる) ＜備考＞基本リモート

3ヶ月前・提供元: フォスターフリーランス

【Python】ビックデータの基盤構築

600,000 〜 800,000円/月

業務委託(フリーランス)

東京都

日暮里駅

PythonSpark

作業内容某大手事業会社内でのビックデータ案件になります。現在稼働しているHadoop環境の運用、保守に加え、新規機能の開発などがスタートしたため人員の増員を計画しております。データ分析は別チームが存在しますので、あくまで分析を行うための環境構築を行って頂くポジションとなりますが、現場の状況、また適正次第では分析業務にも関わっていただく可能性がございます。

1年前・提供元: アットエンジニア

【Python/Vue.js】自動車データ向けアプリケーション開発案件

リモートオンライン商談OK

850,000円/月

業務委託(フリーランス)

東京都

虎ノ門駅

JavaScriptPythonGoSparkVue.js

作業内容・車載ネットワークのデータを用いたビッグデータアプリケーションの　開発に携わっていただきます。・担当工程としては、上流工程からご担当いただきます。 ※具体的にご担当頂く作業領域はご経験に応じて変動いたします。

2ヶ月前・提供元: レバテックフリーランス

【SPARK GEAR】【ソーシャルゲーム向け】エフェクト制作案件

500,000円/月

Spark

エフェクトデザイナー

作業内容ソーシャルゲーム制作においてSPARK GEARを使用したエフェクト制作をお任せいたします。 ※お任せする作業はスキルに応じて異なります。

7ヶ月前・提供元: レバテッククリエイター

Python / SQL データ分析及び, システムデータ分析基盤構築支援

リモート

700,000 〜 800,000円/月

業務委託(フリーランス)

東京都

PythonSQLUnixSparkAWSDockerHive

作業内容データ分析対応チーム、もしくはデータ分析基盤構築チームにて、AとBのいずれかをご対応いただく予定です。 A: 定型化されたデータ分析の実行(集計/加工/分析/可視化/アドホック対応など) B: 関連するデータ分析基盤システム構築(インフラ,システム開発/仮想化/など) ・仕様や方針などは、A/B領域共にクライアント側で設定の上、後続対応を実施していただきます。・Aについては、基本出社対応、Bについては状況に応じて出社を予定しております。＜関連システム/スキルマップ＞・Python, SQL, Excel ・AWS, Spark, Hive, Docker, RDS, UNIX他＜備考＞リモート or 現場常駐現状、タスクに応じて50/50で対応中

3ヶ月前・提供元: フォスターフリーランス

【Python】ネット証券アプリ開発

700,000 〜 900,000円/月

業務委託(フリーランス)

東京都

渋谷駅

Python

作業内容・PySparkでHadoopクラスタ上のデータを分析するアプリの開発・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守

1年前・提供元: アットエンジニア

【Python,Spark】テキストマイニング

850,000円/月

業務委託(フリーランス)

東京都

JavaPythonScalaSparkGit

作業内容 AIエージェントAPIの開発を行う企業にてテキストマイニング ■開発環境バージョン管理ツール：Git

1ヶ月前・提供元: BIGDATA NAVI

【Python,Hadoop,Spark】大手外資系医療情報・テクロノジーサービス企業データ分析支援

1,000,000円/月

業務委託(フリーランス)

東京都

PythonScalaHadoopSpark

作業内容業務内容：世界中から集まる製薬データの分析メインフレームシステムのダウンサイジング

1ヶ月前・提供元: BIGDATA NAVI

【Scala,ApacheSpark】ビックデータ/レコメンド機能等に関する開発支援

700,000円/月

業務委託(フリーランス)

東京都

ScalaSparkApache

アプリケーションエンジニア

作業内容 Webサイトへの導入、機能そのものの改修、データ分析などなど

1ヶ月前・提供元: BIGDATA NAVI

【 hadoop,kafka,storm,spark】セキュリティプラットフォーム基盤構築

800,000円/月

業務委託(フリーランス)

東京都

HadoopSparkApacheKafka

作業内容通信会社向けのセキュリティプラットフォーム基盤をOSSを利用して新規構築する案件となります。各種製品ログをデータレイクに蓄積し、リアルタイムなアラート検知、およびインタラクティブな集計／分析を可能とするプラットフォームの構築案件です。

1ヶ月前・提供元: BIGDATA NAVI

【Python/Spark】自社サービスSaasのデータ基盤開発

600,000 〜 700,000円/月

業務委託(フリーランス)

東京都

PythonSpark

作業内容在庫最適化システムを支えるデータ基盤の構築を行っていただきます。自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。

1ヶ月前・提供元: フリコン

【Spark,Tensorflow】産学連携AIシステム開発における基盤構築

800,000円/月

業務委託(フリーランス)

東京都

SparkTensorFlow

作業内容広告等の宣伝文章を自動構成するAIシステム開発が進んでおり、日本語・英語を使用したコピーライティングに関するAIを載せる基盤の構築業務。言語に関する大規模データの処理

1ヶ月前・提供元: BIGDATA NAVI

人材業界でのデータエンジニア募集

1,000,000円/月

業務委託(フリーランス)

東京都

JavaSQLScalaHadoopSparkApacheHive

アプリケーションエンジニア

作業内容 ■業務内容（1）Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯（2）HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化（3）Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装稼　働：週2日~5日　相談可能時　間：9：30 - 18：30(応相談) 服　装：ビジネスカジュアル・私服

1ヶ月前・提供元: BIGDATA NAVI

【Python】在庫管理システムデータ基盤構築

リモートオンライン商談OK

800,000円/月

業務委託(フリーランス)

大阪府

福島駅

PythonSQLSparkAWSDockerJIRAGitHub

作業内容在庫管理システムのデータ基盤構築に携わっていただきます。

8ヶ月前・提供元: レバテックフリーランス

【Java,Javascript,MySQL,基本設計,Hadoop】レコメンドエンジン開発

600,000 〜 700,000円/月

業務委託(フリーランス)

東京都

JavaJavaScriptMySQLHadoopSparkJenkinsAnsible

アプリケーションエンジニア

作業内容・node.js でのAPI設計・開発・テスト・Hiveクエリの作成・テスト・チューニング・Spark プログラムの設計・開発・テスト・Jenkinsジョブの作成・Ansible設定ファイルの作成

1ヶ月前・提供元: BIGDATA NAVI

【クラウドエンジニア(AWS)】製品利用ログ分析基盤の開発・運用

650,000円/月

東京都

五反田駅

PostgreSQLAWSRedshift

作業内容 ■概要 Redshift(PostgreSQL)上のDBテーブル設計、クエリ開発をお任せいたします。 ■具体的な作業内容・AWS EMRを使用したETL、データ前処理(Python、Spark)

2ヶ月前・提供元: Midworks

某大手製造メーカー系会社　データ処理インフラ基盤の構築

800,000円/月

業務委託(フリーランス)

東京都

SparkAWSGoogle Cloud Platform

作業内容 ■業務内容製造メーカー系会社のデータ処理基盤の設計・構築 → 大量のログデータを蓄積するクラウド環境及び、製品に埋め込むクライアントの開発運用

1ヶ月前・提供元: BIGDATA NAVI

その他の開発言語・スキルから探す

Hadoop Python AWS Java Linux SQL Apache MySQL Google Cloud Platform Scala

その他の職種から探す

データサイエンティストデータベースエンジニアインフラエンジニアアプリケーションエンジニアエフェクトデザイナー

Spark案件のよくある質問

掲載している情報以外の詳細な情報が知りたいです。

スキルやご経験によって異なりますが、参画が決まった際に参画元エージェントからお渡しする金額です。ただし、必ずしも表示されている金額とならない場合がございますので、予めご了承ください。

Sparkの案件数は何件ですか？

フリーランスHub上でご覧いただけるSparkの案件数は295件です。尚、応募先エージェントで非公開案件の提案を受けられる場合もあります。

未経験でもSparkのフリーランス案件に応募することは可能ですか？

はい。応募先エージェントが条件を設けていない限り、基本的には未経験でも応募することが可能です。多いので、未経験で参画できる案件があるかどうかは応募先エージェントに確認してみましょう。

Sparkについて

【Sparkの概要】 Spark（Apache Spark）は、大規模データを処理するためのフレームワークです。Sparkの開発はカリフォルニア大学バークレー校で2009年に始まり、現在は非営利団体であるApacheソフトウェア財団が管理しています。Sparkの特徴は、大規模データを高速で処理できること。データをHDDやSSDでなくメモリに格納することで、高速性が実現されました。 Sparkを用いる案件は、データエンジニアやデータサイエンティストといった職種を対象としたものが主です。データ処理ジョブの記述と構築をはじめ、データ分析や機械学習など、フリーランス案件で行うことが想定される幅広い作業にSparkを活用することができます。【Spark関連案件に必要なスキル】フリーランス向けのSpark関連案件では、Hadoopを扱うスキルが必要になると考えられます。SparkとHadoopは並列的に活用されており、リアルタイムかつ高速処理を要するデータはSpark、サイズが大きいデータの分散処理はHadoopというように使い分けられる傾向にあるためです。Spark、Hadoop双方のメリットとデメリットを把握したうえでそれぞれの扱いに長けていれば、フリーランス案件参画時にデータ処理作業がスムーズになるでしょう。 ※この文章は、2021年4月時点の内容です。

フリーランスエンジニア・クリエイターの求人・案件TOP

フリーランス求人・案件

Sparkのフリーランス求人・案件

Sparkのフリーランス求人・案件一覧 | 【フリーランスHub】

Q: 掲載している情報以外の詳細な情報が知りたいです。

スキルやご経験によって異なりますが、参画が決まった際に参画元エージェントからお渡しする金額です。 ただし、必ずしも表示されている金額とならない場合がございますので、予めご了承ください。

Q: Sparkの案件数は何件ですか？

フリーランスHub上でご覧いただけるSparkの案件数は295件です。 尚、応募先エージェントで非公開案件の提案を受けられる場合もあります。

Q: 未経験でもSparkのフリーランス案件に応募することは可能ですか？

はい。応募先エージェントが条件を設けていない限り、基本的には未経験でも応募することが可能です。 多いので、未経験で参画できる案件があるかどうかは応募先エージェントに確認してみましょう。