Sparkのフリーランス案件・求人一覧 | 6ページ目
リセット
Sparkの案件・求人一覧 6ページ目
201-240 / 全 605 件
【週5日/リモートメイン/Python】データエンジニア
768,000円/月
業務委託(フリーランス)
PythonDynamoDBSparkAWSAmazon S3ApacheKafka
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
--------------------------------
某大手自動車メーカーの「運転診断システム」のデータエンジニアを募集しております。
＜業務内容＞
AWSのクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。
Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。
ビッグデータ技術（Hadoop, Sparkなど）を用いて大規模データセットのバッチおよびリアルタイム処理を実行します。
ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。
【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件
700,000円/月
業務委託(フリーランス)
東京都
リモート
JavaPythonKubernetes
バックエンドエンジニア
作業内容 現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。
PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。
データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 （SSL化対応、AD認証連携 etc…)
環境
オンプレサーバー (現地作業等は無し、リモートから接続)
OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…)
データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品
(サポートが付くだけのようなイメージ)
HPE Ezmeral Runtime (≒ Kubernetes)
OpenShift等に⽐べ、より純正Kubernetesに近い
構成
データレイク: HDFS, minio(≒S3), HBase
DWH: Hive or Spark
ワークフロー: NiFi or Airflow
データ加⼯: Hive, Spark (シェルスクリプト/Java or Python)
BI: Tableau, Palantir (本募集スコープの作業範囲外)
体制
アジャイル開発 (スクラム)
メンバー10名程度
デイリーで午前にスクラムミーティング有り
【Python】某大手小売・流通のシステム開発または広告や社内プロダクトの開発
470,000 〜 520,000円/月
業務委託(フリーランス)
東京都
半蔵門駅
リモート
PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud PlatformKubernetes
作業内容 【概要】①某大手小売・流通のシステム開発
②広告や社内プロダクトの開発
上記いずれかにおいてデータエンジニア業務に従事いただきます。
案件カテゴリー： 開発
最寄駅：半蔵門※リモート可
打合せ回数：2回
※週5日〜OKの案件です！
【Java】SCMパッケージ新規開発案件
700,000円/月
業務委託(フリーランス)
東京都
六本木一丁目駅
JavaCassandraHadoopSpark
作業内容 ・SCMパッケージにおける新規開発プロジェクトに携わって頂きます。
・UI/UXを意識した業務機能の画面設計をご担当頂きます。
・各種調整業務を行って頂く可能性もございます。
【Azure】システム保守案件
750,000円/月
業務委託(フリーランス)
大阪府
堺東駅
SparkAzureApache
作業内容 ・Azureを用いたシステム保守案件に携わっていただきます。
・主に下記作業をご担当いただきます。
-機能障害、不足の解消(性能障害の対応)
-新機能への対応
-データの品質管理
-データの取込対応
-システム運用
【Python】ヘルスケア関連システム開発案件
700,000円/月
業務委託(フリーランス)
東京都
品川駅
PythonJSONSparkApache
作業内容 ・ヘルスケア関連システムにおいて、
サーバーサイド開発に携わっていただきます。
・ご参画いただく方のスキルやご経験に応じて、
基本設計～保守まで、幅広くご活躍いただけます。
【Java】製造業・建設業SCMパッケージ開発案件
800,000円/月
業務委託(フリーランス)
東京都
六本木一丁目駅
JavaCassandraHadoopSpark
作業内容 ・製造業/建設業向けの次世代ERPパッケージシステム導入における、
SCM(販売/購買領域)のパッケージ開発を行っていただきます。
・機能及び、UI/UXを含む製品設計フェーズにご参画いただきます。
※オフショア開発の可能性がある為、実開発は行わない可能性がございます。
【Azure】公共向けクラウド移行案件
750,000円/月
業務委託(フリーランス)
東京都
豊洲駅
OracleHadoopSparkAzure
ネットワークエンジニアインフラエンジニアセキュリティエンジニア
作業内容 ・クラウド環境における環境設計、構築等をご対応いただきます。
AWS データレイク・DWH管理等
650,000 〜 750,000円/月
東京都
六本木一丁目駅
PythonSparkAWSGitGoogle Cloud PlatformBigQueryHiveGlueAthenaTerraformCircleCILambda
作業内容 動画やECサイト等、Webコンテンツを数多く提供しているサービス企業において、サービス提供の根幹となるデータレイク・DWH管理などの対応をしていただきます。
主な業務内容は以下を想定していますが、詳細についてはご面談時に説明させていただきます。
1. AWSのデータレイクからBigqueryへのデータ移行作業
2. GCPデータ基盤の整備(ワークフローエンジン導入等)
→2番の作業関しては、ご意向と経験に応じてご相談となります。
＜開発環境＞
言語：Python, Hive, Spark
AWS：EMR, Glue, Athena, Lambda, APIGateway
GCP：BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows
CI・CD・その他：Terraform, CircleCI, GithubActions, digdag, embulk
＜備考＞
基本リモート
＜基本時間＞
10：00～19：00
Python / SQL / AWS など データエンジニア募集
750,000 〜 850,000円/月
東京都
半蔵門駅
PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
作業内容 下記のような案件においてデータエンジニア業務に従事いただきます。
・GPSを用いたデータの集計・予測支援
・SaaS型プロダクトの開発支援
【データ分析補佐】GPSデータを用いた予測支援
700,000円/月
業務委託(フリーランス)
リモート
PythonSQLMySQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
作業内容 1.GPSデータを用いた予測支援2.SaaS型プロダクトの開発支援 上記いずれかにおいてデータエンジニア業務に従事いただきます。
【AWS】DB構築開発運用
530,000 〜 580,000円/月
業務委託(フリーランス)
神奈川県
みなとみらい駅
リモート
PythonSQLShellLinuxUnixPostgreSQLSparkAWSApacheRedshiftCloudFormationLambda
作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！
▼概要
WS環境におけるDB構築・開発・運用をご担当いただきます。
・Redshift (PostgreSQL)上のDBテーブル設計、クエリ開発
・クラウド(AWS)を使用した製品利用ログ分析基盤の開発・運用
・AWS EMRを使用したETL, データ前処理 (Python, Spark)
▼作業工程
設計・実装・デバッグ・テスト
▼場所
大崎駅
※8月以降はみなとみらいに移転予定
※基本リモートだが作業開始時には数日出社
※今後、出社メインの可能性あり
▼精算幅
140-190ｈ
▼面談回数
1回
※WEB
▼就業時間
9時30分～18時00分
※昼休み45分
※週5日〜OKの案件です！
【AWS】インフラ構築またはサーバーサイド開発
550,000 〜 600,000円/月
業務委託(フリーランス)
JavaPythonRedisHadoopSparkAWSReactTypeScriptAthenaLambda
サーバーサイドエンジニア
作業内容 【概要】
・Lob分析サービス開発運用
・TVなどの操作Logをもとにランキングなどを出力するサービス開発
(AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発)
【勤務先】
大崎※フルリモート可(9:00~18:00)
【時間精算】下限140h~上限200h
【面談回数】2回
服装:ビジネスカジュアル
※週5日〜OKの案件です！
【フルリモート｜Python】自社サービス開発支援（在庫管理）
600,000 〜 800,000円/月
フルリモート
PythonSQLSparkAWSApache
データベースエンジニアバックエンドエンジニア
作業内容 在庫管理システムの開発支援を行っていただきます。
【業務例】
・データ基盤の運用及び保守開発
・新規データ取得のETLの設計及び実装
・構成/プロセスの見直し
・データウェアハウスの設計及び実装
・データの可視化
【開発環境】
・開発言語： Python、SQL
・インフラ： Amazon Web Services
・AWS製品： EC2、ECS、StepFunctions、S3、Redshift、Aurora(PostgreSQL)、Lambda、Cloud Watch
・ツール： GitHub、Jira、Slack
【担当工程】
基本設計,詳細設計,実装,テスト,運用・保守
【AIエンジニア】カード会社の不正検知学習モデル構築の設計・実装の求人・案件
1,000,000円/月
業務委託(フリーランス)
東京都
リモート
SparkApache
AIエンジニア
作業内容 【主な支援内容】
機械学習モデル、推論機能の設計・実装を行うチームの一人として業務
・機械学習モデル、推論機能の設計・実装
・設計、実装はAzure Databricks上で行う
【Python/SQL】自社サービスSaasのバックエンド(データ基盤)
900,000円/月
業務委託(フリーランス)
大阪府
PythonSQLSparkAWS
機械学習エンジニアバックエンドエンジニア
作業内容 ■募集背景・課題
【Python】チャットコマースプロダクト開発案件
850,000円/月
業務委託(フリーランス)
東京都
秋葉原駅
PythonSQLMySQLSpark
作業内容 ・チャットコマースサービスの開発にサーバーサイドエンジニアとして携わっていただきます。
・スキルに応じて下記作業もお任せいたします。
- データ基盤の開発・運用
- データ基盤のデータ品質担保
- データ基盤の運用効率化
【Python】Webクローラー開発の求人・案件
850,000円/月
業務委託(フリーランス)
東京都
リモート
PythonSQLPostgreSQLHadoopSparkGit
作業内容 某大手通信事業者様の生成AI基盤開発支援を行っている中でサイトクローラーの開発業務を行える方を募集しております。
【モバイルゲーム/コンシューマーゲーム開発】エフェクトデザイン案件
750,000円/月
業務委託(フリーランス)
東京都
渋谷駅
SparkMayaUnityUnreal EngineHoudini
エフェクトデザイナー
作業内容 モバイルゲーム/コンシューマーゲーム開発にて
エフェクトアーティストとして作業をお任せいたします。
具体的には下記作業を想定しております。
・エフェクト制作
・エフェクト表現の検証、作業効率化の為のツール支援
・エフェクトに関するクオリティ管理、監修
NoSQL 総合電機メーカーのビッグデータ蓄積/抽出/分析
550,000 〜 650,000円/月
東京都
品川シーサイド駅
PythonSQLDynamoDBSparkAWSApacheGraphQL
作業内容 総合電機メーカー様のビッグデータ蓄積/抽出/分析案件になります。
蓄積された種々の構造化/非構造化データを利活用するために下記をご担当いただきます。
・No SQL Databaseに格納
・データ抽出設計
・抽出用 API 作成
＜技術要素＞
AWS S3, Apache Spark, SparkSQL, Databricks, AWS AppSync(GraphQL), Python(S3に蓄積されたデータをDatabricks 経由でDynamoDBに送り、AppSyncでAPI展開するイメージ)
＜担当工程＞
データ抽出設計 ～ API 実装 ～ テスト
＜服装＞
オフィスカジュアル
【週５日･首都圏限定】自動車会社向けデータ転送処理マイグレーション（Java）
600,000円/月
業務委託(フリーランス)
神奈川県
横浜駅
リモート
JavaAWS
PGSE
作業内容 【自動車会社向けデータ転送処理マイグレーション】
AWS Lambda+Javaで実装されたデータの転送処理APPをDatabricks(ApacheSpark基盤)上で動くようにマイグレーションする。
環境
Java/AWS(Lambda)/Apache Spark
Databricks/Delta Lake/Snowflake
本案件は【首都圏】にお住まいで【週５日勤務】が可能な方限定となります。
分析基盤クラウド構築案件
1,200,000円/月
業務委託(フリーランス)
東京都
SQLLinuxHadoopSparkAWS
作業内容 オンライン・オフラインのデータをクラウド環境で統合して分析できる基盤構築を行うための環境構築、ETL設計・開発、データ抽出を行います。
データを効果的・効率的に活用するための基盤を構築する戦略的なポジションになります。
クラウド環境：AWS
【機械学習,画像認識】パッケージ製品へのAI関連の機能開発支援
800,000円/月
業務委託(フリーランス)
東京都
HadoopSpark
作業内容 パッケージ製品へのAI関連の機能の
拡充を検討されており、その開発のご支援となります。
具体的には、
・機械学習を用いた処理の最適化機能
・画像認識機能、OCR機能
・音声での対話入出力機能
が初期スコープとなっております。
AWS 分散DBを用いたデータ基盤のインフラエンジニア
700,000 〜 750,000円/月
東京都
HbaseSparkAWSHive
インフラエンジニア
作業内容 テレビ視聴データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMRでの Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
＜備考＞
フルリモート
【上流/Java】製造業・建設業SCMパッケージ開発案件
800,000円/月
業務委託(フリーランス)
東京都
六本木一丁目駅
JavaCassandraHadoopSpark
作業内容 ・製造業/建設業向けの次世代ERPパッケージシステム導入における、
SCM(販売/購買領域)のパッケージ開発を行っていただきます。
・機能及び、UI/UXを含む製品設計フェーズにご参画いただきます。
※オフショア開発の可能性がある為、実開発は行わない可能性がございます。
【Python】トレーサビリティ構築案件
550,000円/月
業務委託(フリーランス)
愛知県
国際センター駅
PythonAzure
作業内容 ・トレーサビリティ構築に携わっていただきます。
・複数システムからの部品の所在データのIF、DWH・Data Martの実装、テスト、リリース作業をご担当いただきます。
・基本設計以降のフェーズをご対応いただきます。
・開発環境は下記になります。
Databricks, Azure, Apache Spark
【AWS/フルリモート可能】エンドユーザー向けAWS ETL環境の設計レビュー・改善・実装・メンテナンスの案件・求人
900,000円/月
業務委託(フリーランス)
フルリモート
MySQLDynamoDBSparkAWSApacheGitHubRedshift
作業内容 ＝＝＝＝＝＝＝＝＝＝＝
※重要※
▼必ずお読みください▼
【必須要件】
・20～40代までの方、活躍中！
・日本語ビジネスレベル必須
・週5日稼働必須
・実務経験3年以上必須
＝＝＝＝＝＝＝＝＝＝＝
既存のAWS ETL環境の調査改善
・メンテ作業の手順化、運用作業（テーブル追加、カラム変更程度）
※対象環境は、ミッションクリティカルではないデータ処理基盤となる上位にて他PJへのスライド案件も御紹介可能で御座います。
【AWS/MySQL/リモート併用】ETL環境の設計レビュー・改善・実装・メンテナンスの案件・求人
850,000円/月
業務委託(フリーランス)
リモート
MySQLDynamoDBSparkAWSApacheRedshiftGlue
作業内容 ＝＝＝＝＝＝＝＝＝＝＝
※重要※
▼必ずお読みください▼
【必須要件】
・20～40代までの方、活躍中！
・日本語ビジネスレベル必須
・週5日稼働必須
・実務経験3年以上必須
＝＝＝＝＝＝＝＝＝＝＝
・既存のAWSETL環境の調査改善・メンテ作業の手順化および運用作業（テーブル追加やカラム変更程度）※対象環境はミッションクリティカルではないデータ処理基盤となる
【日本語ネイティブの方、活躍中！】
【20代・30代・40代、活躍中！】
【出社可能な方、活躍中！】
【JavaScript】医療系アプリ開発案件
800,000円/月
業務委託(フリーランス)
東京都
人形町駅
JavaScriptUnixMongoDBNode.jsHadoopSparkGitGitHubReactHive
作業内容 ・クライアントの自社プロダクトの開発に携わっていただきます。
・具体的には下記の作業を行っていただきます。
-プロダクト改善への提案、情報収集とその共有
-自動化のための整備
-外部への情報発信 Qiitaやブログでの記事投稿
-可能であれば、テックリードとしてチームをマネジメント
【SQL/Python】システム開発データエンジニア案件
850,000円/月
業務委託(フリーランス)
東京都
半蔵門駅
PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・データエンジニアとして、下記のいずれかをご対応いただきます。
‐通信会社販促システム開発
‐小売/流通のシステム開発
‐広告や社内プロダクトの開発
【Azure】機能障害・不足の解消案件
600,000円/月
業務委託(フリーランス)
大阪府
堺東駅
SparkAzureApache
作業内容 ・機能障害、不足の解消作業に携わっていただきます。
・主な作業内容は以下の通りです。
-性能障害の対応含む（最近、クラウド処理遅延等の調査等）新機能への対応
※IoT対応、ログ伝送対応など
-データの品質管理
-データの取込対応
【Linux】ビックデータリプレース案件
550,000円/月
業務委託(フリーランス)
愛知県
久屋大通駅
JavaLinux
サーバーエンジニア
作業内容 ・Linuxコマンドを用いたビックデータの移行作業に携わっていただきます。
・主に以下のような業務に携わっていただきます。
＜メイン作業＞
移行作業（移行手順書作成、移行作業操作）
・Linuxコマンド
・Spark（Scala≒JavaのSpark処理）
・SnowflakeDB参照（他のDBと大差なし）
＜サブ作業＞
・JavaによるSnowflake API（Snowpark API）作成
・JavaによるAzure Functions作成
【業務委託】【スマートフォン向け有名ファンタジーRPG】エフェクトデザイン案件
600,000円/月
業務委託(フリーランス)
東京都
初台駅
SparkFlashRPGSpriteStudioBISHAMON
エフェクトデザイナー
作業内容 スマートフォンゲームにおいて、
エフェクトデザイナーとして作業をお任せいたします。
具体的な作業は下記を想定しております。
・魔法やスキルエフェクトの制作
・背景（環境）エフェクトの制作
・画面演出、文字演出の制作
【Objective-C/Swift】Bigqueryデータ移行案件
700,000円/月
業務委託(フリーランス)
東京都
六本木駅
Objective-CMySQLSparkAWSSwiftGoogle Cloud PlatformBigQueryHive
ネットワークエンジニアスマホアプリエンジニア
作業内容 ・AWSのデータレイクからBigqueryへのデータ移行をおこなっていただきます｡
・下記を行っていただきます｡
-GCPデータ基盤の整備
-ワークフローエンジン導入
【週５日･首都圏限定】外資系生命保険会社システム開発（Azure）
600,000円/月
業務委託(フリーランス) / 契約社員
東京都
汐留駅
SQLSparkAzureApache
SE
作業内容 外資系生命保険会社システム開発（Azure）
新規プロジェクトの中で、azure環境での開発を実施。
要件定義、基本設計を実施する。
本案件は【首都圏】にお住まいで【週５日勤務】が可能な方限定となります。
【Java/AWS】自社プロダクト開発
600,000円/月
業務委託(フリーランス)
大阪府
四ツ橋駅
JavaSQL ServerDynamoDBSpringAWS
作業内容 Javaを用いて自社プロダクトの開発をご担当いただきます。
ECサイトを作るSaaSで購買データなどを貯めたものを集計し、APIでデータを返す機能を開発します。
ご担当していただく工程は、API開発もしくは流れてきたデータを処理するETL部分でございます。
【Java】レコメンドエンジン開発案件
850,000円/月
業務委託(フリーランス)
東京都
恵比寿駅
JavaMySQLHadoopSpark
作業内容 ・自社のレコメンドエンジン開発に携わっていただきます。
・具体的には以下のような作業がございます。
-Node.jsでのAPI設計、開発、テスト
-Hiveクエリの作成、テスト、チューニング
-Sparkプログラムの設計、開発・テスト
-Jenkinsジョブの作成
-Ansible設定ファイルの作成
【スマートフォン/コンシューマ向けRPG】エフェクトデザイン案件
500,000円/月
業務委託(フリーランス)
東京都
六本木駅
SparkUnityAfter EffectsRPG
エフェクトデザイナー
作業内容 某IPを用いたスマートフォン及びコンシューマ向けRPGゲームにおいて、
エフェクトデザイナーとして作業をお任せいたします。
具体的な作業内容は下記を想定しております。
・キャラクターの攻撃等の演出、UIなどのエフェクト制作
・ユーザー体験を最大化させる演出の提案、コンテ制作
【Python/基本リモート/週5日】通信事業者向けゼロタッチオペレーション開発支援
400,000 〜 500,000円/月
業務委託(フリーランス)
神奈川県
武蔵小杉駅
Python
サーバーサイドエンジニアバックエンドエンジニア
作業内容 要件定義,基本設計,詳細設計,実装,テスト,運用・保守
データ蓄積基盤の開発
下記いずれかに該当する方を求めています。
・Java/Scala/Pythonの開発経験
・Scala/Sparkジョブ or AWS Kinesisによるストリーミング処理開発経験
・OSS(Kafka,Spark,Haddp,Flink)などを利用したストリーミング処理開発経験
・Pandasライブライを用いた開発経験
・DataPipeline構築経験(ETL開発経験)
・AWS上でのシステム開発経験3年以上
・Lambda、Glue Streaming job、DynamoDB、Redshift、RDSなどのマネージドサービス利用
・ServerlessFrameworkやCloudFormationを用いたリソース管理
・RDB/DWHの設計、パフォーマンスチューニングを行った経験
・アジャイルでのシステム開発経験
・JIRA/Confluence/Backlogなどを利用した開発経験
【Python / 20代30代活躍中】大手自動車メーカー向けAI関連システム開発
910,000 〜 960,000円/月
業務委託(フリーランス)
東京都
品川駅
リモート
PythonHadoopDjangoSparkAWS
作業内容 テックビズなら記帳代行無料！仕事に集中して取り組んでいただけます。
案件内容 ：運送会社向けにドライバーの運行情報を解析するアプリ開発をPoCを回しながら行っております。
デジタルタコグラフから取得した大量の運行情報をAWS環境上で蓄積し、
Djangoにて解析を行うシステムの開発を担当していただきます。
勤務時間 ：9:00～18:00（予定）
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・外国籍の方(永住権をお持ちの方は問題ございません)
・週5日稼働できない方
--------------------------------------------------------
気になる案件は見つかりましたか？
お探しの条件に合った新着案件をお知らせします
掛け合わせ条件で絞り込む
- 特徴で絞り込む
- Spark × 在宅・リモート
その他の条件で検索する
あなたにピッタリの
フリーランス案件が見つかる
134万件以上のフリーランス案件から一括検索
349,405件※の案件を保有しており、エンジニアやクリエイター向けを中心にたくさんの案件を一括検索可能です。
※ 3月14日(Sat)更新
2あなたの経験やスキルに適した案件をメールでお知らせ
マイページに入力して頂いた経験や希望条件に合わせて、ご希望にマッチした案件をメールでお送りするので効率的な案件探しが可能です。
Sparkの案件・求人