Spark × 在宅・リモートのフリーランス案件・求人一覧 | 2ページ目
- リモートOK
Spark × 在宅・リモートの案件・求人一覧 2ページ目
41-80 / 全 322 件
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
600,000 〜 900,000円/月
東京都
浜松町駅
HadoopSparkAWSApache
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
リモート併用｜【Hadoop/Spark/AmazonKinesis】オンプレミスサーバ運用（バックエンドエンジニア）
700,000円/月
業務委託(フリーランス)
東京都
東新宿駅
HadoopSpark
バックエンドエンジニア
作業内容 【概 要】 Hadoop運用/およびLinuxサーバの運用業務となります。
オンプレサーバ運用かつ、新規運用となりますのでLinux運用経験/運用設計が可能な方を想定しています。
・Hadoopまたは類似システムの運用経験があること
（優先度としては、Hadoop>類似のシステムSpark/AmazonKinesisなど)
【日本語ネイティブの方、活躍中！】
【20代・30代・40代、活躍中！】
【出社可能な方、活躍中！】
【Java・Python/基本リモート/週5日】某通信会社向け開発支援作業
400,000 〜 550,000円/月
業務委託(フリーランス)
神奈川県
武蔵小杉駅
JavaPythonScalaSparkKafka
サーバーサイドエンジニアバックエンドエンジニア
作業内容
某通信会社向け開発支援作業
【Python/フルリモート】自社サービス開発支援（在庫管理）
700,000円/月
業務委託(フリーランス)
東京都
PythonSparkApache
サーバーサイドエンジニア
作業内容 ・データ基盤の運用及び保守開発
・新規データ取得のETLの設計及び実装
・構成/プロセスの見直し
・データウェアハウスの設計及び実装
・データの可視化
【Python】在庫管理システムデータ基盤構築
800,000円/月
業務委託(フリーランス)
大阪府
福島駅
PythonSQLSparkDockerJIRAGitHub
サーバーサイドエンジニア
作業内容 在庫管理システムのデータ基盤構築に携わっていただきます。
【Python】マーケティングデータ処理開発
670,000 〜 720,000円/月
業務委託(フリーランス)
リモート
JavaPythonRubyScalaHadoopSparkHive
作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！
【概要】マーケティングデータ処理開発
【開発環境】
-言語:Java、Scala(一部:Python、Ruby)
【精算幅】140-180h
【面談】1回
【勤務地】リモート
【備考】
・服装:自由
・就業時間:9:00-17:30
※週5日〜OKの案件です！
【AWS/GCP/Python/フルリモート】AWSデータレイクの構築やGCPデータ基盤の整備
600,000 〜 900,000円/月
東京都
六本木一丁目駅
PythonSparkAWSApacheGoogle Cloud Platform
作業内容 データレイクやDWH管理を行っているチームにて、下記業務をご対応いただきます。
・AWSからGCPへの移行作業
・GCPのデータ基盤構築
データ加工処理マイグレーション検討
700,000 〜 900,000円/月
東京都
門前仲町駅
HadoopSparkAWSApacheSnowflakeGlue
作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。
現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。
現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。
※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ
クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。
現在想定しているマイグレーション例は、以下の通りです。
-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換
→Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）等の
Spark関連マネージド・サービスにマイグレーション
＜就業時間＞
9:00ｰ18:00
※※こちらの案件は現在募集を終了しております※※
【AWS】 ETL環境の設計レビュー・改善・実装・メンテナンス
700,000円/月
業務委託(フリーランス)
東京都
MySQLDynamoDBSparkAWSApacheRedshiftGlue
インフラエンジニア
作業内容 ・既存のAWS ETL環境の調査改善
・メンテ作業の手順化および運用作業（テーブル追加やカラム変更程度）
※対象環境はミッションクリティカルではないデータ処理基盤となる
Python エンドユーザー向けAWS基盤の開発
700,000 〜 800,000円/月
東京都
六本木駅
PythonSparkAWS
作業内容 既存のAWSデータレイク基盤をベースにした追加開発
【AWS】テレビ視聴データ基盤分析案件
850,000円/月
業務委託(フリーランス)
東京都
田町駅
HbaseHadoopSparkAWSHive
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 システム基盤の運用改善をご担当いただきます。
【Linux】ソフトウェア基盤（ミドルウェア）環境構築
500,000円/月
業務委託(フリーランス)
大阪府
大正駅
LinuxOracleHadoopSparkApacheJBoss
サーバーエンジニア
作業内容 ソフトウェア基盤（ミドルウェア）環境の設計、構築、維持管理業務全般をしていただきます。
【AWS】地図広告プラットフォーム開発
750,000 〜 800,000円/月
業務委託(フリーランス)
東京都
虎ノ門駅
リモート
PythonHadoopSparkAWSHiveGlueAthena
作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！
【概要】
【精算幅】140-180h
【面談】1回
【勤務地】虎ノ門※リモート
【備考】
・服装:自由
・就業時間:9:00-18:00
※週5日〜OKの案件です！
【リモート可｜AWS構築・データ処理】新規プロダクトのインフラ構築
500,000 〜 700,000円/月
リモート
PythonNode.jsSparkAWSDocker
作業内容 新規プロダクトである地図広告P/Fのインフラ設計、開発、テストをご担当していただきます。
AWS上でのデータ処理やクエリーワークロードの設計、デプロイ、
監視のためのMapboxのプロセスとツールの簡素化と強化が主要業務となります。
開発、営業、その他チームとの連携も重要となります。
【AWS】データマネジメントシステム更改案件における構築支援業務
600,000円/月
業務委託(フリーランス)
東京都
AWS
サーバーエンジニア
作業内容 データマネジメントインフラ支援業務など、
IT基盤戦略担当様のDMシステム更改案件における構築支援業務を行っていただきます。
【AWS】AWS ETL環境運用案件
800,000円/月
業務委託(フリーランス)
東京都
渋谷駅
MySQLDynamoDBSparkAWSApacheRedshiftGlue
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・下記を行っていただきます。
‐既存のAWS ETL環境の調査改善
‐メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となります
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
600,000 〜 1,000,000円/月
業務委託(フリーランス)
HadoopAWSTerraform
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
【Linux】ソフトウェア基盤（ミドルウェア）環境構築
500,000円/月
業務委託(フリーランス)
大阪府
大正駅
LinuxOracleHadoopSparkApacheJBoss
サーバーエンジニア
作業内容 ソフトウェア基盤（ミドルウェア）環境の設計、構築、維持管理業務全般をしていただきます。
【データエンジニア】★即日～★データエンジニア
600,000円/月
業務委託(フリーランス)
東京都
HadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティスト
作業内容 ①某大手通信会社販促システム開発
②某大手小売・流通のシステム開発
③広告や社内プロダクトの開発
上記いずれかにおいてデータエンジニア業務に従事いただきます。
【Databricks】大手損保会社 Databricksノートブック開発/フルリモート
700,000円/月
業務委託(フリーランス)
東京都
PythonSpark
サーバーサイドエンジニア
作業内容 要件定義/設計～試験、導入、顧客向け資料作成および説明
※ Hadoopのサポート切れに伴い、Hadoop上に保管されている大量の顧客データをDatabricksに移行し、既存の連携バッチをDatabricksに移行する見込みのため、案件開始時の技術者を探しているという状況です。
今年度中に参画可能な技術者がいる場合でもご提案いただきたいです。
【データ分析】データエンジニア募集
850,000円/月
業務委託(フリーランス)
東京都
PythonHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティスト
作業内容 ①某大手通信会社販促システム開発
②某大手小売・流通のシステム開発
③広告や社内プロダクトの開発
上記いずれかにおいてデータエンジニア業務に従事いただきます。
【週5日/リモートメイン/Python】データエンジニア
768,000円/月
業務委託(フリーランス)
PythonDynamoDBSparkAWSAmazon S3ApacheKafka
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
--------------------------------
某大手自動車メーカーの「運転診断システム」のデータエンジニアを募集しております。
＜業務内容＞
AWSのクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。
Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。
ビッグデータ技術（Hadoop, Sparkなど）を用いて大規模データセットのバッチおよびリアルタイム処理を実行します。
ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。
【Python】大手小売業向けアプリケーション開発案件
800,000円/月
業務委託(フリーランス)
東京都
大手町駅
PythonSparkGoogle Cloud PlatformBigQuery
作業内容 ・大手小売業向けアプリケーションの運用保守、改善開発案件に携わっていただきます。
・作業内容において主に下記作業をご担当いただきます。
-AIモデルの運用保守および改善開発
-GCP上で展開される複数のAIモデルの定期的な運用
-AIモデルにエラーが発生した場合にはその対応
-効果測定
-モデル改善の実装
【Azure】公共向けクラウド移行案件
750,000円/月
業務委託(フリーランス)
東京都
豊洲駅
OracleHadoopSparkAzure
ネットワークエンジニアインフラエンジニアセキュリティエンジニア
作業内容 ・クラウド環境における環境設計、構築等をご対応いただきます。
【フルリモート｜Python】自社サービス開発支援（在庫管理）
600,000 〜 800,000円/月
フルリモート
PythonSQLSparkAWSApache
データベースエンジニアバックエンドエンジニア
作業内容 在庫管理システムの開発支援を行っていただきます。
【業務例】
・データ基盤の運用及び保守開発
・新規データ取得のETLの設計及び実装
・構成/プロセスの見直し
・データウェアハウスの設計及び実装
・データの可視化
【開発環境】
・開発言語： Python、SQL
・インフラ： Amazon Web Services
・AWS製品： EC2、ECS、StepFunctions、S3、Redshift、Aurora(PostgreSQL)、Lambda、Cloud Watch
・ツール： GitHub、Jira、Slack
【担当工程】
基本設計,詳細設計,実装,テスト,運用・保守
【AWS】インフラ構築またはサーバーサイド開発
550,000 〜 600,000円/月
業務委託(フリーランス)
JavaPythonRedisHadoopSparkAWSReactTypeScriptAthenaLambda
サーバーサイドエンジニア
作業内容 【概要】
・Lob分析サービス開発運用
・TVなどの操作Logをもとにランキングなどを出力するサービス開発
(AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発)
【勤務先】
大崎※フルリモート可(9:00~18:00)
【時間精算】下限140h~上限200h
【面談回数】2回
服装:ビジネスカジュアル
※週5日〜OKの案件です！
【Python】チャットコマースプロダクト開発案件
850,000円/月
業務委託(フリーランス)
東京都
秋葉原駅
PythonSQLMySQLSpark
作業内容 ・チャットコマースサービスの開発にサーバーサイドエンジニアとして携わっていただきます。
・スキルに応じて下記作業もお任せいたします。
- データ基盤の開発・運用
- データ基盤のデータ品質担保
- データ基盤の運用効率化
【Python】某大手小売・流通のシステム開発または広告や社内プロダクトの開発
470,000 〜 520,000円/月
業務委託(フリーランス)
東京都
半蔵門駅
リモート
PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud PlatformKubernetes
作業内容 【概要】①某大手小売・流通のシステム開発
②広告や社内プロダクトの開発
上記いずれかにおいてデータエンジニア業務に従事いただきます。
案件カテゴリー： 開発
最寄駅：半蔵門※リモート可
打合せ回数：2回
※週5日〜OKの案件です！
【Python/SQL】自社サービスSaasのバックエンド(データ基盤)
900,000円/月
業務委託(フリーランス)
大阪府
PythonSQLSparkAWS
機械学習エンジニアバックエンドエンジニア
作業内容 ■募集背景・課題
【AIエンジニア】カード会社の不正検知学習モデル構築の設計・実装の求人・案件
1,000,000円/月
業務委託(フリーランス)
東京都
リモート
SparkApache
AIエンジニア
作業内容 【主な支援内容】
機械学習モデル、推論機能の設計・実装を行うチームの一人として業務
・機械学習モデル、推論機能の設計・実装
・設計、実装はAzure Databricks上で行う
【Python】Webクローラー開発の求人・案件
850,000円/月
業務委託(フリーランス)
東京都
リモート
PythonSQLPostgreSQLHadoopSparkGit
作業内容 某大手通信事業者様の生成AI基盤開発支援を行っている中でサイトクローラーの開発業務を行える方を募集しております。
Python / SQL / AWS など データエンジニア募集
750,000 〜 850,000円/月
東京都
半蔵門駅
PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
作業内容 下記のような案件においてデータエンジニア業務に従事いただきます。
・GPSを用いたデータの集計・予測支援
・SaaS型プロダクトの開発支援
【Python】データエンジニア
700,000円/月
業務委託(フリーランス)
東京都
PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティスト
作業内容 ①某大手通信会社販促システム開発
②某大手小売・流通のシステム開発
③広告や社内プロダクトの開発
上記いずれかにおいてデータエンジニア業務に従事いただきます。
【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件
700,000円/月
業務委託(フリーランス)
東京都
リモート
JavaPythonKubernetes
バックエンドエンジニア
作業内容 現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。
PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。
データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 （SSL化対応、AD認証連携 etc…)
環境
オンプレサーバー (現地作業等は無し、リモートから接続)
OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…)
データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品
(サポートが付くだけのようなイメージ)
HPE Ezmeral Runtime (≒ Kubernetes)
OpenShift等に⽐べ、より純正Kubernetesに近い
構成
データレイク: HDFS, minio(≒S3), HBase
DWH: Hive or Spark
ワークフロー: NiFi or Airflow
データ加⼯: Hive, Spark (シェルスクリプト/Java or Python)
BI: Tableau, Palantir (本募集スコープの作業範囲外)
体制
アジャイル開発 (スクラム)
メンバー10名程度
デイリーで午前にスクラムミーティング有り
AWS データレイク・DWH管理等
650,000 〜 750,000円/月
東京都
六本木一丁目駅
PythonSparkAWSGitGoogle Cloud PlatformBigQueryHiveGlueAthenaTerraformCircleCILambda
作業内容 動画やECサイト等、Webコンテンツを数多く提供しているサービス企業において、サービス提供の根幹となるデータレイク・DWH管理などの対応をしていただきます。
主な業務内容は以下を想定していますが、詳細についてはご面談時に説明させていただきます。
1. AWSのデータレイクからBigqueryへのデータ移行作業
2. GCPデータ基盤の整備(ワークフローエンジン導入等)
→2番の作業関しては、ご意向と経験に応じてご相談となります。
＜開発環境＞
言語：Python, Hive, Spark
AWS：EMR, Glue, Athena, Lambda, APIGateway
GCP：BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows
CI・CD・その他：Terraform, CircleCI, GithubActions, digdag, embulk
＜備考＞
基本リモート
＜基本時間＞
10：00～19：00
【AWS】DB構築開発運用
530,000 〜 580,000円/月
業務委託(フリーランス)
神奈川県
みなとみらい駅
リモート
PythonSQLShellLinuxUnixPostgreSQLSparkAWSApacheRedshiftCloudFormationLambda
作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！
▼概要
WS環境におけるDB構築・開発・運用をご担当いただきます。
・Redshift (PostgreSQL)上のDBテーブル設計、クエリ開発
・クラウド(AWS)を使用した製品利用ログ分析基盤の開発・運用
・AWS EMRを使用したETL, データ前処理 (Python, Spark)
▼作業工程
設計・実装・デバッグ・テスト
▼場所
大崎駅
※8月以降はみなとみらいに移転予定
※基本リモートだが作業開始時には数日出社
※今後、出社メインの可能性あり
▼精算幅
140-190ｈ
▼面談回数
1回
※WEB
▼就業時間
9時30分～18時00分
※昼休み45分
※週5日〜OKの案件です！
【Python】データエンジニア募集
850,000円/月
業務委託(フリーランス)
東京都
PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティスト
作業内容 ①GPSを用いたデータの集計・予測支援
②SaaS型プロダクトの開発支援
上記いずれかにおいてデータエンジニア業務に従事いただきます。
【データ分析補佐】GPSデータを用いた予測支援
700,000円/月
業務委託(フリーランス)
リモート
PythonSQLMySQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
作業内容 1.GPSデータを用いた予測支援2.SaaS型プロダクトの開発支援 上記いずれかにおいてデータエンジニア業務に従事いただきます。
AWS 分散DBを用いたデータ基盤のインフラエンジニア
700,000 〜 750,000円/月
東京都
HbaseSparkAWSHive
インフラエンジニア
作業内容 テレビ視聴データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMRでの Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
＜備考＞
フルリモート
【週５日･首都圏限定】自動車会社向けデータ転送処理マイグレーション（Java）
600,000円/月
業務委託(フリーランス)
神奈川県
横浜駅
リモート
JavaAWS
PGSE
作業内容 【自動車会社向けデータ転送処理マイグレーション】
AWS Lambda+Javaで実装されたデータの転送処理APPをDatabricks(ApacheSpark基盤)上で動くようにマイグレーションする。
環境
Java/AWS(Lambda)/Apache Spark
Databricks/Delta Lake/Snowflake
本案件は【首都圏】にお住まいで【週５日勤務】が可能な方限定となります。
気になる案件は見つかりましたか？
お探しの条件に合った新着案件をお知らせします
その他の条件で検索する
あなたにピッタリの
フリーランス案件が見つかる
135万件以上のフリーランス案件から一括検索
359,105件※の案件を保有しており、エンジニアやクリエイター向けを中心にたくさんの案件を一括検索可能です。
※ 9月28日(Sun)更新
2あなたの経験やスキルに適した案件をメールでお知らせ
マイページに入力して頂いた経験や希望条件に合わせて、ご希望にマッチした案件をメールでお送りするので効率的な案件探しが可能です。
Spark × 在宅・リモートの案件・求人