Sparkのフリーランス案件・求人一覧 | 6ページ目

800,000円/月

業務委託(フリーランス)

東京都

渋谷駅

MySQLDynamoDBSparkAWSApacheRedshiftGlue

データサイエンティストインフラエンジニアデータベースエンジニア

作業内容・下記を行っていただきます。 ‐既存のAWS ETL環境の調査改善 ‐メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度) ※対象環境はミッションクリティカルではないデータ処理基盤となります

【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集

600,000 〜 1,000,000円/月

業務委託(フリーランス)

HadoopAWSTerraform

インフラエンジニア

作業内容データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。

【SPARK GEAR】【ソーシャルゲーム向け】エフェクト制作案件

500,000円/月

業務委託(フリーランス)

Spark

エフェクトデザイナー

作業内容ソーシャルゲーム制作においてSPARK GEARを使用したエフェクト制作をお任せいたします。 ※お任せする作業はスキルに応じて異なります。

【Python】大手小売業向けアプリケーション開発案件

800,000円/月

業務委託(フリーランス)

東京都

大手町駅

PythonSparkGoogle Cloud PlatformBigQuery

作業内容・大手小売業向けアプリケーションの運用保守、改善開発案件に携わっていただきます。・作業内容において主に下記作業をご担当いただきます。　-AIモデルの運用保守および改善開発　-GCP上で展開される複数のAIモデルの定期的な運用　-AIモデルにエラーが発生した場合にはその対応　-効果測定　-モデル改善の実装

【週5日/リモートメイン/Python】データエンジニア

768,000円/月

業務委託(フリーランス)

PythonDynamoDBSparkAWSAmazon S3ApacheKafka

作業内容 -------------------------------- ※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です ※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です -------------------------------- 某大手自動車メーカーの「運転診断システム」のデータエンジニアを募集しております。＜業務内容＞ AWSのクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。 Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。ビッグデータ技術（Hadoop, Sparkなど）を用いて大規模データセットのバッチおよびリアルタイム処理を実行します。 ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。

設定していない条件はありませんか？

スキル･リモート･単価などで絞り込み、
効率よく案件を探せます。

【Java】SCMパッケージ新規開発案件

700,000円/月

業務委託(フリーランス)

東京都

六本木一丁目駅

JavaCassandraHadoopSpark

作業内容・SCMパッケージにおける新規開発プロジェクトに携わって頂きます。・UI/UXを意識した業務機能の画面設計をご担当頂きます。・各種調整業務を行って頂く可能性もございます。

【Azure】システム保守案件

オンライン商談OK

750,000円/月

業務委託(フリーランス)

大阪府

堺東駅

SparkAzureApache

作業内容・Azureを用いたシステム保守案件に携わっていただきます。・主に下記作業をご担当いただきます。　-機能障害、不足の解消(性能障害の対応) 　-新機能への対応　-データの品質管理　-データの取込対応　-システム運用

【Python】ヘルスケア関連システム開発案件

700,000円/月

業務委託(フリーランス)

東京都

品川駅

PythonJSONSparkApache

作業内容・ヘルスケア関連システムにおいて、　サーバーサイド開発に携わっていただきます。・ご参画いただく方のスキルやご経験に応じて、　基本設計～保守まで、幅広くご活躍いただけます。

【DBエンジニア】データ基盤構築PoCプロジェクトの求人・案件

700,000円/月

業務委託(フリーランス)

東京都

リモート

JavaPythonKubernetes

バックエンドエンジニア

作業内容現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。データ基盤要件定義データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリングデータレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応（SSL化対応、AD認証連携 etc…) 　　　環境オンプレサーバー (現地作業等は無し、リモートから接続) OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…) データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品 (サポートが付くだけのようなイメージ) HPE Ezmeral Runtime (≒ Kubernetes) OpenShift等に⽐べ、より純正Kubernetesに近い構成データレイク: HDFS, minio(≒S3), HBase DWH: Hive or Spark ワークフロー: NiFi or Airflow データ加⼯: Hive, Spark (シェルスクリプト/Java or Python) BI: Tableau, Palantir (本募集スコープの作業範囲外) 体制アジャイル開発 (スクラム) メンバー10名程度デイリーで午前にスクラムミーティング有り

【Python】某大手小売・流通のシステム開発または広告や社内プロダクトの開発

470,000 〜 520,000円/月

業務委託(フリーランス)

東京都

半蔵門駅

リモート

PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud PlatformKubernetes

作業内容【概要】①某大手小売・流通のシステム開発 ②広告や社内プロダクトの開発上記いずれかにおいてデータエンジニア業務に従事いただきます。案件カテゴリー：開発最寄駅：半蔵門※リモート可打合せ回数：2回 ※週5日〜OKの案件です！

Python / SQL / AWS などデータエンジニア募集

750,000 〜 850,000円/月

東京都

半蔵門駅

PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform

作業内容下記のような案件においてデータエンジニア業務に従事いただきます。・GPSを用いたデータの集計・予測支援・SaaS型プロダクトの開発支援

【Java】製造業・建設業SCMパッケージ開発案件

800,000円/月

業務委託(フリーランス)

東京都

六本木一丁目駅

JavaCassandraHadoopSpark

作業内容・製造業/建設業向けの次世代ERPパッケージシステム導入における、　SCM(販売/購買領域)のパッケージ開発を行っていただきます。・機能及び、UI/UXを含む製品設計フェーズにご参画いただきます。　※オフショア開発の可能性がある為、実開発は行わない可能性がございます。

【Azure】公共向けクラウド移行案件

750,000円/月

業務委託(フリーランス)

東京都

豊洲駅

OracleHadoopSparkAzure

ネットワークエンジニアインフラエンジニアセキュリティエンジニア

作業内容・クラウド環境における環境設計、構築等をご対応いただきます。

AWS データレイク・DWH管理等

650,000 〜 750,000円/月

東京都

六本木一丁目駅

PythonSparkAWSGitGoogle Cloud PlatformBigQueryHiveGlueAthenaTerraformCircleCILambda

作業内容動画やECサイト等、Webコンテンツを数多く提供しているサービス企業において、サービス提供の根幹となるデータレイク・DWH管理などの対応をしていただきます。主な業務内容は以下を想定していますが、詳細についてはご面談時に説明させていただきます。 1. AWSのデータレイクからBigqueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) →2番の作業関しては、ご意向と経験に応じてご相談となります。＜開発環境＞言語：Python, Hive, Spark AWS：EMR, Glue, Athena, Lambda, APIGateway GCP：BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows CI・CD・その他：Terraform, CircleCI, GithubActions, digdag, embulk ＜備考＞基本リモート＜基本時間＞ 10：00～19：00

【データ分析補佐】GPSデータを用いた予測支援

700,000円/月

業務委託(フリーランス)

リモート

PythonSQLMySQLHadoopSparkAWSAzureApacheGoogle Cloud Platform

作業内容 1.GPSデータを用いた予測支援2.SaaS型プロダクトの開発支援上記いずれかにおいてデータエンジニア業務に従事いただきます。

設定していない条件はありませんか？

スキル･リモート･単価などで絞り込み、
効率よく案件を探せます。

【AWS】DB構築開発運用

530,000 〜 580,000円/月

業務委託(フリーランス)

神奈川県

みなとみらい駅

リモート

PythonSQLShellLinuxUnixPostgreSQLSparkAWSApacheRedshiftCloudFormationLambda

作業内容テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ ▼概要　WS環境におけるDB構築・開発・運用をご担当いただきます。・Redshift (PostgreSQL)上のDBテーブル設計、クエリ開発・クラウド(AWS)を使用した製品利用ログ分析基盤の開発・運用・AWS EMRを使用したETL, データ前処理 (Python, Spark) ▼作業工程設計・実装・デバッグ・テスト ▼場所大崎駅 ※8月以降はみなとみらいに移転予定 ※基本リモートだが作業開始時には数日出社 ※今後、出社メインの可能性あり ▼精算幅 140-190ｈ　 ▼面談回数 1回 ※WEB ▼就業時間 9時30分～18時00分 ※昼休み45分 ※週5日〜OKの案件です！

【AWS】インフラ構築またはサーバーサイド開発

550,000 〜 600,000円/月

業務委託(フリーランス)

JavaPythonRedisHadoopSparkAWSReactTypeScriptAthenaLambda

サーバーサイドエンジニア

作業内容【概要】・Lob分析サービス開発運用・TVなどの操作Logをもとにランキングなどを出力するサービス開発 (AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発) 【勤務先】大崎※フルリモート可(9:00~18:00) 【時間精算】下限140h~上限200h 【面談回数】2回服装:ビジネスカジュアル ※週5日〜OKの案件です！

【フルリモート｜Python】自社サービス開発支援（在庫管理）

600,000 〜 800,000円/月

フルリモート

PythonSQLSparkAWSApache

データベースエンジニアバックエンドエンジニア

作業内容在庫管理システムの開発支援を行っていただきます。【業務例】・データ基盤の運用及び保守開発・新規データ取得のETLの設計及び実装・構成/プロセスの見直し・データウェアハウスの設計及び実装・データの可視化【開発環境】・開発言語： Python、SQL ・インフラ： Amazon Web Services ・AWS製品： EC2、ECS、StepFunctions、S3、Redshift、Aurora(PostgreSQL)、Lambda、Cloud Watch ・ツール： GitHub、Jira、Slack 【担当工程】　基本設計,詳細設計,実装,テスト,運用・保守

【Python】チャットコマースプロダクト開発案件

850,000円/月

業務委託(フリーランス)

東京都

秋葉原駅

PythonSQLMySQLSpark

作業内容・チャットコマースサービスの開発にサーバーサイドエンジニアとして携わっていただきます。・スキルに応じて下記作業もお任せいたします。　- データ基盤の開発・運用　- データ基盤のデータ品質担保　- データ基盤の運用効率化

【モバイルゲーム/コンシューマーゲーム開発】エフェクトデザイン案件

750,000円/月

業務委託(フリーランス)

東京都

渋谷駅

SparkMayaUnityUnreal EngineHoudini

エフェクトデザイナー

作業内容モバイルゲーム/コンシューマーゲーム開発にてエフェクトアーティストとして作業をお任せいたします。具体的には下記作業を想定しております。・エフェクト制作・エフェクト表現の検証、作業効率化の為のツール支援・エフェクトに関するクオリティ管理、監修

【AIエンジニア】カード会社の不正検知学習モデル構築の設計・実装の求人・案件

1,000,000円/月

業務委託(フリーランス)

東京都

リモート

SparkApache

AIエンジニア

作業内容【主な支援内容】機械学習モデル、推論機能の設計・実装を行うチームの一人として業務・機械学習モデル、推論機能の設計・実装・設計、実装はAzure Databricks上で行う

【Python/SQL】自社サービスSaasのバックエンド(データ基盤)

900,000円/月

業務委託(フリーランス)

大阪府

PythonSQLSparkAWS

機械学習エンジニアバックエンドエンジニア

作業内容 ■募集背景・課題

【Python】Webクローラー開発の求人・案件

850,000円/月

業務委託(フリーランス)

東京都

リモート

PythonSQLPostgreSQLHadoopSparkGit

作業内容某大手通信事業者様の生成AI基盤開発支援を行っている中でサイトクローラーの開発業務を行える方を募集しております。

NoSQL 総合電機メーカーのビッグデータ蓄積/抽出/分析

550,000 〜 650,000円/月

東京都

品川シーサイド駅

PythonSQLDynamoDBSparkAWSApacheGraphQL

作業内容総合電機メーカー様のビッグデータ蓄積/抽出/分析案件になります。蓄積された種々の構造化/非構造化データを利活用するために下記をご担当いただきます。・No SQL Databaseに格納・データ抽出設計・抽出用 API 作成＜技術要素＞ AWS S3, Apache Spark, SparkSQL, Databricks, AWS AppSync(GraphQL), Python(S3に蓄積されたデータをDatabricks 経由でDynamoDBに送り、AppSyncでAPI展開するイメージ) ＜担当工程＞データ抽出設計～ API 実装～テスト＜服装＞オフィスカジュアル

【週５日･首都圏限定】自動車会社向けデータ転送処理マイグレーション（Java）

600,000円/月

業務委託(フリーランス)

神奈川県

横浜駅

リモート

JavaAWS

PGSE

作業内容【自動車会社向けデータ転送処理マイグレーション】 AWS Lambda+Javaで実装されたデータの転送処理APPをDatabricks(ApacheSpark基盤)上で動くようにマイグレーションする。環境 Java/AWS(Lambda)/Apache Spark Databricks/Delta Lake/Snowflake 本案件は【首都圏】にお住まいで【週５日勤務】が可能な方限定となります。

設定していない条件はありませんか？

スキル･リモート･単価などで絞り込み、
効率よく案件を探せます。

分析基盤クラウド構築案件

1,200,000円/月

業務委託(フリーランス)

東京都

SQLLinuxHadoopSparkAWS

作業内容オンライン・オフラインのデータをクラウド環境で統合して分析できる基盤構築を行うための環境構築、ETL設計・開発、データ抽出を行います。データを効果的・効率的に活用するための基盤を構築する戦略的なポジションになります。クラウド環境：AWS

【機械学習,画像認識】パッケージ製品へのAI関連の機能開発支援

800,000円/月

業務委託(フリーランス)

東京都

HadoopSpark

作業内容パッケージ製品へのAI関連の機能の拡充を検討されており、その開発のご支援となります。具体的には、・機械学習を用いた処理の最適化機能・画像認識機能、OCR機能・音声での対話入出力機能が初期スコープとなっております。

AWS 分散DBを用いたデータ基盤のインフラエンジニア

700,000 〜 750,000円/月

東京都

HbaseSparkAWSHive

インフラエンジニア

作業内容テレビ視聴データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMRでの Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。＜備考＞フルリモート

【上流/Java】製造業・建設業SCMパッケージ開発案件

800,000円/月

業務委託(フリーランス)

東京都

六本木一丁目駅

JavaCassandraHadoopSpark

【Python】トレーサビリティ構築案件

550,000円/月

業務委託(フリーランス)

愛知県

国際センター駅

PythonAzure

作業内容・トレーサビリティ構築に携わっていただきます。・複数システムからの部品の所在データのIF、DWH・Data Martの実装、テスト、リリース作業をご担当いただきます。・基本設計以降のフェーズをご対応いただきます。・開発環境は下記になります。　Databricks, Azure, Apache Spark

【JavaScript】医療系アプリ開発案件

800,000円/月

業務委託(フリーランス)

東京都

人形町駅

JavaScriptUnixMongoDBNode.jsHadoopSparkGitGitHubReactHive

作業内容・クライアントの自社プロダクトの開発に携わっていただきます。・具体的には下記の作業を行っていただきます。　-プロダクト改善への提案、情報収集とその共有　-自動化のための整備　-外部への情報発信 Qiitaやブログでの記事投稿　-可能であれば、テックリードとしてチームをマネジメント

【SQL/Python】システム開発データエンジニア案件

リモート可オンライン商談OK

850,000円/月

業務委託(フリーランス)

東京都

半蔵門駅

PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform

データサイエンティストインフラエンジニアデータベースエンジニア

作業内容・データエンジニアとして、下記のいずれかをご対応いただきます。 ‐通信会社販促システム開発 ‐小売/流通のシステム開発 ‐広告や社内プロダクトの開発

【AWS/フルリモート可能】エンドユーザー向けAWS ETL環境の設計レビュー・改善・実装・メンテナンスの案件・求人

900,000円/月

業務委託(フリーランス)

フルリモート

MySQLDynamoDBSparkAWSApacheGitHubRedshift

作業内容＝＝＝＝＝＝＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】・20～40代までの方、活躍中！・日本語ビジネスレベル必須・週5日稼働必須・実務経験3年以上必須＝＝＝＝＝＝＝＝＝＝＝既存のAWS　ETL環境の調査改善・メンテ作業の手順化、運用作業（テーブル追加、カラム変更程度） ※対象環境は、ミッションクリティカルではないデータ処理基盤となる上位にて他PJへのスライド案件も御紹介可能で御座います。

【AWS/MySQL/リモート併用】ETL環境の設計レビュー・改善・実装・メンテナンスの案件・求人

850,000円/月

業務委託(フリーランス)

リモート

MySQLDynamoDBSparkAWSApacheRedshiftGlue

作業内容＝＝＝＝＝＝＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】・20～40代までの方、活躍中！・日本語ビジネスレベル必須・週5日稼働必須・実務経験3年以上必須＝＝＝＝＝＝＝＝＝＝＝・既存のAWSETL環境の調査改善・メンテ作業の手順化および運用作業（テーブル追加やカラム変更程度）※対象環境はミッションクリティカルではないデータ処理基盤となる【日本語ネイティブの方、活躍中！】【20代・30代・40代、活躍中！】【出社可能な方、活躍中！】

【Objective-C/Swift】Bigqueryデータ移行案件