Sparkのフリーランス案件・求人一覧 | 12ページ目
Sparkの案件・求人一覧 12ページ目
331-360 / 全 614 件
【AWS/Python】需要予測ジック開発/構築案件
1,450,000円/月
業務委託(フリーランス)
東京都
田町駅
PythonSQLAWSGit
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 需要予測のためのロジック開発、実装（AIモデル/ルールベース）をしていただきます。
【Azure】クラウド基盤上システム構築・運用案件
800,000円/月
業務委託(フリーランス)
東京都
秋葉原駅
Azure
作業内容 ・クラウド基盤上のシステム構築と運用をご担当いただきます。
・要件定義や顧客折衝にも携わっていただきます。
【新規ダークファンタジー系スマートフォンゲーム】エフェクトデザイン案件
650,000円/月
業務委託(フリーランス)
東京都
初台駅
MayaUnity
エフェクトデザイナー
作業内容 新規開発中RPG、運用中RPGのいずれかにて
3Dエフェクト製作をお任せいたします。
※スキルに応じて他の作業もお任せ致します
【Java】某ガス会社様向けJavaバッチ処理開発
600,000円/月
業務委託(フリーランス)
大阪府
大正駅
Java
サーバーサイドエンジニア
作業内容 Javaを使用した某ガス会社様向けJavaバッチ処理開発を行って頂きます。
工程としましては、詳細設計～開発～テストをご担当頂きます。
Java / Linux など アプリの新基板への移行・コンテナ化の支援
900,000 〜 1,000,000円/月
東京都
秋葉原駅
JavaPythonWindowsLinuxHadoopSparkOpenShiftApacheKafkaKubernetes
作業内容 オンプレミスの大規模データ収集基板構築に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。
アプリケーションの設計、開発、テストがメイン業務となります。
アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験があればよりマッチいたします。
＜業務内容＞
・RDBからデータ取得を行うアプリケーションを、DWH(Hadoopベース)からデータ取得を行うように改修
→改修のための設計、開発、テスト
・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)
＜開発環境＞
・Java
・Hadoop(Cloudera)
・Apache kafka
・Apache spark
・Kubernetes/OpenShift/vCenter
＜備考＞
現状リモートワーク
新型コロナウイルス感染症の終息後は出社予定
＜基本時間＞
9：00～18：00
【Scala/Java/Pythonなど】大手広告代理店におけるデータ基盤の開発、運用、保守の求人・案件
800,000円/月
業務委託(フリーランス)
東京都
リモート
JavaPythonSQLScalaSparkAWSDockerApacheGitHubSnowflakeKubernetes
作業内容 【業務内容】
大手広告代理店が展開しているインターネット広告代理店業における、膨大な広告データを収集・蓄積したデータレイクからデータを展開するためのデータ基盤（ETL処理、DWH、DM）の開発、運用、保守をお願いします。
【ポイント】
データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、そんな大規模データと向き合った開発にチャレンジすることができます。複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。
【開発チームと配属先について】
当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。
今回お願いしたいポジションはサーバサイドエンジニアです。
チームには現在18名のエンジニアが在籍しています。
また、複数のプロダクトを管理しているチームのため、担当領域ごとにグループ分けをしています。
Infeed領域の広告運用のためのプロダクトを開発するグループインターネット広告関連データをデータレイクに蓄積するシステムを開発するグループインターネット広告関連データが蓄積されたデータレイクを用いたデータ基盤を開発するグループ機械学習を用いたプロダクトを開発するグループ掲載情報や実績情報を出力・レポーティングするための分析用プロダクトを開発するグループ
【技術キーワード】
ApacheSparkAWS GlueSnowflakeデータレイク/データウェアハウス/データマート
【Python/AIエンジニア】探索型BIツール開発におけるデータサイエンティスト
700,000円/月
業務委託(フリーランス)
東京都
リモート
PythonHadoopSparkTableau
データサイエンティストAIエンジニア機械学習エンジニア
作業内容 [ポジション]：AIエンジニア
自社で探索型BIツールを開発しており、そこにおける人材を募集
・検索・機械学習エンジンの開発・実装、および性能改善
・自然言語処理を使用した検索エンジンの開発
・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発
【Python/SQL】データ基盤運用保守の求人・案件
700,000円/月
業務委託(フリーランス)
リモート
PythonSQLLinuxAWSGoogle Cloud Platform
作業内容 Google Cloud / AWSを利用した商用稼働サービスのデータパイプラインの開発・保守運用と日々の運用業務から発生する課題の解決・改善
主要技術：BigQuery/Cloud Composer(Airflow)/Python/（一部Spark）
【Unix/Linux】行動分析/混雑統計案件
550,000円/月
業務委託(フリーランス)
東京都
品川駅
JavaSQLLinuxUnixHadoopSparkAWS
インフラエンジニアサーバーエンジニアデータベースエンジニア
作業内容 ・データベース内ビッグデータの集計及び分析作業を行っていただきます。
・下記をご担当いただきます。
-エンジンプログラムのカスタマイズ
-SQLによるデータ集計
【業務委託】【少年漫画IP新規開発ソーシャルゲーム向け】3Dエフェクト制作案件
750,000円/月
業務委託(フリーランス)
東京都
大崎駅
MayaUnity3ds Max
3Dデザイナーエフェクトデザイナーグラフィックデザイナー
作業内容 新規開発中の少年漫画IPを使用したソーシャルゲームにおいて、
3Dエフェクトデザイナーとして作業をお任せいたします。
具体的には下記作業を想定しております。
・SPARK GEAR、Shuriken等のツールでの炎・爆発・魔法の表現、演出効果エフェクト制作
・エフェクトに関する表現手法の研究並びに検証
【Python】オンライン会議サービス開発案件
800,000円/月
業務委託(フリーランス)
東京都
赤坂駅
JavaScriptPythonCSSHTMLLinuxMacOSAWSAzureGoogle Cloud Platform
作業内容 ・オンライン会議サービスの開発PJにて、
設計から実装、テストまで幅広い作業をご担当いただきます。
データウェアハウス構築/運用案件
750,000円/月
業務委託(フリーランス)
東京都
赤坂見附駅
SQLHadoopSparkRedshiftBigQuery
データサイエンティストインフラエンジニア
作業内容 ・サービス企画担当、サービス開発エンジニアや
データサイエンティストと連携いただきます｡
・下記を行っていただきます｡
ｰデータウェアハウスの構築、運用
ｰプロダクトマネージャー、
データサイエンティストが利用する分析システムの設計、開発、運用
ｰWebサービスの各種KPI分析に対するエンジニアリング面でのサポート
【機械学習/データマイニング】大手企業PoC/データ分析案件
950,000円/月
業務委託(フリーランス)
東京都
勝どき駅
PythonSparkRedshiftBigQueryTreasure Data
データサイエンティスト
作業内容 ・大手企業にて、
機械学習/データマイニングを用いたデータ分析に携わって頂きます。
・グループ内の数百ある各事業会社の要件を実現していくため、
AIやIoTの技術なども使いながら、少人数でPoCを回して頂きます。
・データ分析だけでなく、サービスの改善提案まで担当して頂きます。
・ご経験がある方は、アーキテクチャ設計や技術選定、
およびデータ分析基盤の構築なども併せて依頼されることがございます。
※担当範囲は、スキルや経験および進捗状況により変動いたします。
世界進出！【ライブ配信アプリ/フルリモート/AWS,GCP/大手企業と連続起業家のスタートアップとの合弁会社】グローバル向け大規模ライブ配信アプリのインフラエンジニア業務(jd01383)
500,000 〜 700,000円/月
業務委託(フリーランス)
GoSparkAWSApacheGitGoogle Cloud PlatformBigQueryKubernetes
インフラエンジニア
作業内容 Q&Aに特化したライブ配信アプリを開発しております。
インフラエンジニアとしてアプリの開発に加わっていただけるメンバーを募集しております。具体的にはライブ配信アプリのインフラ環境の設計、構築、運用をお任せします。
■チーム構成
・PdM：1名
・バックエンドエンジニア：2名
・モバイルエンジニア：3名
・プロダクトデザイナー：1名
■開発環境
? 分散DB（Cloud Spanner）
? 言語：Go言語
? 通信 ：connect-go proto
? コンピューティング：Kubernetes → Cloud Run
? DWH・パイプライン構築
? BigQuery
? Apache Spark
■会社の魅力
大企業の持つ資本力とベンチャーの持つスピード感を両立しており、０ベースでの技術的負債が無い状態でのスタートを切ることができます。そしてビジネス的にもスピード感を持って大きなことにチャレンジできる土壌が整っております。
ユーザーの質問にライバーが回答することに特化したライブストリーミングサービス（Q&Aに特化したライブ配信アプリ）を今年の春、リリース予定となっております。
■部署の魅力や雰囲気
・積極的に新しい仕組みやツールに挑戦する
・ビジネスとエンジニアの距離が近い
・エンジニアからも機能提案などする機会が多い
【DB】大手広告代理店のデジタル広告におけるクリエイティブを、大量に蓄積されたデータとAIを駆使して改善するサービスの開発
550,000 〜 750,000円/月
業務委託(フリーランス)
東京都
高田馬場駅
PythonSQLScalaHadoopSparkBigQuery
作業内容 ・データサイエンティストと協働したAIプロジェクトの推進
・画像や動画など、広告クリエイティブにおけるデータ処理、学習モデル化
・最適化アルゴリズム、外部ツール連携、データ解析など、必要アセットの調査研究・検証
・AIを駆使し、現広告業務へ付加価値をつける機能・システムの考案・開発
・機械学習モデルのサービング
大規模なデジタル広告データをバックグラウンドに、データ処理の分散化や、画像・動画の解析、機械学習と組み合わせたアプリケーション開発や学習モデルの管理を行って頂きます。
【Python】広告システム/機械学習/データマイニング案件
800,000円/月
業務委託(フリーランス)
東京都
表参道駅
JavaScriptPythonRubyHTML5LinuxPostgreSQLHadoopRailsSparkAWSDockerApacheCSS3GitHubReactHive
作業内容 ・月間で数億リクエストある広告システムで、
ログ、各種デモグラフィック情報、アクション情報などをもとに、
データマイニングおよび機械学習に携わって頂きます。
・設計から幅広く担当して頂きます。
※担当範囲は、スキルや経験および進捗状況により変動いたします。
【Python/Scala/Java】ビッグデータ向け基盤構築案件
850,000円/月
業務委託(フリーランス)
東京都
虎ノ門駅
JavaPythonSQLScalaNode.jsHadoopSparkAWSHive
作業内容 ・各社が保有するデータのヒアリングと整理、および解決すべき問題の要件化から、
様々なプラットフォームの構築、運用までをご担当いただきます。
・様々な保持データを掛け合わせた設計・抽出・転送のフロー構築や、
スケーリングやコストを意識したクラウド環境の構築にも携わっていただきます。
【Python】クラウド環境上でデータ関連開発経験のある方向け！（一部リモート）データエンジニア【直接取引】
1,350,000円/月
業務委託(フリーランス)
東京都
PythonHadoopSparkAWSAzureApacheGoogle Cloud Platform
PL
作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が
利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の
データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。
＜開発環境＞
言語：Python (一部 Javaもあり)
フレームワーク：gRPC, OpenAPI
インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github
クラウド：AWS
【データマイニング/Python】広告配信プロダクトプラットフォーム開発案件
900,000円/月
業務委託(フリーランス)
東京都
虎ノ門駅
C++PythonSQLSparkGitHubBigQueryHive
データサイエンティストデータベースエンジニア
作業内容 ・自社広告配信プロダクトの100億レコード以上/日のログを分析し
広告配信の最適化する業務に携わっていただきます。
・KPI(CPCなど)最適化の改善及び運用をご担当いただきます。
SQL ヘルスケア スマホアプリ開発SE
600,000 〜 700,000円/月
業務委託(フリーランス)
東京都
恵比寿駅
SQLAWSLambda
SE
作業内容 ヘルスケア企業向けにリリースしたスマホアプリにおいて、バージョンアップにおける開発対応を行っていただきます。
基盤はAWS、開発手法はアジャイルとなります。(一部、AWSにおける運用保守を行っていただく可能性もございます)
＜備考＞
リモート頻度は週1～2回
＜基本時間＞
9：00～18：00
【Node.js/AWS/リモート併用可】鉄道会社向けアプリ保守開発
600,000円/月
業務委託(フリーランス)
大阪府
大正駅
JavaScriptNode.jsAWS
サーバーサイドエンジニア
作業内容 鉄道会社向けアプリ保守開発案件となります。
アプリの改修、小規模開発、運用保守等をご担当いただきます。
【PM/フルリモート】通信企業向けポイントシステム開発案件
650,000円/月
業務委託(フリーランス)
大阪府
AWS
サーバーエンジニアPM
作業内容 ・大手通信企業向けポイントシステムの一部機能の開発にて プロジェクトマネジメント業務および要件定義に携わっていただきます。
・AWS上でSpark on EMR環境を構築、クライアントアプリから使えるようAWSのFargate上で動かすことを想定しています。
【Python(リモート)】Saasプロダクトデータ基盤構築
750,000円/月
業務委託(フリーランス)
東京都
PythonSQLSparkAWSDocker
バックエンドエンジニア
作業内容 ・在庫最適化システムを支えるデータ基盤の構築を行っていただきます。
・顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。
【開発環境】
・開発言語：Python、SQL
・DB：Aurora(PostgreSQL互換)、Redshift
・ライブラリフレームワーク：Pandas、Numpy、Dask
・インフラ：AWS
・AWS製品：ECS、S3、Step Functions、Lambda、CloudWatch
・環境、ツール：Docker、GitHub、Jira、Slack、CircleCI、Sentry
【GCP/フルリモート】クラウドサービス・Webアプリケーション開発支援案件
950,000円/月
業務委託(フリーランス)
東京都
品川駅
LinuxMySQLPostgreSQLRedisCassandraSparkGitJIRAGoogle Cloud Platform
作業内容 ・電帳法、インボイス、会計、販売管理関連の既存サービスの開発に際して、インフラ領域の技術支援に携わっていただきます。
・GCPを用いたインフラ環境の設計～構築をご担当頂く予定です。
【DB】大手広告代理店のデジタル広告におけるクリエイティブを、大量に蓄積されたデータとAIを駆使して改善するサービスの開発
800,000円/月
業務委託(フリーランス)
東京都
高田馬場駅
PythonSQLScalaHadoopSparkBigQuery
作業内容 ・データサイエンティストと協働したAIプロジェクトの推進
・画像や動画など、広告クリエイティブにおけるデータ処理、学習モデル化
・最適化アルゴリズム、外部ツール連携、データ解析など、必要アセットの調査研究・検証
・AIを駆使し、現広告業務へ付加価値をつける機能・システムの考案・開発
・機械学習モデルのサービング
大規模なデジタル広告データをバックグラウンドに、データ処理の分散化や、画像・動画の解析、機械学習と組み合わせたアプリケーション開発や学習モデルの管理を行って頂きます。
【DBエンジニア】PythonでのDBアクセスプログラミング
600,000円/月
業務委託(フリーランス)
リモート
PythonAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 大手製造メーカー様案件で、データ解析・データ解析のプログラミング
～DBアクセスプログラミングを担当していただきます。
※参画いただいた後は、相談の上プロジェクトの中でその他の役割も
担って頂く可能性もございます。
【AWS/DWH】金融系インフラ構築案件
850,000円/月
業務委託(フリーランス)
東京都
東京駅
SparkAWSDockerGitJenkinsChef
インフラエンジニア
作業内容 ・クラウドネイティブの安定したアプリケーションの運用、開発を担当していただきます。
・機械学習案件の基盤整備をデータエンジニアと共に進め、データ分析基盤の構築・運用を担当していただきます。
・下記を行っていただきます。
‐ミドルウェアバージョンアップ対応
-アプリケーション改修対応
-ミドル/バックエンドのパフォーマンスチューニング
-運用・開発改善を目的とした新規システムのアーキテクチャ設計及び構築支援
-デプロイ、テスト環境、CI環境、開発環境改善
-エンジニアへの技術的な支援
-Ansible等を用いたミドルの構成管理
-データサイエンティスト/エンジニアと連携して、より早くデプロイするための環境構築
-データを統合的に扱えるよう、データエンジニアと連携した、DL/DWH/DMの設計、拡張、運用
-各データソースとDWH間を効率的に連携させるためのデータ連携の設計・開発
-構築した各種モデルのモニタリング
【SQL】ネット広告事業向けDWH/CDP環境構築案件
750,000円/月
業務委託(フリーランス)
東京都
渋谷駅
SQLHadoopSparkGitHubTreasure Data
データサイエンティストデータベースエンジニア
作業内容 ・下記を行っていただきます。
-クラウドを利用したDWH/CDPの構築
-ETLの実施/ワークフローの作成
-BIツールを利用したダッシュボード構築
-API経由でのデータ接続
-BIツールによるダッシュボード構築
New【Python/SQL】データ基盤構築の求人・案件
700,000円/月
業務委託(フリーランス)
東京都
リモート
PythonSQLSparkAWSDocker
作業内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制になります。【募集背景】新バージョンの機能追加が急務であり、エンジニアリソースが不足しているため。【開発環境】・開発言語： Python、SQL・DB: Aurora(PostgreSQL互換)、Redshift・検索エンジン： Amazon Elasticsearch Service・ライブラリ・フレームワーク：Pandas、Numpy、Dask・インフラ： Amazon Web Services・AWS製品： ECS、S3、Step Functions、Lambda、CloudWatch・環境、ツール： Docker、GitHub、Jira、Slack、CircleCI、Sentry
上級SE/コンサル向けSCM要件定義・設計業務案件
950,000円/月
業務委託(フリーランス)
東京都
六本木一丁目駅
JavaJavaScriptCassandraHadoopSparkDynamics CRMSAP WASSAP
コンサルSE
作業内容 ・製造業向けのERP(enterprise resource planning)パッケージソフト導入における
要件定義フェーズから製品設計業務をご担当いただきます。
・複数クライアントとの業務要件定義から業務要件からPKG機能設計への
落とし込み(プロセス/機能/エンティティ設計)等、
主に販売、購買、在庫、原価、PJ管理のモジュールを導入していただきます。
※設計以降開発はオフショアを想定しております。
気になる案件は見つかりましたか？
お探しの条件に合った新着案件をお知らせします
掛け合わせ条件で絞り込む
- 特徴で絞り込む
- Spark × 在宅・リモート
その他の条件で検索する
あなたにピッタリの
フリーランス案件が見つかる
135万件以上のフリーランス案件から一括検索
355,921件※の案件を保有しており、エンジニアやクリエイター向けを中心にたくさんの案件を一括検索可能です。
※ 9月7日(Sun)更新
2あなたの経験やスキルに適した案件をメールでお知らせ
マイページに入力して頂いた経験や希望条件に合わせて、ご希望にマッチした案件をメールでお送りするので効率的な案件探しが可能です。
Sparkの案件・求人