リセット

Sparkの案件・求人一覧 12ページ目

331-360 / 全 586
  • 募集終了

【Azure】クラウド基盤上システム構築・運用案件

800,000円/月

業務委託(フリーランス)
東京都
秋葉原駅
Azure
作業内容 ・クラウド基盤上のシステム構築と運用をご担当いただきます。 ・要件定義や顧客折衝にも携わっていただきます。
  • 募集終了

【Python/SQL】データ基盤運用保守の求人・案件

700,000円/月

業務委託(フリーランス)
リモート
PythonSQLLinuxAWSGoogle Cloud Platform
作業内容 Google Cloud / AWSを利用した商用稼働サービスのデータパイプラインの開発・保守運用と日々の運用業務から発生する課題の解決・改善 主要技術:BigQuery/Cloud Composer(Airflow)/Python/(一部Spark)
  • 募集終了

【データエンジニア】

900,000 〜 1,100,000円/月

業務委託(フリーランス)
東京都
大手町駅
SQL
作業内容 DX推進を行っている部署の中で、既存で散らばっている社内のデータを集約する作業を行なっております。 既存のデータはAzureの中に入れており、そこのデータパイプラインの保守作業を行いつつ、新規パイプラインの設計・構築を行っていただきます。(Sparkを想定しております。) また、集約したデータをBIツールを活用し、データ可視化も行っています。 (既存ダッシュボードの保守、新規ダッシュボード構築など)
  • 募集終了

Java / Linux など アプリの新基板への移行・コンテナ化の支援

900,000 〜 1,000,000円/月

東京都
秋葉原駅
JavaPythonWindowsLinuxHadoopSparkOpenShiftApacheKafkaKubernetes
作業内容 オンプレミスの大規模データ収集基板構築に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験があればよりマッチいたします。 <業務内容> ・RDBからデータ取得を行うアプリケーションを、DWH(Hadoopベース)からデータ取得を行うように改修 →改修のための設計、開発、テスト ・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等) <開発環境> ・Java ・Hadoop(Cloudera) ・Apache kafka ・Apache spark ・Kubernetes/OpenShift/vCenter <備考> 現状リモートワーク 新型コロナウイルス感染症の終息後は出社予定 <基本時間> 9:00~18:00
  • 募集終了

【Scala/Java/Pythonなど】大手広告代理店におけるデータ基盤の開発、運用、保守の求人・案件

800,000円/月

業務委託(フリーランス)
東京都
リモート
JavaPythonSQLScalaSparkAWSDockerApacheGitHubSnowflakeKubernetes
作業内容 【業務内容】 大手広告代理店が展開しているインターネット広告代理店業における、膨大な広告データを収集・蓄積したデータレイクからデータを展開するためのデータ基盤(ETL処理、DWH、DM)の開発、運用、保守をお願いします。 【ポイント】 データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、そんな大規模データと向き合った開発にチャレンジすることができます。複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。 【開発チームと配属先について】 当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。 今回お願いしたいポジションはサーバサイドエンジニアです。 チームには現在18名のエンジニアが在籍しています。 また、複数のプロダクトを管理しているチームのため、担当領域ごとにグループ分けをしています。 Infeed領域の広告運用のためのプロダクトを開発するグループインターネット広告関連データをデータレイクに蓄積するシステムを開発するグループインターネット広告関連データが蓄積されたデータレイクを用いたデータ基盤を開発するグループ機械学習を用いたプロダクトを開発するグループ掲載情報や実績情報を出力・レポーティングするための分析用プロダクトを開発するグループ 【技術キーワード】 ApacheSparkAWS GlueSnowflakeデータレイク/データウェアハウス/データマート
  • 募集終了

Scalaエンジニア 機械学習モデルの実装とデータ分析基盤の開発

900,000円/月

業務委託(フリーランス)
東京都
Scala
作業内容 ・データ処理と前処理の実装 ・Scalaを使用して機械学習アルゴリズムやモデルの実装 ・大規模データセットを使用する場合、分散処理フレームワーク(例: Apache Spark)を使用して機械学習アルゴリズムをスケーラブルに実行 ・モデル評価とパフォーマンス改善 ・データ分析基盤の開発 ・データの可視化とレポーティング
  • 募集終了

【Unix/Linux】行動分析/混雑統計案件

550,000円/月

業務委託(フリーランス)
東京都
品川駅
JavaSQLLinuxUnixHadoopSparkAWS
インフラエンジニアサーバーエンジニアデータベースエンジニア
作業内容 ・データベース内ビッグデータの集計及び分析作業を行っていただきます。 ・下記をご担当いただきます。 -エンジンプログラムのカスタマイズ -SQLによるデータ集計
  • 募集終了

【ETL(リモート)】インタフェース開発

1,100,000円/月

業務委託(フリーランス)
大阪府
大阪駅
作業内容 ・IF各種設計書作成 ・MS Fabric環境での実装(検証及びテストも含む) ・その他上記に付随する業務
  • 募集終了

【Python/AIエンジニア】探索型BIツール開発におけるデータサイエンティスト

700,000円/月

業務委託(フリーランス)
東京都
リモート
PythonHadoopSparkTableau
データサイエンティストAIエンジニア機械学習エンジニア
作業内容 [ポジション]:AIエンジニア 自社で探索型BIツールを開発しており、そこにおける人材を募集 ・検索・機械学習エンジンの開発・実装、および性能改善 ・自然言語処理を使用した検索エンジンの開発 ・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発
  • 募集終了

【Python】オンライン会議サービス開発案件

800,000円/月

業務委託(フリーランス)
東京都
赤坂駅
JavaScriptPythonCSSHTMLLinuxMacOSAWSAzureGoogle Cloud Platform
作業内容 ・オンライン会議サービスの開発PJにて、  設計から実装、テストまで幅広い作業をご担当いただきます。
  • 募集終了

【機械学習/データマイニング】大手企業PoC/データ分析案件

950,000円/月

業務委託(フリーランス)
東京都
勝どき駅
PythonSparkRedshiftBigQueryTreasure Data
データサイエンティスト
作業内容 ・大手企業にて、  機械学習/データマイニングを用いたデータ分析に携わって頂きます。 ・グループ内の数百ある各事業会社の要件を実現していくため、  AIやIoTの技術なども使いながら、少人数でPoCを回して頂きます。 ・データ分析だけでなく、サービスの改善提案まで担当して頂きます。 ・ご経験がある方は、アーキテクチャ設計や技術選定、  およびデータ分析基盤の構築なども併せて依頼されることがございます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。
  • 募集終了

【Python】広告システム/機械学習/データマイニング案件

800,000円/月

業務委託(フリーランス)
東京都
表参道駅
JavaScriptPythonRubyHTML5LinuxPostgreSQLHadoopRailsSparkAWSDockerApacheCSS3GitHubReactHive
作業内容 ・月間で数億リクエストある広告システムで、  ログ、各種デモグラフィック情報、アクション情報などをもとに、  データマイニングおよび機械学習に携わって頂きます。 ・設計から幅広く担当して頂きます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。
  • 募集終了

【Python/Scala/Java】ビッグデータ向け基盤構築案件

850,000円/月

業務委託(フリーランス)
東京都
虎ノ門駅
JavaPythonSQLScalaNode.jsHadoopSparkAWSHive
作業内容 ・各社が保有するデータのヒアリングと整理、および解決すべき問題の要件化から、  様々なプラットフォームの構築、運用までをご担当いただきます。 ・様々な保持データを掛け合わせた設計・抽出・転送のフロー構築や、  スケーリングやコストを意識したクラウド環境の構築にも携わっていただきます。
  • 募集終了

【Python】クラウド環境上でデータ関連開発経験のある方向け!(一部リモート)データエンジニア【直接取引】

1,350,000円/月

業務委託(フリーランス)
東京都
PythonHadoopSparkAWSAzureApacheGoogle Cloud Platform
PL
作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店(飲食店、小売等)が 利用するシステム(クーポン入稿、ターゲティング設定、配信効果分析など)の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 <開発環境> 言語:Python (一部 Javaもあり) フレームワーク:gRPC, OpenAPI インフラ:AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド:AWS
  • 募集終了

【データマイニング/Python】広告配信プロダクトプラットフォーム開発案件

900,000円/月

業務委託(フリーランス)
東京都
虎ノ門駅
C++PythonSQLSparkGitHubBigQueryHive
データサイエンティストデータベースエンジニア
作業内容 ・自社広告配信プロダクトの100億レコード以上/日のログを分析し  広告配信の最適化する業務に携わっていただきます。 ・KPI(CPCなど)最適化の改善及び運用をご担当いただきます。
  • 募集終了

SQL ヘルスケア スマホアプリ開発SE

600,000 〜 700,000円/月

業務委託(フリーランス)
東京都
恵比寿駅
SQLAWSLambda
SE
作業内容 ヘルスケア企業向けにリリースしたスマホアプリにおいて、バージョンアップにおける開発対応を行っていただきます。 基盤はAWS、開発手法はアジャイルとなります。(一部、AWSにおける運用保守を行っていただく可能性もございます) <備考> リモート頻度は週1~2回 <基本時間> 9:00~18:00
  • 募集終了

【AWS/DWH】金融系インフラ構築案件

850,000円/月

業務委託(フリーランス)
東京都
東京駅
SparkAWSDockerGitJenkinsChef
インフラエンジニア
作業内容 ・クラウドネイティブの安定したアプリケーションの運用、開発を担当していただきます。 ・機械学習案件の基盤整備をデータエンジニアと共に進め、データ分析基盤の構築・運用を担当していただきます。 ・下記を行っていただきます。  ‐ミドルウェアバージョンアップ対応  -アプリケーション改修対応  -ミドル/バックエンドのパフォーマンスチューニング  -運用・開発改善を目的とした新規システムのアーキテクチャ設計及び構築支援  -デプロイ、テスト環境、CI環境、開発環境改善  -エンジニアへの技術的な支援  -Ansible等を用いたミドルの構成管理  -データサイエンティスト/エンジニアと連携して、より早くデプロイするための環境構築  -データを統合的に扱えるよう、データエンジニアと連携した、DL/DWH/DMの設計、拡張、運用  -各データソースとDWH間を効率的に連携させるためのデータ連携の設計・開発  -構築した各種モデルのモニタリング
  • 募集終了

【Node.js/AWS/リモート併用可】鉄道会社向けアプリ保守開発

600,000円/月

業務委託(フリーランス)
大阪府
大正駅
JavaScriptNode.jsAWS
サーバーサイドエンジニア
作業内容 鉄道会社向けアプリ保守開発案件となります。 アプリの改修、小規模開発、運用保守等をご担当いただきます。
  • 募集終了

【PM/フルリモート】通信企業向けポイントシステム開発案件

650,000円/月

業務委託(フリーランス)
大阪府
AWS
サーバーエンジニアPM
作業内容 ・大手通信企業向けポイントシステムの一部機能の開発にて プロジェクトマネジメント業務および要件定義に携わっていただきます。 ・AWS上でSpark on EMR環境を構築、クライアントアプリから使えるようAWSのFargate上で動かすことを想定しています。
  • 募集終了

Python データ分析及びバックエンド開発業務(リモート)

900,000円/月

業務委託(フリーランス)
東京都
PythonSQLTensorFlow
バックエンドエンジニア
作業内容 ・データ分析(データの前処理、クレンジング、変換) ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発
  • 募集終了

【DBエンジニア】PythonでのDBアクセスプログラミング

600,000円/月

業務委託(フリーランス)
リモート
PythonAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 大手製造メーカー様案件で、データ解析・データ解析のプログラミング  ~DBアクセスプログラミングを担当していただきます。  ※参画いただいた後は、相談の上プロジェクトの中でその他の役割も   担って頂く可能性もございます。
  • 募集終了

【Scala】広告配信システムサーバサイド開発案件

800,000円/月

業務委託(フリーランス)
東京都
新宿駅
ScalaMySQLRedisMongoDBAWSApacheGitSubversion
作業内容 ・WebAPIサーバまたは広告配信サーバ等の開発をご担当いただきます。
  • 募集終了

【Python/機械学習】Databricksを用いたデータ基盤構築・活用

700,000円/月

業務委託(フリーランス)
東京都
PythonSQL
データサイエンティスト
作業内容 上位受託でお客様向けにデータ基盤の構築をご支援しており、追加のご依頼・ご相談などをいただいている状況です。  PoCとして様々なテーマを扱う予定で、画像解析、自然言語処理、時系列解析などのテーマもスコープに入る想定で、  主にDatabricksを用いたデータ基盤構築・活用に向けた推進などをお任せする予定です。
  • 募集終了

【Unity/Unreal Engine】ゲームのエフェクトデザイン業務

800,000円/月

業務委託(フリーランス)
東京都
田町駅
UnityUnreal Engine
作業内容 ゲームの開発/運営を行っている現場で、 主にエフェクトデザイン業務をお願い致します。 中でもパーティクルエフェクトに関する作業を中心にお願い致します。
  • 募集終了

【SRE】アドプラットフォーム向けSRE案件

900,000円/月

業務委託(フリーランス)
東京都
虎ノ門駅
ScalaLinuxNode.jsHadoopSparkAWSHive
SRE
作業内容 ・SREをご担当いただきます。 ・主に下記作業となります。  -サーバー構成管理ツールの開発や運用  -モニタリング環境構築、監視ツールの開発  -Kuberbetes環境でのコンテナクラスタ運用  -Hadoop、Kafkaを利用した分析や集計基盤の構築  -HiveやSparkを用いた集計処理バッチの作成  -ミドルウェアの検証および選定  -LinuxOSのチューニング  -海外展開に向けたクラウドインフラ等の構築
  • 募集終了

New【Python/SQL】データ基盤構築の求人・案件

700,000円/月

業務委託(フリーランス)
東京都
リモート
PythonSQLSparkAWSDocker
作業内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制になります。【募集背景】新バージョンの機能追加が急務であり、エンジニアリソースが不足しているため。【開発環境】・開発言語: Python、SQL・DB: Aurora(PostgreSQL互換)、Redshift・検索エンジン: Amazon Elasticsearch Service・ライブラリ・フレームワーク:Pandas、Numpy、Dask・インフラ: Amazon Web Services・AWS製品: ECS、S3、Step Functions、Lambda、CloudWatch・環境、ツール: Docker、GitHub、Jira、Slack、CircleCI、Sentry
  • 募集終了

【Go/フルリモート】データ分析基盤開発支援案件

750,000円/月

業務委託(フリーランス)
東京都
PythonSQLGoC#ScalaLinuxMySQLPostgreSQLRedisCassandraSparkAzureGitJIRA
作業内容 ・データ分析基盤及びETL基盤のシステム開発支援に携わっていただきます。 ・下記作業をおまかせいたします。  -システムアーキテクチャの検討・選定・設計・実装  -分散処理基盤の開発
  • 募集終了

Dynamic365/インタフェース(IF)開発支援

1,200,000円/月

業務委託(フリーランス)
東京都
コンサル
作業内容 ・IF各種設計書作成 ・MS Fabric環境での実装(検証及びテストも含む) ・その他上記に付随する業務
  • 募集終了

【Python/AWS】データ連携アプリ開発案件※フルリモート

850,000円/月

業務委託(フリーランス)
東京都
PythonAWSFargate
サーバーサイドエンジニア
作業内容 開発中のシステムに対する追加機能の設計実装となります。 ・工程:アプリケーション設計~総合テスト
  • 募集終了

【Python/TypeScript】AI/データ分析アプリ開発案件

950,000円/月

業務委託(フリーランス)
東京都
二重橋前駅
PythonTypeScript
作業内容 ・大手企業のグループ内にある各事業会社の要件を実現していくため、  アプリ開発に携わって頂きます。 ・HadoopやSparkなどの技術を使いながらPoCを回して頂きます。 ・モックやプロトタイプの開発から実運営での検証など、PDCAを回し、  投資判断でGoが出たものは、システム開発を行う流れで進めます。 ・ご経験がある方は、  アーキテクチャ設計や技術選定などを併せて依頼されることがございます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。

気になる案件は見つかりましたか?

お探しの条件に合った新着案件をお知らせします

あなたにピッタリ
フリーランス案件が見つかる

  • 133万件以上のフリーランス案件から一括検索

    337,079の案件を保有しており、エンジニアやクリエイター向けを中心にたくさんの案件を一括検索可能です。

    ※ 4月11日(Fri)更新

    33万件以上のフリーランス案件から一括検索

  • 2あなたの経験やスキルに適した案件をメールでお知らせ

    マイページに入力して頂いた経験や希望条件に合わせて、ご希望にマッチした案件をメールでお送りするので効率的な案件探しが可能です。

    あなたのプロフィールからおすすめの案件・求人

今すぐ無料登録