リセット

Sparkの案件・求人一覧 6ページ目

151-180 / 全 595
  • 募集終了

DMS開発メンバー クレジットカード会社の次世代DWH(DMS)開発支援

440,000 〜 540,000円/月

東京都
PythonSQLSASOracleSparkAWSAzureApacheGoogle Cloud PlatformBigQuery
作業内容 大手小売企業においてグループ全体のマーケティング情報を一元的に集約し、 複数社が持つデータを掛け合わせた分析が可能な、データ分析基盤を構築するPJが進行しています。 ・ポジション:DMS開発メンバー ・業務内容:  上記PJにおける大手小売企業の子会社のクレジットカード会社パートの開発において、  グループ会社各社とBigQuery/Databricks間でデータ連携を行えるようにDWH移行を行う。 ・開発環境:AWS/Azure上にDatabricksを構築、GCP上にBigQueryを構築 ・実施工程:  FY23でオンプレDWH(Oracle、SAS)の一部をGCP(BigQuery)に移行しており、FY24では完全移行を目指す。 ※想定工程:2024年7 月~要件定義開始、2025月5月にリリースを目指す
  • 募集終了

【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集

600,000 〜 1,000,000円/月

業務委託(フリーランス)
HadoopAWSTerraform
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。 データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
  • 募集終了

【Linux】ソフトウェア基盤(ミドルウェア)環境構築

500,000円/月

業務委託(フリーランス)
大阪府
大正駅
LinuxOracleHadoopSparkApacheJBoss
サーバーエンジニア
作業内容 ソフトウェア基盤(ミドルウェア)環境の設計、構築、維持管理業務全般をしていただきます。
  • 募集終了

【Python】大手小売業向けアプリケーション開発案件

800,000円/月

業務委託(フリーランス)
東京都
大手町駅
PythonSparkGoogle Cloud PlatformBigQuery
作業内容 ・大手小売業向けアプリケーションの運用保守、改善開発案件に携わっていただきます。 ・作業内容において主に下記作業をご担当いただきます。  -AIモデルの運用保守および改善開発  -GCP上で展開される複数のAIモデルの定期的な運用  -AIモデルにエラーが発生した場合にはその対応  -効果測定  -モデル改善の実装
  • 募集終了

【Linux/UNIX/Python】製薬業界向けITソリューションの構築

700,000円/月

業務委託(フリーランス)
東京都
恵比寿駅
PythonLinuxUnixHadoopSpark
サーバーサイドエンジニア
作業内容 製薬業界向けの企業別薬品の売上、消化情報などの蓄積・分析をするソリューションをAWS上で開発を行っていただきます。
  • 募集終了

【新規モバイル向けRPG】エフェクト制作案件

600,000円/月

業務委託(フリーランス)
東京都
六本木駅
SparkUnityAfter EffectsRPG
エフェクトデザイナー
作業内容 モバイル向け(スマホ、Switch 等)RPG制作において、 エフェクトデザイナーとして下記のような作業を行っていただきます。 ・キャラクターの攻撃や回復、松明の炎や煙、UIなどのエフェクト制作 ・ユーザー体験を最大化させる演出の提案、コンテ制作 ※スキルによってお任せする作業内容が異なります。
  • 募集終了

【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件

700,000円/月

業務委託(フリーランス)
東京都
リモート
JavaPythonKubernetes
バックエンドエンジニア
作業内容 現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 (SSL化対応、AD認証連携 etc…)     環境 オンプレサーバー (現地作業等は無し、リモートから接続) OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…) データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品 (サポートが付くだけのようなイメージ) HPE Ezmeral Runtime (≒ Kubernetes) OpenShift等に⽐べ、より純正Kubernetesに近い 構成 データレイク: HDFS, minio(≒S3), HBase DWH: Hive or Spark ワークフロー: NiFi or Airflow データ加⼯: Hive, Spark (シェルスクリプト/Java or Python) BI: Tableau, Palantir (本募集スコープの作業範囲外) 体制 アジャイル開発 (スクラム) メンバー10名程度 デイリーで午前にスクラムミーティング有り
  • 募集終了

【データ分析】データエンジニア募集

850,000円/月

業務委託(フリーランス)
東京都
PythonHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティスト
作業内容 ①某大手通信会社販促システム開発 ②某大手小売・流通のシステム開発 ③広告や社内プロダクトの開発 上記いずれかにおいてデータエンジニア業務に従事いただきます。
  • 募集終了

【Java】製造業・建設業SCMパッケージ開発案件

800,000円/月

業務委託(フリーランス)
東京都
六本木一丁目駅
JavaCassandraHadoopSpark
作業内容 ・製造業/建設業向けの次世代ERPパッケージシステム導入における、  SCM(販売/購買領域)のパッケージ開発を行っていただきます。 ・機能及び、UI/UXを含む製品設計フェーズにご参画いただきます。  ※オフショア開発の可能性がある為、実開発は行わない可能性がございます。
  • 募集終了

【Azure】公共向けクラウド移行案件

750,000円/月

業務委託(フリーランス)
東京都
豊洲駅
OracleHadoopSparkAzure
ネットワークエンジニアインフラエンジニアセキュリティエンジニア
作業内容 ・クラウド環境における環境設計、構築等をご対応いただきます。
  • 募集終了

【Python/C言語/IoT】プログラム脆弱性検出システムの高速化

700,000円/月

業務委託(フリーランス)
東京都
CPythonHadoopSpark
サーバーサイドエンジニア
作業内容 プログラム脆弱性検出システムを一部機能を分散処理させて高速化させる業務をご担当していただきます。
  • 募集終了

【Python/Azure】分析基盤システム開発支援

550,000円/月

業務委託(フリーランス)
東京都
竹芝駅
PythonSQLSparkAzure
作業内容 小売業向けの基盤システム開発。 ※具体的な詳細は、ご面談の際にお伝えします
  • 募集終了

【Java】SCMパッケージ新規開発案件

700,000円/月

業務委託(フリーランス)
東京都
六本木一丁目駅
JavaCassandraHadoopSpark
作業内容 ・SCMパッケージにおける新規開発プロジェクトに携わって頂きます。 ・UI/UXを意識した業務機能の画面設計をご担当頂きます。 ・各種調整業務を行って頂く可能性もございます。
  • 募集終了

【Databricks】大手損保会社 Databricksノートブック開発/フルリモート

700,000円/月

業務委託(フリーランス)
東京都
PythonSpark
サーバーサイドエンジニア
作業内容 要件定義/設計~試験、導入、顧客向け資料作成および説明 ※ Hadoopのサポート切れに伴い、Hadoop上に保管されている大量の顧客データをDatabricksに移行し、既存の連携バッチをDatabricksに移行する見込みのため、案件開始時の技術者を探しているという状況です。 今年度中に参画可能な技術者がいる場合でもご提案いただきたいです。
  • 募集終了

【Python】ヘルスケア関連システム開発案件

700,000円/月

業務委託(フリーランス)
東京都
品川駅
PythonJSONSparkApache
作業内容 ・ヘルスケア関連システムにおいて、  サーバーサイド開発に携わっていただきます。 ・ご参画いただく方のスキルやご経験に応じて、  基本設計~保守まで、幅広くご活躍いただけます。
  • 募集終了

【Python】某大手小売・流通のシステム開発または広告や社内プロダクトの開発

470,000 〜 520,000円/月

業務委託(フリーランス)
東京都
半蔵門駅
リモート
PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud PlatformKubernetes
作業内容 【概要】①某大手小売・流通のシステム開発 ②広告や社内プロダクトの開発 上記いずれかにおいてデータエンジニア業務に従事いただきます。 案件カテゴリー: 開発 最寄駅:半蔵門※リモート可 打合せ回数:2回 ※週5日〜OKの案件です!
  • 募集終了

AWS データレイク・DWH管理等

650,000 〜 750,000円/月

東京都
六本木一丁目駅
PythonSparkAWSGitGoogle Cloud PlatformBigQueryHiveGlueAthenaTerraformCircleCILambda
作業内容 動画やECサイト等、Webコンテンツを数多く提供しているサービス企業において、サービス提供の根幹となるデータレイク・DWH管理などの対応をしていただきます。 主な業務内容は以下を想定していますが、詳細についてはご面談時に説明させていただきます。 1. AWSのデータレイクからBigqueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) →2番の作業関しては、ご意向と経験に応じてご相談となります。 <開発環境> 言語:Python, Hive, Spark AWS:EMR, Glue, Athena, Lambda, APIGateway GCP:BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows CI・CD・その他:Terraform, CircleCI, GithubActions, digdag, embulk <備考> 基本リモート <基本時間> 10:00~19:00
  • 募集終了

【Java】某ガス会社向けシステム開発(アーキテクト)

650,000円/月

業務委託(フリーランス)
大阪府
堺筋本町駅
JavaSpring
サーバーサイドエンジニア
作業内容 某ガス会社向けシステム開発として技術的な調査、基本設計~開発(構築)~テストをしていただきます。
  • 募集終了

【Pythonリモート】某サービスSaasのデータ基盤開発

700,000円/月

業務委託(フリーランス)
東京都
四谷三丁目駅
PythonSpark
作業内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。
  • 募集終了

【フルリモート|Python】自社サービス開発支援(在庫管理)

600,000 〜 800,000円/月

フルリモート
PythonSQLSparkAWSApache
データベースエンジニアバックエンドエンジニア
作業内容 在庫管理システムの開発支援を行っていただきます。 【業務例】 ・データ基盤の運用及び保守開発 ・新規データ取得のETLの設計及び実装 ・構成/プロセスの見直し ・データウェアハウスの設計及び実装 ・データの可視化 【開発環境】 ・開発言語: Python、SQL ・インフラ: Amazon Web Services ・AWS製品: EC2、ECS、StepFunctions、S3、Redshift、Aurora(PostgreSQL)、Lambda、Cloud Watch ・ツール: GitHub、Jira、Slack 【担当工程】  基本設計,詳細設計,実装,テスト,運用・保守
  • 募集終了

【AWS】インフラ構築またはサーバーサイド開発

550,000 〜 600,000円/月

業務委託(フリーランス)
JavaPythonRedisHadoopSparkAWSReactTypeScriptAthenaLambda
サーバーサイドエンジニア
作業内容 【概要】 ・Lob分析サービス開発運用 ・TVなどの操作Logをもとにランキングなどを出力するサービス開発 (AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発) 【勤務先】 大崎※フルリモート可(9:00~18:00) 【時間精算】下限140h~上限200h 【面談回数】2回 服装:ビジネスカジュアル ※週5日〜OKの案件です!
  • 募集終了

【AWS】DB構築開発運用

530,000 〜 580,000円/月

業務委託(フリーランス)
神奈川県
みなとみらい駅
リモート
PythonSQLShellLinuxUnixPostgreSQLSparkAWSApacheRedshiftCloudFormationLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます! ▼概要  WS環境におけるDB構築・開発・運用をご担当いただきます。 ・Redshift (PostgreSQL)上のDBテーブル設計、クエリ開発 ・クラウド(AWS)を使用した製品利用ログ分析基盤の開発・運用 ・AWS EMRを使用したETL, データ前処理 (Python, Spark) ▼作業工程 設計・実装・デバッグ・テスト ▼場所 大崎駅 ※8月以降はみなとみらいに移転予定 ※基本リモートだが作業開始時には数日出社 ※今後、出社メインの可能性あり ▼精算幅 140-190h  ▼面談回数 1回 ※WEB ▼就業時間 9時30分~18時00分 ※昼休み45分 ※週5日〜OKの案件です!
  • 募集終了

【Python】データエンジニア募集

850,000円/月

業務委託(フリーランス)
東京都
PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティスト
作業内容 ①GPSを用いたデータの集計・予測支援 ②SaaS型プロダクトの開発支援 上記いずれかにおいてデータエンジニア業務に従事いただきます。
  • 募集終了

【データ分析補佐】GPSデータを用いた予測支援

700,000円/月

業務委託(フリーランス)
リモート
PythonSQLMySQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
作業内容 1.GPSデータを用いた予測支援2.SaaS型プロダクトの開発支援 上記いずれかにおいてデータエンジニア業務に従事いただきます。
  • 募集終了

Python / SQL / AWS など データエンジニア募集

750,000 〜 850,000円/月

東京都
半蔵門駅
PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
作業内容 下記のような案件においてデータエンジニア業務に従事いただきます。 ・GPSを用いたデータの集計・予測支援 ・SaaS型プロダクトの開発支援
  • 募集終了

【Python】データエンジニア

700,000円/月

業務委託(フリーランス)
東京都
PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティスト
作業内容 ①某大手通信会社販促システム開発 ②某大手小売・流通のシステム開発 ③広告や社内プロダクトの開発 上記いずれかにおいてデータエンジニア業務に従事いただきます。
  • 募集終了

【Python/SQL】自社サービスSaasのバックエンド(データ基盤)

900,000円/月

業務委託(フリーランス)
大阪府
PythonSQLSparkAWS
機械学習エンジニアバックエンドエンジニア
作業内容 ■募集背景・課題
  • 募集終了

【AIエンジニア】カード会社の不正検知学習モデル構築の設計・実装の求人・案件

1,000,000円/月

業務委託(フリーランス)
東京都
リモート
SparkApache
AIエンジニア
作業内容 【主な支援内容】 機械学習モデル、推論機能の設計・実装を行うチームの一人として業務 ・機械学習モデル、推論機能の設計・実装 ・設計、実装はAzure Databricks上で行う
  • 募集終了

【Python/AWS】BigData領域のWeb開発(フルリモート)

800,000円/月

業務委託(フリーランス)
東京都
PythonDynamoDBAWSAmazon S3
バックエンドエンジニア
作業内容 AWSクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。 Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。 ビッグデータ技術(Hadoop, Sparkなど)を用いて大規模データセットのバッチおよび、リアルタイム処理を実行します。 ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。
  • 募集終了

【AWS】データマネジメントシステム更改案件における構築支援業務

700,000円/月

業務委託(フリーランス)
東京都
AWS
サーバーエンジニア
作業内容 IT基盤戦略担当様のDMシステム更改案件における構築支援業務 データマネジメントインフラ支援業務 ・DaaS環境構築支援 ・インフラ構成検討支援 ・リアルタイム/機械学習基盤設計支援 ・問合せ対応       AWSクラウド環境にHadoop,Sparkといった技術を用いデータ連携/データ収集を行い、AIによる情報活用基盤の更改を行っていきます。

気になる案件は見つかりましたか?

お探しの条件に合った新着案件をお知らせします

あなたにピッタリ
フリーランス案件が見つかる

  • 134万件以上のフリーランス案件から一括検索

    342,851の案件を保有しており、エンジニアやクリエイター向けを中心にたくさんの案件を一括検索可能です。

    ※ 5月24日(Sat)更新

    34万件以上のフリーランス案件から一括検索

  • 2あなたの経験やスキルに適した案件をメールでお知らせ

    マイページに入力して頂いた経験や希望条件に合わせて、ご希望にマッチした案件をメールでお送りするので効率的な案件探しが可能です。

    あなたのプロフィールからおすすめの案件・求人

今すぐ無料登録