Sparkのフリーランス案件・求人一覧 | 3ページ目

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 RDBのデータベース設計やETL処理の設計・開発、APIの構築などを行うバックエンドエンジニアのポジションです。AWS関連リソースを積極的に活用し、データ処理やAPI開発に貢献します。 ■具体的な業務内容 ・RDBのデータベース設計 ・Glue Jobを利用したETL処理の設計・開発 ・API GatewayやLambdaを使用したAPI開発 ・AWSリソースの活用および管理 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 AWSを使用したビッグデータ解析や分散処理基盤の開発を担当します。ビジネスサイドの要望を踏まえ、最適なアーキテクチャを設計し、運用フローの自動化なども提案・実装します。 ■具体的な業務内容 ・AWSを使用したビッグデータ解析および基盤設計 ・運用フローの自動化提案および実装 ・ビジネスニーズに応じたデータセット作成 ・機械学習モデルのAPI環境の実装 ・CI/CD環境の構築および運用維持 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 機械学習を活用し、キャディのデータを基にしたモデルの開発や保守運用を行います。画像認識やサプライチェーンのデータ分析など、多岐にわたる業務を担当します。 ■具体的な業務内容 ・画像認識システムの構築および保守 ・Deep Learningを用いたモデル構築および評価 ・サプライチェーンデータの分析および仮説検証 ・最適化アルゴリズムの開発および導入 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 検索・機械学習エンジンの開発・実装を担当し、自然言語処理を用いた検索エンジンの開発や性能改善を行います。大規模データを扱うスキルが求められ、分散処理技術の知識も歓迎します。 ■具体的な業務内容 ・検索・機械学習エンジンの開発・実装、性能改善 ・自然言語処理技術を用いた検索エンジンの開発 ・大規模分散処理を伴う機械学習モデルの開発 ・Pythonを使用したデータ探索、特徴量変換、システム実装 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■ 概要 薬局経営を支援するダッシュボードのデータベース設計、API開発、ETL処理を担当します。AIを活用した自動発注サービスや、業務最適化を目指すプロジェクトで、AWSリソースを活用しながら機能拡充と品質向上に取り組みます。 ■ 具体的な業務内容 ・RDBのデータベース設計およびAPI開発 ・Glue Jobを使用したPythonによるETL処理の設計・開発 ・API GatewayやLambdaを活用したAPIの設計・実装 ・プロダクトオーナーと協力し仕様策定 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 AWSを活用してRDBのデータベース設計や、Glue Jobを使用したPythonによるETL処理を担当します。API GatewayやLambdaを活用してAPIを開発し、プロダクトオーナーと協力しながら仕様策定を行います。データウェアハウスおよびデータマート向けのETLジョブの開発経験が求められます。 ■具体的な業務内容 ・AWSサービス（Lambda、API Gatewayなど）を利用したシステム開発 ・Glue Jobを使用したETL処理の設計および開発 ・Pythonを使用したサーバーサイド開発 ・プロダクトオーナーとの協力による仕様策定 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 スタートアップ企業におけるフロントエンドエンジニア業務全般を担当いただきます。特にデータ分析や機械学習に関心があり、DjangoやVue.jsを使用した開発経験をお持ちの方が対象です。プロジェクトにおけるAPIやシステムの開発を担当していただきます。 ■具体的な業務内容 ・Djangoを使用したWEBサービスのバックエンド開発 ・Vue.jsを用いたフロントエンド開発 ・APIやシステムの設計および開発 ・GCPやAWSを利用したインフラ構築および運用 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 AWSを活用したバックエンドシステムの設計・開発を担当し、RDBデータベース設計やPythonを使用したETL処理、API GatewayやLambdaを用いたAPI開発を行います。技術的な知見を活かし、プロダクトオーナーと連携して仕様策定にも関与し、AWSリソースを積極的に活用したシステム開発に貢献します。 ■具体的な業務内容 ・RDBデータベース設計およびAWS Glueを使用したETL処理の開発 ・API Gateway、Lambdaを使用したAPI開発 ・プロダクトオーナーとの仕様策定および協調 ・AWSリソースを活用したインフラ構築および運用 ・Git Flowベースの開発進行およびプロジェクト管理 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 DataStageで作成している業務APをマイグレーションに伴いSparkで刷新・DBA業務系（モデリング、SQL開発など）・SPARK要員Spark経験者・JP1要員ジョブネットの詳細設計以降

作業内容 某通信キャリアの情報系システムのエンハンス対応

作業内容 ＤＷＨシステムのマイグレーションに関わる開発

作業内容 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守

作業内容 新規/運用中ゲーム開発における、 モーションデザイナーとして作業をお任せいたします。 具体的には下記作業を想定しています。 ・専用ツールを使用したキャラクターやモンスターの必殺技や魔法演出の作成

作業内容 ・パイプライン設計実装案件に携わっていただきます。 ・主に下記作業をご担当いただきます。 - パイプラインの設計、実装 - データ品質チェックの実装 - システム間reconciliationロジックの実装

作業内容 ＜＜スマホゲームを中心に、「ゲームで世界に感動を創り出す」企業！！＞＞ ゲーム開発におけるバトル演出デザイナー業務をお任せします。 　 ■□具体的には…□■ ・専用ツールを使用したキャラクター／モンスターの必殺技／魔法演出の作成 　 ＜こんな方におすすめです！＞ ・デザインスキルを活かしたい方 ・新しい技術や表現に挑戦したい方

作業内容 フルリモート環境にて、仕様書を基に主体的に開発（コーディング）を行っていただきます。 仕様が不明瞭な箇所については、課題管理表・チャット等でクライアントへの確認が発生します。

作業内容 道路マネジメントプラットフォーム開発に携わっていただきます。

作業内容 業務内容 ■案件概要 インターネット広告代理店業における広告媒体データの収集・蓄積・加工を担う、社内データ基盤システムの設計・開発・運用をします。 - 広告媒体データ蓄積基盤。Google・Meta・Yahoo・TikTok・X(Twitter)・LINE・Microsoft(Bing) など複数の広告媒体 API からデータを収集し一元的に蓄積する社内向け基盤システム。（名称：Opelake） - 蓄積データを DWH・データマートへ変換・提供する ETL 基盤 - 数十 TB/月、毎日数十億レコードを処理する大規模データパイプライン ■業務内容 プロダクトの新機能開発/既存機能の改修 - 各広告媒体 API を利用したデータ収集・蓄積処理の実装・保守 - Apache Spark / AWS Glue を使用した大規模 ETL 処理の開発・保守 - Snowflake を用いた DWH・データマートの設計・構築・最適化 - Terraform を使用したクラウドインフラの IaC 管理 - CI/CD、可観測性（監視・ログ・アラート）基盤の整備 - AI 駆動開発の仕組みづくりと運用 - AWS を使用したクラウドベースの開発 ... etc ■言語/利用ツール 言語/FW: Python インフラ: AWS (Glue, S3, ECS, Batch 等) / Kubernetes / Terraform / RDS (MySQL) / Redis データ基盤: Apache Spark (PySpark) / Snowflake 開発基盤: GitHub / Docker AI開発: Claude Code ■開発文化 - 少数精鋭チームで、メンバー全員が担当領域を横断してデータパイプライン全体に関わっています - 生成 AI を業務に積極的に組み込んでおり、AI 駆動の開発スタイルを実践しています - 設計・ドキュメント重視の文化（API 仕様・設計ドキュメントを整備しながら開発） - 振り返りやオンボーディング改善などチームプロセスの継続的改善 ■働き方 ■働き方 開始日：7月中もしくは8月1営業日 リモート：出社いただけるとありがたいですが、フルリモートも可能です(初日のみPC貸与のため出社をお願いいたします) PC：貸与 関わるサービス・プロダクト ■企業について ・広告代理店、メディア事業、ゲーム事業、AI事業 の4事業を中心に展開している企業です。 【プロダクト】 インターネット広告代理店業における運用自動化/効率化を目的とした、下記システムの開発、運用をお願いします。 - 各媒体API(Google,Yahoo)への入稿、レポートを取得 　- 各媒体への同一インターフェイスで入稿、レポートを取得できるシステムのバッチ開発

作業内容 ・移動体の地理空間データ評価／比較／データ調達支援 ・位置情報データ処理ソリューションの設計／開発 ・スケーラブルなデータパイプライン／ETL基盤構築 ・機械学習モデルを活用した予測分析 ・AWS環境での位置情報データ分析 ・CI/CDシステム構築 ・大規模位置情報データ処理環境の設計／改善 ・関連ドキュメント作成 ※当案件におきましては、直近参画期間が半年以内の案件が続いている方はお見送りとなります。（但し、企業都合退場は対象外） ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～30代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～

作業内容 新規/運用中RPG開発にて、 バトル演出デザイナーとして作業をお任せいたします。 具体的に下記作業をお任せいたします。 ・既存のエフェクト素材、キャラクターモーションを専用ツール（タイムライン等）上で組み合わせ、テンポの良い爽快なバトル演出を形にする作業 ・カメラのアングル、カット割り、揺れ(シェイク)、ヒットストップなどのカメラワークやタイミングの調整

作業内容 ・大手メーカーにおけるETLシステム改修作業に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-システム改修に伴う設計および構築、テスト作業 　-既存システムへのIF追加および変更作業 　-ソース修正およびテスト作業

作業内容 ・某SNS企業向けのデータエンジニアリング業務に携わっていただきます。 ・主に下記作業をご担当いただきます。 - DWH、データマートの設計/開発/運用 - 既存データパイプラインの運用/保守/パフォーマンス改善

作業内容 ＜＜スマホゲームを中心に、「ゲームで世界に感動を創り出す」企業！！＞＞ ゲーム開発におけるエフェクトデザイナー業務をお任せします。 　 ■□具体的には…□■ ・バトルキャラクター、モンスターのエフェクトデザイン制作 ・シナリオキャラクターのエフェクトデザインの制作 ・エフェクト演出制作 ・組み込み、実装 ・使用ツール 　∟SPARK GEAR／Unity／Photoshop／Maya 　 ＜こんな方におすすめです！＞ ・デザインスキルを活かしたい方 ・新しい技術や表現に挑戦したい方

作業内容 ・python(実行はRedshift)からSparkSQLへの移行案件 ・SparkSQLの移行実装は終えているが、不具合が発生しているためその修正及び試験を実施 ・環　境：AWSGlue／Redshift／SparkSQL／python -SQL実装経験（サブクエリ・外部結合を構築可能）

作業内容 ・新規データを取りこむジョブの追加開発・テスト(取り込み処理は既存流用) ・既存パイプラインの保守、運用 ・開発環境：Python、databricks、SQL、Apache Spark、Google BigQuery、SAS、SAS Viya、AWS、Azure、GoogleCloud

作業内容 ・リテール業界向けにクライアント課題を解決するソリューションの基盤となるデータ分析やモデル構築をご担当いただきます。 ・主に下記作業をご担当いただきます。 -要件に基づいたデータ分析 -機械学習モデルの構築 -非機能的な視点での分析や提案および改善 -データの前処理やクリーニング -高トラフィック時におけるデータ処理のサポート -クラウドアーキテクトチームと協働し、新しいソリューションを作成

作業内容 要件定義,基本設計,詳細設計,実装,テスト,運用・保守 企業のマーケティングDXや事業変革をデータ活用で支援するコンサルティングファームにて、データ基盤（DWH・ETL・データレイク）の設計・構築を担当いただきます。 東証プライム上場企業を中心とした大手クライアントに対し、データドリブン経営の核となる基盤づくりをリードするポジションです。 具体的には、Snowflake、BigQuery、Databricksといった最新のクラウドDWHの導入支援や、Python/SQLを用いた効率的なデータパイプライン（ETL/ELT）の設計・実装に携わっていただきます。 また、ストリーミングデータ処理やデータガバナンス設計など、大規模かつ複雑なデータ環境において最適なアーキテクチャを提案・構築していただくことを期待しています。 BI・分析チームと密に連携しながら、ビジネス価値を生むためのデータ提供基盤を、最先端の技術スタックを用いて実現できるやりがいのある環境です。

作業内容 【概要】 既存電力データ集約システムのアーキテクチャ維持および改善、 AWS・Databricks を活用したデータレイク/ETL基盤の設計見直しなどを担当いただきます。 現時点では構築フェーズではなく、不具合対応・パイプライン設計の見直しなど既存システムのお守りが中心となります。 本格的な構築は 7月-または10月-を予定。 Snowflakeなどデータ基盤の経験がある方はイメージしやすい業務です。 【業務内容】 具体的な業務は以下となります。 ・AWS×Databricks のデータパイプラインの設計見直し ・既存Spark/ETLフローの調査と改善 ・不具合発生時の原因調査とアーキ再設計 ・データレイクの構造改善/最適化 ・コードアーキテクチャ（Git）レビュー ・データワークフローの最適化 ・将来のBigQuery連携に向けた設計検討 【工程】 現行調査（アーキ・パイプライン） 要件定義（構築フェーズ以降） 基本設計（アーキ構成／データレイク） 詳細設計（パイプライン） セキュリティ/ネットワーク設計 性能設計 不具合時のアーキレビュー 最適化提案 監査対応を見据えた設計 【体制】 調査-参画中のプロパー：2名＋今回のポジション 他、library管理者1名、アーキテクチャ1名 保守チームのプロパー：2名 【リモート/出社】 リモート勤務との併用が可能です。 週1日程度、豊洲にあるデータセンターへの出社対応があります。 【PC】貸与あり

作業内容 基本設計,詳細設計,実装,テスト,運用・保守 大手インターネット企業にて、全社データ分析基盤のアーキテクチャ設計および構築をMLエンジニアとして担当していただきます。 主な業務は、数千万〜数億レコード規模の大規模データを扱うデータレイクやDWH（BigQuery）の設計・運用です。 具体的には、OCIからGCPへのクロスクラウドデータ連携の実装や、ETL/ELTパイプラインの開発、Terraformを用いたIaCによるインフラ管理を担っていただきます。 また、AIデータアクセス基盤（MCP/Agent）の構築や、データガバナンス・セキュリティ設計（IAM/VPC）など、最先端のデータ基盤構築に幅広く携わることができる環境です。

作業内容 運用中RPGソーシャルゲームにおいてエフェクト制作全般をご担当いただきます。 主に下記作業をご担当いただきます。 　- バトル用エフェクトの制作(EXスキル、エネミースキルなど) 　- ストーリーパートのエフェクトの制作(カットシーン、ADVパート用エフェクトなど) 　- ShurikenやSparkGearを用いたエフェクト制作 　- 企画、エンジニアなど他セクションとのすり合わせ

作業内容 社内外に公開しているAPIの開発などをフルスタックに対応いただきます。 ======================== ※必ずお読みください※ 【20 代から50代前半の方が活躍中】 ※実務経験1年以上ありの方が対象の案件です！ 【外国籍の方の場合】 日本語能力検定１級お持ちの方 日本語が母国語の方 ※日本在住の方のみ ========================

作業内容 ・某SNS企業におけるデータ基盤の全工程を完結させる自律体制の構築に携わっていただきます。 ・主に下記作業をご担当いただきます。 - データパイプラインの構築・実装 - 既存データパイプラインの運用保守・監視 - Hadoop基盤の整備・改善 - 技術移転・ドキュメント化

作業内容 ・データ分析、利活用ツールの導入、保守開発等（開発より調査やドキュメント作成の方が多い想定） ・Azureへの移行

作業内容 既存プロパーが参画中の案件において、データマートの設計、開発を中心に、Pythonを用いたバックエンド開発業務をご担当いただきます。

作業内容 ・全社データ分析基盤のアーキテクチャ設計・構築に携わっていただきます。 ・主に下記作業をご担当いただきます。 - データレイク / DWH(BigQuery)基盤の設計・運用 - ETL / ELTパイプラインの設計・開発 - クロスクラウドデータ連携(OCI → GCP)の設計・実装 - データモデリング(OBT / mart)の設計 - Terraformを用いたIaCによるインフラ管理 - データ基盤に関わるネットワーク・セキュリティ設計(IAM / VPC / データガバナンス) - AIデータアクセス基盤(MCP / Agent)の構築

作業内容 【概要】 AWS上に構築されたデータレイクおよび Databricks 環境における、 Pythonライブラリ・証明書・ETL関連コンポーネントのバージョン管理・更新作業を担当いただきます。 既存Library やデータレイクに対するアップデートを中心とした業務で、4‐9月は現行システム（ステップ4）の維持保守と引継ぎ期間となります。 【業務内容】 具体的な業務は以下となります。 ・Library（Python・Driver など）のバージョン管理 ・Databricks上のETL環境に伴うLibrary更新作業 ・AWS上のデータレイク環境における構成管理 ・証明書更新（Peakload含む） ・個別で実装されているコンポーネントの確認・管理 ・Gitを利用したコード管理 ・既存環境の棚卸し・ドキュメント整備 【工程】 現行調査 バージョン管理 依存関係管理 脆弱性確認 変更手順の作成 検証（単体/結合） Libraryリリース 証明書更新（Peakload含む） ドキュメント整備 【体制】 調査-参画中のプロパー：2名＋今回のポジション 他、library管理者1名、アーキテクチャ1名 保守チームのプロパー：2名 【リモート/出社対応】 リモート勤務との併用が可能です。 週1日程度、豊洲にあるデータセンターへの出社対応があります。 【PC】貸与あり

作業内容 ・カード基幹系システム開発 ・現行システム(COBOL)から新システムへのマイグレーション開発(ホスト→Hadoop基盤へのデータ連携) ・工程：基本設計、詳細設計、製造、テスト、本番リリース、運用/保守

作業内容 現在、AWS（データレイク）とGCP（DWH）を組み合わせたハイブリッドクラウド基盤を構築中です。 この基盤をスケールさせ、俊敏なデータ活用を全社に浸透させるために、AWSGlue や BigQueryを活用したデータパイプライン開発を担当いただくデータエンジニアを募集します。 サービス運営・ビジネス分析・出版社支援など多様な活用ニーズに応えるためのデータ基盤構築をお任せします。 ▪️データレイク／ETL 基盤の構築 ・AWS Glue（Apache Spark）による分散処理・ETL 開発 ・S3／Lake Formation を用いたデータ管理・セキュリティ設計 ▪️BigQuery ベースの DWH 環境整備 ・AWS → GCP 間データ連携パイプラインの最適化 ・BigQuery によるデータモデリング・クエリ最適化 ▪️IaC を軸としたマルチクラウド管理 ・Terraform による環境差分管理・自動化 ▪️品質管理・運用効率化 ・Airflow などのワークフロー管理と CI/CD 整備 ・データ品質テストの自動化

作業内容 スクラムのメンバーとして、基盤構築/アプリ開発を業務としてご担当していただきます。

作業内容 【作業内容】 ・Databricks（PySpark, Scala）環境のパフォーマンス最適化を行います。 ・大規模データ処理の実装・改修を担当します。 ・Azureデータ基盤のパフォーマンス改善を行います。 ・保守・構成管理およびリファクタリングを担当します。