Sparkのフリーランス案件・求人一覧 | 14ページ目

作業内容 ・大規模データを取り扱うクラウドサービスの開発に携わっていただきます。 ・GoやPythonを初めとして、複数言語を用いた開発に携わっていただきます。 　 ・主に下記作業をご担当いただきます。 -システムアーキテクチャの検討、選定及び設計、実装 -Webアプリケーションに関する設計及び実装 -ビッグデータの分析のための分散処理基盤の開発

作業内容 ・様々な分野にまたがり企画、運用を行っているグループ・パートナー企業のサービスにおける、 　ビッグデータを活用した新しいデータマネジメントプラットフォーム開発に 　携わっていただきます。 ・Pythonでの開発となります。

作業内容 DX推進を行っている部署の中で、既存で散らばっている社内のデータを集約する作業を行なっております。 既存のデータはAzureの中に入れており、そこのデータパイプラインの保守作業を行いつつ、新規パイプラインの設計・構築を行っていただきます。(Sparkを想定しております。) また、集約したデータをBIツールを活用し、データ可視化も行っています。 （既存ダッシュボードの保守、新規ダッシュボード構築など）

作業内容 ・AWS基盤調査改善/構築案件に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-既存のAWS基盤の調査改善 　-ETL環境運用作業(テーブル追加、カラム変更程度)

作業内容 ・データ分析基盤及び、ETL基盤の開発、システム開発に携わっていただきます。 ・開発工程をメインで携わっていただきます。 ・要件定義～テスト・運用まで一気通貫してご対応頂きます。

作業内容 大規模データ収集基板構築（オンプレにて構築）に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。・新環境（分散FS環境）向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）、運用機能の開発 開発環境 ・Java・Hadoop(Cloudera)・Apache kafka・Apache spark・Kubernetes/OpenShift/vCenter

作業内容 ・大手企業にて、 　機械学習/データマイニングを用いたデータ分析に携わって頂きます。 ・グループ内の数百ある各事業会社の要件を実現していくため、 　AIやIoTの技術なども使いながら、少人数でPoCを回して頂きます。 ・データ分析だけでなく、サービスの改善提案まで担当して頂きます。 ・ご経験がある方は、アーキテクチャ設計や技術選定、 　及びデータ分析基盤の構築なども併せて依頼されることがございます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。

作業内容 ・データエンジニアと緊密に連携して、バッチおよびリアルタイムデータ処理用のデータパイプラインの構築と最適化 ・ データサイエンティストやアナリストと協力して、データへのアクセスを容易にし、 高度な分析や機械学習プロジェクトをサポートします。 【概要】 ・さまざまなサービスと実装パターンを活用し、安全でスケーラブルかつコスト効率に優れたエンタープライズアーキテクチャを設計から実装を目指します。 具体的には、さまざまなデータワークロードと分析ニーズをサポートするために、 データの取り込み、保存、処理、消費のためのソリューション設計になります。

作業内容 製造業・建設業向け次世代ERPパッケージシステム導入における、SCMパッケージ開発を行っていただきます。 機能及び、UI/UXを含む製品設計フェーズにご参画いただきます。 導入モジュールは原価管理と工程管理(計画、モニタリング等)になります。 ※オフショア開発の可能性がある為、実開発は行わない可能性あり 言語はJavaとなります。

作業内容 ・ご経験やご希望に応じて上流から下流まで幅広く携わっていただきます。 ・主にScalaを利用したウェブアプリケーション開発、および 　Google Cloud PlatformおよびAWSを利用した新業務ツールの開発、運用 　を行っていただきます。

作業内容 ・マーケティングを技術でリードするため、 　機械学習やデータマイニングなどに携わって頂きます。 ・課題解決のため、様々なアプローチを検討し、最適化して頂きます。 ・主な業務は下記の通りです。 　-データ分の析や可視化 　-施策の目標設定のサポートや検証の設計 　-機械学習を用いたレコメンド 　-改善を目的とした開発や分析 　-リターゲティング広告配信やプロモーションのためのDMP構築 　-サードパーティの広告配信へのオーディエンスデータ連携 　-ログからキャンペーンのレポーティングやパフォーマンス実証 　-データ解析環境の構築や効果的な広告配信のためのデータ分析 　-アプリのプロモーションや広告運用のテクニカルサポート

作業内容 クライアントの内製開発をご支援いただきます。 クライアントの内製開発チームは技術深耕へのモチベーションも高く、「ギークであること」をモットーに Azure系のサービスを中心に積極的なキャッチアップと技術検証に取り組まれています。 今回は、次期システムの開発支援メンバーを募集します。 同内製開発チームは製造IoT系のシステムを開発しています。 このシステムの分析領域に関しては、今後、Microsoft Fabric等の先進的なサービスを活用したアーキテクチャが構想されています。 製造IoT基盤分析領域の次期システム開発支援として、下記をご担当いただきます。 ・Azureサービスを用いたシステム構築、開発

作業内容 ・大規模サービス運用企業において、基盤システムの運用改善に携わっていただきます。

作業内容 ・IoT、RPAに関するデータ収集およびダッシュボート、および関連アプリケーションの開発を行っていただきます。

作業内容 ・アジャイル開発プロジェクトにて 　Webアプリケーション開発及びインフラ開発に携わっていただきます。 ・製造業、物流、流通関係のプロジェクトを複数抱えている為、 　ご商談後に担当作業を選定させていただいております。

作業内容 ・大規模サービスを運用している企業にて、 　基盤データベースシステムの運用/保守をご担当いただきます。

作業内容 クライアントの内製開発をご支援いただきます。 クライアントの内製開発チームは技術深耕へのモチベーションも高く、「ギークであること」をモットーに Azure系のサービスを中心に積極的なキャッチアップと技術検証に取り組まれています。 今回は、次期システムの開発支援メンバーを募集します。 同内製開発チームは製造IoT系のシステムを開発しています。 このシステムの分析領域に関しては、今後、Microsoft Fabric等の先進的なサービスを活用したアーキテクチャが構想されています。 製造IoT基盤分析領域の次期システム開発支援として、下記をご担当いただきます。 ・Azureサービスを用いたシステム構築、開発

作業内容 ・航空気象系サービスのバックエンド開発をお願いします。 ・Pythonを用いてデータ取り込み開発をご担当いただきます。 ・既存チームに合流して開発を進めていただきます。 ・アジャイル形式で進めるため、API1名、 　取り込み部分1名＋数名が同じチームとなり 　複数チームで開発します。

作業内容 ・小売業の予測モデル構築及び運用支援 【業務詳細】 ・小売業における1日の商品の売り上げを予測、発注推奨数を計算する。 ・予測モデルはすでに運用中のものがあり、一部のデータサイエンティストによってモデルの精度向上を行っている。 ・需要予測モデルでのデータ加工、特徴量生成、売上予測の数字を使った店舗ごとへの発注推奨数計算ロジックの設計を受け取り実装していくのが主な業務。

作業内容 ・自社運営の広告配信システムの開発をご担当いただきます。 ・Scalaを用いた開発をご担当いただきます。 ・設計から実装、テスト、運用まで幅広くご担当いただきます。 ・PCはMacBook Proを使用して開発していただきます。

作業内容 ・インフラ基盤を支えるリードエンジニアとして参画いただきます。 ※以下具体的な作業内容です 　・データーセンタ/ネットワーク層からDB/ミドルウエア/ 　　アプリケーション層までの広い階層の設計/運用 　・上記の設計/構築/設備投資の立案 　・インフラ全体のアーキテクチャ設計/実装 　・サービスの監視/管理/運用 　　また、そのためのツール選定やツール作成 　・日常の監視/運用業務/障害対応

作業内容 運用中のソーシャルゲームにおいて、 2Dキャラクターアニメーションの制作をご担当いただきます。 場合によっては下記監修作業もご依頼致します。 ・キャラクターモデリング ・外部パートナーと連携してモデルの監修 　 ※ご担当頂く作業領域はご経験に応じて変動致します。

作業内容 ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・git flowベースの開発進行 ■利用技術 ・Angular(2〜) ・TypeScript、RxJS、echart、nebular ・AWS(Cognito、Amplify、API Gateway、Lambda、RDS、S3) ・Python3 ・その他(GitHub、redash、Datadog、Google Analytics、GTM、KARTE)

作業内容 【仕事内容】 Q&Aに特化したライブ配信アプリを開発しております。 インフラエンジニアとしてアプリの開発に加わっていただけるメンバーを募集しております。具体的にはライブ配信アプリのインフラ環境の設計、構築、運用をお任せします。 ■チーム体制 ・PdM：1名 ・バックエンドエンジニア：2名 ・モバイルエンジニア：3名 ・プロダクトデザイナー：1名 ■環境 • 分散DB（Cloud Spanner） • 言語：Go言語 • 通信 ：connect-go proto • コンピューティング：Kubernetes → Cloud Run • DWH・パイプライン構築 ◦ BigQuery ◦ Apache Spark ■働き方 フルリモート 週1回（月or金）出社頂ける方が理想です。 外国籍：不可

作業内容 ・インターネット広告分析用プロダクトの新規開発において、 　下記作業を想定しております。 　-インターネット広告関連データを蓄積するデータレイクの開発

作業内容 ■案件内容 　日本国内のレガシーシステムを捨てて全世界でのシステム統合対応をしています。 医療系ビッグデータの管理、データ入力システムの再構築 新規作成中のグローバル統合基盤における 日本のデータ管理のためのDB設計、データ移行サポートなど多岐にわたります。 当面のタスクとしては、旧システムからのデータ移行検討、実施と 新規画面作成の２つの面があります。 現在はメインとしてデータ移行関連を対応していますが、 今後は入力システムの刷新の方にシフトしていく想定。 複数国での開発のため資料がほぼすべて英語になりますので、 英会話まではできなくても読み書き問題なければテーブルに乗ります。 ■担当工程： 　基本設計～テスト ■役割 　SE

作業内容 ヘルスケア企業向けにリリースしたスマホアプリの運用保守において、以下業務を行っていただきます。 基盤はAWS、開発手法はアジャイルです(顧客企業からは2名参画中)。 ＜業務内容＞ ・AWSからの日々のアラート対応(監視・原因調査・対応) ・AWSマネコンを利用したシステム稼働状況確認、Lambdaを用いたジョブ稼働コントロール ・データ集計/手動更新、テストデータ導入、リリース後の検証 ・ユーザー登録、お知らせ通知などの作業依頼対応 ・ユーザー問合せ対応、障害発生時における原因調査/対策 ＜勤務地＞ 恵比寿周辺 ※詳細な出勤地は面談確定時に共有させていただきます ＜基本時間＞ 10：00～19：00

作業内容 クライアント内で構成されているOSSアプリケーションの仕様を把握し、それぞれの連携を行い、データ基盤そのものを構築いただきます。 技術要素 GoogleCloud Cloud Composer2（及びAirflow2） Cloud Dataproc（Apache Spark(scala)） Cloud Build Cloud Storage BigQuery Cloud Monitoring / Cloud Logging AWS Kinesis firehose SQS / SNS ECS Lambda ECR S3 Cloud Watch その他 GithubActions Terraform

作業内容 ・クラウドを用いたインタフェースの開発支援に携わっていただきます。 ・主に下記作業をご担当いただきます。 　- Microsoft Fabric環境での実装からテスト 　-インターフェース各種設計書作成

作業内容 ・各サービスで使用する課金基盤やアカウント基盤の開発に携わって頂きます。 ・設計から幅広く担当して頂きます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。