Spark × 在宅・リモートのフリーランス案件・求人一覧 | 6ページ目

作業内容 ・需要予測システム開発および運用支援 ・工程：製造・テスト・エラー調査・運用

作業内容 ・大手通信企業向けポイントシステムの一部機能の開発にて プロジェクトマネジメント業務および要件定義に携わっていただきます。 ・AWS上でSpark on EMR環境を構築、クライアントアプリから使えるようAWSのFargate上で動かすことを想定しています。

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 ゲームの開発/運営を行っている現場で、 主にエフェクトデザイン業務をお願い致します。 中でもパーティクルエフェクトに関する作業を中心にお願い致します。

作業内容 【業務内容】 大手広告代理店が展開しているインターネット広告代理店業における、膨大な広告データを収集・蓄積したデータレイクからデータを展開するためのデータ基盤（ETL処理、DWH、DM）の開発、運用、保守をお願いします。 【ポイント】 データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、そんな大規模データと向き合った開発にチャレンジすることができます。複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。 【開発チームと配属先について】 当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。 今回お願いしたいポジションはサーバサイドエンジニアです。 チームには現在18名のエンジニアが在籍しています。 また、複数のプロダクトを管理しているチームのため、担当領域ごとにグループ分けをしています。 Infeed領域の広告運用のためのプロダクトを開発するグループインターネット広告関連データをデータレイクに蓄積するシステムを開発するグループインターネット広告関連データが蓄積されたデータレイクを用いたデータ基盤を開発するグループ機械学習を用いたプロダクトを開発するグループ掲載情報や実績情報を出力・レポーティングするための分析用プロダクトを開発するグループ 【技術キーワード】 ApacheSparkAWS GlueSnowflakeデータレイク/データウェアハウス/データマート

作業内容 Q&Aに特化したライブ配信アプリを開発しております。 インフラエンジニアとしてアプリの開発に加わっていただけるメンバーを募集しております。具体的にはライブ配信アプリのインフラ環境の設計、構築、運用をお任せします。 ■チーム構成 ・PdM：1名 ・バックエンドエンジニア：2名 ・モバイルエンジニア：3名 ・プロダクトデザイナー：1名 ■開発環境 ? 分散DB（Cloud Spanner） ? 言語：Go言語 ? 通信 ：connect-go proto ? コンピューティング：Kubernetes → Cloud Run ? DWH・パイプライン構築 ? BigQuery ? Apache Spark ■会社の魅力 大企業の持つ資本力とベンチャーの持つスピード感を両立しており、０ベースでの技術的負債が無い状態でのスタートを切ることができます。そしてビジネス的にもスピード感を持って大きなことにチャレンジできる土壌が整っております。 ユーザーの質問にライバーが回答することに特化したライブストリーミングサービス（Q&Aに特化したライブ配信アプリ）を今年の春、リリース予定となっております。 ■部署の魅力や雰囲気 ・積極的に新しい仕組みやツールに挑戦する ・ビジネスとエンジニアの距離が近い ・エンジニアからも機能提案などする機会が多い

作業内容 ・データ分析基盤及びETL基盤のシステム開発支援に携わっていただきます。 ・下記作業をおまかせいたします。 　-システムアーキテクチャの検討・選定・設計・実装 　-分散処理基盤の開発

作業内容 ・中部LCS Snowflake化対応に携わっていただきます。 ・主に以下作業をご担当いただきます。 　ｰ基本設計 　ｰ詳細設計 　ｰ製造 　ｰ単体試験 　ｰ結合試験

作業内容 ・自社広告配信プロダクトの100億レコード以上/日のログを分析し 　広告配信の最適化する業務に携わっていただきます。 ・KPI(CPCなど)最適化の改善及び運用をご担当いただきます。

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ・インフラエンジニアとして、インフラの設計・開発・テストから運用・保守まで、全体をエンド・ツー・エンドで担当・リード ・AWSやGCP上でのデータ処理やクエリーワークロードの設計、デプロイ、監視プロセス・ツールの簡素化と強化 ・マーケティング・UXデザイン・業務企画・事業開発・カスタマーサービス・営業等と連携し、クロスファンクショナルなチームでの業務推進 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをリリースし、 エンタープライズとの契約が急激に増えている中で、 多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、 集計後、データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、 開発メンバー全員でスプリントを消化していく体制になります。 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 ・某メーカーのDX案件における、データ利活用・可視化対応作業を行います。 ・9月よりデータ整備・データマートの概要設計等を実施し、性能要件がありその点を踏まえた検討も実施します。 ・10月以降はデータ収集・加工プログラムの開発やダッシュボード開発を予定しています。

作業内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制になります。【募集背景】新バージョンの機能追加が急務であり、エンジニアリソースが不足しているため。【開発環境】・開発言語： Python、SQL・DB: Aurora(PostgreSQL互換)、Redshift・検索エンジン： Amazon Elasticsearch Service・ライブラリ・フレームワーク：Pandas、Numpy、Dask・インフラ： Amazon Web Services・AWS製品： ECS、S3、Step Functions、Lambda、CloudWatch・環境、ツール： Docker、GitHub、Jira、Slack、CircleCI、Sentry

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～ 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。 【開発環境】 ・開発言語：Python、SQL ・DB:Aurora(PostgreSQL互換)、Redshift ・ライブラリ・フレームワーク：Pandas、Numpy、Dask ・インフラ：AWS ・AWS製品：ECS、S3、StepFunctions、Lambda、CloudWatch ・環境、ツール：Docker、GitHub、Jira、Slack、CircleCI、Sentry ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎

作業内容 ・小売向け需要予測システム開発、運用支援に関わる各種業務 ・製造〜テスト〜調査〜運用などをご担当

作業内容 kubernetes 上に構築したアプリケーションの開発や運用業務に携わっていただきます ・アプリケーション開発 ・データ系アプリケーションのワークフロー開発 ・運用改善

作業内容 [ポジション]：分析基盤エンジニア ◇データ分析対応チーム、もしくはデータ分析基盤構築チームにて、 A: 定型化されたデータ分析の実行（集計/加工/分析/可視化/アドホック対応など) 　 B: 関連するデータ分析基盤システム構築（インフラ,システム開発/仮想化/など）　のいずれかをご対応いただく予定です。・仕様や方針などは、A/B領域共にクライアント側で設定の上、後続対応を実施していただきます。・Aについては、基本出社対応、Bについては状況に応じて出社を予定しております。 [稼働先最寄り]・基本リモート or 現場常駐（出社時は東京都 港区エリア）　※現状、タスクに応じて50/50で対応中 　※ご面談設定の際に、詳細情報を連携させていたます。 [募集人数] ・メンバー枠： 　データ分析エンジニア　　　　： ～1名 　データ分析基盤構築エンジニア： ～最大3名

作業内容 ・データのETL処理の基盤構築 ・AWSサービスとPythonを使ってデータ解析基盤の開発 ・設計/製造をメインにご担当

作業内容 概　要： 世界各国で利用されるオンラインサービスにおけるデータ分析基盤の開発運用支援をお願い致します

作業内容 企画,コンサルティング,ディレクション,データ分析 大型カーボンニュートラルプロジェクトに携わって頂きます。 ・データプラットフォームのシステムアーキテクチャの作成 ・システム開発を行なう上で必要なOSSを中心とした技術要素の選定

作業内容 ・BtoB （AI診断）サービス開発に携わっていただきます｡ ・下記を行っていただきます｡ 　-UIUXの設計構築からサービス実装 　-ご希望に応じてフルスタックに関わっていただきます。

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 ・大手外資系製薬会社のデータエンジニアとして参画いただきます。 ・具体的には下記です。 　‐データと分析チームの技術的な問題支援 　‐データインフラストラクチャのニーズのサポート 　‐ビジネスアナリストやその他の利害関係者との連携 　‐ビジネス要件を技術仕様に変換する作業 　‐データプロセスの効率と機能の向上に向けたデータサイエンティストとの連携 　‐データセットの組み立て 　‐Microsoft AzureまたはAWSのいずれかで、最適なデータパイプラインアーキテクチャを設計、構築、テスト、および維持 　‐データソースからのデータの最適な抽出、変換、および読み込みに必要なインフラ構築 　‐データ品質、データセキュリティ、およびデータガバナンスの側面でのデータプラクティスの適用

作業内容 ・Javaを用いた損害保険会社と自動車メーカー間のデータ連携およびデータ分析システムの開発に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-工程：基本設計、外部設計、内部設計、コーディング、テスト 　-契約データ連携 　-走行データ連携及び分析

作業内容 ・Pythonを用いた通信会社向け開発支援作業に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-基本設計 　-詳細設計 　-製造 　-テスト

作業内容 ・DWH層テーブルの設計 ・DWH層テーブルのSQLおよびPySparkを用いた実装 ・DWH層テーブルについての問い合わせ対応・不具合調査 ・DWH層開発環境の設計・開発・保守・運用

作業内容 プロダクトオーナーやデザイナー、フロントエンドエンジニアと密に連携しながら、要件定義、設計、開発、運用まで、一気通貫で実施します。 また機能開発だけでなく、リファクタリングや依存ライブラリの更新、パフォーマンス改善等の様々な保守運用開発も実施します。

作業内容 テックビズなら記帳代行無料！仕事に集中して取り組んでいただけます。 【業務内容】 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをリリースし、 エンタープライズとの契約が急激に増えている中で、 多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、 集計後、データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、 開発メンバー全員でスプリントを消化していく体制になります。 場所:完全フルリモート※地方在住可 面談:1回(オンライン) 精算:140~180h 作業時間:9:00~18:00 ■開発環境 ・開発言語:Python、SQL ・DB:Aurora(PostgreSQL互換)、Redshift ・検索エンジン:AmazonElasticsearchService ・ライブラリ・フレームワーク:Pandas、Numpy、Dask ・インフラ:AmazonWebServices ・AWS製品:ECS、S3、StepFunctions、Lambda、CloudWatch ・環境、ツール:Docker、GitHub、Jira、Slack、CircleCI、Sentry ※以下に該当する方からの応募はお断りしております。 なお、選考を進めるにあたってスキルシートが必要です。 -------------------------------------------------------- ・外国籍の方(永住権をお持ちの方は問題ございません) ・週5日稼働できない方 --------------------------------------------------------

作業内容 某ベンチャー企業にて、在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをこの春リリースし、 エンタープライズとの契約が急激に増えている中で、 非常に多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、 開発メンバー全員でスプリントを消化していく体制になります。 業務内容 顧客の持つ様々なビッグデータをクラウド環境で統合し、その分析/活用が出来る基盤の構築/運用します。 ・新規データ取得のETL及びデータウェアハウスの実装 ・データ基盤の運用及び保守開発 ・データの可視化 ・定例MTG対応 ・仕様書等ドキュメント作成（一部） 技術環境 O S 　　 ：Linux, Windows 言 語 　　 ：Python, SQL D B　　　 ：Redshift, Aurora(PostgreSQL互換) Cloud　　 ：AWS（ECS, S3, StepFunctions, Lambda, Redshift, Aurora等） DWH　　 ：BigQuery, TreasureData等 機械学習系：Kedro, MLflow C I　　　 ：CircleCI 監視系　　：Sentry その他　　： GitHub, Slack, CircleCI

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ Pythonによるデータ基盤構築 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制になります。 今回の募集は、新バージョンの機能改善やオプション機能の開発が 急務であり、エンジニアリソースが不足しているためとなっております。 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 データプラットフォームのシステムアーキテクチャの作成やシステム開発を行なう上で必要なOSSを中心とした技術要素の選定をご担当頂きます。

作業内容 社内データ分析基盤開発・保守・運用業務を担っていただきます。■Python/Shell/Rubyで開発されているバッチ系システムが主 ・データレイクへの取り込み ・中間テーブル生成 ■追加機能開発 / 不具合調査・修正 / 社内ユーザーからの問合せ対応 ・社内ユーザコミュニケーションや要件定義も含む ・インフラからコードデプロイまでを担当 - ローカルで実装、Sandbox環境で動作検証、Productionデプロイ

作業内容 ・クライアント向けDMPの開発をご担当いただきます。 ・具体的には下記の作業を想定しております。 　- 機能機能要件を基に、設計、実装、テスト、リリースまでの一連の開発作業 　- Railsを用いたバックエンド開発 　- reactを用いたフロントエンド開発 　- Hive, Presto, BigQueryを用いたデータ分析機能の開発、パフォーマンスチューニング 　- 既存AWSクラウドの運用、保守、改善、機能開発

作業内容 テックビズなら記帳代行無料！仕事に集中して取り組んでいただけます。 場　　所：原宿、明治神宮前（基本リモート） 面　　談：1回 作業期間：即日（3月、4月も可）　長期 作業時間：10:00～19:00　フレックスなので柔軟に対応します ■内容 下記をお任せしようと考えています。 ・フルスタックエンジニアとして、自社サービスや業務に関連するシステムの設計・開発・テストから運用・保守まで、全体をエンド・ツー・エンドで担当・リード ・進化するビジネス要件に基づいて、フロントエンドおよびバックエンドのサービスを強化 ・マーケティング・UXデザイン・業務企画・事業開発・カスタマーサービス・営業等と連携し、クロスファンクショナルなチームでの業務推進 ■求める人物像 ・食べること、料理、外食など「食」に対する興味・関心が高い方 ・ユーザー目線を大切にして、ユーザーへの理解・共感をもとに行動出来る方 ・エンジニアリング・デジタルテクノロジーに関する最新の情報や流行を積極的にインプットしている方 ・コミュニケーション力があり、協調性のある方 ・自発的に提案できる方 ※以下に該当する方からの応募はお断りしております。 なお、選考を進めるにあたってスキルシートが必要です。 -------------------------------------------------------- ・外国籍の方(永住権をお持ちの方は問題ございません) ・週5日稼働できない方 --------------------------------------------------------

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ ■業務内容 　・在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 　　自社サービスSaasの新バージョンをこの春リリースし、 　　エンタープライズとの契約が急激に増えている中で、非常に多くの 　　機能改善要望や機能追加要望が出てきています。 　　顧客からの数億レコードにもなる大量データの加工をSQLやPythonを 　　用いて作成し、集計後、データストアに投入する機構の構築に携わって 　　いただきます。 　　社員エンジニアとスクラムチームを形成し、 　　スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく 　　体制になります。 ■工程 　・基本設計,詳細設計,開発,単体テスト,結合テスト,総合テスト,運用 ■開発環境 　・開発言語： Python、SQL 　・DB: Aurora(PostgreSQL互換)、Redshift 　・検索エンジン： Amazon Elasticsearch Service 　・ライブラリ・フレームワーク：Pandas、Numpy、Dask 　・インフラ： Amazon Web Services 　・AWS製品： ECS、S3、Step Functions、Lambda、CloudWatch 　・環境、ツール： Docker、GitHub、Jira、Slack、CircleCI、Sentry ■精算有無 　・140〜180h　上下割 ■勤務体型 　・リモート可 ■勤務時間 　・9:00〜18:00 ■面談と方法 　・1回（Web） ■備考 　・ご自身のPC使用していただいてOKです。貸与の場合は郵送となります。 　・地方人材OK ※週5日〜OKの案件です！

作業内容 世界各国で利用されるオンラインサービスにおける、データ分析基盤の開発運用支援をお願い致します。 ＜期間＞ 7月～長期(以降も更新の可能性あり)

作業内容 ・某大手不動産サイト/アプリにおけるデータ分析環境の構築や運用、 　および関連するエンジニアリング業務に携わって頂きます。 ・設計から幅広く担当して頂きます。 ・主な業務は下記の通りです。 　-データマートの設計や作成 　-データ利用者への要件ヒアリング 　-データ収集バッチの運用開発 　-BIツールの設定 　-既存システムやデータの調査 ※担当範囲は、スキルや経験および進捗状況により変動いたします。

作業内容 運用中のソーシャルゲームにおいて2Dキャラクターアニメーションの制作をご担当いただきます。 ※ご担当頂く作業領域はご経験に応じて変動致します。

作業内容 クライアントが保有するビッグデータの利活用を進めていくにあたりAWSでのデータの加工、修正をお願いいたします。

作業内容 ライブ配信アプリを開発している企業様です。 この度、インフラ周りに精通した方でアプリの開発にご参加いただけるメンバーを募集しております。 具体的にはライブ配信アプリのインフラ環境の設計、構築、運用をお任せします。