Sparkのフリーランス案件・求人一覧 | 11ページ目

作業内容 化粧品系ECサイトのデータ分析基盤の運用、機能改修をご担当していただきます。

作業内容 ・マーケティングを技術でリードするため、 　機械学習やデータマイニングなどに携わって頂きます。 ・課題解決のため、様々なアプローチを検討し、最適化して頂きます。 ・主な業務は下記の通りです。 　-リターゲティング広告配信やプロモーションのためのDMP構築 　-サードパーティの広告配信へのオーディエンスデータ連携 　-ログからキャンペーンのレポーティングやパフォーマンス実証 　-データ解析環境の構築や効果的な広告配信のためのデータ分析 　-アプリのプロモーションや広告運用のテクニカルサポート

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 ・リリース済みのオンライン英会話サービスにおいて、 　基盤エンジニアリングから分析、研究開発までを担当するグループで、 　TreasureDataやBigQueryを活用したデータ分析基盤開発・運用を 　行っていただきます。 ・本サービスが保持する大量学習データと、機械学習を活用したレコメンドや 　動画内情報検索機能などの新規機能開発もご担当いただきます。

作業内容 ＝＝＝＝＝＝＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・日本語ビジネスレベル必須 ・週5日稼働必須 ・実務経験3年以上必須 ＝＝＝＝＝＝＝＝＝＝＝ ◆業務概要 ・RDBのデータベース設計 ・GlueJobでPythonを利用したETL処理の設計・開発 ・APIGateway、Lambdaを利用したAPI開発 調剤薬局向けサービスを複数提供している企業にてサービスを総括的に管理する管理コンソールの開発業務をご担当頂きます。 管理コンソールに必要な機能の集約、追加実装等をお願い致します。 ◆就業形態について 現状、開発メンバーのほとんどはフルリモートにて業務を行っております。 週に何日かご出社をご希望の際にはご相談ください。 ◆補足 現場チームについては、 様々な分野での経験を持つ少数精鋭のメンバーが集まっております。 他部署を含め業務委託のエンジニアも複数名在籍しており、社員エンジニアと垣根のない働きやすい環境です。

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【業務内容】 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 顧客からの数億レコードにもなる 大量データの加工をSQLやPythonを用いて作成し、集計後、 データストアに投入する機構の構築に携わっていただきます。 【開発環境】 ・開発言語:Python、SQL ・DB:Aurora(PostgreSQL互換)、Redshift ・ライブラリ・フレームワーク:Pandas、Numpy、Dask ・インフラ:AWS ・AWS製品:ECS、S3、StepFunctions、Lambda、CloudWatch ・環境、ツール:Docker、GitHub、Jira、Slack、CircleCI、Sentry 【精算幅】140-180h 【面談】1回 【勤務地】リモート 【備考】 ・服装:自由 ・就業時間:9:00-18:00 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！

作業内容 ・広告配信システムの業務ロジック周りの設計及び開発に 　携わっていただきます。 ・Javaを用いた開発がメインとなります。 ・下記開発環境でのJava開発をメインにお任せします。 　-配信部分：Java、一部Go 　-配信以外の分散処理部分：Hadoop 　-管理画面：Ruby 　-Spark部分：Scala 　-データ分析部分：Python 　-クラウドサービス：GCP 　-開発手法：スクラム

作業内容 データ分析対応チーム、もしくはデータ分析基盤構築チームにて、AとBのいずれかをご対応いただく予定です。 A: 定型化されたデータ分析の実行(集計/加工/分析/可視化/アドホック対応など) B: 関連するデータ分析基盤システム構築(インフラ,システム開発/仮想化/など) ・仕様や方針などは、A/B領域共にクライアント側で設定の上、後続対応を実施していただきます。 ・Aについては、基本出社対応、Bについては状況に応じて出社を予定しております。 ＜関連システム/スキルマップ＞ ・Python, SQL, Excel ・AWS, Spark, Hive, Docker, RDS, UNIX他 ＜備考＞ リモート or 現場常駐 現状、タスクに応じて50/50で対応中

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 テックビズなら記帳代行無料！仕事に集中して取り組んでいただけます。 ■仕事内容＿＿： データ集積システムの開発・運用に関連するエンジニアリング業務 チームの役割： 各種システムに分散しているデータを収集・整形し、分析可能な形で社内のユーザー（社員）に届ける。 【主な担当業務】 データ集積システムの構築に関わる連携バッチの開発やデータマートの作成業務が中心です。 各部署の利用者から上がってくる要望や作業依頼を実現するための要件ヒアリングや開発、運用作業を行います。 また利用者からの要望に先んじてシステム改善を行うための開発も行います。 - ■作業環境＿＿：Windows/Mac選択可 ■開発環境 　言語＿＿＿＿：Python,SQL 　ＤＢ＿＿＿＿：MySQL,BigQuery 　ＦW＿＿＿＿：Spark 　環境・ＯＳ＿：GCP (Google Cloud Platform),AWS (Amazon Web Services) 　ツール＿＿＿：Tableau,GitHub 　その他＿＿＿： ■体制＿＿＿＿：4人～10人 ■開発工程＿＿：要件定義|基本設計|詳細設計|実装・構築・単体試験|結合試験|総合試験|受入試験|運用・保守 ■現場雰囲気＿： ■人物像＿＿＿：・前向きでオープンなコミュニケーション ・チャレンジ精神、成長意欲 ・技術が好き ■性別＿＿＿＿：不問 ■期間＿＿＿＿：即日 ■就業時間＿＿：10:00～19:00 ■勤務地＿＿＿：半蔵門駅 ■勤務地補足＿：※基本リモート、週1出社の可能性あり- ■平均稼働＿＿：160時間前後 ■時間幅＿＿＿：140時間～ 180時間 ■条件＿＿＿＿：中間割 ■服装＿＿＿＿：カジュアル ■営業コメント：本企業は、「日本一働きたい」会社としても選べばれている会社です。 モダンな開発環境にて開発を推進しているため、スキルアップにもぴったりな現場です。 ※以下に該当する方からの応募はお断りしております。 なお、選考を進めるにあたってスキルシートが必要です。 -------------------------------------------------------- ・40代以上の方 ・外国籍の方(永住権をお持ちの方は問題ございません) ・週5日稼働できない方 --------------------------------------------------------

作業内容 ・マーケティングを技術でリードするため、 　機械学習やデータマイニングなどに携わって頂きます。 ・課題解決のため、様々なアプローチを検討し、最適化して頂きます。 ・主な業務は下記の通りです。 　-リターゲティング広告配信やプロモーションのためのDMP構築 　-サードパーティの広告配信へのオーディエンスデータ連携 　-ログからキャンペーンのレポーティングやパフォーマンス実証 　-データ解析環境の構築や効果的な広告配信のためのデータ分析 　-アプリのプロモーションや広告運用のテクニカルサポート

作業内容 ・マーケティングを技術でリードするため、 　機械学習やデータマイニングなどに携わって頂きます。 ・課題解決のため、様々なアプローチを検討し、最適化して頂きます。 ・主な業務は下記の通りです。 　-リターゲティング広告配信やプロモーションのためのDMP構築 　-サードパーティの広告配信へのオーディエンスデータ連携 　-ログからキャンペーンのレポーティングやパフォーマンス実証 　-データ解析環境の構築や効果的な広告配信のためのデータ分析 　-アプリのプロモーションや広告運用のテクニカルサポート

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 お客様の全サービス横断のデータプラットフォームを構築し、 そのデータを加工して各種サービスや社内スタッフに提供していただきます。

作業内容 ・既存のAWS基盤の調査改善 ・ETL環境運用作業（テーブル追加、カラム変更程度）

作業内容 ・クラウド基盤上のシステムの構築と運用をご担当いただきます。 ・要件定義や顧客折衝にも携わっていただきます。

作業内容 データベース内ビッグデータの集計及び分析作業 データ分析システムの構築/分析データの評価/報告レポートの作成

作業内容 ・To B向け分析基盤システムの開発に携わっていただきます。 ・具体的には以下の作業を想定しております。 　-設計、実装、テスト 　-新規または追加開発

作業内容 エンドクライアントを支援するサービスのダッシュボードのデータベース設計、API開発、ETL処理の開発をする業務をお願いします。 [具体的な業務] ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・git flowベースの開発進行

作業内容 【概要】 ・在庫最適化システムを支えるデータ基盤の構築 ・Saasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望の相談増 ・数億レコードにもなる大量のデータ加工をSQLやPythonを用いて作成、 集計後、データストアに投入する基盤の構築 ・エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制 【工程】 基本設計　詳細設計　開発　単体テスト　結合テスト　総合テスト　運用 【開発環境】 ・開発言語： Python、SQL ・DB: Aurora(PostgreSQL互換)、Redshift ・検索エンジン： Amazon Elasticsearch Service ・ライブラリ・フレームワーク：Pandas、Numpy、Dask ・インフラ： Amazon Web Services ・AWS製品： ECS、S3、Step Functions、Lambda、CloudWatch ・環境、ツール： Docker、GitHub、Jira、Slack、CircleCI、Sentry

作業内容 ■業務内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをこの春リリースし、 エンタープライズとの契約が急激に増えている中で、 非常に多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、 データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、 開発メンバー全員でスプリントを消化していく体制になります。

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。 【開発環境】 ・開発言語：Python、SQL ・DB:Aurora(PostgreSQL互換)、Redshift ・ライブラリ・フレームワーク：Pandas、Numpy、Dask ・インフラ：AWS ・AWS製品：ECS、S3、StepFunctions、Lambda、CloudWatch ・環境、ツール：Docker、GitHub、Jira、Slack、CircleCI、Sentry

作業内容 ・広告配信システムの業務ロジック周りの設計及び開発に 　携わっていただきます。 ・下記開発環境での開発をお任せします。 　-配信部分：Java 　-配信以外の分散処理部分：Hadoop 　-管理画面：Ruby 　-Spark部分：Scala 　-データ分析部分：Python 　-クラウドサービス：GCP 　-開発手法：スクラム ・他システムでGolangを使用しているため、 　ご経験とタイミングに応じてGolangでの開発もご対応いただきます。

作業内容 ・マーケティングを技術でリードするため、 　機械学習やデータマイニングなどに携わって頂きます。 ・課題解決のため、様々なアプローチを検討し、最適化して頂きます。 ・主な業務は下記の通りです。 　-リターゲティング広告配信やプロモーションのためのDMP構築 　-サードパーティの広告配信へのオーディエンスデータ連携 　-ログからキャンペーンのレポーティングやパフォーマンス実証 　-データ解析環境の構築や効果的な広告配信のためのデータ分析 　-アプリのプロモーションや広告運用のテクニカルサポート

作業内容 エンドユーザー(企業)のDX化を支援するためにデータ事業の展開や社内のデータ利活用を推進する、ETL/ELT処理開発、DWH構築などのデータ基盤開発の責務を担っていただきます。 ◆業務内容の詳細◆ Databricks、Airflow、AWS Glueを利用したデータパイプラインの開発・運用 Apache Sparkを利用したETL処理の開発 各サービス開発チームのデータエンジニアリングの支援 ◆今後の進展について◆ 昨年夏頃にDatabricksを導入したばかりのため、既存基盤からの移行を実施し、全社横断データ基盤として活用していきます。 それに伴い、各サービス開発チームを中心とした分散オーナーシップ型データ基盤開発組織化の推進と全社横断的なデータマネジメントに注力していきます。

作業内容 ・クラウド基盤上のシステムの構築と運用をご担当いただきます。 ・要件定義や顧客折衝にも携わっていただきます。

作業内容 大手小売り企業様にての業務となります。 在庫管理等の分散処理システムをHadoop on Sparkで組んでおり DMCから逆輸入による導入を実施して頂きます。 【体制】 ・リーダー：一名 (hadoop有識者、テックリード) ・SIer内hadoopスペシャリストに相談可能 ・オフショアメンバー（中国）側と連携して進める。 【商流】 某大手小売流通→大手SIer→同社

作業内容 大手資本が介入したAIスタートアップです。特定の企業へのAIではなく業界全体の改善を目指したソリューションとなります。 一言でいうと、本屋さんがなくなったら困るよね！みんなで頑張ろう！という想いが大事です。 インフラ担当としてクラウド機能の活用からコスト面の考慮、BIに至るまで全般的なアーキテクト面をお任せいたします。 社内には研究開発チームやデータエンジニアリングを行う方（データサイエンティスト）もおりますので、その方々に向けて モデル開発/機械学習のためのインフラ面の構築もお任せいたします。

作業内容 ・クラウド基盤上のシステム構築と運用をご担当いただきます。 ・要件定義や顧客折衝にも携わっていただきます。

作業内容 需要予測のためのロジック開発、実装（AIモデル/ルールベース）をしていただきます。