Sparkのフリーランス案件・求人一覧 | 10ページ目

作業内容 ・電帳法、インボイス、会計、販売管理関連の既存サービスに関する設計（機能追加）及び実装に携わっていただきます。 ・Goを用いた開発をご担当いただきます。 　 ・状況に応じてEDIサービス、DB設計などもご担当いただく可能性がございます。

作業内容 ・組織全体の意思決定をデータドリブンに行っていくために必要な 　DWH層テーブルの設計、開発、保守をお任せいたします。 ・具体的には以下のような作業が発生いたします。 　‐DWH層テーブルの設計、開発、保守 　-関係者からのヒアリング、データ調査 　‐DWH層テーブルのSQL及び、PySparkを用いた実装 　‐DWH層のテーブルについての問い合わせ対応、不具合解消 　‐DWH層開発環境の設計、開発、保守、運用

作業内容 大規模データ収集基盤構築(オンプレにて構築)に伴い、既存システム機能とアプリケーションの新基盤への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。 ・新環境(分散FS環境)向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)、運用機能の開発 ＜開発環境＞ ・Java ・Hadoop(Cloudera) ・Apache kafka ・Apache spark ・Kubernetes/OpenShift/vCenter ＜備考＞ 原則フルリモート 出社の可能性もあり ＜基本時間＞ 9：00～18：00

作業内容 ■業務内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをこの春リリースし、 エンタープライズとの契約が急激に増えている中で、 非常に多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、 データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、 開発メンバー全員でスプリントを消化していく体制になります。

作業内容 ■開発環境 プログラミング言語：Python ライブラリ：PySpark, pandas データベース：AWS RDS (SQLServer), AWS Athena(trino) 環境・OS：AWS (Amazon Web Services), AWS Lambda, AWS Glue BIツール：QuickSight ■業務内容 ・新規データマート要件定義、既存集計フロー効率化 ユーザの要望を聞いて、新しいデータマートを作成したり既存の集計フローを自動化することで効率化を図ります ・データマート作成 既存帳票(Excel,CSV)からSQL作成、BIでの可視化 ・データのETL処理やETL処理のためのスクリプト・システム開発運用改善業務 AWSのGlue・Athena等を使用し、SQL・Pythonでコーディングし、S3にデータレイク、データマートを構築既存の基盤改修・改善 ・データマート日次運用保守業務

作業内容 ・新規データマート要件定義、既存集計フロー効率化 ・ユーザの要望を聞いて、新しいデータマートを作成したり既存の集計フローを自動化することで効率化を図ります ・データマート作成 ・既存帳票(Excel,CSV)からSQL作成、BIでの可視化 ・データのETL処理やETL処理のためのスクリプト・システム開発運用改善業務 AWSのGlue・Athena等を使用し、SQL・Pythonでコーディングし、S3にデータレイク、データマートを構築既存の基盤改修・改善 ・データマート日次運用保守業務 【現場環境】 ・プログラミング言語：　Python ・ライブラリ：　PySpark, pandas ・データベース：　AWS RDS (SQLServer), AWS Athena(trino) ・環境・OS：　AWS (Amazon Web Services), AWS Lambda, AWS Glue ・BIツール：　QuickSight　

作業内容 ・既存サービス（電帳対応、インボイス関連等）に関するモックデザイン～UI設計、UIコンポーネント開発、プロトタイピング及びフロントエンド開発 ・React・Vue.jsを用いた開発をご担当いただきます。 　 ・状況に応じてバックエンド側の開発もご担当いただく可能性がございます。

作業内容 データアナリストとして下記作業をお任せします。 　- 各種データの抽出、加工、分析、レポート作成、BI構築 　- データとビジネスを掛け合わせた仮説設定、予測、検証 　- 重回帰、k－means、決定木などの手法を用いた高度分析 　- Python、R等を用いた機械学習、深層学習、強化学習等の高度なモデリングの設計、実装 　- IoTデータや動画などの特殊なデータ活用

作業内容 ・データサイエンティストと連携しながら データ分析基盤の設計・構築・運用全般に携わっていただきます。 ・下記を行っていただきます。 　‐データアーキテクチャ、クラウド、分散処理基盤等、データエンジニアリングの技術を駆使して、利用者の用途や活用目的、セキュリティ要件に応じた環境の構築 　‐データパイプラインの維持

作業内容 ・Pythonを用いたデータ分析およびDB構築、移行に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-不動産情報サービス企業様が蓄積している大量データの分析 　-DB構築やデータ移行に関わるデータ調査、データクレンジング、名寄せ処理 　-AWSのマネージドサービス(Glue、Lambda、MWAA等)を用いたデータレイク、 　データウェアハウス構築作業

作業内容 ・機械学習/データマイニングを用いた広告データ分析に携わって頂きます。 ・データ分析からサービスの改善提案まで担当して頂きます。 ・スキルや経験によっては、データ分析基盤の構築、 　新サービスの開発なども併せて依頼されることがございます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。

作業内容 化粧品系ECサイトのデータ分析基盤の運用、機能改修をご担当していただきます。

作業内容 ■概要 大手製造メーカー様案件で、データ解析・データ解析のプログラミング～DBアクセスプログラミングを担当していただきます。 ※参画いただいた後は、相談の上プロジェクトの中でその他の役割も担って頂く可能性もございます。

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【業務内容】 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 顧客からの数億レコードにもなる 大量データの加工をSQLやPythonを用いて作成し、集計後、 データストアに投入する機構の構築に携わっていただきます。 【開発環境】 ・開発言語:Python、SQL ・DB:Aurora(PostgreSQL互換)、Redshift ・ライブラリ・フレームワーク:Pandas、Numpy、Dask ・インフラ:AWS ・AWS製品:ECS、S3、StepFunctions、Lambda、CloudWatch ・環境、ツール:Docker、GitHub、Jira、Slack、CircleCI、Sentry 【精算幅】140-180h 【面談】1回 【勤務地】リモート 【備考】 ・服装:自由 ・就業時間:9:00-18:00 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！

作業内容 ・マーケティングを技術でリードするため、 　機械学習やデータマイニングなどに携わって頂きます。 ・課題解決のため、様々なアプローチを検討し、最適化して頂きます。 ・主な業務は下記の通りです。 　-リターゲティング広告配信やプロモーションのためのDMP構築 　-サードパーティの広告配信へのオーディエンスデータ連携 　-ログからキャンペーンのレポーティングやパフォーマンス実証 　-データ解析環境の構築や効果的な広告配信のためのデータ分析 　-アプリのプロモーションや広告運用のテクニカルサポート

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 ・クラウド基盤上のシステムの構築と運用をご担当いただきます。 ・要件定義や顧客折衝にも携わっていただきます。

作業内容 データベース内ビッグデータの集計及び分析作業 データ分析システムの構築/分析データの評価/報告レポートの作成

作業内容 お客様の全サービス横断のデータプラットフォームを構築し、 そのデータを加工して各種サービスや社内スタッフに提供していただきます。

作業内容 ・リリース済みのオンライン英会話サービスにおいて、 　基盤エンジニアリングから分析、研究開発までを担当するグループで、 　TreasureDataやBigQueryを活用したデータ分析基盤開発・運用を 　行っていただきます。 ・本サービスが保持する大量学習データと、機械学習を活用したレコメンドや 　動画内情報検索機能などの新規機能開発もご担当いただきます。

作業内容 ＝＝＝＝＝＝＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・日本語ビジネスレベル必須 ・週5日稼働必須 ・実務経験3年以上必須 ＝＝＝＝＝＝＝＝＝＝＝ ◆業務概要 ・RDBのデータベース設計 ・GlueJobでPythonを利用したETL処理の設計・開発 ・APIGateway、Lambdaを利用したAPI開発 調剤薬局向けサービスを複数提供している企業にてサービスを総括的に管理する管理コンソールの開発業務をご担当頂きます。 管理コンソールに必要な機能の集約、追加実装等をお願い致します。 ◆就業形態について 現状、開発メンバーのほとんどはフルリモートにて業務を行っております。 週に何日かご出社をご希望の際にはご相談ください。 ◆補足 現場チームについては、 様々な分野での経験を持つ少数精鋭のメンバーが集まっております。 他部署を含め業務委託のエンジニアも複数名在籍しており、社員エンジニアと垣根のない働きやすい環境です。

作業内容 ・広告配信システムの業務ロジック周りの設計及び開発に 　携わっていただきます。 ・Javaを用いた開発がメインとなります。 ・下記開発環境でのJava開発をメインにお任せします。 　-配信部分：Java、一部Go 　-配信以外の分散処理部分：Hadoop 　-管理画面：Ruby 　-Spark部分：Scala 　-データ分析部分：Python 　-クラウドサービス：GCP 　-開発手法：スクラム

作業内容 データ分析対応チーム、もしくはデータ分析基盤構築チームにて、AとBのいずれかをご対応いただく予定です。 A: 定型化されたデータ分析の実行(集計/加工/分析/可視化/アドホック対応など) B: 関連するデータ分析基盤システム構築(インフラ,システム開発/仮想化/など) ・仕様や方針などは、A/B領域共にクライアント側で設定の上、後続対応を実施していただきます。 ・Aについては、基本出社対応、Bについては状況に応じて出社を予定しております。 ＜関連システム/スキルマップ＞ ・Python, SQL, Excel ・AWS, Spark, Hive, Docker, RDS, UNIX他 ＜備考＞ リモート or 現場常駐 現状、タスクに応じて50/50で対応中

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 テックビズなら記帳代行無料！仕事に集中して取り組んでいただけます。 ■仕事内容＿＿： データ集積システムの開発・運用に関連するエンジニアリング業務 チームの役割： 各種システムに分散しているデータを収集・整形し、分析可能な形で社内のユーザー（社員）に届ける。 【主な担当業務】 データ集積システムの構築に関わる連携バッチの開発やデータマートの作成業務が中心です。 各部署の利用者から上がってくる要望や作業依頼を実現するための要件ヒアリングや開発、運用作業を行います。 また利用者からの要望に先んじてシステム改善を行うための開発も行います。 - ■作業環境＿＿：Windows/Mac選択可 ■開発環境 　言語＿＿＿＿：Python,SQL 　ＤＢ＿＿＿＿：MySQL,BigQuery 　ＦW＿＿＿＿：Spark 　環境・ＯＳ＿：GCP (Google Cloud Platform),AWS (Amazon Web Services) 　ツール＿＿＿：Tableau,GitHub 　その他＿＿＿： ■体制＿＿＿＿：4人～10人 ■開発工程＿＿：要件定義|基本設計|詳細設計|実装・構築・単体試験|結合試験|総合試験|受入試験|運用・保守 ■現場雰囲気＿： ■人物像＿＿＿：・前向きでオープンなコミュニケーション ・チャレンジ精神、成長意欲 ・技術が好き ■性別＿＿＿＿：不問 ■期間＿＿＿＿：即日 ■就業時間＿＿：10:00～19:00 ■勤務地＿＿＿：半蔵門駅 ■勤務地補足＿：※基本リモート、週1出社の可能性あり- ■平均稼働＿＿：160時間前後 ■時間幅＿＿＿：140時間～ 180時間 ■条件＿＿＿＿：中間割 ■服装＿＿＿＿：カジュアル ■営業コメント：本企業は、「日本一働きたい」会社としても選べばれている会社です。 モダンな開発環境にて開発を推進しているため、スキルアップにもぴったりな現場です。 ※以下に該当する方からの応募はお断りしております。 なお、選考を進めるにあたってスキルシートが必要です。 -------------------------------------------------------- ・40代以上の方 ・外国籍の方(永住権をお持ちの方は問題ございません) ・週5日稼働できない方 --------------------------------------------------------

作業内容 ・マーケティングを技術でリードするため、 　機械学習やデータマイニングなどに携わって頂きます。 ・課題解決のため、様々なアプローチを検討し、最適化して頂きます。 ・主な業務は下記の通りです。 　-リターゲティング広告配信やプロモーションのためのDMP構築 　-サードパーティの広告配信へのオーディエンスデータ連携 　-ログからキャンペーンのレポーティングやパフォーマンス実証 　-データ解析環境の構築や効果的な広告配信のためのデータ分析 　-アプリのプロモーションや広告運用のテクニカルサポート

作業内容 ・マーケティングを技術でリードするため、 　機械学習やデータマイニングなどに携わって頂きます。 ・課題解決のため、様々なアプローチを検討し、最適化して頂きます。 ・主な業務は下記の通りです。 　-リターゲティング広告配信やプロモーションのためのDMP構築 　-サードパーティの広告配信へのオーディエンスデータ連携 　-ログからキャンペーンのレポーティングやパフォーマンス実証 　-データ解析環境の構築や効果的な広告配信のためのデータ分析 　-アプリのプロモーションや広告運用のテクニカルサポート

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 ・クラウド基盤上のシステムの構築と運用をご担当いただきます。 ・要件定義や顧客折衝にも携わっていただきます。

作業内容 大手小売り企業様にての業務となります。 在庫管理等の分散処理システムをHadoop on Sparkで組んでおり DMCから逆輸入による導入を実施して頂きます。 【体制】 ・リーダー：一名 (hadoop有識者、テックリード) ・SIer内hadoopスペシャリストに相談可能 ・オフショアメンバー（中国）側と連携して進める。 【商流】 某大手小売流通→大手SIer→同社