Spark × 在宅・リモートのフリーランス案件・求人一覧 | 7ページ目

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 テックビズなら記帳代行無料！仕事に集中して取り組んでいただけます。 ■仕事内容＿＿： データ集積システムの開発・運用に関連するエンジニアリング業務 チームの役割： 各種システムに分散しているデータを収集・整形し、分析可能な形で社内のユーザー（社員）に届ける。 【主な担当業務】 データ集積システムの構築に関わる連携バッチの開発やデータマートの作成業務が中心です。 各部署の利用者から上がってくる要望や作業依頼を実現するための要件ヒアリングや開発、運用作業を行います。 また利用者からの要望に先んじてシステム改善を行うための開発も行います。 - ■作業環境＿＿：Windows/Mac選択可 ■開発環境 　言語＿＿＿＿：Python,SQL 　ＤＢ＿＿＿＿：MySQL,BigQuery 　ＦW＿＿＿＿：Spark 　環境・ＯＳ＿：GCP (Google Cloud Platform),AWS (Amazon Web Services) 　ツール＿＿＿：Tableau,GitHub 　その他＿＿＿： ■体制＿＿＿＿：4人～10人 ■開発工程＿＿：要件定義|基本設計|詳細設計|実装・構築・単体試験|結合試験|総合試験|受入試験|運用・保守 ■現場雰囲気＿： ■人物像＿＿＿：・前向きでオープンなコミュニケーション ・チャレンジ精神、成長意欲 ・技術が好き ■性別＿＿＿＿：不問 ■期間＿＿＿＿：即日 ■就業時間＿＿：10:00～19:00 ■勤務地＿＿＿：半蔵門駅 ■勤務地補足＿：※基本リモート、週1出社の可能性あり- ■平均稼働＿＿：160時間前後 ■時間幅＿＿＿：140時間～ 180時間 ■条件＿＿＿＿：中間割 ■服装＿＿＿＿：カジュアル ■営業コメント：本企業は、「日本一働きたい」会社としても選べばれている会社です。 モダンな開発環境にて開発を推進しているため、スキルアップにもぴったりな現場です。 ※以下に該当する方からの応募はお断りしております。 なお、選考を進めるにあたってスキルシートが必要です。 -------------------------------------------------------- ・40代以上の方 ・外国籍の方(永住権をお持ちの方は問題ございません) ・週5日稼働できない方 --------------------------------------------------------

作業内容 ・Ruby on Railsを用いたアプリケーション開発支援案件に携わっていただきます。 ・主に開発及び運用保守作業をご担当いただきます。

作業内容 エンドユーザー(企業)のDX化を支援するためにデータ事業の展開や社内のデータ利活用を推進する、ETL/ELT処理開発、DWH構築などのデータ基盤開発の責務を担っていただきます。 ◆業務内容の詳細◆ Databricks、Airflow、AWS Glueを利用したデータパイプラインの開発・運用 Apache Sparkを利用したETL処理の開発 各サービス開発チームのデータエンジニアリングの支援 ◆今後の進展について◆ 昨年夏頃にDatabricksを導入したばかりのため、既存基盤からの移行を実施し、全社横断データ基盤として活用していきます。 それに伴い、各サービス開発チームを中心とした分散オーナーシップ型データ基盤開発組織化の推進と全社横断的なデータマネジメントに注力していきます。

作業内容 鉄道会社向けアプリ保守開発案件となります。 アプリの改修、小規模開発、運用保守等をご担当いただきます。

作業内容 ・大手通信企業向けポイントシステムの一部機能の開発にて プロジェクトマネジメント業務および要件定義に携わっていただきます。 ・AWS上でSpark on EMR環境を構築、クライアントアプリから使えるようAWSのFargate上で動かすことを想定しています。

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 ヘルスケア企業向けにリリースしたスマホアプリにおいて、バージョンアップにおける開発対応を行っていただきます。 基盤はAWS、開発手法はアジャイルとなります。(一部、AWSにおける運用保守を行っていただく可能性もございます) ＜備考＞ リモート頻度は週1～2回 ＜基本時間＞ 9：00～18：00

作業内容 オンプレミスの大規模データ収集基板構築に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験があればよりマッチいたします。 ＜業務内容＞ ・RDBからデータ取得を行うアプリケーションを、DWH(Hadoopベース)からデータ取得を行うように改修 →改修のための設計、開発、テスト ・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等) ＜開発環境＞ ・Java ・Hadoop(Cloudera) ・Apache kafka ・Apache spark ・Kubernetes/OpenShift/vCenter ＜備考＞ 現状リモートワーク 新型コロナウイルス感染症の終息後は出社予定 ＜基本時間＞ 9：00～18：00

作業内容 大手製造メーカー様案件で、データ解析・データ解析のプログラミング 　～DBアクセスプログラミングを担当していただきます。 　※参画いただいた後は、相談の上プロジェクトの中でその他の役割も 　　担って頂く可能性もございます。

作業内容 [ポジション]：AIエンジニア 自社で探索型BIツールを開発しており、そこにおける人材を募集 ・検索・機械学習エンジンの開発・実装、および性能改善 ・自然言語処理を使用した検索エンジンの開発 ・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発

作業内容 上位受託でお客様向けにデータ基盤の構築をご支援しており、追加のご依頼・ご相談などをいただいている状況です。 　PoCとして様々なテーマを扱う予定で、画像解析、自然言語処理、時系列解析などのテーマもスコープに入る想定で、 　主にDatabricksを用いたデータ基盤構築・活用に向けた推進などをお任せする予定です。

作業内容 ゲームの開発/運営を行っている現場で、 主にエフェクトデザイン業務をお願い致します。 中でもパーティクルエフェクトに関する作業を中心にお願い致します。

作業内容 ガス会社様向けシステムにおける技術的な調査と基本設計～開発（構築）～テストをしていただきます。

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 ・自社広告配信プロダクトの100億レコード以上/日のログを分析し 　広告配信の最適化する業務に携わっていただきます。 ・KPI(CPCなど)最適化の改善及び運用をご担当いただきます。

作業内容 ・データ分析基盤及びETL基盤のシステム開発支援に携わっていただきます。 ・下記作業をおまかせいたします。 　-システムアーキテクチャの検討・選定・設計・実装 　-分散処理基盤の開発

作業内容 ・IF各種設計書作成 ・MS Fabric環境での実装（検証及びテストも含む） ・その他上記に付随する業務

作業内容 【業務内容】 大手広告代理店が展開しているインターネット広告代理店業における、膨大な広告データを収集・蓄積したデータレイクからデータを展開するためのデータ基盤（ETL処理、DWH、DM）の開発、運用、保守をお願いします。 【ポイント】 データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、そんな大規模データと向き合った開発にチャレンジすることができます。複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。 【開発チームと配属先について】 当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。 今回お願いしたいポジションはサーバサイドエンジニアです。 チームには現在18名のエンジニアが在籍しています。 また、複数のプロダクトを管理しているチームのため、担当領域ごとにグループ分けをしています。 Infeed領域の広告運用のためのプロダクトを開発するグループインターネット広告関連データをデータレイクに蓄積するシステムを開発するグループインターネット広告関連データが蓄積されたデータレイクを用いたデータ基盤を開発するグループ機械学習を用いたプロダクトを開発するグループ掲載情報や実績情報を出力・レポーティングするための分析用プロダクトを開発するグループ 【技術キーワード】 ApacheSparkAWS GlueSnowflakeデータレイク/データウェアハウス/データマート

作業内容 開発中のシステムに対する追加機能の設計実装となります。 ・工程：アプリケーション設計～総合テスト

作業内容 概　要： 世界各国で利用されるオンラインサービスにおけるデータ分析基盤の開発運用支援をお願い致します

作業内容 企画,コンサルティング,ディレクション,データ分析 大型カーボンニュートラルプロジェクトに携わって頂きます。 ・データプラットフォームのシステムアーキテクチャの作成 ・システム開発を行なう上で必要なOSSを中心とした技術要素の選定

作業内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制になります。【募集背景】新バージョンの機能追加が急務であり、エンジニアリソースが不足しているため。【開発環境】・開発言語： Python、SQL・DB: Aurora(PostgreSQL互換)、Redshift・検索エンジン： Amazon Elasticsearch Service・ライブラリ・フレームワーク：Pandas、Numpy、Dask・インフラ： Amazon Web Services・AWS製品： ECS、S3、Step Functions、Lambda、CloudWatch・環境、ツール： Docker、GitHub、Jira、Slack、CircleCI、Sentry

作業内容 [ポジション]：分析基盤エンジニア ◇データ分析対応チーム、もしくはデータ分析基盤構築チームにて、 A: 定型化されたデータ分析の実行（集計/加工/分析/可視化/アドホック対応など) 　 B: 関連するデータ分析基盤システム構築（インフラ,システム開発/仮想化/など）　のいずれかをご対応いただく予定です。・仕様や方針などは、A/B領域共にクライアント側で設定の上、後続対応を実施していただきます。・Aについては、基本出社対応、Bについては状況に応じて出社を予定しております。 [稼働先最寄り]・基本リモート or 現場常駐（出社時は東京都 港区エリア）　※現状、タスクに応じて50/50で対応中 　※ご面談設定の際に、詳細情報を連携させていたます。 [募集人数] ・メンバー枠： 　データ分析エンジニア　　　　： ～1名 　データ分析基盤構築エンジニア： ～最大3名

作業内容 ・BtoB （AI診断）サービス開発に携わっていただきます｡ ・下記を行っていただきます｡ 　-UIUXの設計構築からサービス実装 　-ご希望に応じてフルスタックに関わっていただきます。

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 某ベンチャー企業にて、在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをこの春リリースし、 エンタープライズとの契約が急激に増えている中で、 非常に多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、 開発メンバー全員でスプリントを消化していく体制になります。 業務内容 顧客の持つ様々なビッグデータをクラウド環境で統合し、その分析/活用が出来る基盤の構築/運用します。 ・新規データ取得のETL及びデータウェアハウスの実装 ・データ基盤の運用及び保守開発 ・データの可視化 ・定例MTG対応 ・仕様書等ドキュメント作成（一部） 技術環境 O S 　　 ：Linux, Windows 言 語 　　 ：Python, SQL D B　　　 ：Redshift, Aurora(PostgreSQL互換) Cloud　　 ：AWS（ECS, S3, StepFunctions, Lambda, Redshift, Aurora等） DWH　　 ：BigQuery, TreasureData等 機械学習系：Kedro, MLflow C I　　　 ：CircleCI 監視系　　：Sentry その他　　： GitHub, Slack, CircleCI

作業内容 テックビズなら記帳代行無料！仕事に集中して取り組んでいただけます。 【業務内容】 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをリリースし、 エンタープライズとの契約が急激に増えている中で、 多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、 集計後、データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、 開発メンバー全員でスプリントを消化していく体制になります。 場所:完全フルリモート※地方在住可 面談:1回(オンライン) 精算:140~180h 作業時間:9:00~18:00 ■開発環境 ・開発言語:Python、SQL ・DB:Aurora(PostgreSQL互換)、Redshift ・検索エンジン:AmazonElasticsearchService ・ライブラリ・フレームワーク:Pandas、Numpy、Dask ・インフラ:AmazonWebServices ・AWS製品:ECS、S3、StepFunctions、Lambda、CloudWatch ・環境、ツール:Docker、GitHub、Jira、Slack、CircleCI、Sentry ※以下に該当する方からの応募はお断りしております。 なお、選考を進めるにあたってスキルシートが必要です。 -------------------------------------------------------- ・外国籍の方(永住権をお持ちの方は問題ございません) ・週5日稼働できない方 --------------------------------------------------------

作業内容 ・Javaを用いた損害保険会社と自動車メーカー間のデータ連携およびデータ分析システムの開発に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-工程：基本設計、外部設計、内部設計、コーディング、テスト 　-契約データ連携 　-走行データ連携及び分析

作業内容 ・大手外資系製薬会社のデータエンジニアとして参画いただきます。 ・具体的には下記です。 　‐データと分析チームの技術的な問題支援 　‐データインフラストラクチャのニーズのサポート 　‐ビジネスアナリストやその他の利害関係者との連携 　‐ビジネス要件を技術仕様に変換する作業 　‐データプロセスの効率と機能の向上に向けたデータサイエンティストとの連携 　‐データセットの組み立て 　‐Microsoft AzureまたはAWSのいずれかで、最適なデータパイプラインアーキテクチャを設計、構築、テスト、および維持 　‐データソースからのデータの最適な抽出、変換、および読み込みに必要なインフラ構築 　‐データ品質、データセキュリティ、およびデータガバナンスの側面でのデータプラクティスの適用