Spark × 在宅・リモートのフリーランス案件・求人一覧 | 5ページ目

700,000円/月

業務委託(フリーランス)

東京都

リモート

PythonSQLDockerGitBacklogJIRAGitHubTerraform

作業内容・DWH層テーブルの要件定義・設計・開発・保守　 - 関係者からのヒアリング・データ調査　 - メンテナンス性・汎用性を意識したテーブルの設計　 - SQLおよびPySparkを用いた実装・DWH層テーブルについての問い合わせ対応・不具合調査・DWH層開発環境の設計・開発・保守・運用 [案件例] ・売上集計用DWH ・機能利用状況DWH ■開発環境　言語＿＿＿＿：SQL,Python,ShellScript 　ＦW＿＿＿＿：Apache Spark 　環境・ＯＳ＿：GCP (Google Cloud Platform),AWS (Amazon Web Services) 　ツール＿＿＿：Docker,Terraform,digdag,JIRA,Github

募集終了

AWS / Python IoTデータ分析基盤の設計・構築・テスト

600,000 〜 800,000円/月

東京都

新宿駅

PythonSparkAWSGitGlue

作業内容 AWS上に、IoTデータを集積したレイクハウスを設計・構築いたします。 AWS Glue、StepFunctionsによる設計・構築・テストが依頼範囲となります。データ規模が大きいシステムのため、AWS GlueやSparkの技術に明るく、性能面、コスト面から最適化のアプローチができる方を募集しております。＜基本時間＞ 10：00～19：00

募集終了

【Python】TVなどの操作Logをもとにランキングなどを出力するサービスの開発

630,000 〜 680,000円/月

業務委託(フリーランス)

PythonRedisHadoopSparkAWSReactAthenaLambda

サーバーサイドエンジニア

作業内容【概要】 AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発を行っていただきます。【開発環境】 Python React.js DynamoDB AWS(Athena、lambda、APIGatewayなどの各種サービス) 【求める人物像】・勤怠/健康状態に問題がなく、中長期的に業務に携わっていける方・コミュニケーション能力のある方・ハウスルールなど遵守しつつ業務を遂行できる真面目で責任感のある方【作業工程】開発、構築~ 【場所】大崎駅※フルリモート【勤務時間】 9:00~18:00 【精算】 140h~180h(スキル見合い) 【面談】 2回【備考】・服装:ビジネスカジュアル ※週5日〜OKの案件です！

募集終了

【SQLなど】大規模会計サービス/アナリティクスエンジニアの求人・案件

650,000円/月

業務委託(フリーランス)

東京都

リモート

PythonSQLDockerGitBacklogJIRAGitHubTerraform

作業内容【仕事内容】・DWH層テーブルの要件定義・設計・開発・保守関係者からのヒアリング・データ調査メンテナンス性・汎用性を意識したテーブルの設計SQLおよびPySparkを用いた実装・DWH層テーブルについての問い合わせ対応・不具合調査・DWH層開発環境の設計・開発・保守・運用【開発工程】基本設計|詳細設計|実装・構築・単体試験|運用・保守【環境】言語：SQL,Python ＦW：Apache Spark 環境・ＯＳ：GCP (Google Cloud Platform),AWS (Amazon Web Services) ツール：Docker,Terraform,JIRA,Github

募集終了

【Python/SQLなど】データエンジニアの求人・案件

650,000円/月

業務委託(フリーランス)

リモート

PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud PlatformAthena

作業内容データエンジニアとして、データサイエンティストやエンジニアと協力しながら、データ基盤を構築・改善し課題解決を行っていただきます。データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを幅広くご支援いただきます。

募集終了

【AWS/Python】データ連携アプリ開発

800,000円/月

業務委託(フリーランス)

東京都

PythonAWSFargate

バックエンドエンジニア

作業内容同社クライアントのDX事業会社様の案件になります。現在開発中のシステムに対する追加機能の設計実装をお任せ致します。工程：アプリケーション設計～総合テスト

募集終了

【分析基盤エンジニア】データエンジニア業務

1,000,000円/月

業務委託(フリーランス)

リモート

JavaPythonSparkGitHubTypeScriptKubernetes

作業内容プロジェクトの技術面におけるリードで特にデータパイプラインの設計・構築　・構築環境の理解からクライアント課題に合わせた設計　・データ分析のためのBIの開発・運用　・継続的なモニタリングプロセス、仕組みの構築　・顧客のビジネス運営におけるデータ活用方法やドメイン知識を素早く理解し、設計・開発に落とし込む

募集終了

【その他】データ解析・データ解析のプログラミング～DBアクセスプログラミング【リモートOK】

650,000円/月

東京都

品川駅

PythonAWSGoogle Cloud Platform

作業内容 ■概要大手製造メーカー様案件で、データ解析・データ解析のプログラミング～DBアクセスプログラミングを担当していただきます。 ※参画いただいた後は、相談の上プロジェクトの中でその他の役割も担って頂く可能性もございます。

募集終了

【DWH/SQL】DWH設計開発案件

リモート可オンライン商談OK

950,000円/月

業務委託(フリーランス)

東京都

大崎駅

SQLSQL ServerSparkApacheGitBacklogJIRAGitHub

インフラエンジニアデータベースエンジニア

作業内容・組織全体の意思決定をデータドリブンに行っていくために必要な　DWH層テーブルの設計、開発、保守をお任せいたします。・具体的には以下のような作業が発生いたします。　‐DWH層テーブルの設計　‐DWH層テーブルのSQL及び、PySparkを用いた実装　‐DWH層のテーブルについての問い合わせ対応、不具合解消　‐DWH層開発環境の設計、開発、保守、運用

募集終了

大手キャリア向けPM業務

700,000 〜 850,000円/月

業務委託(フリーランス)

東京都

PythonNode.jsSparkAWSFargate

作業内容通信会社がポイントを使える街の店舗を紹介するような新規サービスを考えており、そのサービスのうちレコメンド機能部分を開発する。技術要素としては、AWS上でSpark on EMR環境を構築し、その上で機械学習モデルを動かし、これをクライアントアプリから使えるようWeb API化する(AWSのFargate上で動かすことを想定、アプリケーションのプログラム言語やWebフレームワークはまだ決まっていないが、昨今のトレンドからしてPython, Node.js, Goあたりになると思われる) ＜備考＞基本リモート

募集終了

Python 内製開発（ETLチーム）

520,000 〜 620,000円/月

東京都

品川駅

PythonMySQLMongoDBSparkAWSJIRARedshiftKafkaLambda

作業内容 ETLチームの一員として、内製開発を行っていただきます。＜業務内容＞・SEからのインプットを基に詳細設計・ETLコーディング・ワークフローシナリオ実装・UT観点項目作成・UTスクリプト作成・UT実施・必要に応じてシミュレーター/スタブ開発＜就業時間＞ 9:00～18:00 ※※こちらの案件は現在募集を終了しております※※

募集終了

【AWS/GCP/Python/フルリモート】AWSデータレイクの構築やGCPデータ基盤の整備

600,000 〜 1,000,000円/月

業務委託(フリーランス)

PythonAWSGoogle Cloud Platform

作業内容データレイクやDWH管理を行っているチームにて、下記業務をご対応いただきます。・AWSからGCPへの移行作業・GCPのデータ基盤構築

募集終了

【Python】Lob分析サービス開発運用

630,000 〜 680,000円/月

業務委託(フリーランス)

東京都

大崎駅

フルリモート

PythonRedisHadoopSparkAWSReactAthenaLambda

サーバーサイドエンジニア

作業内容テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！【概要】 TVなどの操作Logをもとにランキングなどを出力するサービスの開発【開発環境】 Python React.js DynamoDB AWS(Athena、lambda、APIGatewayなどの各種サービス) 【主に行う業務】 AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発を行っていただきます。【求める人物像】・勤怠/健康状態に問題がなく、中長期的に業務に携わっていける方・コミュニケーション能力のある方・ハウスルールなど遵守しつつ業務を遂行できる真面目で責任感のある方【作業工程】開発、構築~ 【場所】大崎駅 ※フルリモート【勤務時間】 9:00~18:00 【精算】 140-180h 【面談】 2回【備考】・服装:ビジネスカジュアル ※週5日〜OKの案件です！

募集終了

Python 大手通信系企業内の内製開発（ETLチーム）

600,000 〜 700,000円/月

東京都

PythonSpark

作業内容以下業務をご対応いただきます。・SEからのインプットを基に詳細設計・ETLコーディング・ワークフローシナリオ実装・UT観点項目作成・UTスクリプト作成・UT実施・必要に応じてシミュレーター/スタブ開発 ※※こちらの案件は現在募集を終了しております※※

募集終了

【Python】自社サービスSaas｜～90万｜フルリモート

900,000円/月

業務委託(フリーランス)

フルリモート

PythonSQLPostgreSQLSparkAWSDockerJIRAGitHubRedshiftAuroraCircleCIElasticsearchLambda

データベースエンジニア

作業内容在庫最適化システムを支えるデータ基盤の構築をお任せいたします。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制になります。

募集終了

【Python/20代30代活躍中】Lob分析サービス開発運用

630,000 〜 680,000円/月

業務委託(フリーランス)

リモート

PythonRedisHadoopSparkAWSReactAthenaLambda

サーバーサイドエンジニア

作業内容【概要】 TVなどの操作Logをもとにランキングなどを出力するサービスの開発【開発環境】 Python React.js DynamoDB AWS(Athena、lambda、APIGatewayなどの各種サービス) 【主に行う業務】 AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発を行っていただきます。【求める人物像】・勤怠/健康状態に問題がなく、中長期的に業務に携わっていける方・コミュニケーション能力のある方・ハウスルールなど遵守しつつ業務を遂行できる真面目で責任感のある方【作業工程】開発、構築~ 【場所】大崎駅 ※完全リモート【勤務時間】 9:00~18:00 【精算】 140h~180h(スキル見合い) 【面談】 2回【備考】・服装:ビジネスカジュアル ※以下に該当する方からの応募はお断りしております。なお、選考を進めるにあたってスキルシートが必要です。 -------------------------------------------------------- ・週5日稼働できない方 --------------------------------------------------------

募集終了

【Python(リモート)】AI系サービスデータ基盤構築

750,000円/月

業務委託(フリーランス)

東京都

PythonSQLWindowsLinuxPostgreSQLSparkAWSGitHubRedshiftBigQueryTreasure DataAuroraCircleCILambda

バックエンドエンジニア

作業内容顧客の持つ様々なビッグデータをクラウド環境で統合し、その分析/活用が出来る基盤の構築/運用します。・新規データ取得のETL及びデータウェアハウスの実装・データ基盤の運用及び保守開発・データの可視化・定例MTG対応・仕様書等ドキュメント作成（一部）〜技術環境〜 OS：Linux、Windows 言語：Python、SQL DB：Redshift、Aurora(PostgreSQL互換) Cloud：AWS（ECS、S3、StepFunctions、Lambda、Redshift、Aurora等） DWH：BigQuery、TreasureData等機械学習系：Kedro、MLflow CI：CircleCI 監視系：Sentry その他：GitHub、Slack、CircleCI

募集終了

New【分析基盤エンジニア】データ連携基盤検証環境構築の求人・案件

1,000,000円/月

業務委託(フリーランス)

東京都

リモート

SparkApacheSnowflakeKafkaKubernetes

作業内容今後の世界的な課題であるエネルギー問題に対するシステム的な取り組みとなります。そのため社会意義の高い要件を新しい技術領域で対応していく事になります。現在、国内の一部地域を利用した分散電源のデータを共有化するためデータ連携基盤の構築が進められております。技術的な背景はクラウド・DWHの技術的な知見が必要となります。業務設計は出来ておりますが、アーキテクチャー設計は出来ていないため、抽象的な要件の非機能要件化を進めて頂きます。

募集終了

【Pythonなど】Saasプロダクトデータ基盤構築の求人・案件

700,000円/月

業務委託(フリーランス)

東京都

リモート

PythonSQLSparkAWSDocker

作業内容在庫最適化システムを支えるデータ基盤の構築を行っていただきます。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。【開発環境】・開発言語： Python、SQL ・DB: Aurora(PostgreSQL互換)、Redshift ・ライブラリ・フレームワーク：Pandas、Numpy、Dask ・インフラ：AWS ・AWS製品： ECS、S3、Step Functions、Lambda、CloudWatch ・環境、ツール： Docker、GitHub、Jira、Slack、CircleCI、Sentry

募集終了

【データエンジニア】データ基盤構築案件

850,000円/月

業務委託(フリーランス)

東京都

銀座駅

PythonAWSAzureGoogle Cloud PlatformTrelloBigQuery

データサイエンティストサーバーサイドエンジニア

作業内容・下記作業をご担当いただきます。　-Databricks、Airflow、AWS Glueを利用したデータパイプラインの開発、運用　-Apache Sparkを利用したETL処理の開発　-各サービス開発チームのデータエンジニアリングの支援

募集終了

【Python/フルリモート】データ分析基盤及びETL基盤・システム開発支援案件

950,000円/月

業務委託(フリーランス)

福岡県

中洲川端駅

PythonSQLGoC#ScalaLinuxMySQLPostgreSQLRedisCassandraSparkGitJIRAGoogle Cloud PlatformKubernetesElasticsearch

作業内容・データ分析基盤及び、ETL基盤の開発、システム開発に携わっていただきます。・システムアーキテクチャの検討、選定及び設計、実装、ビッグデータを分析(加工)するための分散処理基盤の開発を行っていただきます。・主にPython・Goを用いて開発をご担当いただきます。

募集終了

【Python】通信会社向け販促システム開発案件

800,000円/月

業務委託(フリーランス)

東京都

半蔵門駅

PythonMySQLHadoopSparkApache

作業内容・通信会社向け販促システム開発に携わっていただきます。・主に下記作業をご担当いただきます。　-Webスクレイピング　-追加機能開発・フルリモートでの作業を想定しております。 ※キャッチアップ期間の1,2週間は出社いただき、その後リモート作業になる　想定です。

募集終了

Java / Python / Go フルスタックエンジニア募集

900,000 〜 1,050,000円/月

東京都

秋葉原駅

JavaPythonGoHadoopSparkOpenShiftApacheKafkaKubernetes

フルスタックエンジニア

作業内容大規模データ収集基盤構築(オンプレにて構築)に伴い、既存システム機能とアプリケーションの新基盤への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。・新環境(分散FS環境)向け機能開発、既存機能の新環境向け修正・アプリケーションの改修、機能追加・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)、運用機能の開発＜開発環境＞・Java ・Hadoop(Cloudera) ・Apache kafka ・Apache spark ・Kubernetes/OpenShift/vCenter ＜備考＞原則フルリモート出社の可能性もあり＜基本時間＞ 9：00～18：00

募集終了

【Python/SQL】自社サービスSaaSのバックエンド(データ基盤) フルリモート可能

600,000 〜 900,000円/月

業務委託(フリーランス)

大阪府

PythonSQLSparkAWS

AIエンジニアバックエンドエンジニア

作業内容 ■業務内容在庫最適化システムを支えるデータ基盤の構築を行っていただきます。自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制になります。

募集終了

【Vue.js/フルリモート】クラウドサービス・Webアプリケーション開発支援案件

950,000円/月

業務委託(フリーランス)

福岡県

中洲川端駅

PythonSQLGoC#ScalaLinuxMySQLPostgreSQLRedisCassandraSparkGitJIRAReactGoogle Cloud PlatformVue.jsKubernetesElasticsearch

作業内容・既存サービス（電帳対応、インボイス関連等）に関するモックデザイン～UI設計、UIコンポーネント開発、プロトタイピング及びフロントエンド開発・React・Vue.jsを用いた開発をご担当いただきます。　・状況に応じてバックエンド側の開発もご担当いただく可能性がございます。

募集終了

【データアナリスト】データ抽出/モデリング案件

850,000円/月

業務委託(フリーランス)

東京都

恵比寿駅

PythonSQLRSparkPyTorchTensorFlow

データサイエンティストデータアナリスト

作業内容データアナリストとして下記作業をお任せします。　- 各種データの抽出、加工、分析、レポート作成、BI構築　- データとビジネスを掛け合わせた仮説設定、予測、検証　- 重回帰、k－means、決定木などの手法を用いた高度分析　- Python、R等を用いた機械学習、深層学習、強化学習等の高度なモデリングの設計、実装　- IoTデータや動画などの特殊なデータ活用

募集終了

【Python】データ分析及びDB構築移行案件

650,000円/月

業務委託(フリーランス)

東京都

渋谷駅

JavaPythonSparkAWSDockerJIRA

作業内容・Pythonを用いたデータ分析およびDB構築、移行に携わっていただきます。・主に下記作業をご担当いただきます。　-不動産情報サービス企業様が蓄積している大量データの分析　-DB構築やデータ移行に関わるデータ調査、データクレンジング、名寄せ処理　-AWSのマネージドサービス(Glue、Lambda、MWAA等)を用いたデータレイク、　データウェアハウス構築作業

募集終了

【Go/フルリモート】クラウドサービス・Webアプリケーション開発支援案件

950,000円/月

業務委託(フリーランス)

福岡県

中洲川端駅

PythonSQLGoC#ScalaLinuxMySQLPostgreSQLRedisCassandraSparkGitJIRAGoogle Cloud PlatformKubernetesElasticsearch

作業内容・電帳法、インボイス、会計、販売管理関連の既存サービスに関する設計（機能追加）及び実装に携わっていただきます。・Goを用いた開発をご担当いただきます。　・状況に応じてEDIサービス、DB設計などもご担当いただく可能性がございます。

募集終了

【DWH/SQL】DWH設計開発案件