【Python】在庫最適化システムのデータ基盤構築(リモート)
業務委託(フリーランス)
PythonSQLSparkAWSDocker
バックエンドエンジニア
作業内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。
顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。
【Python / リモート案件ご紹介可能】AWSデータ解析基盤開発(大手メーカー内バックオフィス業務)
業務委託(フリーランス)
JavaPythonSQLCSSHTMLSparkAWS
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
大手メーカーのバックオフィス業務を支えるデータ解析基盤の開発を担当します。AWSを活用し、RedshiftやEMR(Spark)、Athenaなどのデータ処理技術を用いたシステムを構築します。Pythonを中心としたデータ処理・分析のスキルが求められます。
■具体的な業務内容
・AWS環境上でのデータ解析基盤の設計・開発
・Pythonを用いたデータ処理スクリプトの作成
・SQLを用いたデータ抽出・集計処理の実装
・AWS Lambda、Step Functionsを活用したワークフロー構築
・Tableauを用いたデータ可視化(可能であれば対応)
【AWS / リモート案件ご紹介可能】大手自動車メーカー向けAWS基盤設計・構築
作業内容 ★エンジニア実務経験2年以上 / ブランクのない方が対象の案件です!!★
■概要
大手自動車会社のIoT基盤を支えるAWS上のサーバ基盤運用における設計・構築業務を担当するプロジェクトです。オンプレミスからクラウドに移行したシステムにおいて、AWSの各種マネージドサービスやHadoopエコシステムを活用し、安定した基盤運用を目指します。長期的な支援が見込まれるため、スキルを深める環境が整っています。
■具体的な業務内容
・AWS環境でのサーバ設計・構築業務
・運用設計の策定および運用支援
・Hadoopエコシステム(Apache Spark、Kafkaなど)を用いたデータ基盤構築
・AWSマネージドサービスの活用および最適化
【Python/SQL】小売向け需要予測システム開発(リモート)
作業内容 ・需要予測システム開発および運用支援
・工程:製造・テスト・エラー調査・運用
世界進出!【ライブ配信アプリ/フルリモート/AWS,GCP/大手企業と連続起業家のスタートアップとの合弁会社】グローバル向け大規模ライブ配信アプリのインフラエンジニア業務(jd01383)
業務委託(フリーランス)
GoSparkAWSApacheGitGoogle Cloud PlatformBigQueryKubernetes
インフラエンジニア
作業内容 Q&Aに特化したライブ配信アプリを開発しております。
インフラエンジニアとしてアプリの開発に加わっていただけるメンバーを募集しております。具体的にはライブ配信アプリのインフラ環境の設計、構築、運用をお任せします。
■チーム構成
・PdM:1名
・バックエンドエンジニア:2名
・モバイルエンジニア:3名
・プロダクトデザイナー:1名
■開発環境
? 分散DB(Cloud Spanner)
? 言語:Go言語
? 通信 :connect-go proto
? コンピューティング:Kubernetes → Cloud Run
? DWH・パイプライン構築
? BigQuery
? Apache Spark
■会社の魅力
大企業の持つ資本力とベンチャーの持つスピード感を両立しており、0ベースでの技術的負債が無い状態でのスタートを切ることができます。そしてビジネス的にもスピード感を持って大きなことにチャレンジできる土壌が整っております。
ユーザーの質問にライバーが回答することに特化したライブストリーミングサービス(Q&Aに特化したライブ配信アプリ)を今年の春、リリース予定となっております。
■部署の魅力や雰囲気
・積極的に新しい仕組みやツールに挑戦する
・ビジネスとエンジニアの距離が近い
・エンジニアからも機能提案などする機会が多い
【Python】小売向け需要予測システム開発/運用(リモート)
業務委託(フリーランス)
PythonSQLGit
バックエンドエンジニア
作業内容 ・小売向け需要予測システム開発、運用支援に関わる各種業務
・製造〜テスト〜調査〜運用などをご担当
【Python】データ解析基盤の構築(リモート)
業務委託(フリーランス)
PythonSQLLinux
バックエンドエンジニア
作業内容 ・データのETL処理の基盤構築
・AWSサービスとPythonを使ってデータ解析基盤の開発
・設計/製造をメインにご担当
【週4-5日/フルリモート/Python,Node.js】バックエンドエンジニア
業務委託(フリーランス)
PythonSQLNode.jsSparkAWSAzureGitReactGoogle Cloud PlatformTypeScript
バックエンドエンジニア
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
※すでにFindy Freelanceで担当がついている方は、直接ご連絡いただいた方がスムーズです
--------------------------------
私たちは広告データ分析系SaaSおよびキャリアプラットフォームのさらなる進化を目指し、
データ基盤・分析基盤、LLM/AI基盤の構築・運用を強化し、革新的なプロダクトを支えるため、LLMを用いたプロダクトのバックエンドAPI開発に臨むエンジニアを募集いたします。
▼役割
SaaS/キャリアプラットフォームに用いるデータ基盤の構築・運用、バックエンドAPIの開発
▼具体的な業務内容
- LLMを用いたプロダクトのバックエンドAPI開発、運用
- スケーラブルなクラウドインフラの構築、運用
- LLM用のベクトルデータストアの整備
▼上記業務に慣れてきたら以下にもトライいただきたいです
- LLM/AIエージェントの構築
- ビジネス部門との連携によるデータニーズの把握、データ活用支援
- ドキュメンテーション、技術共有、チームへの貢献
▼このポジションの魅力
- Python、Node.js、LangChain、PostgreSQL、AWSなど、多様な技術を駆使してバックエンドスキルの幅が広げられる
- データパイプラインやデータウェアハウスの設計・運用を通じ、企業の意思決定基盤に携わる事が可能
- 自由度の高い開発環境で新しい技術を試せる
- エンジニアリングとプロダクトの両方の視点を養える
- 迅速かつ効率的なアジャイル開発で即座にアイデアを形にできる
- エンジニア同士の学び合いを大切にする環境
【Python / リモート案件紹介可能】大規模データ基盤エンジニア×レコメンドエンジン運用
業務委託(フリーランス)
PythonSQLShellLinuxAWSDockerGitSVNGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
派遣業界向けの大規模データ活用基盤の改善・保守を行うプロジェクトです。レコメンドエンジンの運用や分析環境の改善、クラウド環境の技術検証を通じて、より高度なデータ分析基盤の構築に貢献します。必要に応じて、簡易的な機械学習モデルのチューニングやデータ分析業務も担当します。
■具体的な業務内容
・レコメンドエンジンを提供するデータ基盤の改善および保守運用
・AWSやGCPを活用したクラウド環境での開発および運用業務
・Python、Shell、SQLを用いたデータ処理およびスクリプト作成
・新規クラウドサービスやミドルウェアの技術検証
・簡易的な機械学習モデルのチューニングおよびデータ分析
【Python(Web開発系) / リモート案件紹介可能】AWS活用×新規プロダクト/サーバーサイドエンジニア
業務委託(フリーランス)
PythonAWS
サーバーサイドエンジニア
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
新規プロダクトのサーバーサイド開発を担当するプロジェクトです。主にAWSのリソースを活用し、API GatewayやLambdaを利用したAPI開発やGlue Jobを用いたETL処理の設計・開発を行います。プロダクトオーナーとの仕様策定やデータベース設計を担当するだけでなく、データ処理やAPIの最適化にも携わり、幅広い知識を身に付けることが可能です。
■具体的な業務内容
・RDBのデータベース設計および開発
・Glue Jobを利用したETL処理の設計・開発
・API Gateway、Lambdaを利用したAPI開発
・AWSリソースを活用したプロダクト開発の設計・実装
・技術的知見を活かしたプロダクトオーナーとの仕様策定
・Git flowをベースにした開発進行
【Python / リモート案件紹介可能】レコメンドエンジン|モデル開発・改善プロジェクト
業務委託(フリーランス)
PythonSQLShellLinuxGitSVN
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
大手クライアントの派遣事業におけるレコメンドエンジンの改善および新規開発を担当するプロジェクトです。開発系ではデータ加工やWebAPI開発、分析系では機械学習モデルの構築やチューニングなどを担当いただきます。Python、Shell、SQLを用いた開発または分析経験が求められます。クラウド環境や大規模データ処理に興味がある方も歓迎します。
■具体的な業務内容
開発系:
・データ加工、バッチ開発、WebAPI開発、新規技術の検証
・Linux環境における開発およびドキュメント作成(設計書、テスト仕様書)
分析系:
・基礎分析、機械学習モデル構築、チューニング、レポーティング
・データ加工および検証作業
【Python /一部リモート/週5日】フロー管理システムの開発・保守作業
業務委託(フリーランス)
PythonSQL
サーバーサイドエンジニアバックエンドエンジニア
作業内容
フロー管理システムの開発・保守作業
【Java・Python/基本リモート/週5日】某通信会社向け開発支援作業
業務委託(フリーランス)
JavaPythonScalaSparkKafka
サーバーサイドエンジニアバックエンドエンジニア
作業内容
某通信会社向け開発支援作業
【クラウドエンジニア(AWS) / リモート案件紹介可能】AWS・GCPを活用したデータ基盤整備と移行プロジェクト
業務委託(フリーランス)
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
AWSデータレイクからBigQueryへのデータ移行作業や、GCPデータ基盤の整備を行うプロジェクトです。PythonやSparkを活用し、データ基盤の設計・開発を進めるとともに、効率的なデータ処理環境を構築します。TerraformやCI/CDツールを利用した開発プロセスにも携わります。
■具体的な業務内容
・AWSデータレイク(S3 + Glue data catalog)からBigQueryへのデータ移行
・GCPデータ基盤の整備およびワークフローエンジンの導入
・PythonやSparkを使用したアプリケーション開発および保守
・TerraformやCI/CDツールを利用した開発環境の整備
・データ基盤設計および運用改善
【クラウドエンジニア(AWS) / リモート案件紹介可能】AWSおよびGCPを活用したデータ基盤整備プロジェクト
業務委託(フリーランス)
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
AWSおよびGCP環境でのデータ基盤整備プロジェクトです。データレイクからBigQueryへの移行作業や、GCPのデータ基盤整備を担当します。PythonやSparkを活用し、TerraformやCI/CDツールを使用した効率的な基盤開発を進めます。
■具体的な業務内容
・AWSのデータレイク(S3+Glue data catalog)からBigQueryへのデータ移行作業
・GCPデータ基盤の設計および整備(ワークフローエンジン導入など)
・AWS上で動作するアプリケーションの課題発見および解決
・Python、Hive、Sparkを使用したデータ基盤の構築
【Python/基本リモート/週5日】通信事業者向けゼロタッチオペレーション開発支援
業務委託(フリーランス)
Python
サーバーサイドエンジニアバックエンドエンジニア
作業内容 要件定義,基本設計,詳細設計,実装,テスト,運用・保守
データ蓄積基盤の開発
下記いずれかに該当する方を求めています。
・Java/Scala/Pythonの開発経験
・Scala/Sparkジョブ or AWS Kinesisによるストリーミング処理開発経験
・OSS(Kafka,Spark,Haddp,Flink)などを利用したストリーミング処理開発経験
・Pandasライブライを用いた開発経験
・DataPipeline構築経験(ETL開発経験)
・AWS上でのシステム開発経験3年以上
・Lambda、Glue Streaming job、DynamoDB、Redshift、RDSなどのマネージドサービス利用
・ServerlessFrameworkやCloudFormationを用いたリソース管理
・RDB/DWHの設計、パフォーマンスチューニングを行った経験
・アジャイルでのシステム開発経験
・JIRA/Confluence/Backlogなどを利用した開発経験
【Java(Spring Boot)】【業務委託(準委任)】道路交通系開発案件【リモートOK】
作業内容 【20代~30代のITエンジニアが活躍中!】
■概要
道路交通系開発をお任せいたします。
Hadoop上で動作する道路交通系システムの開発をご担当いただきます。
■作業工程:詳細設計~結合テスト
【AWS】システム開発案件
業務委託(フリーランス)
JavaPythonSQLCSSHTMLWindowsLinuxMySQLDjangoSparkFlaskAWSGitHub
データサイエンティスト
作業内容 開発、運用を繰り返すイメージです。
AWS上でのデータ解析基盤の構築
画面側はPython,html,cssなどを使います。
利用するAWSサービスの候補
- Redshift,EMR(spark),Athena,RDS,EC2,VPC,CloudFormation,Lambda,StepFunction
開発工程
基本設計, 詳細設計, 実装, 単体テスト, 結合テスト, システムテスト
【Java(Spring)】某社のクレジット基幹システム内の売上処理の再構築案件
作業内容 ■概要
某社のクレジット基幹システム内の売上処理の再構築案件をお任せいたします。
■具体的な作業内容
・Host(COBOL)のシステムをオープン化(Java化)しているが、ストレートコンバージョンによる実施の為、Host特有のロジック等があり非効率なロジックが多く、無駄な処理時間がかかっている。
・ロジックを見直しながら、純粋にJavaで一から作り直すことで性能改善を図る。
・また、現状バッチ処理による一括更新だが、Kafkaを導入し、トランザクション処理化を行う。
・他担当の技術的サポート・ソースレビューなどもできる開発者を要望。
・フェーズがテストよりになるため、結合テスト/システムテストをひと通り従事したことあり、具体的にどのようなタスクかを理解している方。
・在宅勤務下であることから、コミュニケーション能力があり、各種報告等をしっかりできる方。
【Java(Spring)】【業務委託(準委任)】某社のクレジット基幹システム内の売上処理の再構築案件
業務委託(フリーランス)
JavaOracleSpring
作業内容 【20代~30代のITエンジニアが活躍中!】
■概要
某社のクレジット基幹システム内の売上処理の再構築案件に携わっていただきます。
■募集理由
・Host(COBOL)のシステムをオープン化(Java化)しているが、ストレートコンバージョンによる実施の為、Host特有のロジック等があり非効率なロジックが多く、無駄な処理時間がかかっている
・ロジックを見直しながら、純粋にJavaで一から作り直すことで性能改善を図る
・また、現状バッチ処理による一括更新だが、Apache Kafkaを導入し、トランザクション処理化を行う
■求める方
・他担当の技術的サポート、ソースレビューなどもできる開発者
・フェーズがテストよりになるため、結合テスト/システムテストをひと通り従事したことあり、具体的にどのようなタスクかを理解している方
・在宅勤務下であることから、コミュニケーション能力があり、各種報告等をしっかりできる方
【週5稼働可能な方にぴったり】Python/バッチ開発・運用エンジニア(フルリモート)【Python(データ分析系)】
業務委託(フリーランス)
PythonGoogle Cloud Platform
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
独自のデータ集積プラットフォームを運営する企業での、DBバッチ開発および運用業務です。Pythonを使用したバッチ開発や、データのインサート作業を行います。Google Cloud Platform(GCP)環境下で、5名のチーム体制でデータ処理を手掛けます。
■具体的な業務内容
・Pythonを用いたバッチ開発、改修、運用
・データインサート業務
・GCP環境でのデータ処理(BigQuery、Cloud Composerなど)
・データの高速化や自動化対応
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【Python(Web開発系)】Python/バッチ開発・運用(フルリモート)
業務委託(フリーランス)
PythonGoogle Cloud Platform
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
自社のデータ集積プラットフォームを運営する企業にて、Pythonを使用したバッチ開発・運用を担当します。世界中の特許や論文データなどを扱い、データの高速処理や自動化を行うプロジェクトに参画します。リモートでの作業となります。
■具体的な業務内容
・Pythonを使用したバッチ開発および改修
・データベースへのデータインサート
・GCP環境でのシステム開発および運用
・データ処理の高速化および自動化対応
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【Golang(リモート)】データ分析基盤及びETL基盤/システム開発支援
業務委託(フリーランス)
GoLinuxMySQLPostgreSQLRedisCassandraSparkGitJIRAGoogle Cloud PlatformKubernetesElasticsearch
作業内容 ・システムアーキテクチャの検討、選定及び設計、実装
・ビッグデータを分析(加工)する為の分散処理基盤の開発など
【環境】
・OS(インフラ):GCP、Spark、Kubernetes、Linux
・DB:Cassandra、Redis、Elasticsearch、mySQL、PostgreSQL
・ツール:JIRA、Git、Slack
【一部リモート可(門前仲町) / Python / 週5日 / 30~40代活躍中】通信キャリア情報系刷新
業務委託(フリーランス)
PythonSparkAWSJP1
PM
作業内容 -------------------------------------------------------------------
※重要※
必ずご確認いただきご応募ください。
【必須要件】
・20代後半~40代の方、活躍中!
・基本的なコミュニケーションが取れる方必須
・外国籍の方は、JLPT N1相当またはJPT700点以上のビジネス日本語上級レベル必須
・フルタイム案件(副業不可)
・エンジニア実務経験3年以上必須
-------------------------------------------------------------------
【企業】
1976年の創業から長きにわたって、主に証券・金融業界向けに基幹システムや情報系システムを開発してきました。 近年では証券・金融業界に加え、中堅・中小企業へのDX促進サポートに注力しています。
【業務内容】
情報系システム刷新。データ連携バッチを中心に刷新(DataStage、SPARK、インフォマティカ、Python、JP1)、クラウドは全てAWS。
工程:基本設計~
【環境】
Python / SPARK / AWS / DataStage / インフォマティカ / JP1
【その他】
就業時間:9:00~17:30
リモート:週2~3程度
作業場所:門前仲町駅 徒歩5分
【週5日/リモートメイン/Python】データエンジニア
業務委託(フリーランス)
PythonDynamoDBSparkAWSAmazon S3ApacheKafka
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
--------------------------------
某大手自動車メーカーの「運転診断システム」のデータエンジニアを募集しております。
<業務内容>
AWSのクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。
Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。
ビッグデータ技術(Hadoop, Sparkなど)を用いて大規模データセットのバッチおよびリアルタイム処理を実行します。
ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。
【Python/AWS】BigData領域のWeb開発(フルリモート)
業務委託(フリーランス)
PythonDynamoDBAWSAmazon S3
バックエンドエンジニア
作業内容 AWSクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。
Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。
ビッグデータ技術(Hadoop, Sparkなど)を用いて大規模データセットのバッチおよび、リアルタイム処理を実行します。
ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。
【Python】Webクローラー開発の求人・案件
業務委託(フリーランス)
PythonSQLPostgreSQLHadoopSparkGit
作業内容 某大手通信事業者様の生成AI基盤開発支援を行っている中でサイトクローラーの開発業務を行える方を募集しております。
【週5日・首都圏限定】自動車会社向けデータ転送処理マイグレーション(Java)
作業内容 【自動車会社向けデータ転送処理マイグレーション】
AWS Lambda+Javaで実装されたデータの転送処理APPをDatabricks(ApacheSpark基盤)上で動くようにマイグレーションする。
環境
Java/AWS(Lambda)/Apache Spark
Databricks/Delta Lake/Snowflake
本案件は【首都圏】にお住まいで【週5日勤務】が可能な方限定となります。
【Azure】機能障害・不足の解消案件
業務委託(フリーランス)
SparkAzureApache
作業内容 ・機能障害、不足の解消作業に携わっていただきます。
・主な作業内容は以下の通りです。
-性能障害の対応含む(最近、クラウド処理遅延等の調査等)新機能への対応
※IoT対応、ログ伝送対応など
-データの品質管理
-データの取込対応
【週5日・首都圏限定】外資系生命保険会社システム開発(Azure)
契約社員 / 業務委託(フリーランス)
SQLSparkAzureApache
SE
作業内容 外資系生命保険会社システム開発(Azure)
新規プロジェクトの中で、azure環境での開発を実施。
要件定義、基本設計を実施する。
本案件は【首都圏】にお住まいで【週5日勤務】が可能な方限定となります。