【分析基盤エンジニア】大手企業のデジタル変革に向けたデータエンジニア
作業内容 大手石油販売会社にてDX推進プロジェクトに参画いただけるメンバーを募集しております!
複数テーマが同時に動いていることもあり、スムーズに進めていくためにも
大手企業のデジタル変革に参画していただけるメンバーを募っております。
具体的には…
●クライアントとMTGをしながら「どういったことができるのか」
「こんな要素があればこんな分析ができる!」といった企画・提案をしながら
実際に分析モデルなどを作っていただきます。
●各事業部で必要とするデータを依頼された場合、データ抽出や分析
●既存のデータパイプラインの保守(Azure)
●新規パイプラインの設計・構築(Sparkを想定)
【クラウド/フルリモート】インタフェース開発支援案件
作業内容 ・クラウドを用いたインタフェースの開発支援に携わっていただきます。
・主に下記作業をご担当いただきます。
- Microsoft Fabric環境での実装からテスト
-インターフェース各種設計書作成
【Java/JavaScript(フルリモート)】某医療業界向けデータ登録システム開発案件
業務委託(フリーランス)
JavaJavaScript
作業内容 各種システムを開発している企業にて
データ登録システム開発案件にご参画頂きます。
要件定義~テストまでを一貫してご担当頂きます。
業務内容は下記が主業務となります。
・データの入力
・新システムの画面周りの開発
■担当工程:
要件定義、基本設計、詳細設計、実装・単体、結合テスト
【AWS/フルリモート】製造業向けデータ基盤構築案件
作業内容 ・AWSクラウド環境でのAWSサービスを活用したデータ基盤構築に携わっていただきます。
・データ基盤構築により下記のような運用に変わるイメージです。
現運用:データソースの手動取得⇒ETLツールを手動実行⇒BIツール
本運用:データソースを自動取得AWSサービス(AppFlow, Lambda)⇒ETLツールを自動実行⇒BIツール
また、上記処理の監視、エラーハンドリング機能(CloudWatch, StepFunctions)
・ご担当いただくのは主に下記作業です。
-詳細設計書作成
-各インターフェースからデータを取得する収集処理の実装(AppFlow, Lambda(Python))
-収集したデータからデータマートを作成する変換処理の実装(Glue(pySpark, Spark SQL))
-検証作業(単体、結合、総合)
バックエンドシステムの設計/開発ほか
PHPPythonRubyGoLinuxMySQLRailsAWSDockerGitLaravelGoogle Cloud Platform
インフラエンジニアサーバーサイドエンジニアバックエンドエンジニア
作業内容 ・バックエンドシステムの設計/開発と運用
・サービスと解析の両方に最適なデータ構造の設計、実装
・データの可視化や解析基盤の構築や運用
・API 等を通じた外部サービスやシステムとの連携
・Web インフラの構築と運用、自動化
AIエンジニア育成支援
PythonSQLMySQLPostgreSQLGoogle Cloud Platform
AIエンジニア
作業内容 【依頼したいこと】
機械学習モデルの構築、活用に向けたエンジニア教育
【募集背景】
ビックデータを活用しながら、1000万ダウンロードに迫っている自社アプリの人流データを活かして新規事業を開発中です。
その中で自動応答など機械学習の導入を予定しております。
データ基盤がありエンジニアも在籍していますが、AI機械学習に詳しい方が不在のため、機械学習の教育をしていただける方を募集しています。
【開発環境】
クラウド:AWS、収集:Kinesis
保管:S3、加工:Glue(Spark)、分析:Athena、Sagemaker
機械学習:Amazon Sagemaker
地図情報:RDS(PostgreSQL/PostGIS)、地図描画:kepler.gl
【Unity/Unreal Engine】3Dエフェクト制作案件
業務委託(フリーランス)
PhotoshopIllustratorMayaUnityUnreal EngineMotionBuilderHoudiniSpriteStudioBISHAMON
エフェクトデザイナー
作業内容 ・3Dエフェクト制作案件に携わっていただきます。
・主にゲームのカットシーンの特殊領域をご担当頂きます。
・その他これまでの経験に合わせて下記項目をご担当いただきます。
‐エフェクト表現の提案、仕様作成
‐エフェクト用テクスチャ、モデルやアニメーションの作成
‐リアルタイム3Dエフェクトの作成
‐エフェクト全般のクオリティコントロール
‐タスク見積/管理(スケジュール/予算/品質管理)
‐外注管理/ディレクション
‐レギュレーション制作及びワークフローの構築
【SQL/Python】DWH/BIの求人・案件
業務委託(フリーランス)
PythonSQLAWSGlueAthena
作業内容 ・新規データマート要件定義、既存集計フロー効率化ユーザの要望を聞いて新しいデータマートを作成したり既存の集計フローを自動化することで効率化を図ります
・データマート作成
既存帳票(Excel,CSV)からSQL作成、BIでの可視化
・データのETL処理やETL処理のためのスクリプト・システム開発運用改善業務
AWSのGlue・Athena等を使用し、SQL・Pythonでコーディングし、S3にデータレイク、データマートを構築既存の基盤改修・改善
・データマート日次運用保守業務
【開発環境】
プログラミング言語:Python
ライブラリ:PySpark, pandas
データベース:AWS RDS (SQLServer), AWS Athena(trino)
環境・OS:AWS (Amazon Web Services), AWS Lambda, AWS Glue
BIツール:QuickSight
【Python/SQL】小売業界/データエンジニアの求人・案件
業務委託(フリーランス)
PythonSQLWindowsLinuxAWSDockerGoogle Cloud Platform
作業内容 Google Cloud / AWSを利用した商用稼働サービスのデータパイプラインの開発・保守運用
データ分析システム・サービスの監視設計・運用
日々の運用業務から発生する課題の解決・改善
技術要素(★が特に重要)
GoogleCloud
★Cloud Composer2(及びAirflow2)
★Cloud Dataproc(Apache Spark(scala))
Cloud Build
Cloud Storage
BigQuery
Cloud Monitoring / Cloud Logging
AWS
★Kinesis firehose
★SQS / SNS
★ECS
★Lambda
ECR
S3
Cloud Watch
その他
GithubActions
Terraform
【iOS/Android】求人メディア開発案件
業務委託(フリーランス)
SQLApexAndroidLinuxiOSHadoopSparkAWSDockerXcodeGitSwiftCocoaGitHubKotlinGoogle Cloud PlatformAnsibleBigQuery
スマホアプリエンジニア
作業内容 ・ご経験やご希望に応じて上流から下流まで幅広く携わっていただきます。
・主にiOSモバイルアプリの開発を行っていただきます。
【Python/SQL】小売業界向けデータパイプライン構築の求人・案件
業務委託(フリーランス)
PythonSQLLinuxAWSGoogle Cloud PlatformBigQuery
作業内容 データパイプラインの構築エンジニア
主業務:要件に合わせルールに則ったデータモデリングを行い、各基盤のツール群を使ってデータ加工するパイプラインバッチの構築を担当いただきます。
技術要素(★が特に重要)
GoogleCloud
★Cloud Composer2(及びAirflow2)
★Cloud Dataproc(Apache Spark(scala))
Cloud Build
Cloud Storage
BigQuery
Cloud Monitoring / Cloud Logging
AWS
★Kinesis firehose
★SQS / SNS
★ECS
★Lambda
ECR
S3
Cloud Watch
その他
GithubActions
Terraform
【Python】インターネット広告データレイク開発案件
業務委託(フリーランス)
PythonAWSDockerGitHub
作業内容 ・インターネット広告代理店業における、膨大な広告データのデータレイクの
開発、運用、保守をご担当いただきます。
・具体的には下記の作業の一部を想定しております。
- 媒体APIを利用したデータの取得、蓄積
- データの加工(ETL)処理
- データウェアハウスへのロード、データマートの提供
【SRE】自社サービスSaaSのSREエンジニア
業務委託(フリーランス)
PostgreSQLAWSAzureDockerGitGoogle Cloud Platform
フロントエンドエンジニアQAエンジニアテスターSREバックエンドエンジニア
作業内容 ▽チーム体制
開発責任者 1名
└プロダクトオーナー1名
└フロントエンドエンジニア 3名
└バックエンドエンジニア 5名
└SRE 0名(★ここが今回の募集ポジションです)
└QAエンジニア0名
└データエンジニア1名
※上記は社員のみ
業務委託で複数名のエンジニアにご参画頂いております。
▽業務内容
・自社SaaSサービスを支えるインフラ環境構築・運用などのシステム管理業務
・サービスの監視やパフォーマンス・チューニング
・運用業務効率化のツール作成
・プロダクト開発チームとともに信頼性の高いサービスの設計と実装
▽環境
- AWS: EC2、ECS、StepFunctions、S3、Aurora(PostgreSQL)、Elastic Search、Cloud Watch
- Python、Rust、Spark
【募集背景】
新バージョンの機能追加が急務であり、エンジニアリソースが不足しているため。
【データ分析/AWS/SQL】求人検索運営向けビッグデータ解析/分散処理基盤開発案件
業務委託(フリーランス)
PythonSQLGoScalaMySQLAWSDockerNginxIntelliJ IDEAJenkinsJIRASolrGitHubGoogle Cloud PlatformAnsibleBigQueryTypeScriptVue.jsNuxt.js
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 下記を行っていただきます。
・AWSを利⽤したビッグデータ解析⽤分散処理基盤のアーキテクチャ選定から設計
・実装、運⽤フロー⾃動化の提案/実装
・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定
・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど)に応じたデータセットの作成
・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git,CI/CDの仕組み作りと維持
【GCP/AWS】某HR Tech自社サービスインフラエンジニア
業務委託(フリーランス)
AWSDockerGoogle Cloud PlatformKubernetes
インフラエンジニアサーバーエンジニア
作業内容 インフラの構築や安定運用のために必要となる作業を主体的に行っていただきます。
1.環境構築
新規サービス開発のための設計や環境構築を行います。
2.性能管理
処理速度やリソースなど、性能とキャパシティの管理を行います。
3.運用改善
常に最適な運用体制が取れるように効率化や自動化などを検討していきます。
4.障害対応
障害時の状況の沈静化及び根本原因の調査を行います。
【開発環境】
■GCP
GKE,GCE,BigQuery,CloudRun, GCSなど
■AWS
S3, ElasticTranscoderなど
■Kubernetes
■Istio
■Terraform
■WebRTC
■Ruby on Rails
■Go
■Python
■Rust
■JavaScript,HTML5,CSS3
■TypeScript
■React
■node.js
■Datadog
■mackerel
■Elasticserach/Kibana
■pagerduty
■Sentry
■Clarity
【Java】広告システム|~90万|渋谷/リモート
業務委託(フリーランス)
JavaPythonScalaMySQLSparkAWSDockerNginxJenkinsJIRAGitHubKotlinGoogle Cloud PlatformAnsibleBigQueryTypeScriptVue.jsAthenaFargateDatadogTerraformAuroraCloudFrontfluentdElasticsearchLambda
サーバーサイドエンジニア
作業内容 要件定義から技術選定、開発、リリースから運用まで幅広く主体的に担当いただきます。
■業務内容
・新規機能開発
・パフォーマンス、品質向上を主とした機能改善
・検索エンジンのチューニング
・広告パフォーマンスのチューニング
・各種ログの収集・分析
・SEO改善のためのインデックス精査
・重複している求人データの整理
・脆弱性診断ツールを活用したセキュリティ対応など
【GCP/AWS】某HR Tech様自社サービスインフラエンジニア
業務委託(フリーランス)
JavaScriptPythonRubyGoRailsAWSDockerReactGoogle Cloud PlatformTypeScriptKubernetes
インフラエンジニア
作業内容 インフラの構築や安定運用のために必要となる作業を主体的に行っていただきます。
1.環境構築
新規サービス開発のための設計や環境構築を行います。
2.性能管理
処理速度やリソースなど、性能とキャパシティの管理を行います。
3.運用改善
常に最適な運用体制が取れるように効率化や自動化などを検討していきます。
4.障害対応
障害時の状況の沈静化及び根本原因の調査を行います。
【開発環境】
■GCP
GKE,GCE,BigQuery,CloudRun, GCSなど
■AWS
S3, ElasticTranscoderなど
■Kubernetes
■Istio
■Terraform
■WebRTC
■Ruby on Rails
■Go
■Python
■Rust
■JavaScript,HTML5,CSS3
■TypeScript
■React
■node.js
■Datadog
■mackerel
■Elasticserach/Kibana
■pagerduty
■Sentry
■Clarity
【Python/Vue.js】自動車データ向けアプリケーション開発案件
業務委託(フリーランス)
JavaScriptPythonGoSparkVue.js
フロントエンドエンジニア
作業内容 ・車載ネットワークのデータを用いたビッグデータアプリケーションの
開発に携わっていただきます。
・担当工程としては、上流工程からご担当いただきます。
※具体的にご担当頂く作業領域はご経験に応じて変動いたします。
基本リモート|【Python】toC向け自社サービスにおける機械学習エンジニア募集|神田|No.3540
業務委託(フリーランス)
PythonMySQLFlaskAWSDockerGitGitHubGoogle Cloud PlatformBigQueryPyTorchTerraform
機械学習エンジニア
作業内容 機械学習エンジニアとしてサービスの改善/開発を行っていただきます。主にデータを活用したアルゴリズムの開発とその基盤開発を担当していただきます。
- 機械学習技術を用いたサービス開発および改善。具体的には推薦システムや診断といったサービスに従事していただきます。
- 機械学習モデルの安定的な運用・基盤整備(ML pipeline/MLOps)
- 香りのデータを活かしたチャレンジングな課題の解決(R&D)
- データ利活用のためのデータ基盤整備(Data Engineering/Data pipeline)
【Python】WebサービスAI開発案件
業務委託(フリーランス)
PythonSQLPyTorchTensorFlowSAP
サーバーサイドエンジニア
作業内容 ・WebサービスAI開発案件に携わっていただきます。
・主に下記作業をご担当いただきます。
-データ分析(データの前処理、クレンジング、変換)
-モデリング
-SQLを用いたデータベース操作
-PythonによるAPI開発 など
【Ruby3年以上/フルリモート可能/週5稼働/20~40代活躍中】SaaS開発の案件・求人
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
★本案件の最新の状況は、担当者までお問合せ下さい。
★期間:随時~
■内容:
ECカートシステムと関連する周辺アプリケーションの開発です。
■環境:
言語:Go / TypeScript / Python / Ruby / Ruby
AWS: EKS / S3 / Aurora / ECR / System manager / Secrets manager / Route 53 / Step functions / Lambda / Redshift / Cloud watch
使用技術: Apache Spark / Trino / Apache Iceberg / Kafka / Apache Superset / Argo Workflows / Argo Events / Airbyte / Jupyter Notebook / Grafana / Prometheus / Docker, Postman / gRPC
ツール: Slack / GitHub / GitHub Copilot / Github actions / Notion / Lens Pro
※20代〜30代が中心で活気ある雰囲気です。
※成長意欲が高く、スキルを急速に伸ばしたい方に最適
※将来リーダーを目指す方歓迎
【Go/React/フルリモート】クラウドサービス・Webアプリケーション開発支援案件
業務委託(フリーランス)
JavaScriptPythonSQLGoC#ScalaLinuxMySQLPostgreSQLRedisCassandraSparkGitJIRAReactTypeScript
フロントエンドエンジニア
作業内容 ・電帳法、インボイス、会計、販売管理関連の既存サービスに関する設計(機能追加)及び実装に携わっていただきます。
・Goを用いたバックエンド開発、Reactを用いたフロントエンド開発等、ご経験に応じてフルスタックに関わっていただくことを想定しております。
・状況に応じてEDIサービス、DB設計などもご担当いただく可能性がございます。
【Python/フルリモート】大手自動車メーカーBigData領域開発
業務委託(フリーランス)
PythonAWS
データサイエンティストサーバーサイドエンジニア
作業内容 【概 要】:大手自動車メーカーBigData領域開発(Web)
・大手自動車メーカーの「運転診断機能」という
テーマ追加に伴うWeb開発。(スクラム採用)
・メイン言語は Python。AWS上で Lambda ,ECS(Fargate)、
StepFunctions等を使用したWebアプリ開発と
維持管理が主内容となります。
・具体定的な業務作業としては、アルゴリズムは顧客側で
研究開発済みのGivenを利用、Spark等に
ポーティングするスキームとなります。
【場 所】:完全フルリモート(関東近辺の方は初日のみ横浜、地方可)
【期 間】:10月~中長期
【スキル】:<必須>
・Pythonを用いたBigData関連の開発経験
(データサイエンティストLikeな方歓迎)
・AWS経験
・設計経験
<尚可>
・AWS Lambda、API Gateway、SQS、DynmoDB、
Fargate、Kinesis Data Streamsの利用経験
・SAM(ServerlessApplicationModel)で
管理されたシステムの開発経験
・CI/CDが整備されている環境
(AWS CodeCommit・CodePipeline・CodeBuild)での開発経験
データアーキテクト エンタープライズ
JavaPythonSQLScalaHadoopSparkAWSAzureTableau
作業内容 外資コンサル日本法人内でのクラウドチームへご参画いただきます。
※エンジニアではなくコンサル枠となります。
さまざまなサービスと実装パターンを活用して、
安全でスケーラブルかつコスト効率に優れたエンタープライズアーキテクチャを設計から実装を目指します。
具体的には、さまざまなデータワークロードと分析ニーズをサポートするために、
データの取り込み、保存、処理、消費のためのソリューションを設計します。
組織の要件に応じて、アーキテクチャが高可用性、災害復旧、
およびグローバル分散向けに設計されていることが目的です。
<想定される作業>
・データエンジニアと緊密に連携し、
バッチおよびリアルタイムデータ処理用のデータパイプラインの構築と最適化を目指します。
・データサイエンティストやアナリストと協力して、データへのアクセスを容易にし、
高度な分析や機械学習プロジェクトをサポートします。
1.データモデリング
2.データベース管理
3.データ統合
4.データガバナンスとセキュリティ
5.データ分析と視覚化
6.テクノロジーの評価と実装
7.コラボレーションとコミュニケーション
8.戦略計画
※各項目詳細は、面談時にお伝えさせていただきます。
※※こちらの案件は現在募集を終了しております※※
フルリモート|【AWS】有名IT企業のバックエンド・インフラエンジニア募集(フルスタック)|~110万
業務委託(フリーランス)
JavaJavaScriptPythonRubyPerlObjective-CAndroidiOSMySQLSparkAWSDockerApacheNginxJenkinsLESSSwiftChefGoogle Cloud PlatformAnsibleTypeScriptGoogle AnalyticsDatadogAuroraCloudFrontCircleCIElasticsearchmemcached
インフラエンジニアサーバーサイドエンジニアフルスタックエンジニアスマホアプリエンジニアバックエンドエンジニア
作業内容 バックエンドエンジニアを募集します。
人数が不足しており、フルスタックとしてご活躍いただく方を想定しております。
参加される方のスキル・適性によってはアプリケーション改修などの依頼に変更することもありえます。
・SNSのシステム運用・保守
・データベースの構成変更
・キャパシティ最適化、インデックス最適化、集約など
・アプリケーションサーバの構成変更
・HTTPサーバやログ基盤の切り替えなど、一部アプリケーションコード改修も伴う
・OS の変更・OS の更新
・CVE対応、サポート切れへの対応など
・各種ミドルウェアの更新
・CVE対応、新機能・性能改善の取り込みなど
・その他各種システム構成の変更・更新
・コンテナ仮想化への切替、マネージドサービス利用による管理コスト削減など
【Scala】広告向けサービスデータ基盤開発案件
業務委託(フリーランス)
JavaPythonSQLScalaLinuxAWSDockerGitHub
アプリケーションエンジニア
作業内容 ・広告向けサービスのデータ基盤開発において、
下記作業をご担当いただきます。
-データレイクに蓄積された膨大な広告関連データのETL処理
-その後のデータ基盤(DWH)の構築、運用、保守をお願いします。
【SRE】自社サービスSaaSのSREエンジニア
業務委託(フリーランス)
PostgreSQL
フロントエンドエンジニアQAエンジニアテスターSREバックエンドエンジニア
作業内容 自社SaaSプロダクト開発において、
インフラ環境の構築と運用、パフォーマンスやコスト改善などの業務をご担当いただきます。
▽業務内容
・セキュリティ対策:アカウントセキュリティ、マネージドサービスによる防御と検知の設置、ログ集約、障害テストなど
・マルチアカウント対応:アカウントの組織管理、サービスコントロールポリシーとガードレールの設定など
・システムのスケーラビリティの確保:サービスレベルの策定、モニタリング設置、インフラ・アプリ環境の最適化、性能テスト実施など
・自動化の推進:リソース構成のIaC化、監視ツールの導入、セキュリティ検知の自動通知など
・上記タスクに伴う運用ルール、ドキュメントの整備、監査レポートの作成
開発環境
AWS: EC2、ECS、StepFunctions、S3、Redshift、Aurora(PostgreSQL)、CloudWatch、Lambda
Python、Rust、Spark
▽募集背景
これまでは在席しているエンジニアがSREを担当していましたが、
事業拡大に伴い、専任のSREエンジニアを募集し、より安定したサービスの提供を目指したいと考えています。
【Python】薬局向けダッシュボード画面開発案件
業務委託(フリーランス)
JavaScriptPythonAWSAzureGitHubGoogle Cloud PlatformTypeScript
作業内容 ・薬局向けダッシュボードの開発において、下記業務をご担当いただきます。
-RDBのデータベース設計
-Glue JobでPythonを利用したETL処理の設計および開発
-API Gateway、Lambdaを利用したAPI開発
-技術的知見からの、プロダクトオーナと協調した仕様策定
-AWS関連リソースの活用
-Git flowベースの開発進行
【AWS/GCP/Azure/リモート併用】Pythonエンジニアの案件・求人
業務委託(フリーランス)
PythonAWSAzureGoogle Cloud PlatformDevOps
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
某企業の各プロダクトのバックエンド開発を行って頂きます。
スクラム開発を採用しており、同じチームに居るプロダクトマネージャ、デザイナー、フロントエンジニア、バックエンドエンジニア、薬剤師などと共に、バックエンドの専門家としてリーダーシップを取って開発を行って頂きます。
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
【Java】アプリケーション開発エンジニアの求人・案件
業務委託(フリーランス)
JavaPythonWindowsLinuxHadoop
作業内容 大規模データ収集基板構築(オンプレにて構築)に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。
アプリケーションの設計、開発、テストがメイン業務となります。
アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。
RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)【開発環境】
・Java
・Hadoop(Cloudera)
・Apache kafka
・Apache spark
・Kubernetes/OpenShift/vCenter