【Python、SQL】開発・保守および運用に関する支援業務(リモート)
作業内容 ・データ加工のバッチ開発/運用(データ設計、ETL処理の開発)
・カテゴリ付与などのデータ加工の検討・実装など
【Python】データ分析及びバックエンド開発業務(リモート)案件
業務委託(フリーランス)
PythonSQLTensorFlow
バックエンドエンジニア
作業内容 ・データ分析(データの前処理、クレンジング、変換)
・モデリング
・SQLを用いたデータベース操作
・PythonによるAPI開発
【バックエンドエンジニア】AI開発やバックエンド開発(リモート)案件
業務委託(フリーランス)
SQLPyTorchTensorFlow
バックエンドエンジニア
作業内容 ・データ分析(データの前処理、クレンジング、変換)
・モデリング
・SQLを用いたデータベース操作
・PythonによるAPI開発
【週5日・首都圏限定】データクリーンサービスETL業務開発
業務委託(フリーランス)
PythonHadoop
SE
作業内容 【データクリーンサービスETL業務開発】
外部委託中のETL業務の移管に伴うETL業務の運用引継ぎ、及び改修
本案件は【首都圏】にお住まいで【週5日勤務】が可能な方限定となります。
【週5日・首都圏限定】ETL業務開発・運用支援
業務委託(フリーランス)
PythonHadoop
SE
作業内容 【データクリーンサービスETL業務開発・運用支援】
外部委託中のETL業務の移管に伴うETL業務の運用引継ぎ、及び改修
本案件は【首都圏】にお住まいで【週5日勤務】が可能な方限定となります。
【AWS / リモート案件ご紹介可能】大手自動車メーカー向けAWS基盤設計・構築
作業内容 ★エンジニア実務経験2年以上 / ブランクのない方が対象の案件です!!★
■概要
大手自動車会社のIoT基盤を支えるAWS上のサーバ基盤運用における設計・構築業務を担当するプロジェクトです。オンプレミスからクラウドに移行したシステムにおいて、AWSの各種マネージドサービスやHadoopエコシステムを活用し、安定した基盤運用を目指します。長期的な支援が見込まれるため、スキルを深める環境が整っています。
■具体的な業務内容
・AWS環境でのサーバ設計・構築業務
・運用設計の策定および運用支援
・Hadoopエコシステム(Apache Spark、Kafkaなど)を用いたデータ基盤構築
・AWSマネージドサービスの活用および最適化
【Python】Webクローラー開発の求人・案件
業務委託(フリーランス)
PythonSQLPostgreSQLHadoopSparkGit
作業内容 某大手通信事業者様の生成AI基盤開発支援を行っている中でサイトクローラーの開発業務を行える方を募集しております。
【Java/一部リモート】製造業向けデータ収集システム案件
業務委託(フリーランス)
C++JavaCSQLShellLinuxHadoopDocker
サーバーサイドエンジニア
作業内容 ・Javaを用いた製造業向けのデータ収集システム案件に携わっていただきます。
・主にシステム改修をご担当いただきます。
【AWS / リモート案件紹介可能】データエンジニア・分析基盤開発運用エンジニア募集
業務委託(フリーランス)
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
AWSやGCPを活用したデータ基盤の設計・構築および運用を担当していただくプロジェクトです。ビッグデータ分析を支えるデータパイプラインの設計や、BigQuery、Redshift、Hadoopなどのデータ解析ツールの利用経験を活かすことができます。さらに、Google Cloud MLやAWS SageMakerを用いた機械学習モデルの開発経験がある方には新たな挑戦の機会も広がっています。
■具体的な業務内容
・データパイプラインの設計および開発
・AWSやGCPを活用したデータ基盤の構築および運用
・BigQueryやRedshiftを用いたビッグデータの分析業務
・Google Cloud MLやAWS SageMakerを活用した機械学習モデルの開発
【Python / リモート案件紹介可能】大規模データ活用基盤改善/データ分析基盤エンジニア
業務委託(フリーランス)
PythonSQLShellLinuxAWSDockerGitSVNGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
大手人材派遣会社における派遣領域のデータ活用基盤を対象とした改善・保守運用を担当します。レコメンドエンジンを提供するデータ基盤や分析環境の改善に加え、クラウドサービスやミドルウェアの新規技術検証、簡易的な機械学習モデルのチューニングなども手掛けます。大規模データ処理やPython、Linux環境での開発経験を活かし、データ基盤の構築に貢献できるポジションです。
■具体的な業務内容
・レコメンドエンジンを提供するデータ基盤・分析環境の改善および保守運用
・クラウドサービスやミドルウェアの新規技術検証
・簡易的な機械学習モデルのチューニングやデータ分析
・大規模データ処理基盤に関する運用業務(Hadoop, Spark, Treasure Data)
・インフラ関連ツール(Docker、CI/CD)の業務運用および保守
【Python(データ分析系)】≪フルリモート≫ゲーム・ソリューションサービスの データアナリスト/データサイエンティスト
業務委託(フリーランス)
PythonSQL
データサイエンティストデータアナリスト
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
ゲームおよびソリューションサービスのデータ分析業務を担当し、サービス価値向上のための分析設計、ダッシュボード開発、データ加工・分析を行います。プロデューサーやプランナー、データエンジニアと連携しながら、データを基に施策提案やPDCAサイクルの推進をサポートします。
■具体的な業務内容
・SQLを活用したデータ抽出・分析
・アドホック分析の実施およびレポーティング
・BIツールを用いたデータ可視化およびダッシュボード開発
・ゲームタイトル/サービスの施策PDCA推進
・サービス課題のヒアリングおよび分析・可視化設計
・PythonやRを使用したデータの加工、集計、分析(経験があれば尚可)
・BigQuery、Redshift、Hadoopを活用したビッグデータ分析(経験があれば尚可)
【Java】電力会社向け開発案件
業務委託(フリーランス)
JavaWindowsLinuxWinSCPGit
サーバーサイドエンジニア
作業内容 ・中部LCS Snowflake化対応に携わっていただきます。
・主に以下作業をご担当いただきます。
ー基本設計
ー詳細設計
ー製造
ー単体試験
ー結合試験
【Python】データ解析基盤の構築(リモート)
業務委託(フリーランス)
PythonSQLLinux
バックエンドエンジニア
作業内容 ・データのETL処理の基盤構築
・AWSサービスとPythonを使ってデータ解析基盤の開発
・設計/製造をメインにご担当
【インフラエンジニア】データ連携支援(リモート)
業務委託(フリーランス)
SQLShellLinux
インフラエンジニア
作業内容 サービス関連ログ、サービス関連データをElasticserach及びHadoopクラスタ基盤(オンプレ)及びSplunkへ集約し、コールセンタの運用改善等のデータ活用を実施しております。
【週5日/リモートメイン/Python】データエンジニア
業務委託(フリーランス)
PythonDynamoDBSparkAWSAmazon S3ApacheKafka
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
--------------------------------
某大手自動車メーカーの「運転診断システム」のデータエンジニアを募集しております。
<業務内容>
AWSのクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。
Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。
ビッグデータ技術(Hadoop, Sparkなど)を用いて大規模データセットのバッチおよびリアルタイム処理を実行します。
ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。
【上流】大手自動車メーカー車両情報リアルタイムデータ連携基盤構築 案件
業務委託(フリーランス)
SQLLinuxUnixOracleAWSAzure
PM
作業内容 ・リース、レンタカー向けシステム開発案件に上流エンジニアとして携わっていただきます。
・主に下記作業に携わっていただきます。
-Oracle Golden Gateの導入
-Oracle GoldenGateによるデータレプリケーション構築、設定、運用
-クラウド上のデータ基盤(Cloudera)とのリアルタイム連携の設計
【Python / リモート案件紹介可能】大規模データ基盤エンジニア×レコメンドエンジン運用
業務委託(フリーランス)
PythonSQLShellLinuxAWSDockerGitSVNGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
派遣業界向けの大規模データ活用基盤の改善・保守を行うプロジェクトです。レコメンドエンジンの運用や分析環境の改善、クラウド環境の技術検証を通じて、より高度なデータ分析基盤の構築に貢献します。必要に応じて、簡易的な機械学習モデルのチューニングやデータ分析業務も担当します。
■具体的な業務内容
・レコメンドエンジンを提供するデータ基盤の改善および保守運用
・AWSやGCPを活用したクラウド環境での開発および運用業務
・Python、Shell、SQLを用いたデータ処理およびスクリプト作成
・新規クラウドサービスやミドルウェアの技術検証
・簡易的な機械学習モデルのチューニングおよびデータ分析
【Python / リモート案件紹介可能】求人レコメンドシステム開発/Pythonエンジニア募集
業務委託(フリーランス)
PythonSQLShellLinuxGitSVNBacklogJIRA
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
求人紹介および求職者紹介のレコメンドエンジンのエンハンス開発を担当するプロジェクトです。PythonやShell、SQLを使用した開発を通じて、要件定義から設計、コーディング、テスト、デプロイ、運用まで一貫して関わります。また、DevOps関連の新技術検証や、ビッグデータを活用したデータ加工・分析にも携わるチャンスがあります。
■具体的な業務内容
・求人レコメンドエンジンのエンハンス開発
・要件定義、設計、コーディング、テスト、デプロイ、運用対応
・Linux環境での開発およびShellスクリプトの活用
・SQLを使用したデータ抽出および加工作業
・Gitを用いたバージョン管理およびチーム開発対応
【Python / リモート案件紹介可能】レコメンドエンジン|モデル開発・改善プロジェクト
業務委託(フリーランス)
PythonSQLShellLinuxGitSVN
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
大手クライアントの派遣事業におけるレコメンドエンジンの改善および新規開発を担当するプロジェクトです。開発系ではデータ加工やWebAPI開発、分析系では機械学習モデルの構築やチューニングなどを担当いただきます。Python、Shell、SQLを用いた開発または分析経験が求められます。クラウド環境や大規模データ処理に興味がある方も歓迎します。
■具体的な業務内容
開発系:
・データ加工、バッチ開発、WebAPI開発、新規技術の検証
・Linux環境における開発およびドキュメント作成(設計書、テスト仕様書)
分析系:
・基礎分析、機械学習モデル構築、チューニング、レポーティング
・データ加工および検証作業
【週5日/一部リモート/Python,SQL】データエンジニア
業務委託(フリーランス)
PythonSQLAWSAzureApacheGoogle Cloud PlatformSnowflakeKafka
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
--------------------------------
「アルゴリズムで、社会はもっとシンプルになる。」をミッションに掲げ、
アルゴリズムを用いて事業開発を行うAIスタートアップです。
【募集背景】
ChatGPTをはじめとする大規模モデルと隆盛により、データ活用の社会的ニーズが高まってきております。
特に、弊社では金融業界でのデータ活用に向けた取り組みを進めており、技術的には、セキュリティや大規模なデータを扱うことを考えて、モダンなデータスタックの導入ができるように社内での検証を進めてきており、
今回大型のプロジェクトを実行するため、技術ケイパビリティ・経験を持ったエンジニアを今回募集しております。
【業務内容】
メインとして顧客環境に、特にMicrosoft Azureを想定としたデータ基盤を構築し、運用できるようにして頂きます。
データの収集元はテキストデータを中心に多岐に渡る想定であり、収集したデータはLLM/RAGと言われる技術を活用し、ChatGPTのようなボットの活用を行い、問い合わせの自動対応を実現することが目的です。
また、セキュリティ的を十分に考慮しながら設計できることが必要であり、業務としてはデータの基盤の設計及び実行のマネジメントも含めて実行頂きます。
また、必要に応じてクライアントコミュニケーションも行って頂くこともございます。
大型プロジェクトのデータエンジニアとしてのご参画を想定しております。
- アーキテクチャの設計 (既存にAzure上に一定構成されたものは存在)
- プロジェクトの技術面での実行
- 顧客環境 (特にMicrosoft Azureを想定)にデータ基盤を構築し運用できるようにする。データの収集元は多岐に渡る想定。
- データ基盤の活用の支援 (BIツール等のデータ基盤の活用に関する助言。場合によっては活用基盤の構築)
- 実行メンバーを採用及びメンバーの実行マネジメントの検討・実行
- クライアントコミュニケーション
- 他データ基盤のプロジェクトへのアドバイス
- アーキテクチャレビュー
【サーバー(Linux系)】オンプレミスHadoop環境のアップグレード【リモートOK】
作業内容 ■概要
オンプレミスHadoop環境のアップグレードをお任せいたします。
■具体的な作業内容
・某通信大手様のオンプレミスHadoop環境アップグレードを実施
・重要なシステム且つ200台以上のサーバーで構成されているクラスタリングを扱う
【Azure】在庫管理システムの構築案件/フルリモート
作業内容 大手小売り企業様にての業務となります。
在庫管理等の分散処理システムをHadoop on Sparkで組んでおり
DMCから逆輸入による導入を実施して頂きます。
【体制】
・リーダー:一名 (hadoop有識者、テックリード)
・SIer内hadoopスペシャリストに相談可能
・オフショアメンバー(中国)側と連携して進める。
【商流】
某大手小売流通→大手SIer→同社
リモート併用|【Hadoop/Spark/AmazonKinesis】オンプレミスサーバ運用(バックエンドエンジニア)
業務委託(フリーランス)
HadoopSpark
バックエンドエンジニア
作業内容 【概 要】 Hadoop運用/およびLinuxサーバの運用業務となります。
オンプレサーバ運用かつ、新規運用となりますのでLinux運用経験/運用設計が可能な方を想定しています。
・Hadoopまたは類似システムの運用経験があること
(優先度としては、Hadoop>類似のシステムSpark/AmazonKinesisなど)
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
【フルリモート案件】【AWS】某メーカー向けAWS移行支援
作業内容 お客様にて配賦処理サーバを国内DCプライベートクラウド上に
Hadoopサーバを構築して運用中であるが、RHELサポート切れが近い為、
現行環境をAWS上に移行予定。
現行Hadoopクラスタ環境をAWS EMRに移行するにあたり以下作業を実施予定。
・PoC環境の設計、構築、テスト
・アプリチームの支援(AWS関連)
・性能テスト支援(リソース情報取得等) 等
【Azure】クラウドエンジニアの求人・案件
業務委託(フリーランス)
HadoopAzure
インフラエンジニア
作業内容 在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入
MySQL / Hadoop など 金融データ分析基盤の運用に関わる支援
作業内容 金融データ分析基盤の運用に関わる業務支援
・プラットフォーム運営 ※Seniorレベル
・データ収集(ETL作業)
・KPIレポート作成
・ユーザー権限管理
・Zeppelin保守
<環境等>
データベース:Hadoop(Cloudera Data Platform), 一部MySQL
BIツール:Zeppelin, Tableau
ETLツール:内製, 一部Airflow
データ量:約500TB(Diskは1PB)
<備考>
テレワーク中心
New【Java】アプリケーションの新基板への移行/コンテナ化の求人・案件
業務委託(フリーランス)
JavaPythonWindowsLinuxHadoop
作業内容 大規模データ収集基板構築(オンプレにて構築)に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト
新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)
【Java/Hadoop】Javaのアプリ開発経験ある方!Hadoop経験ある方大歓迎!フルリモート!大規模データ収集基板構築 アプリケーション開発エンジニア
業務委託(フリーランス)
JavaWindowsLinuxHadoop
サーバーサイドエンジニア
作業内容 大規模データ収集基板構築(オンプレにて構築)に伴い、アプリケーションの新基板への移行/
アプリケーションのコンテナ化を支援いただける方を募集します。
アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、
環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。
・RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を
行うように改修、改修のための設計、開発、テスト
・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)
Java / Linux など アプリの新基板への移行・コンテナ化の支援
JavaPythonWindowsLinuxHadoopSparkOpenShiftApacheKafkaKubernetes
作業内容 オンプレミスの大規模データ収集基板構築に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。
アプリケーションの設計、開発、テストがメイン業務となります。
アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験があればよりマッチいたします。
<業務内容>
・RDBからデータ取得を行うアプリケーションを、DWH(Hadoopベース)からデータ取得を行うように改修
→改修のための設計、開発、テスト
・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)
<開発環境>
・Java
・Hadoop(Cloudera)
・Apache kafka
・Apache spark
・Kubernetes/OpenShift/vCenter
<備考>
現状リモートワーク
新型コロナウイルス感染症の終息後は出社予定
<基本時間>
9:00~18:00
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
業務委託(フリーランス)
HadoopAWSTerraform
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。