【SQL/Python】システム開発データエンジニア案件
業務委託(フリーランス)
PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・データエンジニアとして、下記のいずれかをご対応いただきます。
‐通信会社販促システム開発
‐小売/流通のシステム開発
‐広告や社内プロダクトの開発
AWS データマネジメントシステム更改案件における構築支援業務(リモート有り)
作業内容 DMシステム更改案件における構築支援業務
データマネジメントインフラ支援業務
・DaaS環境構築支援
・インフラ構成検討支援
・リアルタイム/機械学習基盤設計支援
・問合せ対応
AWSクラウド環境にHadoop,Sparkといった技術を用いデータ連携/データ収集を行い、
AIによる情報活用基盤の更改を行っていきます。
ビッグデータ開発案件
業務委託(フリーランス)
JavaHadoopHivefluentd
サーバーエンジニアデータベースエンジニア
作業内容 ・ビッグデータを分散処理で集計、分析するシステム開発を担当して頂きます。
【DB】手数料計算システム開発案件
業務委託(フリーランス)
LinuxHive
データベースエンジニア
作業内容 ・手数料計算システムの開発をご担当いただきます。
・ストアドプロシージャを用いて、設計からテストまでをご担当いただきます。
【Ruby/React.js】広告配信系システム開発案件
業務委託(フリーランス)
JavaPythonRubyScalaLinuxMySQLHadoopRailsReactGoogle Cloud Platform
作業内容 ・広告配信システムの下記業務をお任せします。
-広告主が使用する管理画面の開発
-DMPシステムの配信との連携部分の開発
-BigQueryを用いたログ解析
-オンプレミスからGCPへの移行
-Hadoopを用いた並列処理
・ご経験、ご意向、タイミングに応じて、React.jsとRubyを用いた開発を
ご対応いただきます。
・RSpecやAnsibleを用いたテストの自動化もご対応いただきます。
【Ruby】オンライン英会話サービスデータ分析基盤構築案件
業務委託(フリーランス)
JavaPythonRubySQLScalaLinuxMySQLNode.jsHadoopSparkGitGitHubBigQueryHiveTreasure Data
データベースエンジニアサーバーサイドエンジニア
作業内容 ・リリース済みのオンライン英会話サービスにおいて、
基盤エンジニアリングから分析、研究開発までを担当するグループで、
TreasureDataやBigQueryを活用したデータ分析基盤開発・運用を
行っていただきます。
・本サービスが保持する大量学習データと、機械学習を活用したレコメンドや
動画内情報検索機能などの新規機能開発もご担当いただきます。
【Python/AWS/フルリモート可能】調剤薬局向けサービス管理ツールの案件・求人
業務委託(フリーランス)
PythonHadoopSparkAWS
作業内容 ===========
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・日本語ビジネスレベル必須
・週5日稼働必須
・実務経験3年以上必須
===========
◆業務概要
・RDBのデータベース設計
・GlueJobでPythonを利用したETL処理の設計・開発
・APIGateway、Lambdaを利用したAPI開発
調剤薬局向けサービスを複数提供している企業にてサービスを総括的に管理する管理コンソールの開発業務をご担当頂きます。
管理コンソールに必要な機能の集約、追加実装等をお願い致します。
◆就業形態について
現状、開発メンバーのほとんどはフルリモートにて業務を行っております。
週に何日かご出社をご希望の際にはご相談ください。
◆補足
現場チームについては、
様々な分野での経験を持つ少数精鋭のメンバーが集まっております。
他部署を含め業務委託のエンジニアも複数名在籍しており、社員エンジニアと垣根のない働きやすい環境です。
【Python/AWS】テレビ局向け大規模データシステム構築案件
業務委託(フリーランス)
JavaPHPPythonSQLGoRedisHadoopAWSDockerGitJenkinsMemcacheChefAnsibleHive
作業内容 ・ビッグデータ基盤システムの開発をご担当いただきます。
・主に大規模データを処理するための
クラウドインフラ・アプリケーションソフトの構築から、
オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを
一貫で担っているチームで作業いただきます。
・ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等を
ご担当いただきます。
データ加工処理マイグレーション検討
HadoopSparkAWSApacheSnowflakeGlue
作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。
現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。
現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。
※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ
クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。
現在想定しているマイグレーション例は、以下の通りです。
-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換
→Databricks、Snowflake(Snowpark)、AWS(Glue,EMR)等の
Spark関連マネージド・サービスにマイグレーション
<就業時間>
9:00ー18:00
※※こちらの案件は現在募集を終了しております※※
【AWS】大規模広告システム/インフラ設計構築運用案件
業務委託(フリーランス)
JavaScriptScalaLinuxMacOSMySQLRedisMongoDBHadoopAWSNginxGitCoffeeScriptSassRedmineGitHubChefAnsible
データサイエンティスト
作業内容 ・大規模広告システムのインフラに携わって頂きます。
・設計から幅広く担当して頂きます。
・主な業務は下記の通りです。
-インフラの運用、監視、障害対応、チューニング
-Linuxサーバおよびミドルウェアの構築や運用
-アプリケーションのデプロイや運用
- ネットワーク管理
-問い合わせ対応
※担当範囲は、スキルや経験および進捗状況により変動いたします。
【Python/AWS】テレビ局向け大規模データシステム構築案件
業務委託(フリーランス)
JavaPHPPythonSQLGoRedisHadoopAWSGitJenkinsMemcacheChefAnsibleHive
作業内容 ・ビッグデータ基盤システムの開発をご担当いただきます。
・主に大規模データを処理するための
クラウドインフラ・アプリケーションソフトの構築から、
オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを
一貫で担っているチームで作業いただきます。
・ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等を
ご担当いただきます。
【Hadoop・Hive】大規模データ解析/分析案件
業務委託(フリーランス)
JavaScriptPythonRubySQLPerlRLinuxMySQLRedisHadoopAWSNginxUnicornMemcacheGitHubHive
データサイエンティスト
作業内容 ・世界展開されている大規模なゲーム、
及びWebサービスのデータ分析/解析や運用管理に携わって頂きます。
・データ分析/解析環境の設計から幅広く担当頂きます。
・開発手法は、スクラムです。
・開発フローは、GitHub FlowをベースにPull Requestを活用してます。
・主な業務
データ分析/解析の基盤やツールの開発
データ分析/解析のスクリプト記述
データ分析/解析の結果に基づいた改善や新規サービスの立案
※担当範囲は、経歴やスキルおよび進捗状況により変動いたします。
【Hadoop】情報サイトデータ分析基盤構築案件
業務委託(フリーランス)
PHPRubyHadoopBigQuery
作業内容 ・不動産・住宅情報サイト並びに、関連サイトのデータを集計・分析、
データ分析基盤の構築に携わって頂きます。
・具体的に下記の作業を担当頂きます。
-サイトのトランザクションログを大規模分散処理で解析し、
アクセス解析及びデータマイニング等の視点からBIツールを利用してレポーティング
-社内各部署で利用できるようなツールの詳細設計から構築
-必要なログを取得するためのサイト改修、個別のデータ抽出等の作業
-各種分析を行うためのオープンソースソフトウェアの調査・導入 等
New【Python】バックエンドエンジニアの求人・案件
業務委託(フリーランス)
PythonHadoopSparkAWS
バックエンドエンジニア
作業内容 エンドクライアントを支援するサービスのダッシュボードのデータベース設計、API開発、ETL処理の開発をする業務をお願いします。
[具体的な業務]
・RDBのデータベース設計
・Glue JobでPythonを利用したETL処理の設計・開発
・API Gateway、Lambdaを利用したAPI開発
・技術的知見からの、プロダクトオーナと協調した仕様策定
・AWS関連リソースのより積極的な活用
・git flowベースの開発進行
【Java】各種通信機器ログ収集及び開発案件
業務委託(フリーランス)
JavaSQLShellPL/SQLOraclePostgreSQLSQL ServerHadoopHive
作業内容 ・主に設計から結合試験までをご担当いただきます。
・ご経験によってご担当範囲を調整いたします。
【PHP】Web、業務系システム開発案件
業務委託(フリーランス)
JavaPHPLinuxPostgreSQLHadoopCakePHPLaravel
作業内容 自社にて受託している案件が多数あるため、ご希望や案件適正を加味し、
作業していただく内容を決定いたします。
主に受託している案件は、ECサイト構築や、Web、業務系の開発案件となります。
【Linux】クラウドインフラ設計/運用構築案件
業務委託(フリーランス)
LinuxHadoop
インフラエンジニアサーバーエンジニア
作業内容 ・クラウドインフラ設計において
既存設計書の焼き直しを行っていただきます。
・運用構築において下記を行っていただきます。
-web画面によるユーザ追加および削除
-テキストファイルの内容比較
-リーダーのアシスタント(会議出席、スケジュール調整)
・構築済みのシステムの焼き直しを行っている過程で、
設定を新システムへ修正する下記を行っていただきます。
-ユーザー追加
-システムの事業展開用資料の作成
【Unix/Linux】行動分析/混雑統計案件
業務委託(フリーランス)
JavaSQLLinuxUnixHadoopSparkAWS
インフラエンジニアサーバーエンジニアデータベースエンジニア
作業内容 ・データベース内ビッグデータの集計及び分析作業を行っていただきます。
・下記をご担当いただきます。
-エンジンプログラムのカスタマイズ
-SQLによるデータ集計
【Python/AIエンジニア】探索型BIツール開発におけるデータサイエンティスト
業務委託(フリーランス)
PythonHadoopSparkTableau
データサイエンティストAIエンジニア機械学習エンジニア
作業内容 [ポジション]:AIエンジニア
自社で探索型BIツールを開発しており、そこにおける人材を募集
・検索・機械学習エンジンの開発・実装、および性能改善
・自然言語処理を使用した検索エンジンの開発
・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発
【DB/リモート】大量に蓄積されたデータとAIを駆使して改善するサービスの開発を担当
業務委託(フリーランス)
PythonSQLScalaHadoopSparkBigQuery
作業内容 ・データサイエンティストと協働したAIプロジェクトの推進
・画像や動画など、広告クリエイティブにおけるデータ処理、学習モデル化
・最適化アルゴリズム、外部ツール連携、データ解析など、必要アセットの調査研究・検証
・AIを駆使し、現広告業務へ付加価値をつける機能・システムの考案・開発
・機械学習モデルのサービング
【Ruby】社内向けKPIツール開発案件
作業内容 ・社内向けのKPIツール、ログ収集ツール、
集計クエリー等の作成をご担当して頂きます。
※担当範囲は、本人希望やスキルおよび進捗状況により変動いたします。
【Java】インターネット広告システム案件
業務委託(フリーランス)
JavaJavaScriptPHPHadoopjQuerySpringBoot
作業内容 ・インターネット広告プラットフォームの開発に携わっていただきます。
・フルスタックに作業していただく事を想定しております。
【PHP】デジタルマーケティングプラットホーム開発案件
業務委託(フリーランス)
JavaJavaScriptPHPPythonRubyLinuxMySQLAWSAzureDockerJenkinsGitHubChefMVCAnsible
作業内容 自社開発のデジタルマーケティングプラットホームの開発に携わって頂きます。
【Python】オンライン会議サービス開発案件
業務委託(フリーランス)
JavaScriptPythonCSSHTMLLinuxMacOSAWSAzureGoogle Cloud Platform
作業内容 ・オンライン会議サービスの開発PJにて、
設計から実装、テストまで幅広い作業をご担当いただきます。
【AWS】SaaSシステム刷新案件
作業内容 ・下記を行っていただきます。
-Terraform、CloudFormationによるIaaS環境の整備
-GitHub Actionsなどを利用したCI/CD環境の整備
-ビッグデータ解析・集計基盤の整備
-解析基盤(Hadoopを想定)の検討/構築
【PHP/AWS】データシステム開発案件
業務委託(フリーランス)
JavaPHPPythonSQLAWSGit
作業内容 ・PHPを用いたデータシステム開発案件に携わっていただきます。
・主に下記業務をご担当いただきます。
-ビッグデータ基盤システムの構築
-詳細設計以降の実務開発業務
【Python/AWS】データシステム開発案件
業務委託(フリーランス)
JavaPHPPythonSQLAWSGit
作業内容 ・Pythonを用いたデータシステム開発案件に携わっていただきます。
・主に下記業務をご担当いただきます。
-ビッグデータ基盤システムの構築
-詳細設計以降の実務開発業務
【Python/Scala/Java】ビッグデータ向け基盤構築案件
業務委託(フリーランス)
JavaPythonSQLScalaNode.jsHadoopSparkAWSHive
作業内容 ・各社が保有するデータのヒアリングと整理、および解決すべき問題の要件化から、
様々なプラットフォームの構築、運用までをご担当いただきます。
・様々な保持データを掛け合わせた設計・抽出・転送のフロー構築や、
スケーリングやコストを意識したクラウド環境の構築にも携わっていただきます。
【Python】広告システム/機械学習/データマイニング案件
業務委託(フリーランス)
JavaScriptPythonRubyHTML5LinuxPostgreSQLHadoopRailsSparkAWSDockerApacheCSS3GitHubReactHive
作業内容 ・月間で数億リクエストある広告システムで、
ログ、各種デモグラフィック情報、アクション情報などをもとに、
データマイニングおよび機械学習に携わって頂きます。
・設計から幅広く担当して頂きます。
※担当範囲は、スキルや経験および進捗状況により変動いたします。
【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件
業務委託(フリーランス)
JavaPythonKubernetes
バックエンドエンジニア
作業内容 現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。
PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。
データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 (SSL化対応、AD認証連携 etc…)
環境
オンプレサーバー (現地作業等は無し、リモートから接続)
OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…)
データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品
(サポートが付くだけのようなイメージ)
HPE Ezmeral Runtime (≒ Kubernetes)
OpenShift等に⽐べ、より純正Kubernetesに近い
構成
データレイク: HDFS, minio(≒S3), HBase
DWH: Hive or Spark
ワークフロー: NiFi or Airflow
データ加⼯: Hive, Spark (シェルスクリプト/Java or Python)
BI: Tableau, Palantir (本募集スコープの作業範囲外)
体制
アジャイル開発 (スクラム)
メンバー10名程度
デイリーで午前にスクラムミーティング有り
【AWSなど】BtoB向け AIサービス 移行プロジェクトの求人・案件
業務委託(フリーランス)
AWSAzureGoogle Cloud PlatformKubernetes
作業内容 プライベートクラウドで管理されたKubernetes環境やHadoop環境を
パブリッククラウドへ移行する。移行に伴い主に下記業務を想定
・パブリッククラウドのインフラ設計・構築
・Kubernetes コンテナ環境の設計・構築
・CI/CD、モニタリング環境の設計・構築
【Java】大規模基幹系システム基盤のシステム導入
業務委託(フリーランス)
JavaPythonRubyLinuxHadoop
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
▼案件概要
大規模基幹系システム基盤のシステム導入や更改、ベンダコントロールを
含む維持管理業務をお願いします。
システム作業より維持管理支援業務(ドキュメント作成が多い)となり
部署間調整やベンダー調整が多いです。
主な業務は下記となります。
・更改検討(方針・ドキュメント作成)
・開発・構築管理(課題管理)
・運用検討(方針・ドキュメント作成)
・移行準備(進捗管理)
RHEL、LAMP,VMwarevSphere,ESXi,KVM,SANストレージ,WindowsServer等
OpenStack,Hadoop
▼勤務地
場所:リモート可/新宿/初台
▼求める人物像
・社内外の関係者と円滑なコミュニケーションを取り、業務を遂行できる方
・適切な粒度で課題を抽象化し、解決するべき打ち手と実行策をプランニングを可能な方
・要件確認、各種調整を行うコミュニケーションスキル
▼条件
・精算:固定or140-200h
・面談:1回(WEB)
▼その他
・定時:9:00~17:30
・自宅で作業することになるためシンクライアントを
インストールするPCの準備をご検討下さい。
・稼動は非常に安定しています(2月現在平均140-150h)
※週5日〜OKの案件です!
【Python】DMPにおけるバッチ開発支援案件
業務委託(フリーランス)
PythonRubyPerlLinuxMySQLHadoopAWSGit
作業内容 ・DMP(データマネジメントプラットフォーム)の、
ビッグデータを処理するバッチ開発をご担当頂きます。
【Ruby/Go】CE(カスタマーエンゲージメント)プラットフォームのソフトウェアエンジニア
業務委託(フリーランス)
JavaRubyGoAWSReactGoogle Cloud PlatformVue.js
フロントエンドエンジニアバックエンドエンジニア
作業内容 【募集背景・課題】
世界で最も価値のあるマーケティングソリューションを実現する
【Java/JavaScript】統合デジタルマーケティングツール開発案件
業務委託(フリーランス)
JavaJavaScriptLinuxHadoop
作業内容 ・アクセス解析や、A/Bテスト等の統合デジタルマーケティングツール
の開発に携わっていただきます。
・現在スクラムで開発中で、スキルやご経験に応じて要件定義~テストまでご担当いただきます。
【Python/TypeScript】AI/データ分析アプリ開発案件
業務委託(フリーランス)
PythonTypeScript
作業内容 ・大手企業のグループ内にある各事業会社の要件を実現していくため、
アプリ開発に携わって頂きます。
・HadoopやSparkなどの技術を使いながらPoCを回して頂きます。
・モックやプロトタイプの開発から実運営での検証など、PDCAを回し、
投資判断でGoが出たものは、システム開発を行う流れで進めます。
・ご経験がある方は、
アーキテクチャ設計や技術選定などを併せて依頼されることがございます。
※担当範囲は、スキルや経験および進捗状況により変動いたします。
【AWS】広告システム/インフラ設計構築運用案件
業務委託(フリーランス)
JavaScriptPythonRubyJSONHTML5LinuxPostgreSQLHadoopRailsAWSDockerApacheCSS3GitHubReactHive
インフラエンジニアサーバーエンジニア
作業内容 ・数万QPSの配信やビックデータに関わるDMPにおいて、
AWSをメインとしたインフラに携わって頂きます。
・設計から幅広く担当して頂きます。
・主な業務は下記の通りです。
-データ基盤のインフラ運用
-サーバの設計や構築および運用
※担当範囲は、スキルや経験および進捗状況により変動いたします。
VMwareEsxi, Linux基盤の維持管理 サーバーエンジニア(基幹系)
WindowsLinuxHadoopOpenStackESXiVMware
サーバーエンジニア
作業内容 複数名が在籍するチームに参画して頂き、連携しながら
複数存在する基幹系システム基盤の更改、EOL(End Of Life)、
EOS(End Of Service)に関して関係部署と調整し
個々の業務調整・推進をお願いします。
実作業は関係部署が行うことになります。
業務調整・推進の中心の業務になるためWBS(Work Breakdown Structure)を
関係部署と検討・調整し作成し、進捗管理と推進を行います。
主な業務は下記となります。
・WBS作成
・進捗管理
・関係部署が行う業務推進
・更改検討(方針・ドキュメント作成)
・開発・構築管理(課題管理)
・運用検討(方針・ドキュメント作成)
・移行準備(進捗管理)
<環境>
RHEL, LAMP, VMware vSphere, ESXi, KVM, SANストレージ, WindowsServer等
OpenStack, Hadoop
<備考>
テレワークあり
<基本時間>
9:00~17:30
【React/Node.js】WEB広告開発案件
業務委託(フリーランス)
JavaScriptNode.jsNginxReact
フロントエンドエンジニアサーバーサイドエンジニア
作業内容 ・React、Node.jsを用いたWEB広告開発に携わっていただきます。
・主に開発工程をご担当いただきます。
【DB】大手広告代理店のデジタル広告におけるクリエイティブを、大量に蓄積されたデータとAIを駆使して改善するサービスの開発
業務委託(フリーランス)
PythonSQLScalaHadoopSparkBigQuery
作業内容 ・データサイエンティストと協働したAIプロジェクトの推進
・画像や動画など、広告クリエイティブにおけるデータ処理、学習モデル化
・最適化アルゴリズム、外部ツール連携、データ解析など、必要アセットの調査研究・検証
・AIを駆使し、現広告業務へ付加価値をつける機能・システムの考案・開発
・機械学習モデルのサービング
大規模なデジタル広告データをバックグラウンドに、データ処理の分散化や、画像・動画の解析、機械学習と組み合わせたアプリケーション開発や学習モデルの管理を行って頂きます。