【Hadoop】情報サイトデータ分析基盤構築案件
業務委託(フリーランス)
PHPRubyHadoopBigQuery
作業内容 ・不動産・住宅情報サイト並びに、関連サイトのデータを集計・分析、
データ分析基盤の構築に携わって頂きます。
・具体的に下記の作業を担当頂きます。
-サイトのトランザクションログを大規模分散処理で解析し、
アクセス解析及びデータマイニング等の視点からBIツールを利用してレポーティング
-社内各部署で利用できるようなツールの詳細設計から構築
-必要なログを取得するためのサイト改修、個別のデータ抽出等の作業
-各種分析を行うためのオープンソースソフトウェアの調査・導入 等
【Hadoop・Hive】大規模データ解析/分析案件
業務委託(フリーランス)
JavaScriptPythonRubySQLPerlRLinuxMySQLRedisHadoopAWSNginxUnicornMemcacheGitHubHive
データサイエンティスト
作業内容 ・世界展開されている大規模なゲーム、
及びWebサービスのデータ分析/解析や運用管理に携わって頂きます。
・データ分析/解析環境の設計から幅広く担当頂きます。
・開発手法は、スクラムです。
・開発フローは、GitHub FlowをベースにPull Requestを活用してます。
・主な業務
データ分析/解析の基盤やツールの開発
データ分析/解析のスクリプト記述
データ分析/解析の結果に基づいた改善や新規サービスの立案
※担当範囲は、経歴やスキルおよび進捗状況により変動いたします。
【Java】スマートフォン向け広告効果測定ツールサーバサイド開発案件
業務委託(フリーランス)
JavaPHPScalaLinuxMySQLCassandraHadoopStrutsSeasar2AWSEclipseSubversionLaravelCentOS
アプリケーションエンジニア
作業内容 ・広告効果測定ツールの開発を担当して頂きます。
・配信機能や検索周りの機能など、広告関係全般の開発に携わって頂きます。
【Scala】スマートフォン向け広告効果測定ツールサーバサイド開発案件
業務委託(フリーランス)
ScalaLinuxMySQLHadoopSpringAWSEclipseGitSubversion
作業内容 ・国内・海外でのサービス展開をさらに強固な
ものにするための、全体設計やディレクションや
新機能の設計・開発、運用を行なっていただきます。
・スマートフォン広告の新規Webシステム開発を
ご担当いただきます。
・広告効果測定ツールの開発を担当していただきます。
・配信機能や検索周りの機能など、広告関係全般の
開発に携わって頂きます。
【データ分析】データエンジニア
業務委託(フリーランス)
HadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティスト
作業内容 案件内容:
①某大手通信会社販促システム開発
②某大手小売・流通のシステム開発
③広告や社内プロダクトの開発
上記いずれかにおいてデータエンジニア業務に従事いただきます。
【SQL/Python】システム開発データエンジニア案件
業務委託(フリーランス)
PythonSQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・データエンジニアとして、下記のいずれかをご対応いただきます。
‐通信会社販促システム開発
‐小売/流通のシステム開発
‐広告や社内プロダクトの開発
大規模WebサービスDB移行案件
業務委託(フリーランス)
PHPLinuxMySQLMongoDBAWS
データベースエンジニア
作業内容 ・秒間3000件のデータが飛び交う広告システムの、
データベースの移行をご担当いただきます。
【DB】手数料計算システム開発案件
業務委託(フリーランス)
LinuxHive
データベースエンジニア
作業内容 ・手数料計算システムの開発をご担当いただきます。
・ストアドプロシージャを用いて、設計からテストまでをご担当いただきます。
【Ruby/React.js】広告配信系システム開発案件
業務委託(フリーランス)
JavaPythonRubyScalaLinuxMySQLHadoopRailsReactGoogle Cloud Platform
作業内容 ・広告配信システムの下記業務をお任せします。
-広告主が使用する管理画面の開発
-DMPシステムの配信との連携部分の開発
-BigQueryを用いたログ解析
-オンプレミスからGCPへの移行
-Hadoopを用いた並列処理
・ご経験、ご意向、タイミングに応じて、React.jsとRubyを用いた開発を
ご対応いただきます。
・RSpecやAnsibleを用いたテストの自動化もご対応いただきます。
【Ruby】オンライン英会話サービスデータ分析基盤構築案件
業務委託(フリーランス)
JavaPythonRubySQLScalaLinuxMySQLNode.jsHadoopSparkGitGitHubBigQueryHiveTreasure Data
データベースエンジニアサーバーサイドエンジニア
作業内容 ・リリース済みのオンライン英会話サービスにおいて、
基盤エンジニアリングから分析、研究開発までを担当するグループで、
TreasureDataやBigQueryを活用したデータ分析基盤開発・運用を
行っていただきます。
・本サービスが保持する大量学習データと、機械学習を活用したレコメンドや
動画内情報検索機能などの新規機能開発もご担当いただきます。
【Python/AWS/フルリモート可能】調剤薬局向けサービス管理ツールの案件・求人
業務委託(フリーランス)
PythonHadoopSparkAWS
作業内容 ===========
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・日本語ビジネスレベル必須
・週5日稼働必須
・実務経験3年以上必須
===========
◆業務概要
・RDBのデータベース設計
・GlueJobでPythonを利用したETL処理の設計・開発
・APIGateway、Lambdaを利用したAPI開発
調剤薬局向けサービスを複数提供している企業にてサービスを総括的に管理する管理コンソールの開発業務をご担当頂きます。
管理コンソールに必要な機能の集約、追加実装等をお願い致します。
◆就業形態について
現状、開発メンバーのほとんどはフルリモートにて業務を行っております。
週に何日かご出社をご希望の際にはご相談ください。
◆補足
現場チームについては、
様々な分野での経験を持つ少数精鋭のメンバーが集まっております。
他部署を含め業務委託のエンジニアも複数名在籍しており、社員エンジニアと垣根のない働きやすい環境です。
【Python/AWS】テレビ局向け大規模データシステム構築案件
業務委託(フリーランス)
JavaPHPPythonSQLGoRedisHadoopAWSGitJenkinsMemcacheChefAnsibleHive
作業内容 ・ビッグデータ基盤システムの開発をご担当いただきます。
・主に大規模データを処理するための
クラウドインフラ・アプリケーションソフトの構築から、
オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを
一貫で担っているチームで作業いただきます。
・ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等を
ご担当いただきます。
【Python/AWS】テレビ局向け大規模データシステム構築案件
業務委託(フリーランス)
JavaPHPPythonSQLGoRedisHadoopAWSDockerGitJenkinsMemcacheChefAnsibleHive
作業内容 ・ビッグデータ基盤システムの開発をご担当いただきます。
・主に大規模データを処理するための
クラウドインフラ・アプリケーションソフトの構築から、
オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを
一貫で担っているチームで作業いただきます。
・ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等を
ご担当いただきます。
【DB/リモート】大量に蓄積されたデータとAIを駆使して改善するサービスの開発を担当
業務委託(フリーランス)
PythonSQLScalaHadoopSparkBigQuery
作業内容 ・データサイエンティストと協働したAIプロジェクトの推進
・画像や動画など、広告クリエイティブにおけるデータ処理、学習モデル化
・最適化アルゴリズム、外部ツール連携、データ解析など、必要アセットの調査研究・検証
・AIを駆使し、現広告業務へ付加価値をつける機能・システムの考案・開発
・機械学習モデルのサービング
【AWS】大規模広告システム/インフラ設計構築運用案件
業務委託(フリーランス)
JavaScriptScalaLinuxMacOSMySQLRedisMongoDBHadoopAWSNginxGitCoffeeScriptSassRedmineGitHubChefAnsible
データサイエンティスト
作業内容 ・大規模広告システムのインフラに携わって頂きます。
・設計から幅広く担当して頂きます。
・主な業務は下記の通りです。
-インフラの運用、監視、障害対応、チューニング
-Linuxサーバおよびミドルウェアの構築や運用
-アプリケーションのデプロイや運用
- ネットワーク管理
-問い合わせ対応
※担当範囲は、スキルや経験および進捗状況により変動いたします。
データ加工処理マイグレーション検討
HadoopSparkAWSApacheSnowflakeGlue
作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。
現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。
現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。
※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ
クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。
現在想定しているマイグレーション例は、以下の通りです。
-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換
→Databricks、Snowflake(Snowpark)、AWS(Glue,EMR)等の
Spark関連マネージド・サービスにマイグレーション
<就業時間>
9:00ー18:00
※※こちらの案件は現在募集を終了しております※※
New【Python】バックエンドエンジニアの求人・案件
業務委託(フリーランス)
PythonHadoopSparkAWS
バックエンドエンジニア
作業内容 エンドクライアントを支援するサービスのダッシュボードのデータベース設計、API開発、ETL処理の開発をする業務をお願いします。
[具体的な業務]
・RDBのデータベース設計
・Glue JobでPythonを利用したETL処理の設計・開発
・API Gateway、Lambdaを利用したAPI開発
・技術的知見からの、プロダクトオーナと協調した仕様策定
・AWS関連リソースのより積極的な活用
・git flowベースの開発進行
【Java】各種通信機器ログ収集及び開発案件
業務委託(フリーランス)
JavaSQLShellPL/SQLOraclePostgreSQLSQL ServerHadoopHive
作業内容 ・主に設計から結合試験までをご担当いただきます。
・ご経験によってご担当範囲を調整いたします。
【PHP】Web、業務系システム開発案件
業務委託(フリーランス)
JavaPHPLinuxPostgreSQLHadoopCakePHPLaravel
作業内容 自社にて受託している案件が多数あるため、ご希望や案件適正を加味し、
作業していただく内容を決定いたします。
主に受託している案件は、ECサイト構築や、Web、業務系の開発案件となります。
【Unix/Linux】行動分析/混雑統計案件
業務委託(フリーランス)
JavaSQLLinuxUnixHadoopSparkAWS
インフラエンジニアサーバーエンジニアデータベースエンジニア
作業内容 ・データベース内ビッグデータの集計及び分析作業を行っていただきます。
・下記をご担当いただきます。
-エンジンプログラムのカスタマイズ
-SQLによるデータ集計
【Python/AIエンジニア】探索型BIツール開発におけるデータサイエンティスト
業務委託(フリーランス)
PythonHadoopSparkTableau
データサイエンティストAIエンジニア機械学習エンジニア
作業内容 [ポジション]:AIエンジニア
自社で探索型BIツールを開発しており、そこにおける人材を募集
・検索・機械学習エンジンの開発・実装、および性能改善
・自然言語処理を使用した検索エンジンの開発
・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発
【Linux】クラウドインフラ設計/運用構築案件
業務委託(フリーランス)
LinuxHadoop
インフラエンジニアサーバーエンジニア
作業内容 ・クラウドインフラ設計において
既存設計書の焼き直しを行っていただきます。
・運用構築において下記を行っていただきます。
-web画面によるユーザ追加および削除
-テキストファイルの内容比較
-リーダーのアシスタント(会議出席、スケジュール調整)
・構築済みのシステムの焼き直しを行っている過程で、
設定を新システムへ修正する下記を行っていただきます。
-ユーザー追加
-システムの事業展開用資料の作成
【Java】インターネット広告システム案件
業務委託(フリーランス)
JavaJavaScriptPHPHadoopjQuerySpringBoot
作業内容 ・インターネット広告プラットフォームの開発に携わっていただきます。
・フルスタックに作業していただく事を想定しております。
【PHP】デジタルマーケティングプラットホーム開発案件
業務委託(フリーランス)
JavaJavaScriptPHPPythonRubyLinuxMySQLAWSAzureDockerJenkinsGitHubChefMVCAnsible
作業内容 自社開発のデジタルマーケティングプラットホームの開発に携わって頂きます。
【Python】オンライン会議サービス開発案件
業務委託(フリーランス)
JavaScriptPythonCSSHTMLLinuxMacOSAWSAzureGoogle Cloud Platform
作業内容 ・オンライン会議サービスの開発PJにて、
設計から実装、テストまで幅広い作業をご担当いただきます。
【Ruby】社内向けKPIツール開発案件
作業内容 ・社内向けのKPIツール、ログ収集ツール、
集計クエリー等の作成をご担当して頂きます。
※担当範囲は、本人希望やスキルおよび進捗状況により変動いたします。
【AWS】SaaSシステム刷新案件
作業内容 ・下記を行っていただきます。
-Terraform、CloudFormationによるIaaS環境の整備
-GitHub Actionsなどを利用したCI/CD環境の整備
-ビッグデータ解析・集計基盤の整備
-解析基盤(Hadoopを想定)の検討/構築
【DB】大手広告代理店のデジタル広告におけるクリエイティブを、大量に蓄積されたデータとAIを駆使して改善するサービスの開発
業務委託(フリーランス)
PythonSQLScalaHadoopSparkBigQuery
作業内容 ・データサイエンティストと協働したAIプロジェクトの推進
・画像や動画など、広告クリエイティブにおけるデータ処理、学習モデル化
・最適化アルゴリズム、外部ツール連携、データ解析など、必要アセットの調査研究・検証
・AIを駆使し、現広告業務へ付加価値をつける機能・システムの考案・開発
・機械学習モデルのサービング
大規模なデジタル広告データをバックグラウンドに、データ処理の分散化や、画像・動画の解析、機械学習と組み合わせたアプリケーション開発や学習モデルの管理を行って頂きます。
データウェアハウス構築/運用案件
業務委託(フリーランス)
SQLHadoopSparkRedshiftBigQuery
データサイエンティストインフラエンジニア
作業内容 ・サービス企画担当、サービス開発エンジニアや
データサイエンティストと連携いただきます。
・下記を行っていただきます。
ーデータウェアハウスの構築、運用
ープロダクトマネージャー、
データサイエンティストが利用する分析システムの設計、開発、運用
ーWebサービスの各種KPI分析に対するエンジニアリング面でのサポート
行動解析基盤運用案件
作業内容 ・社内のデータを一元管理するビッグデータ収集/分析基盤における、
保守、改修業務を行っていただきます。
・具体的な業務としては下記となります。
-各種ミドルウェアのバージョンアップや、パラメータチューニング、バグFIX等
-Ansibleを使った構成管理
-サーバの構成管理、監視、障害対応など
【GCP/Ansible】広告配信系システムインフラ設計及び構築運用案件
業務委託(フリーランス)
JavaPHPPythonRubyGoScalaShellLinuxUnixHadoopAWSDockerGitChefGoogle Cloud PlatformAnsible
ネットワークエンジニアインフラエンジニアサーバーエンジニア
作業内容 ・アドテク及びユーザー向けメディアのインフラ設計、構築、
保守業務をお任せします。
・仮想サーバ、ミドルウェア、データセンター、
クラウド等の運用管理業務もご対応いただきます。
【GCP】広告配信系システムインフラ設計及び構築運用案件
業務委託(フリーランス)
JavaPHPPythonRubyScalaLinuxHadoopAWSGoogle Cloud Platform
ネットワークエンジニアインフラエンジニアサーバーエンジニア
作業内容 ・アドテク及びユーザー向けメディアのインフラ設計、構築、
保守業務をお任せします。
・仮想サーバ、ミドルウェア、データセンター、
クラウド等の運用管理業務もご対応いただきます。
【SQL/Pentaho】SQL バッチ開発
業務委託(フリーランス)
SQLPentaho
サーバーサイドエンジニア
作業内容 業務システム内で帳票やレポートを表示するためのバッチ開発をしていただきます。
環 境:SQL(開発言語)Pentaho(FW)、Hadoop(DB)
【PHP/AWS】データシステム開発案件
業務委託(フリーランス)
JavaPHPPythonSQLAWSGit
作業内容 ・PHPを用いたデータシステム開発案件に携わっていただきます。
・主に下記業務をご担当いただきます。
-ビッグデータ基盤システムの構築
-詳細設計以降の実務開発業務
【Python/AWS】データシステム開発案件
業務委託(フリーランス)
JavaPHPPythonSQLAWSGit
作業内容 ・Pythonを用いたデータシステム開発案件に携わっていただきます。
・主に下記業務をご担当いただきます。
-ビッグデータ基盤システムの構築
-詳細設計以降の実務開発業務
【Python】広告システム/機械学習/データマイニング案件
業務委託(フリーランス)
JavaScriptPythonRubyHTML5LinuxPostgreSQLHadoopRailsSparkAWSDockerApacheCSS3GitHubReactHive
作業内容 ・月間で数億リクエストある広告システムで、
ログ、各種デモグラフィック情報、アクション情報などをもとに、
データマイニングおよび機械学習に携わって頂きます。
・設計から幅広く担当して頂きます。
※担当範囲は、スキルや経験および進捗状況により変動いたします。
【Python/Scala/Java】ビッグデータ向け基盤構築案件
業務委託(フリーランス)
JavaPythonSQLScalaNode.jsHadoopSparkAWSHive
作業内容 ・各社が保有するデータのヒアリングと整理、および解決すべき問題の要件化から、
様々なプラットフォームの構築、運用までをご担当いただきます。
・様々な保持データを掛け合わせた設計・抽出・転送のフロー構築や、
スケーリングやコストを意識したクラウド環境の構築にも携わっていただきます。
【Python】クラウド環境上でデータ関連開発経験のある方向け!(一部リモート)データエンジニア【直接取引】
業務委託(フリーランス)
PythonHadoopSparkAWSAzureApacheGoogle Cloud Platform
PL
作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店(飲食店、小売等)が
利用するシステム(クーポン入稿、ターゲティング設定、配信効果分析など)の
データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。
<開発環境>
言語:Python (一部 Javaもあり)
フレームワーク:gRPC, OpenAPI
インフラ:AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github
クラウド:AWS
【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件
業務委託(フリーランス)
JavaPythonKubernetes
バックエンドエンジニア
作業内容 現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。
PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。
データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 (SSL化対応、AD認証連携 etc…)
環境
オンプレサーバー (現地作業等は無し、リモートから接続)
OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…)
データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品
(サポートが付くだけのようなイメージ)
HPE Ezmeral Runtime (≒ Kubernetes)
OpenShift等に⽐べ、より純正Kubernetesに近い
構成
データレイク: HDFS, minio(≒S3), HBase
DWH: Hive or Spark
ワークフロー: NiFi or Airflow
データ加⼯: Hive, Spark (シェルスクリプト/Java or Python)
BI: Tableau, Palantir (本募集スコープの作業範囲外)
体制
アジャイル開発 (スクラム)
メンバー10名程度
デイリーで午前にスクラムミーティング有り
【SQL】既存データマネジメント業務案件
業務委託(フリーランス)
SQLShellOracleHadoopAWS
作業内容 ・既存のデータマネジメント業務の課題や問題を明確にしたうえで、
顧客に対する最適解を提案、構築して頂きます。