Hadoopのフリーランス案件・求人一覧 | 7ページ目

作業内容 エンドクライアントを支援するサービスのダッシュボードのデータベース設計、API開発、ETL処理の開発をする業務をお願いします。 [具体的な業務] ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・git flowベースの開発進行

作業内容 ・クラウドインフラ設計において 　既存設計書の焼き直しを行っていただきます｡ ・運用構築において下記を行っていただきます｡ -web画面によるユーザ追加および削除 -テキストファイルの内容比較 -リーダーのアシスタント(会議出席、スケジュール調整) ・構築済みのシステムの焼き直しを行っている過程で、 　設定を新システムへ修正する下記を行っていただきます。 -ユーザー追加 -システムの事業展開用資料の作成

作業内容 ・主に設計から結合試験までをご担当いただきます。 ・ご経験によってご担当範囲を調整いたします。

作業内容 自社にて受託している案件が多数あるため、ご希望や案件適正を加味し、 作業していただく内容を決定いたします。 主に受託している案件は、ECサイト構築や、Web、業務系の開発案件となります。

作業内容 [ポジション]：AIエンジニア 自社で探索型BIツールを開発しており、そこにおける人材を募集 ・検索・機械学習エンジンの開発・実装、および性能改善 ・自然言語処理を使用した検索エンジンの開発 ・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発

作業内容 ・データベース内ビッグデータの集計及び分析作業を行っていただきます。 ・下記をご担当いただきます。 -エンジンプログラムのカスタマイズ -SQLによるデータ集計

作業内容 ・社内向けのKPIツール、ログ収集ツール、 　集計クエリー等の作成をご担当して頂きます。 ※担当範囲は、本人希望やスキルおよび進捗状況により変動いたします。

作業内容 ・インターネット広告プラットフォームの開発に携わっていただきます。 ・フルスタックに作業していただく事を想定しております。

作業内容 自社開発のデジタルマーケティングプラットホームの開発に携わって頂きます。

作業内容 ・オンライン会議サービスの開発PJにて、 　設計から実装、テストまで幅広い作業をご担当いただきます。

作業内容 ・PHPを用いたデータシステム開発案件に携わっていただきます。 ・主に下記業務をご担当いただきます。 　-ビッグデータ基盤システムの構築 　-詳細設計以降の実務開発業務

作業内容 ・Pythonを用いたデータシステム開発案件に携わっていただきます。 ・主に下記業務をご担当いただきます。 　-ビッグデータ基盤システムの構築 　-詳細設計以降の実務開発業務

作業内容 ・データサイエンティストと協働したAIプロジェクトの推進 ・画像や動画など、広告クリエイティブにおけるデータ処理、学習モデル化 ・最適化アルゴリズム、外部ツール連携、データ解析など、必要アセットの調査研究・検証 ・AIを駆使し、現広告業務へ付加価値をつける機能・システムの考案・開発 ・機械学習モデルのサービング

作業内容 ・下記を行っていただきます。 -Terraform、CloudFormationによるIaaS環境の整備 -GitHub Actionsなどを利用したCI/CD環境の整備 -ビッグデータ解析・集計基盤の整備 -解析基盤(Hadoopを想定)の検討/構築

作業内容 ・各社が保有するデータのヒアリングと整理、および解決すべき問題の要件化から、 　様々なプラットフォームの構築、運用までをご担当いただきます。 ・様々な保持データを掛け合わせた設計・抽出・転送のフロー構築や、 　スケーリングやコストを意識したクラウド環境の構築にも携わっていただきます。

作業内容 ・月間で数億リクエストある広告システムで、 　ログ、各種デモグラフィック情報、アクション情報などをもとに、 　データマイニングおよび機械学習に携わって頂きます。 ・設計から幅広く担当して頂きます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。

作業内容 現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 （SSL化対応、AD認証連携 etc…) 　　　 環境 オンプレサーバー (現地作業等は無し、リモートから接続) OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…) データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品 (サポートが付くだけのようなイメージ) HPE Ezmeral Runtime (≒ Kubernetes) OpenShift等に⽐べ、より純正Kubernetesに近い 構成 データレイク: HDFS, minio(≒S3), HBase DWH: Hive or Spark ワークフロー: NiFi or Airflow データ加⼯: Hive, Spark (シェルスクリプト/Java or Python) BI: Tableau, Palantir (本募集スコープの作業範囲外) 体制 アジャイル開発 (スクラム) メンバー10名程度 デイリーで午前にスクラムミーティング有り

作業内容 ・DMP（データマネジメントプラットフォーム）の、 　ビッグデータを処理するバッチ開発をご担当頂きます。

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ ▼案件概要 大規模基幹系システム基盤のシステム導入や更改、ベンダコントロールを 含む維持管理業務をお願いします。 システム作業より維持管理支援業務(ドキュメント作成が多い)となり 部署間調整やベンダー調整が多いです。 主な業務は下記となります。 ・更改検討(方針・ドキュメント作成) ・開発・構築管理(課題管理) ・運用検討(方針・ドキュメント作成) ・移行準備(進捗管理) RHEL、LAMP,VMwarevSphere,ESXi,KVM,SANストレージ,WindowsServer等 OpenStack,Hadoop ▼勤務地 場所:リモート可/新宿/初台 ▼求める人物像 ・社内外の関係者と円滑なコミュニケーションを取り、業務を遂行できる方 ・適切な粒度で課題を抽象化し、解決するべき打ち手と実行策をプランニングを可能な方 ・要件確認、各種調整を行うコミュニケーションスキル ▼条件 ・精算:固定or140-200h ・面談:1回(WEB) ▼その他 ・定時:9:00~17:30 ・自宅で作業することになるためシンクライアントを インストールするPCの準備をご検討下さい。 ・稼動は非常に安定しています(2月現在平均140-150h) ※週5日〜OKの案件です！

作業内容 ・現在Hadoop環境でJavaによるデータ変換処理を実施しています。 ・今後はRedshift環境に乗せ換える予定なので同等の処理をRedshiftで実施する予定です。 ・Javaの処理をSQL等に移行するなど、Redshiftへの処理移行およびパフォーマンス検証を実施します。 ・生成AIでのソース作成、または生成したソースをベースに改善を実施します。

作業内容 プライベートクラウドで管理されたKubernetes環境やHadoop環境を パブリッククラウドへ移行する。移行に伴い主に下記業務を想定 ・パブリッククラウドのインフラ設計・構築 ・Kubernetes コンテナ環境の設計・構築 ・CI/CD、モニタリング環境の設計・構築

作業内容 ・数万QPSの配信やビックデータに関わるDMPにおいて、 　AWSをメインとしたインフラに携わって頂きます。 ・設計から幅広く担当して頂きます。 ・主な業務は下記の通りです。 　-データ基盤のインフラ運用 　-サーバの設計や構築および運用 ※担当範囲は、スキルや経験および進捗状況により変動いたします。

作業内容 　複数名が在籍するチームに参画して頂き、連携しながら 　複数存在する基幹系システム基盤の更改、EOL（End Of Life）、 　EOS（End Of Service）に関して関係部署と調整し 　個々の業務調整・推進をお願いします。 　実作業は関係部署が行うことになります。 　業務調整・推進の中心の業務になるためWBS（Work Breakdown Structure）を 　関係部署と検討・調整し作成し、進捗管理と推進を行います。 　主な業務は下記となります。 　・WBS作成 　・進捗管理 　・関係部署が行う業務推進 　・更改検討（方針・ドキュメント作成） 　・開発・構築管理（課題管理） 　・運用検討（方針・ドキュメント作成） 　・移行準備（進捗管理） ＜環境＞ RHEL, LAMP, VMware vSphere, ESXi, KVM, SANストレージ, WindowsServer等 OpenStack, Hadoop ＜備考＞ テレワークあり ＜基本時間＞ 9：00～17：30

作業内容 ・大手企業のグループ内にある各事業会社の要件を実現していくため、 　アプリ開発に携わって頂きます。 ・HadoopやSparkなどの技術を使いながらPoCを回して頂きます。 ・モックやプロトタイプの開発から実運営での検証など、PDCAを回し、 　投資判断でGoが出たものは、システム開発を行う流れで進めます。 ・ご経験がある方は、 　アーキテクチャ設計や技術選定などを併せて依頼されることがございます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。

作業内容 【募集背景・課題】 世界で最も価値のあるマーケティングソリューションを実現する

作業内容 ・アクセス解析や、A/Bテスト等の統合デジタルマーケティングツール 　の開発に携わっていただきます。 ・現在スクラムで開発中で、スキルやご経験に応じて要件定義～テストまでご担当いただきます。

作業内容 ・データサイエンティストと協働したAIプロジェクトの推進 ・画像や動画など、広告クリエイティブにおけるデータ処理、学習モデル化 ・最適化アルゴリズム、外部ツール連携、データ解析など、必要アセットの調査研究・検証 ・AIを駆使し、現広告業務へ付加価値をつける機能・システムの考案・開発 ・機械学習モデルのサービング 大規模なデジタル広告データをバックグラウンドに、データ処理の分散化や、画像・動画の解析、機械学習と組み合わせたアプリケーション開発や学習モデルの管理を行って頂きます。

作業内容 ・現在Hadoop環境でJavaによるデータ変換処理を実施しています。 ・今後はRedshift環境に乗せ換える予定なので同等の処理をRedshiftで実施する予定です。 ・Javaの処理をSQL等に移行するなど、Redshiftへの処理移行およびパフォーマンス検証を実施します。 ・JavaソースのRedshiftソースへの変換は生成AI（Copilot、ChatGPT等）も検討中です。 ・生成AIでのソース作成、または生成したソースをベースに改善を実施します。

作業内容 ・BtoB （AI診断）サービス開発に携わっていただきます｡ ・下記を行っていただきます｡ 　-UIUXの設計構築からサービス実装 　-ご希望に応じてフルスタックに関わっていただきます。

作業内容 ・全プロダクトのデータ処理基板・データウェアハウスの設計、構築 　並びにデータ連携部分の設計、構築業務に携わっていただきます。

作業内容 ・中部LCS Snowflake化対応に携わっていただきます。 ・主に以下作業をご担当いただきます。 　ｰ基本設計 　ｰ詳細設計 　ｰ製造 　ｰ単体試験 　ｰ結合試験

作業内容 ・React、Node.jsを用いたWEB広告開発に携わっていただきます。 ・主に開発工程をご担当いただきます。

作業内容 アドテクノロジー/デジタルマーケティングの領域において、 最先端のテクノロジーを活用し、国内No1規模へ拡大し、順調にシェアを伸ばしています。 社員と業務委託のすみ分けもなく、自主的に動ける方を今回求めています。 ご参画頂いた際は、PC貸与します。 【開発環境】 開発言語:Go,Python3,Scala,Java データベース:MySQL,DynamoDB,Aerospike,HBase インフラ:AWS OS本番環境:debian,ubuntu 開発環境:macOS コミュニケーションツール:Slack,Confluence,Jira,GoogleWorkspace プロジェクト管理:GitLab その他:RabbitMQ,nginx,td-agent 　

作業内容 ・社内のデータを一元管理するビッグデータ収集/分析基盤における、 　保守、改修業務を行っていただきます。 ・具体的な業務としては下記となります。 　-各種ミドルウェアのバージョンアップや、パラメータチューニング、バグFIX等 　-Ansibleを使った構成管理 　-サーバの構成管理、監視、障害対応など

作業内容 ・サービス企画担当、サービス開発エンジニアや 　データサイエンティストと連携いただきます｡ ・下記を行っていただきます｡ ｰデータウェアハウスの構築、運用 ｰプロダクトマネージャー、 　データサイエンティストが利用する分析システムの設計、開発、運用 ｰWebサービスの各種KPI分析に対するエンジニアリング面でのサポート

作業内容 ・アドテク及びユーザー向けメディアのインフラ設計、構築、 　保守業務をお任せします。 ・仮想サーバ、ミドルウェア、データセンター、 　クラウド等の運用管理業務もご対応いただきます。

作業内容 ・アドテク及びユーザー向けメディアのインフラ設計、構築、 　保守業務をお任せします。 ・仮想サーバ、ミドルウェア、データセンター、 　クラウド等の運用管理業務もご対応いただきます。

作業内容 ・AWS上に、AIを用いた音声認識/ユーザへのレコメンドのための 大規模システム（APIゲートウェイ、Web/APサーバ、DBサーバ、 その他運用サーバ等）を構築する。 ・アークテクチャの検討から、基本設計、詳細設計、構築、試験、 運用引継ぎまで実施する。 【作業環境】 ・AWS（EC2/Aurora/S3/IAM/Kinesis など） ・Linux ・Apache/Nginx/Resin ・Tomcat ・Zabbix ・DeepSecurity

作業内容 ・DSPのアプリケーション全体や新規実装/各種改修等をご担当頂きます。 ・実装に関して仕様書等はほぼ存在せず、 　常に仮説ベースから実装がスタートしていきます。

作業内容 ・Javaを用いたIoTデバイス開発基盤構築案件に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-移行 　-コンテナ化支援 　-テスト 　-修正 　-改修 　-機能追加 　-運用面対応