Hadoopのフリーランス案件・求人一覧

作業内容 クライアントが保有するビッグデータの利活用を進めていくにあたりAWSでのデータの加工、修正をお願いいたします。

作業内容 ・データエンジニアと緊密に連携して、バッチおよびリアルタイムデータ処理用のデータパイプラインの構築と最適化 ・ データサイエンティストやアナリストと協力して、データへのアクセスを容易にし、 高度な分析や機械学習プロジェクトをサポートします。 【概要】 ・さまざまなサービスと実装パターンを活用し、安全でスケーラブルかつコスト効率に優れたエンタープライズアーキテクチャを設計から実装を目指します。 具体的には、さまざまなデータワークロードと分析ニーズをサポートするために、 データの取り込み、保存、処理、消費のためのソリューション設計になります。

作業内容 ・サービス内(App/Web)におけるユーザーの活動分析 ・機能分析や、サービス内のファネル分析、ユーザー別の活動分析等の幅広な分析を実施 ・データを依頼してのその直接提示というより、持つ仮説を強化あるいは反証するデータを幅広に検証したり、そこから必要な取得データや分析を提案し回答や示唆を提供する ・必要情報を取得する際の開発チームへの依頼や要件の伝達(イベントの発火組み込みや、新機能における分析必要項目のDevチームへの連絡や埋め込み依頼等) ※海外とのやり取りが発生するため英語の読み書きが頻出します(担当業務によっては英会話の必要性も有り) ＜業務詳細＞ ・分析基盤整備 　└ダッシュボードの作成（KPIツリー、目的別ボード） 　└ユーザー行動の可視化（推移、利用特性） 　└分析基盤整備の推進（データ取得の推進、課題点洗い出し） ・分析 　└データを用いた仮説検証（機能、UI改善、施策） 　└ユーザー行動（数値化、可視化、セグメント分類） 　└効果検証（広告、キャンペーン、メールマガジン等） 　└得られたデータを元にしたインサイトの提供 　　　　 ＜使用ツール＞ ・開発言語：Go ・インフラ環境：Google Cloud、Cloud Spanner、Cloud Function、Cloud Run、BigQuery ・ソースコード管理：GitHub ・CI/CD：CircleCI, Cloud Build ・監視/モニタリング：Google Cloud Logging, Google Cloud Monitoring ・インシデント管理：PagerDuty ・コミュニケーション：Slack, Google Meet ・プロジェクト管理/ドキュメント：JIRA/Confluence/DocBase

作業内容 ■案　件：【データアナリスト】大手エンタメ事業　サービス内(App/Web)におけるユーザーの活動分析 ■内　容： ・サービス内(App/Web)におけるユーザーの活動分析 ・機能分析や、サービス内のファネル分析、ユーザー別の活動分析等の幅広な分析を実施 ・データを依頼してのその直接提示というより、持つ仮説を強化あるいは反証するデータを幅広に検証したり、そこから必要な取得データや分析を提案し回答や示唆を提供する ・必要情報を取得する際の開発チームへの依頼や要件の伝達(イベントの発火組み込みや、新機能における分析必要項目のDevチームへの連絡や埋め込み依頼等) ※海外とのやり取りが発生するため英語の読み書きが頻出します(担当業務によっては英会話の必要性も有り) ＜業務詳細＞ ・分析基盤整備 　└ダッシュボードの作成（KPIツリー、目的別ボード） 　└ユーザー行動の可視化（推移、利用特性） 　└分析基盤整備の推進（データ取得の推進、課題点洗い出し） ・分析 　└データを用いた仮説検証（機能、UI改善、施策） 　└ユーザー行動（数値化、可視化、セグメント分類） 　└効果検証（広告、キャンペーン、メールマガジン等） 　└得られたデータを元にしたインサイトの提供

作業内容 ■概要 在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入を実施。 ■具体的な作業内容 ・リーダー：1名(Hadoop有識者、テックリード) ・SIer内Hadoopスペシャリストに相談可能。 ・オフショアメンバー(中国)側と連携して進める。

作業内容 ■概要 某大手通信事業者／Hadoop環境移行PMO支援をお任せいたします。 ■具体的な作業内容 ・Hadoop環境移行及び現行/新規にて発生する障害に対するPMO支援 ・ユーザー側PMOチームメンバー ・クラスタ運用に伴う課題解決 ・スケジュール、課題の管理、ステークホルダー調整

作業内容 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守

作業内容 ・node.js でのAPI設計・開発・テスト ・Hiveクエリの作成・テスト・チューニング ・Spark プログラムの設計・開発・テスト ・Jenkinsジョブの作成 ・Ansible設定ファイルの作成

作業内容 ■概要 某株式会社にて、Hiveを使用して、社内の大量データに対してデータ取得を行うデータサイエンティストに近い業務となります。 ■具体的な作業内容 ・データ取得ジョブの新規作成、改修(主なツールとしてTalendを使用) ・Hadoop - Teradata間のデータ整備 ・MySQL等のデータベース間とのデータ整備

作業内容 在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入

作業内容 業務内容：世界中から集まる製薬データの分析 メインフレームシステムのダウンサイジング

作業内容 大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト 新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

作業内容 某大手金融事業社内でのビックデータ案件になります。 現在稼働しているHadoop環境の運用、保守に加え、 7月から新規機能の開発などがスタートするため、 人員の増員を計画しております。 データ分析は別チームが存在しますので、あくまで分析を行うための 環境構築を行って頂くポジションとなりますが、現場の状況、 また適正次第では分析業務にも関わっていただく可能性がございます。 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発 ・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守

作業内容 通信会社向けのセキュリティプラットフォーム基盤をOSSを利用して 新規構築する案件となります。各種製品ログをデータレイクに蓄積し、 リアルタイムなアラート検知、およびインタラクティブな集計／分析を 可能とするプラットフォームの構築案件です。

作業内容 ■概要 某大手通信事業者／Hadoop基盤データマネジメント支援をお任せいたします。 ■具体的な作業内容 ・データマネジメント全般を支援できるITD ・データガバナンス運用管理・システム導入、開発委託先管理業務、及びデータ活用業務

作業内容 大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）【開発環境】 ・Java ・Hadoop(Cloudera) ・Apache kafka ・Apache spark ・Kubernetes/OpenShift/vCenter

作業内容 大規模データ収集基板構築（オンプレにて構築）に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。・新環境（分散FS環境）向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）、運用機能の開発 開発環境 ・Java・Hadoop(Cloudera)・Apache kafka・Apache spark・Kubernetes/OpenShift/vCenter

作業内容 データ分析サイトの機能追加 【工程】：・システム仕様の英訳 ・オフショア対応（欧州） 【環境】：Linux、Apache、Tomcat、PHP、MySQL、Hadoop

作業内容 顧客ビックデータ組織のR＆Dチームに配属 業務側との調整をしながら、顧客要望を取り入れ 最適なサービスを設計・構築・運用していくミッション

作業内容 tableauを使用して、セルフサービスBIツールの開発～保守業務までを行っていただ きます。 また、既存DWH基盤での保守業務もございますので、スキルに合わせて業務をお任せ いたします。 (DWHで使用しているアーキテクチャはhadoop) DB周りの運用保守経験があると確度高めになります。

作業内容 データベース内ビッグデータの集計及び分析作業 データ分析システムの構築/分析データの評価/報告レポートの作成

作業内容 データ分析基盤の開発・構築を行なっていただきます。

作業内容 オンライン・オフラインのデータをクラウド環境で統合して分析できる基盤構築を行うための環境構築、ETL設計・開発、データ抽出を行います。 データを効果的・効率的に活用するための基盤を構築する戦略的なポジションになります。 クラウド環境：AWS

作業内容 パッケージ製品へのAI関連の機能の 拡充を検討されており、その開発のご支援となります。 具体的には、 ・機械学習を用いた処理の最適化機能 ・画像認識機能、OCR機能 ・音声での対話入出力機能 が初期スコープとなっております。

作業内容 ■業務内容 （1）Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯ （2）HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化 （3）Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装 稼　働：週2日~5日　相談可能 時　間：9：30 - 18：30(応相談) 服　装：ビジネスカジュアル・私服

作業内容 ■概要 データアナリスト業務(SQL、ビッグデータ周り)をお任せいたします。 ■具体的な作業内容 主に以下の分析関連業務を担当して頂きます。 ・社内外からの依頼に基づく集計/可視化の要件定義と仕様設計 ・SQLを用いたビッグデータの加工および集計、ダッシュボードの作成 ・分析結果のレポーティング なお業務にあたって、各企画担当者、他データアナリスト、ゲームエンジニアとコミュニケーションを取りながら進めて頂きます。"

作業内容 大手サービス企業のビッグデータ部で進めているカスタマのクリックストリームデータの収集・整形、分析システムの開発にご参画いただけるエンジニアを募集いたします。カスタマの行動ログからアクセス時間やデバイス、閲覧コンテンツを元に性別、年代のような属性を推定し、分析に活用するシステムの構築・開発をご担当いただきます。

作業内容 ・Hadoopなどに格納されている大規模データの加工、変数作成処理データ分析者と一緒に業務を行い、プログラミング観点などで、分析者にアドバイスを行う。演算処理の自動化するための計画、実装業務も担当・チームの業務としては、アプリ実装の業務が中心だが、AWSなどで一時的に自チーム用のサーバを立てたりクラスタを運用したりという事があるので、インフラの経験が有るとなお可です。

作業内容 稼働中の大規模データの分析基盤に対するPythonプログラムの追加改修及び運用

作業内容 ■概要 某社が手掛けるゲーム事業の分析基盤の開発及び運用でご活躍頂きます。 ■具体的な作業内容 ・分析基盤はBigQuery、Apache Airflowなどのサービスを利用します ・設計から運用までご自身の裁量で開発をすることができます ・企画担当者やインフラ担当者とコミュニケーションを取りながら進めて頂きます