Hadoopのフリーランス案件・求人一覧

作業内容 ・詳細設計書の執筆 ・パラメータシート作成 ・検証環境の構築 ・基盤の構築作業 ・単体/結合試験項目書の作成、テストの実施 ・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～ 地図広告プラットフォーム開発 ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎

作業内容 プライベートクラウドで管理されたKubernetes環境やHadoop環境を、パブリッククラウドへ移行します。 移行に伴い主に下記業務を想定しております。 ・パブリッククラウドのインフラ設計・構築 ・Kubernetes コンテナ環境の設計・構築 ・CI/CD、モニタリング環境の設計・構築

作業内容 ・サービスやシステム関連ログ等を分散処理基盤(Hadoop&Elasticsearch使用)へ集約し、システム運用者や分析者向けにデータ活用を実施しております。 ・基盤の構築/運用からデータ活用に伴うデータ加工処理開発など幅広く対応しておりますが、主には基盤の構築/運用がスコープとなります。

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 道路交通系開発をお任せいたします。 Hadoop上で動作する道路交通系システムの開発をご担当いただきます。 ■作業工程：詳細設計～結合テスト

作業内容 既存AWSインフラの追加開発や改修等をご担当いただきます。 大型AWSインフラシステムを学ぶことができます。 ツール： ・AWS ・SnowFlake ・RedShift

作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。 現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。 現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。 ※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ 　クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。 現在想定しているマイグレーション例は、以下の通りです。 　-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト 　-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換 　→Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）等の 　　Spark関連マネージド・サービスにマイグレーション ＜就業時間＞ 9:00ｰ18:00

作業内容 AWSクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。 Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。 ビッグデータ技術（Hadoop, Sparkなど）を用いて大規模データセットのバッチおよび、リアルタイム処理を実行します。 ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。

作業内容 プライベートクラウドで管理されたKubernetes環境やHadoop環境のパブリッククラウドへの移行をおこないます。 下記の業務をご担当いただきます。 ・パブリッククラウドのインフラ設計/構築 ・Kubernetes コンテナ環境の設計/構築 ・CI/CD、モニタリング環境の設計/構築

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～ ・Lob分析サービス開発運用 ・TVなどの操作Logをもとにランキングなどを出力するサービス開発 （AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発） ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎

作業内容 外資コンサル日本法人内でのクラウドチームへご参画いただきます。 ※エンジニアではなくコンサル枠となります。 さまざまなサービスと実装パターンを活用して、 安全でスケーラブルかつコスト効率に優れたエンタープライズアーキテクチャを設計から実装を目指します。 具体的には、さまざまなデータワークロードと分析ニーズをサポートするために、 データの取り込み、保存、処理、消費のためのソリューションを設計します。 組織の要件に応じて、アーキテクチャが高可用性、災害復旧、 およびグローバル分散向けに設計されていることが目的です。 ＜想定される作業＞ ・データエンジニアと緊密に連携し、 　バッチおよびリアルタイムデータ処理用のデータパイプラインの構築と最適化を目指します。 ・データサイエンティストやアナリストと協力して、データへのアクセスを容易にし、 　高度な分析や機械学習プロジェクトをサポートします。 1.データモデリング 2.データベース管理 3.データ統合 4.データガバナンスとセキュリティ 5.データ分析と視覚化 6.テクノロジーの評価と実装 7.コラボレーションとコミュニケーション 8.戦略計画 ※各項目詳細は、面談時にお伝えさせていただきます。

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～ BtoB向け AIサービス 移行プロジェクトに携わっていただきます。 具体的な内容は下記の通りです。 プライベートクラウドで管理されたKubernetes環境やHadoop環境をパブリッククラウドへ移行する。移行に伴い主に下記業務を想定 ・パブリッククラウドのインフラ設計・構築 ・Kubernetes コンテナ環境の設計・構築 ・CI/CD、モニタリング環境の設計・構築 ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 自社のデータ集積プラットフォームを運営する企業にて、Pythonを使用したバッチ開発・運用を担当します。世界中の特許や論文データなどを扱い、データの高速処理や自動化を行うプロジェクトに参画します。リモートでの作業となります。 ■具体的な業務内容 ・Pythonを使用したバッチ開発および改修 ・データベースへのデータインサート ・GCP環境でのシステム開発および運用 ・データ処理の高速化および自動化対応 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 通信業界向けのデータ利活用基盤において、運用保守や障害調査、次期構築に向けた技術調査を担当します。Linux環境での作業経験やPythonの開発経験、ネットワークの基礎知識が求められます。 ■具体的な業務内容 ・データ利活用基盤のアラーム障害調査および対応 ・接続先追加などによる仕様変更対応 ・次期基盤構築に向けた技術調査や検討 ・ミドルウェアおよびインフラの調査作業 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 ゲーム事業におけるデータ分析業務を担当していただきます。主に以下の分析関連業務をお任せします。 事業価値向上のための分析要件の定義、データの加工と分析によるインサイトの抽出、施策の考案、分析結果のプレゼンテーションおよび企画提案と実行支援を行って頂きます。 業務を進めるにあたって、プロデューサーや企画担当者、エンジニアと積極的にコミュニケーションを取りながら進めていただきます。 ■具体的な作業内容 ・事業価値向上のための分析要件の定義 ・データの加工と分析の実施 ・インサイトの抽出と施策の考案 ・分析結果のプレゼンテーション ・企画提案と実行支援 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 AWSを活用してRDBのデータベース設計や、Glue Jobを使用したPythonによるETL処理を担当します。API GatewayやLambdaを活用してAPIを開発し、プロダクトオーナーと協力しながら仕様策定を行います。データウェアハウスおよびデータマート向けのETLジョブの開発経験が求められます。 ■具体的な業務内容 ・AWSサービス（Lambda、API Gatewayなど）を利用したシステム開発 ・Glue Jobを使用したETL処理の設計および開発 ・Pythonを使用したサーバーサイド開発 ・プロダクトオーナーとの協力による仕様策定 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 スタートアップ企業におけるフロントエンドエンジニア業務全般を担当いただきます。特にデータ分析や機械学習に関心があり、DjangoやVue.jsを使用した開発経験をお持ちの方が対象です。プロジェクトにおけるAPIやシステムの開発を担当していただきます。 ■具体的な業務内容 ・Djangoを使用したWEBサービスのバックエンド開発 ・Vue.jsを用いたフロントエンド開発 ・APIやシステムの設計および開発 ・GCPやAWSを利用したインフラ構築および運用 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 AWSを活用したバックエンドシステムの設計・開発を担当し、RDBデータベース設計やPythonを使用したETL処理、API GatewayやLambdaを用いたAPI開発を行います。技術的な知見を活かし、プロダクトオーナーと連携して仕様策定にも関与し、AWSリソースを積極的に活用したシステム開発に貢献します。 ■具体的な業務内容 ・RDBデータベース設計およびAWS Glueを使用したETL処理の開発 ・API Gateway、Lambdaを使用したAPI開発 ・プロダクトオーナーとの仕様策定および協調 ・AWSリソースを活用したインフラ構築および運用 ・Git Flowベースの開発進行およびプロジェクト管理 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 ■概要 在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入を実施。 ■具体的な作業内容 ・リーダー：1名(Hadoop有識者、テックリード) ・SIer内Hadoopスペシャリストに相談可能。 ・オフショアメンバー(中国)側と連携して進める。

作業内容 ■概要 某大手通信事業者／Hadoop環境移行PMO支援をお任せいたします。 ■具体的な作業内容 ・Hadoop環境移行及び現行/新規にて発生する障害に対するPMO支援 ・ユーザー側PMOチームメンバー ・クラスタ運用に伴う課題解決 ・スケジュール、課題の管理、ステークホルダー調整

作業内容 ■概要 某株式会社にて、Hiveを使用して、社内の大量データに対してデータ取得を行うデータサイエンティストに近い業務となります。 ■具体的な作業内容 ・データ取得ジョブの新規作成、改修(主なツールとしてTalendを使用) ・Hadoop - Teradata間のデータ整備 ・MySQL等のデータベース間とのデータ整備

作業内容 ■概要 某大手通信事業者／Hadoop基盤データマネジメント支援をお任せいたします。 ■具体的な作業内容 ・データマネジメント全般を支援できるITD ・データガバナンス運用管理・システム導入、開発委託先管理業務、及びデータ活用業務

作業内容 ■概要 データアナリスト業務(SQL、ビッグデータ周り)をお任せいたします。 ■具体的な作業内容 主に以下の分析関連業務を担当して頂きます。 ・社内外からの依頼に基づく集計/可視化の要件定義と仕様設計 ・SQLを用いたビッグデータの加工および集計、ダッシュボードの作成 ・分析結果のレポーティング なお業務にあたって、各企画担当者、他データアナリスト、ゲームエンジニアとコミュニケーションを取りながら進めて頂きます。"

作業内容 ・Hadoopなどに格納されている大規模データの加工、変数作成処理データ分析者と一緒に業務を行い、プログラミング観点などで、分析者にアドバイスを行う。演算処理の自動化するための計画、実装業務も担当・チームの業務としては、アプリ実装の業務が中心だが、AWSなどで一時的に自チーム用のサーバを立てたりクラスタを運用したりという事があるので、インフラの経験が有るとなお可です。

作業内容 大手サービス企業のビッグデータ部で進めているカスタマのクリックストリームデータの収集・整形、分析システムの開発にご参画いただけるエンジニアを募集いたします。カスタマの行動ログからアクセス時間やデバイス、閲覧コンテンツを元に性別、年代のような属性を推定し、分析に活用するシステムの構築・開発をご担当いただきます。

作業内容 ■概要 某社が手掛けるゲーム事業の分析基盤の開発及び運用でご活躍頂きます。 ■具体的な作業内容 ・分析基盤はBigQuery、Airflowなどのサービスを利用します。 ・設計から運用までご自身の裁量で開発をすることができます。 ・企画担当者やインフラ担当者とコミュニケーションを取りながら進めて頂きます。

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 全社横断のデータ分析基盤上でデータエンジニアリングや利用者支援を行う案件で、今年度の実施タスクは下記のとおりですが、作業スコープや仕様の調整から対応頂く想定でおります。 ■具体的な作業内容　　　 ・既存バッチ処理(Hive/Informatica/Databricks)の運用、保守 ・分析用汎用データの新規バッチ処理開発(Databricks) ・Informatica/Hive→DatabricksへのAPマイグレーション ・メタデータ登録、データカタログ製品の比較検討 ・分析者マニュアル作成、バリューエンジニアリング検討など

作業内容 アドテクにおけるruby言語での開発

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 道路交通系システムの開発を担当していただきます。Hadoop上で動作するシステムの詳細設計からテストまでの工程を行います。 ■具体的な業務内容 ・Hadoopを使用したシステムの詳細設計 ・JavaおよびSQLを使用したシステム開発 ・システムの結合テストおよび運用支援 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 ------------------------------------------------------------------ 弊社は様々なプロジェクトの提案を強みとしております。お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 お客様ネットワーク網(全国)にあるネットワーク機器(ルータ等)を監視するシステム開発です。 ■主な担当工程 詳細設計～結合試験 ■開発環境 Java、SQL、Eclipse、クライアント：Windows サーバ：Linux、DB：PostgreSQL/Hbase