リセット

Hadoopの案件・求人一覧

1-30 / 全 664
  • NEW
  • 注目

【Python(データ分析系)】≪フルリモート≫ゲーム・ソリューションサービスの データアナリスト/データサイエンティスト

1,000,000円/月

業務委託(フリーランス)
東京都
東京駅
PythonSQL
データサイエンティストデータアナリスト
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★ ■概要 ゲームおよびソリューションサービスのデータ分析業務を担当し、サービス価値向上のための分析設計、ダッシュボード開発、データ加工・分析を行います。プロデューサーやプランナー、データエンジニアと連携しながら、データを基に施策提案やPDCAサイクルの推進をサポートします。 ■具体的な業務内容 ・SQLを活用したデータ抽出・分析 ・アドホック分析の実施およびレポーティング ・BIツールを用いたデータ可視化およびダッシュボード開発 ・ゲームタイトル/サービスの施策PDCA推進 ・サービス課題のヒアリングおよび分析・可視化設計 ・PythonやRを使用したデータの加工、集計、分析(経験があれば尚可) ・BigQuery、Redshift、Hadoopを活用したビッグデータ分析(経験があれば尚可)

【AWS / リモート案件ご紹介可能】大手自動車メーカー向けAWS基盤設計・構築

700,000円/月

業務委託(フリーランス)
東京都
大手町駅
LinuxAWS
作業内容 ★エンジニア実務経験2年以上 / ブランクのない方が対象の案件です!!★ ■概要 大手自動車会社のIoT基盤を支えるAWS上のサーバ基盤運用における設計・構築業務を担当するプロジェクトです。オンプレミスからクラウドに移行したシステムにおいて、AWSの各種マネージドサービスやHadoopエコシステムを活用し、安定した基盤運用を目指します。長期的な支援が見込まれるため、スキルを深める環境が整っています。 ■具体的な業務内容 ・AWS環境でのサーバ設計・構築業務 ・運用設計の策定および運用支援 ・Hadoopエコシステム(Apache Spark、Kafkaなど)を用いたデータ基盤構築 ・AWSマネージドサービスの活用および最適化

【Java / 一部リモート可】広告運用サービスのサーバーサイド設計・開発(週5日)

500,000 〜 800,000円/月

業務委託(フリーランス)
東京都
渋谷駅
Java
サーバーサイドエンジニア
作業内容 クライアント内で利用されている広告運用サービスについて、サーバーサイド開発メンバーとしてジョインいただきます。データ量が多いため、大規模開発経験のある方は歓迎です。 ======================== ※必ずお読みください※ 【外国籍の方の場合】 日本語能力検定1級お持ちの方 日本語が母国語の方 ========================

【AWS / リモート案件紹介可能】データエンジニア・分析基盤開発運用エンジニア募集

700,000円/月

業務委託(フリーランス)
東京都
六本木駅
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!! ■概要 AWSやGCPを活用したデータ基盤の設計・構築および運用を担当していただくプロジェクトです。ビッグデータ分析を支えるデータパイプラインの設計や、BigQuery、Redshift、Hadoopなどのデータ解析ツールの利用経験を活かすことができます。さらに、Google Cloud MLやAWS SageMakerを用いた機械学習モデルの開発経験がある方には新たな挑戦の機会も広がっています。 ■具体的な業務内容 ・データパイプラインの設計および開発 ・AWSやGCPを活用したデータ基盤の構築および運用 ・BigQueryやRedshiftを用いたビッグデータの分析業務 ・Google Cloud MLやAWS SageMakerを活用した機械学習モデルの開発

【フルリモート】Kubernetes:パブリッククラウド移行支援の案件

700,000円/月

業務委託(フリーランス)
東京都
AWSAzureGoogle Cloud PlatformKubernetes
インフラエンジニア
作業内容 プライベートクラウドで管理されたKubernetes環境やHadoop環境のパブリッククラウドへの移行をおこないます。 下記の業務をご担当いただきます。 ・パブリッククラウドのインフラ設計/構築 ・Kubernetes コンテナ環境の設計/構築 ・CI/CD、モニタリング環境の設計/構築

【Python / リモート案件紹介可能】システム開発エンジニア(ビッグデータ基盤システム担当)

850,000円/月

業務委託(フリーランス)
東京都
六本木駅
JavaPHPPythonSQLGoAWSGit
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!! ■概要 ビッグデータ基盤システムの構築・開発・保守を担当する案件です。Pythonを中心とした開発を行い、SQLを用いたデータベースプログラミングやAWS環境でのサービス開発を進めます。Hadoopエコシステムや高負荷対策の経験がある方はさらに活躍できる環境です。 ■具体的な業務内容 ・ビッグデータ基盤システムの構築・開発・保守 ・データの加工(ETL)およびソフトウェア開発 ・SQLを活用したデータ処理およびプログラミング ・AWSを利用したサービス開発および運用

【インフラ】データ収集システム案件

650,000円/月

業務委託(フリーランス)
愛知県
三河豊田駅
C++JavaSQLShellLinuxDocker
作業内容 ・データ収集システム案件に関して、主にインフラ維持管理に携わっていただきます。

【Python】AI技術研究・システム開発支援

700,000円/月

業務委託(フリーランス)
東京都
神谷町駅
Python
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★ ■概要 AI研究開発部門にて、AI関連の技術研究およびシステム開発を担当します。画像解析・自然言語解析・ディープラーニング・AI-OCRなどの分野に関わる開発を行い、新規導入案件におけるAI技術の設計・実装を推進します。ビッグデータ解析やレコメンドシステムの開発経験がある方にも適した案件です。 ■具体的な業務内容 ・AI技術に関する研究およびシステム設計・開発 ・Python を用いた画像解析、自然言語解析、ディープラーニングの実装 ・AI-OCR の開発および最適化 ・AIを活用した新規導入案件のシステム設計・開発支援 ・Hadoop、Splunk を活用したデータ解析環境の構築・運用 ・レコメンドシステムの開発および運用

【インフラエンジニア】MAシステムDB移行

700,000円/月

業務委託(フリーランス)
神奈川県
川崎駅
LinuxOracle
インフラエンジニア
作業内容 OracleDBやHadoopを移行するに際し、移行設計やツールなどの作成実施をご担当いただきます。

【Python】データ解析基盤の構築(リモート)

650,000円/月

業務委託(フリーランス)
東京都
品川駅
PythonSQLLinux
バックエンドエンジニア
作業内容 ・データのETL処理の基盤構築 ・AWSサービスとPythonを使ってデータ解析基盤の開発 ・設計/製造をメインにご担当

開発企画アシスタントディレクター/某EC事業会社向けPMO

750,000円/月

業務委託(フリーランス)
東京都
PHPJIRATrello
フロントエンドエンジニアPMPMOサーバーサイドエンジニアバックエンドエンジニア
作業内容 プロジェクト管理(プロジェクトの計画立案、進捗管理、リスクマネジメント、定例会議の設定、アジェンダ作成、ファシリテーションの実施、タスク・課題管理、プロジェクト管理プロセスの継続的改善)、API管理ワークフローの設計・推進(フラグの追加・変更・削除に関するワークフローの設計と推進、APIドキュメントの整備とバージョン管理、リリースノートの作成)、技術サポート(開発チームへの技術サポート、社内外のステークホルダーとの調整)

【AWS / フルリモート】BtoB向け AIサービス 移行プロジェクト(週5日)

750,000 〜 900,000円/月

業務委託(フリーランス)
フルリモート
AWSAzureGoogle Cloud PlatformKubernetes
作業内容 プライベートクラウドで管理されたKubernetes環境やHadoop環境をパブリッククラウドへ移行するプロジェクトです。移行に伴い、以下の業務を担当いただきます。(工程)設計、構築、運用(業務内容)・パブリッククラウドのインフラ設計・構築・Kubernetes コンテナ環境の設計・構築・CI/CD、モニタリング環境の設計・構築 ======================== ※必ずお読みください※ 【外国籍の方の場合】 日本語能力検定1級お持ちの方 日本語が母国語の方 ========================

【週5日/リモートメイン/Python】データエンジニア

768,000円/月

業務委託(フリーランス)
PythonDynamoDBSparkAWSAmazon S3ApacheKafka
作業内容 -------------------------------- ※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です ※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です -------------------------------- 某大手自動車メーカーの「運転診断システム」のデータエンジニアを募集しております。 <業務内容> AWSのクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。 Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。 ビッグデータ技術(Hadoop, Sparkなど)を用いて大規模データセットのバッチおよびリアルタイム処理を実行します。 ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。

【Python / リモート案件紹介可能】ゲーム事業の分析基盤開発および運用

700,000円/月

業務委託(フリーランス)
東京都
六本木駅
PythonMySQLDevOps
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!! ■概要 ゲーム事業の分析基盤の開発および運用を担当します。BigQueryやCloudComposerなどのマネージドサービスを用いて、設計から運用までを一貫して担い、ゲームデータを活用した意思決定を支援する重要な基盤を構築します。データアナリストやインフラ担当者と連携して課題解決に取り組みます。 ■具体的な業務内容 ・BigQueryを利用した分析基盤およびデータパイプラインの開発・運用 ・BIツールの開発および運用 ・データアナリストとの連携による事業課題解決 ・インフラやDevOpsの設計、構築および運用支援 ・CloudComposerを活用したデータ処理フローの設計と実装

【Python / リモート案件紹介可能】大規模データ基盤エンジニア×レコメンドエンジン運用

900,000円/月

業務委託(フリーランス)
東京都
東京駅
PythonSQLShellLinuxAWSDockerGitSVNGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!! ■概要 派遣業界向けの大規模データ活用基盤の改善・保守を行うプロジェクトです。レコメンドエンジンの運用や分析環境の改善、クラウド環境の技術検証を通じて、より高度なデータ分析基盤の構築に貢献します。必要に応じて、簡易的な機械学習モデルのチューニングやデータ分析業務も担当します。 ■具体的な業務内容 ・レコメンドエンジンを提供するデータ基盤の改善および保守運用 ・AWSやGCPを活用したクラウド環境での開発および運用業務 ・Python、Shell、SQLを用いたデータ処理およびスクリプト作成 ・新規クラウドサービスやミドルウェアの技術検証 ・簡易的な機械学習モデルのチューニングおよびデータ分析

【20〜40代/週5稼働可能な方歓迎】新規プロダクト開発サーバーサイドエンジニア(Python×AWS)【Python(Web開発系)】

1,000,000円/月

業務委託(フリーランス)
東京都
銀座駅
PythonAWS
サーバーサイドエンジニア
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!! ■概要 新規プロダクトの開発において、AWSを活用したサーバーサイドの設計および開発を担当します。ETL処理やAPI開発を中心に、技術的知見を活かしてプロダクトオーナーと連携し、仕様策定やリソース活用を進めます。データベース設計や大規模データ処理経験がある方が特に歓迎されます。 ■具体的な業務内容 ・RDBのデータベース設計および構築 ・Glue JobでPythonを使用したETL処理の設計および開発 ・API GatewayおよびLambdaを活用したAPI開発 ・AWSリソースの活用によるプロダクト開発支援 ・git flowベースのチーム開発およびリリース管理

【Python(Web開発系) / リモート案件紹介可能】AWS活用×新規プロダクト/サーバーサイドエンジニア

1,000,000円/月

業務委託(フリーランス)
東京都
銀座駅
PythonAWS
サーバーサイドエンジニア
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!! ■概要 新規プロダクトのサーバーサイド開発を担当するプロジェクトです。主にAWSのリソースを活用し、API GatewayやLambdaを利用したAPI開発やGlue Jobを用いたETL処理の設計・開発を行います。プロダクトオーナーとの仕様策定やデータベース設計を担当するだけでなく、データ処理やAPIの最適化にも携わり、幅広い知識を身に付けることが可能です。 ■具体的な業務内容 ・RDBのデータベース設計および開発 ・Glue Jobを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・AWSリソースを活用したプロダクト開発の設計・実装 ・技術的知見を活かしたプロダクトオーナーとの仕様策定 ・Git flowをベースにした開発進行

【Python(Web開発系)】AWS活用/新規プロダクトのサーバーサイドエンジニア募集

1,000,000円/月

業務委託(フリーランス)
東京都
銀座駅
PythonAWS
サーバーサイドエンジニア
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★ ■概要 AWSを活用した新規プロダクトのサーバーサイド開発を担当するプロジェクトです。API GatewayやLambdaを使用したAPI開発、Glue Jobを用いたETL処理の設計・開発を行います。また、データベース設計やAWSリソースの最適利用を進めながら、プロダクトオーナーと協力して仕様策定にも携わります。チームでの開発経験やAWSサービスの運用経験を活かせる案件です。 ■具体的な業務内容 ・RDBを使用したデータベース設計および開発 ・Glue Jobを使用したETL処理の設計・開発 ・API Gateway、Lambdaを活用したAPI設計および実装 ・AWSリソースを利用したプロダクト開発の推進 ・プロダクトオーナーとの仕様策定および要件整理 ・git flowをベースとした開発プロセスの進行

【データ分析 / フルリモート】某ゲーム会社様にて運用中のデータ分析基盤(Redshift)のGoogle Cloud環境への移行作業(週4日以上)

650,000 〜 850,000円/月

業務委託(フリーランス)
PythonSQLShellAWSAzureGitBacklogJIRARedmineGoogle Cloud PlatformRedshiftBigQuery
作業内容 Google Cloud環境では、DWHとしてBigQueryを利用し、データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定です。<作業内容>(上から優先度が高い順) 1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt) (実装、単体テスト、結合テスト、システムテスト) 2.SQL構文修正(Redshift(PostgresSQL) → BigQuery) (実装、単体テスト、結合テスト、システムテスト) 3.テーブルデータ移行(Redshift → BigQuery) (テーブル設計・実装、データ移行、データ検証) ======================== ※必ずお読みください※ 【外国籍の方の場合】 日本語能力検定1級お持ちの方 日本語が母国語の方 ========================

【Python(Web開発系)】Python/バッチ開発・運用(フルリモート)

750,000円/月

業務委託(フリーランス)
東京都
淡路町駅
PythonGoogle Cloud Platform
作業内容 【20 代から40 代の方が活躍中!】 ※週4日〜OK案件です! ※実務経験2年以上ありの方が対象の案件です! ■概要 自社のデータ集積プラットフォームを運営する企業にて、Pythonを使用したバッチ開発・運用を担当します。世界中の特許や論文データなどを扱い、データの高速処理や自動化を行うプロジェクトに参画します。リモートでの作業となります。 ■具体的な業務内容 ・Pythonを使用したバッチ開発および改修 ・データベースへのデータインサート ・GCP環境でのシステム開発および運用 ・データ処理の高速化および自動化対応 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

【Python】データ利活用基盤 運用保守案件(通信業)(20代〜40代活躍中!・週4日以上稼働可能な方にぴったり!)

700,000円/月

業務委託(フリーランス)
東京都
東銀座駅
JavaPythonSQLShellLinux
作業内容 【20 代から40 代の方が活躍中!】 ※週4日〜OK案件です! ※実務経験2年以上ありの方が対象の案件です! ■概要 通信業界向けのデータ利活用基盤において、運用保守や障害調査、次期構築に向けた技術調査を担当します。Linux環境での作業経験やPythonの開発経験、ネットワークの基礎知識が求められます。 ■具体的な業務内容 ・データ利活用基盤のアラーム障害調査および対応 ・接続先追加などによる仕様変更対応 ・次期基盤構築に向けた技術調査や検討 ・ミドルウェアおよびインフラの調査作業 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

【Python / リモート案件紹介可能】求人レコメンドシステム開発/Pythonエンジニア募集

900,000円/月

業務委託(フリーランス)
PythonSQLShellLinuxGitSVNBacklogJIRA
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!! ■概要 求人紹介および求職者紹介のレコメンドエンジンのエンハンス開発を担当するプロジェクトです。PythonやShell、SQLを使用した開発を通じて、要件定義から設計、コーディング、テスト、デプロイ、運用まで一貫して関わります。また、DevOps関連の新技術検証や、ビッグデータを活用したデータ加工・分析にも携わるチャンスがあります。 ■具体的な業務内容 ・求人レコメンドエンジンのエンハンス開発 ・要件定義、設計、コーディング、テスト、デプロイ、運用対応 ・Linux環境での開発およびShellスクリプトの活用 ・SQLを使用したデータ抽出および加工作業 ・Gitを用いたバージョン管理およびチーム開発対応

【Python / リモート案件紹介可能】レコメンドエンジン|モデル開発・改善プロジェクト

900,000円/月

業務委託(フリーランス)
東京都
東京駅
PythonSQLShellLinuxGitSVN
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!! ■概要 大手クライアントの派遣事業におけるレコメンドエンジンの改善および新規開発を担当するプロジェクトです。開発系ではデータ加工やWebAPI開発、分析系では機械学習モデルの構築やチューニングなどを担当いただきます。Python、Shell、SQLを用いた開発または分析経験が求められます。クラウド環境や大規模データ処理に興味がある方も歓迎します。 ■具体的な業務内容 開発系: ・データ加工、バッチ開発、WebAPI開発、新規技術の検証 ・Linux環境における開発およびドキュメント作成(設計書、テスト仕様書) 分析系: ・基礎分析、機械学習モデル構築、チューニング、レポーティング ・データ加工および検証作業

【Python(Web開発系)】バックエンドエンジニア業務

1,000,000円/月

業務委託(フリーランス)
東京都
東銀座駅
PythonAWS
バックエンドエンジニア
作業内容 【20 代から40 代の方が活躍中!】 ※週4日〜OK案件です! ※実務経験2年以上ありの方が対象の案件です! ■概要 AWSを活用してRDBのデータベース設計や、Glue Jobを使用したPythonによるETL処理を担当します。API GatewayやLambdaを活用してAPIを開発し、プロダクトオーナーと協力しながら仕様策定を行います。データウェアハウスおよびデータマート向けのETLジョブの開発経験が求められます。 ■具体的な業務内容 ・AWSサービス(Lambda、API Gatewayなど)を利用したシステム開発 ・Glue Jobを使用したETL処理の設計および開発 ・Pythonを使用したサーバーサイド開発 ・プロダクトオーナーとの協力による仕様策定 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

【JavaScript(Vue.js)】スタートアップ企業でのバックエンドエンジニア募集!

600,000円/月

業務委託(フリーランス)
東京都
渋谷駅
JavaScriptDjangoVue.js
バックエンドエンジニア
作業内容 【20 代から40 代の方が活躍中!】 ※週4日〜OK案件です! ※実務経験2年以上ありの方が対象の案件です! ■概要 スタートアップ企業におけるフロントエンドエンジニア業務全般を担当いただきます。特にデータ分析や機械学習に関心があり、DjangoやVue.jsを使用した開発経験をお持ちの方が対象です。プロジェクトにおけるAPIやシステムの開発を担当していただきます。 ■具体的な業務内容 ・Djangoを使用したWEBサービスのバックエンド開発 ・Vue.jsを用いたフロントエンド開発 ・APIやシステムの設計および開発 ・GCPやAWSを利用したインフラ構築および運用 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

【Python(Web開発系)】AWS活用バックエンドエンジニア業務(20代〜40代活躍中!・週4日以上稼働可能な方にぴったり!)

1,000,000円/月

業務委託(フリーランス)
東京都
銀座駅
PythonAWS
バックエンドエンジニア
作業内容 【20 代から40 代の方が活躍中!】 ※週4日〜OK案件です! ※実務経験2年以上ありの方が対象の案件です! ■概要 AWSを活用したバックエンドシステムの設計・開発を担当し、RDBデータベース設計やPythonを使用したETL処理、API GatewayやLambdaを用いたAPI開発を行います。技術的な知見を活かし、プロダクトオーナーと連携して仕様策定にも関与し、AWSリソースを積極的に活用したシステム開発に貢献します。 ■具体的な業務内容 ・RDBデータベース設計およびAWS Glueを使用したETL処理の開発 ・API Gateway、Lambdaを使用したAPI開発 ・プロダクトオーナーとの仕様策定および協調 ・AWSリソースを活用したインフラ構築および運用 ・Git Flowベースの開発進行およびプロジェクト管理 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

【週5日/一部リモート/Python,SQL】データエンジニア

960,000円/月

業務委託(フリーランス)
東京都
大崎駅
PythonSQLAWSAzureApacheGoogle Cloud PlatformSnowflakeKafka
作業内容 -------------------------------- ※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です ※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です -------------------------------- 「アルゴリズムで、社会はもっとシンプルになる。」をミッションに掲げ、 アルゴリズムを用いて事業開発を行うAIスタートアップです。 【募集背景】 ChatGPTをはじめとする大規模モデルと隆盛により、データ活用の社会的ニーズが高まってきております。 特に、弊社では金融業界でのデータ活用に向けた取り組みを進めており、技術的には、セキュリティや大規模なデータを扱うことを考えて、モダンなデータスタックの導入ができるように社内での検証を進めてきており、 今回大型のプロジェクトを実行するため、技術ケイパビリティ・経験を持ったエンジニアを今回募集しております。 【業務内容】 メインとして顧客環境に、特にMicrosoft Azureを想定としたデータ基盤を構築し、運用できるようにして頂きます。 データの収集元はテキストデータを中心に多岐に渡る想定であり、収集したデータはLLM/RAGと言われる技術を活用し、ChatGPTのようなボットの活用を行い、問い合わせの自動対応を実現することが目的です。 また、セキュリティ的を十分に考慮しながら設計できることが必要であり、業務としてはデータの基盤の設計及び実行のマネジメントも含めて実行頂きます。 また、必要に応じてクライアントコミュニケーションも行って頂くこともございます。 大型プロジェクトのデータエンジニアとしてのご参画を想定しております。 - アーキテクチャの設計 (既存にAzure上に一定構成されたものは存在) - プロジェクトの技術面での実行 - 顧客環境 (特にMicrosoft Azureを想定)にデータ基盤を構築し運用できるようにする。データの収集元は多岐に渡る想定。 - データ基盤の活用の支援 (BIツール等のデータ基盤の活用に関する助言。場合によっては活用基盤の構築) - 実行メンバーを採用及びメンバーの実行マネジメントの検討・実行 - クライアントコミュニケーション - 他データ基盤のプロジェクトへのアドバイス - アーキテクチャレビュー

【クラウドエンジニア(その他クラウド)】【業務委託(準委任)】在庫管理等の分散処理システム構築案件

1,500,000円/月

東京都
東京駅
HadoopApache
作業内容 ■概要 在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入を実施。 ■具体的な作業内容 ・リーダー:1名(Hadoop有識者、テックリード) ・SIer内Hadoopスペシャリストに相談可能。 ・オフショアメンバー(中国)側と連携して進める。

【開発系PMO】【業務委託(準委任)】某大手通信事業者/Hadoop環境移行支援

1,700,000円/月

東京都
東京駅
JavaPerlHadoopHive
PMO
作業内容 ■概要 某大手通信事業者/Hadoop環境移行PMO支援をお任せいたします。 ■具体的な作業内容 ・Hadoop環境移行及び現行/新規にて発生する障害に対するPMO支援 ・ユーザー側PMOチームメンバー ・クラスタ運用に伴う課題解決 ・スケジュール、課題の管理、ステークホルダー調整

【Hadoop】データ取得ジョブの新規作成など

650,000円/月

東京都
赤坂見附駅
HadoopHive
作業内容 ■概要 某株式会社にて、Hiveを使用して、社内の大量データに対してデータ取得を行うデータサイエンティストに近い業務となります。 ■具体的な作業内容 ・データ取得ジョブの新規作成、改修(主なツールとしてTalendを使用) ・Hadoop - Teradata間のデータ整備 ・MySQL等のデータベース間とのデータ整備

気になる案件は見つかりましたか?

お探しの条件に合った新着案件をお知らせします

掛け合わせ条件で絞り込む

特徴で絞り込む
Hadoop × 在宅・リモート

あなたにピッタリ
フリーランス案件が見つかる

  • 133万件以上のフリーランス案件から一括検索

    334,363の案件を保有しており、エンジニアやクリエイター向けを中心にたくさんの案件を一括検索可能です。

    ※ 3月31日(Mon)更新

    33万件以上のフリーランス案件から一括検索

  • 2あなたの経験やスキルに適した案件をメールでお知らせ

    マイページに入力して頂いた経験や希望条件に合わせて、ご希望にマッチした案件をメールでお送りするので効率的な案件探しが可能です。

    あなたのプロフィールからおすすめの案件・求人

今すぐ無料登録

Hadoop案件のよくある質問

Hadoopの案件数は何件ですか?

フリーランスHub上でご覧いただけるHadoopの案件数は664件です。 尚、応募先エージェントで非公開案件の提案を受けられる場合もあります。

未経験でもHadoopのフリーランス案件に応募することは可能ですか?

はい。応募先エージェントが条件を設けていない限り、基本的には未経験でも応募することが可能です。 ただし、中には実務経験を重視する案件もありますので、未経験で参画できる案件があるかどうかは応募先エージェントに確認してみましょう。

Hadoopについて

【Hadoopの概要】 Hadoopは、大規模データ(数千ノード、ペタバイト級)の効率的な分散処理が可能なオープンソースミドルウェアです。ネットワーク上に複数サーバーを並列させて利用する技術、簡易なプログラム記述を実現させるフレームワーク、クラスター上で使用できるアプリケーションなど、多様なソフトウェアから構成されているのがHadoopの特色です。案件でHadoopを活用すれば、通常数日間かかる重い処理を複数の機器に分散させ、数時間で完了させることができます。Hadoopは、エンジニアの業務効率化につながるミドルウェアであるといえるでしょう。 【Hadoop関連案件に必要なスキル】 Hadoopを用いるフリーランス案件では、Hadoop上で動作するアプリケーションを開発するためのプログラミングスキルが必要になります。Hadoop自体はJavaによって記述されており、MapReduceプログラムの作成時もJavaでコーディングすることが多いため、この言語を習得しておけばフリーランス案件への参画がスムーズになるでしょう。Hadoop関連のフリーランス案件と関わりがあるJava以外の言語には、PythonやScala、Ruby、C++などがあります。 ※この文章は、2021年4月時点の内容です。