Hadoop × 在宅・リモートのフリーランス案件・求人一覧

作業内容 ・詳細設計書の執筆 ・パラメータシート作成 ・検証環境の構築 ・基盤の構築作業 ・単体/結合試験項目書の作成、テストの実施 ・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～ 地図広告プラットフォーム開発 ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎

作業内容 プライベートクラウドで管理されたKubernetes環境やHadoop環境を、パブリッククラウドへ移行します。 移行に伴い主に下記業務を想定しております。 ・パブリッククラウドのインフラ設計・構築 ・Kubernetes コンテナ環境の設計・構築 ・CI/CD、モニタリング環境の設計・構築

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 道路交通系開発をお任せいたします。 Hadoop上で動作する道路交通系システムの開発をご担当いただきます。 ■作業工程：詳細設計～結合テスト

作業内容 既存AWSインフラの追加開発や改修等をご担当いただきます。 大型AWSインフラシステムを学ぶことができます。 ツール： ・AWS ・SnowFlake ・RedShift

作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。 現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。 現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。 ※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ 　クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。 現在想定しているマイグレーション例は、以下の通りです。 　-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト 　-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換 　→Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）等の 　　Spark関連マネージド・サービスにマイグレーション ＜就業時間＞ 9:00ｰ18:00

作業内容 AWSクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築を行います。 Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発します。 ビッグデータ技術（Hadoop, Sparkなど）を用いて大規模データセットのバッチおよび、リアルタイム処理を実行します。 ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図ります。

作業内容 プライベートクラウドで管理されたKubernetes環境やHadoop環境のパブリッククラウドへの移行をおこないます。 下記の業務をご担当いただきます。 ・パブリッククラウドのインフラ設計/構築 ・Kubernetes コンテナ環境の設計/構築 ・CI/CD、モニタリング環境の設計/構築

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～ ・Lob分析サービス開発運用 ・TVなどの操作Logをもとにランキングなどを出力するサービス開発 （AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発） ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～ BtoB向け AIサービス 移行プロジェクトに携わっていただきます。 具体的な内容は下記の通りです。 プライベートクラウドで管理されたKubernetes環境やHadoop環境をパブリッククラウドへ移行する。移行に伴い主に下記業務を想定 ・パブリッククラウドのインフラ設計・構築 ・Kubernetes コンテナ環境の設計・構築 ・CI/CD、モニタリング環境の設計・構築 ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎

作業内容 外資コンサル日本法人内でのクラウドチームへご参画いただきます。 ※エンジニアではなくコンサル枠となります。 さまざまなサービスと実装パターンを活用して、 安全でスケーラブルかつコスト効率に優れたエンタープライズアーキテクチャを設計から実装を目指します。 具体的には、さまざまなデータワークロードと分析ニーズをサポートするために、 データの取り込み、保存、処理、消費のためのソリューションを設計します。 組織の要件に応じて、アーキテクチャが高可用性、災害復旧、 およびグローバル分散向けに設計されていることが目的です。 ＜想定される作業＞ ・データエンジニアと緊密に連携し、 　バッチおよびリアルタイムデータ処理用のデータパイプラインの構築と最適化を目指します。 ・データサイエンティストやアナリストと協力して、データへのアクセスを容易にし、 　高度な分析や機械学習プロジェクトをサポートします。 1.データモデリング 2.データベース管理 3.データ統合 4.データガバナンスとセキュリティ 5.データ分析と視覚化 6.テクノロジーの評価と実装 7.コラボレーションとコミュニケーション 8.戦略計画 ※各項目詳細は、面談時にお伝えさせていただきます。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 自社のデータ集積プラットフォームを運営する企業にて、Pythonを使用したバッチ開発・運用を担当します。世界中の特許や論文データなどを扱い、データの高速処理や自動化を行うプロジェクトに参画します。リモートでの作業となります。 ■具体的な業務内容 ・Pythonを使用したバッチ開発および改修 ・データベースへのデータインサート ・GCP環境でのシステム開発および運用 ・データ処理の高速化および自動化対応 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ 某企業の各プロダクトのバックエンド開発を行って頂きます。 スクラム開発を採用しており、同じチームに居るプロダクトマネージャ、デザイナー、フロントエンジニア、バックエンドエンジニア、薬剤師などと共に、バックエンドの専門家としてリーダーシップを取って開発を行って頂きます。 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 独自のデータ集積プラットフォームを運営する企業での、DBバッチ開発および運用業務です。Pythonを使用したバッチ開発や、データのインサート作業を行います。Google Cloud Platform（GCP）環境下で、5名のチーム体制でデータ処理を手掛けます。 ■具体的な業務内容 ・Pythonを用いたバッチ開発、改修、運用 ・データインサート業務 ・GCP環境でのデータ処理（BigQuery、Cloud Composerなど） ・データの高速化や自動化対応 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ テクノロジーセンター_クラウドテクノロジーチーム内にて、システム開発エンジニア枠(ビッグデータ基盤担当)を募集しております。 ＜主な業務内容＞ 主に大規模データを処理するためのクラウドインフラ・アプリケーションソフトの構築から、オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります。 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ 【案件概要】 データ分析基盤の開発エンジニアとして、当社が扱うビジネス上のつながりのデータや、ユーザーの行動データを活用するための分析基盤開発を行うことで、事業の成長を担っていただくことがミッションです。 【具体的な業務内容】 ・データのETL処理やETL処理のためのスクリプト・システム開発運用業務 ・データの傾向や内容を知るための集計・分析・可視化 ・AWSを用いた分析基盤構築および運用業務 ・当社で取り扱うデータのセキュリティ対応 ■作業環境＿＿：Windows/Mac選択可 ■開発環境 言語＿＿＿＿：Python,SQL ＤＢ＿＿＿＿：BigQuery 環境・ＯＳ＿：AWS(AmazonWebServices) ■開発工程＿＿：基本設計|詳細設計|実装・構築・単体試験|運用・保守

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 AWSを活用したインフラ保守、構築、開発業務をお任せいたします。 ■具体的な作業内容 ・AWSを活用したテレビ朝日案件などのインフラ保守、構築、開発の大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件(頻度：低) ・インフラ関連業務、及びその他付随業務 　　※アサイン後はクラウドから物理環境までを扱う業務内容のいずれかをご担当いただきます。 　　　アサイン予定のチームは他の複数のチームと関わりながら業務を遂行する横断的な組織になります。 ■参考　使用サービス例 ・AWS関連 Amazon EC2(Amazon Linux)、EBS、AutoScalingGroup、ELB各種、ECS、ECR、Amazon S3、EFS、DynamoDB、Elasticsearch Service、 Aurora、 RDS各種、Lambda、Athena、Kinesis、CloudFront、ACM、SNS、Amazon SQS、CloudTrail、CodeCommit、CodeBuild、CodeDeploy、Route53、Direct Connect、VPC、CloudWatch、AWS WAF、GuradDuty ・OSS関連 Apache、Nginx、Redis、MySQL、PostgreSQL、memcached、Postfix、vsftp、Zabbix、crond、OpenSSL、Elasticsearch、Kibana、fluentd、Docker、Ansible、Hadoop、Hbase、Hive、Pig、ZooKeeper、Git、GitHub、GitLab、 GitLab CI Runner、CircleCI、Redmine、WordPress、Laravel、Ruby on Rails、CentOS、Debian、Vernish、Python、Perl、JavaScript、PHP ※一般のWebシステムで使うようなサービスを中心に活用しております。 ・その他 Fastly、Twilio、Mackerel、Slack、Backlog

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ テクノロジーセンター_クラウドテクノロジーチーム内にて、AWSエンジニアを募集しております。 ＜主な業務内容＞ AWSを活用したインフラ保守、構築・開発業務 ＜案件例＞ ・AWSを活用した某テレビ局社内案件などのインフラ保守、構築・開発の大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件（頻度：低） ・インフラ関連業務、及びその他付随業務 ※アサイン後はクラウドから物理環境までを扱う業務内容のいづれかをご担当いただきます。 アサイン予定のチームは他の複数のチームと関わりながら業務を遂行する横断的な組織になります。 ※【参考】使用サービス例 AWS関連: EC2(AmazonLinux),EBS,AutoScalingGroup,ELB各種,ECS,ECR,S3, EFS,DynamoDB,ElasticsearchService,Aurora,RDS各種, Lambda,Athena,Kinesis,CloudFront,ACM,SNS,SQS, CloudTrail,CodeCommit,CodeBuild,CodeDeploy,Route53, DirectConnect,VPC,CloudWatch,AWSWAF,GuradDuty OSS関連 Apache,Nginx,Redis,MySQL,PostgreSQL,Memcached,Postfix, vsftp,Zabbix,crond,OpenSSL,Elasticsearch,Kibana,Fluentd, Docker,Ansible,Hadoop,HBase,Hive,Pig,ZooKeeper, Git,GitHub,Gitlab,GitlabCIRunner,CircleCI,Redmine, WordPress,Laravel,RubyOnRails,CentOS,Debian,Vernish, Python,Perl,Javascript,PHP ※一般のWEBシステムで使うようなサービスを中心に活用しております。 その他: Fastly、Twilio、Mackerel、Slack、Backlog 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 お客様にて配賦処理サーバを国内DCプライベートクラウド上に Hadoopサーバを構築して運用中であるが、RHELサポート切れが近い為、 現行環境をAWS上に移行予定。 現行Hadoopクラスタ環境をAWS EMRに移行するにあたり以下作業を実施予定。 ・PoC環境の設計、構築、テスト ・アプリチームの支援(AWS関連) ・性能テスト支援(リソース情報取得等)　等

作業内容 ・詳細設計書の執筆 ・パラメータシート作成 ・検証環境の構築 ・基盤の構築作業 ・単体/結合試験項目書の作成、テストの実施 ・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます

作業内容 ・DX推進の一環として、グループ各社のデータを横断的に利活用できる基盤を開発 ・ベンダー側SEとして設計または構築フェーズから参画予定 ・業務範囲未定(8/28, 29のMTGでお客様と共に決定) ・現時点で上がっている候補は下記 　-Ezmeral Data Fabric構築（(Hadoop環境≒旧MapR) 　-Ezmeral Runtime構築(Kubernetes環境) 　-Ezmeralログ監理 　-Ezmeralユーザー管理(認証含む) 　-データ移行設計・移行実施 　-DWH設計・構築 　-Ezmeral Data FabricとTableauの接続

作業内容 ・現行オンプレHadoopでデータレイク＋データマート構築しているものをクラウド移行 ・移行対象は40テーブル、ETL処理100本 ・Glue＋PythonでETL開発

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 現行加工処理をマイグレーションの計画/方式の検討立案を行っていただきます 　【マイグレーション例】 　・現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト 　・ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換する 　　⇒Databricks、snowflake(snowpark)、AWS（Glue,EMR）等のSpark関連マネージド・サービスにマイグレーション

作業内容 スクラムのメンバーとして、基盤構築/アプリ開発を業務としてご担当していただきます。

作業内容 ■概要 オンプレミスHadoop環境のアップグレードをお任せいたします。 ■具体的な作業内容 ・某通信大手様のオンプレミスHadoop環境アップグレードを実施 ・重要なシステム且つ200台以上のサーバーで構成されているクラスタリングを扱う

作業内容 大手小売り企業様にての業務となります。 在庫管理等の分散処理システムをHadoop on Sparkで組んでおり DMCから逆輸入による導入を実施して頂きます。 【体制】 ・リーダー：一名 (hadoop有識者、テックリード) ・SIer内hadoopスペシャリストに相談可能 ・オフショアメンバー（中国）側と連携して進める。 【商流】 某大手小売流通→大手SIer→同社

作業内容 【概　要】　Hadoop運用/およびLinuxサーバの運用業務となります。 オンプレサーバ運用かつ、新規運用となりますのでLinux運用経験/運用設計が可能な方を想定しています。 ・Hadoopまたは類似システムの運用経験があること （優先度としては、Hadoop>類似のシステムSpark/AmazonKinesisなど) 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入