Hadoop × 在宅・リモートのフリーランス案件・求人一覧 | 4ページ目

作業内容 ・React、Node.jsを用いたWEB広告開発に携わっていただきます。 ・主に開発工程をご担当いただきます。

作業内容 現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 （SSL化対応、AD認証連携 etc…) 　　　 環境 オンプレサーバー (現地作業等は無し、リモートから接続) OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…) データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品 (サポートが付くだけのようなイメージ) HPE Ezmeral Runtime (≒ Kubernetes) OpenShift等に⽐べ、より純正Kubernetesに近い 構成 データレイク: HDFS, minio(≒S3), HBase DWH: Hive or Spark ワークフロー: NiFi or Airflow データ加⼯: Hive, Spark (シェルスクリプト/Java or Python) BI: Tableau, Palantir (本募集スコープの作業範囲外) 体制 アジャイル開発 (スクラム) メンバー10名程度 デイリーで午前にスクラムミーティング有り

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ ▼案件概要 大規模基幹系システム基盤のシステム導入や更改、ベンダコントロールを 含む維持管理業務をお願いします。 システム作業より維持管理支援業務(ドキュメント作成が多い)となり 部署間調整やベンダー調整が多いです。 主な業務は下記となります。 ・更改検討(方針・ドキュメント作成) ・開発・構築管理(課題管理) ・運用検討(方針・ドキュメント作成) ・移行準備(進捗管理) RHEL、LAMP,VMwarevSphere,ESXi,KVM,SANストレージ,WindowsServer等 OpenStack,Hadoop ▼勤務地 場所:リモート可/新宿/初台 ▼求める人物像 ・社内外の関係者と円滑なコミュニケーションを取り、業務を遂行できる方 ・適切な粒度で課題を抽象化し、解決するべき打ち手と実行策をプランニングを可能な方 ・要件確認、各種調整を行うコミュニケーションスキル ▼条件 ・精算:固定or140-200h ・面談:1回(WEB) ▼その他 ・定時:9:00~17:30 ・自宅で作業することになるためシンクライアントを インストールするPCの準備をご検討下さい。 ・稼動は非常に安定しています(2月現在平均140-150h) ※週5日〜OKの案件です！

作業内容 ・BtoB （AI診断）サービス開発に携わっていただきます｡ ・下記を行っていただきます｡ 　-UIUXの設計構築からサービス実装 　-ご希望に応じてフルスタックに関わっていただきます。

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 ・Javaを用いたIoTデバイス開発基盤構築案件に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-移行 　-コンテナ化支援 　-テスト 　-修正 　-改修 　-機能追加 　-運用面対応

作業内容 ・データのETL処理の基盤構築 ・AWSサービスとPythonを使ってデータ解析基盤の開発 ・設計/製造をメインにご担当

作業内容 ・美容系ECサイトの開発に携わっていただきます。 ・Springを用いて、基本設計からテストまで幅広くご対応いただきます。 ・ご経験に応じて、リーダー業務をご担当いただく場合がございます。

作業内容 概　要： 世界各国で利用されるオンラインサービスにおけるデータ分析基盤の開発運用支援をお願い致します

作業内容 企画,コンサルティング,ディレクション,データ分析 大型カーボンニュートラルプロジェクトに携わって頂きます。 ・データプラットフォームのシステムアーキテクチャの作成 ・システム開発を行なう上で必要なOSSを中心とした技術要素の選定

作業内容 社内外のビッグデータ集計/提供システムのインフラ（クラウド）設計・構築をご担当頂きます。 ・社内外のビッグデータを使ったASPシステムのクラウド設計～構築 ・クラウド、アナリティクスツールを利用した分析開発・技術支援 ・計測タグ/SDKによる測定・収集・クレンジング処理の開発・設計・運用支援　など

作業内容 　複数名が在籍するチームに参画して頂き、連携しながら 　複数存在する基幹系システム基盤の更改、EOL（End Of Life）、 　EOS（End Of Service）に関して関係部署と調整し 　個々の業務調整・推進をお願いします。 　実作業は関係部署が行うことになります。 　業務調整・推進の中心の業務になるためWBS（Work Breakdown Structure）を 　関係部署と検討・調整し作成し、進捗管理と推進を行います。 　主な業務は下記となります。 　・WBS作成 　・進捗管理 　・関係部署が行う業務推進 　・更改検討（方針・ドキュメント作成） 　・開発・構築管理（課題管理） 　・運用検討（方針・ドキュメント作成） 　・移行準備（進捗管理） ＜環境＞ RHEL, LAMP, VMware vSphere, ESXi, KVM, SANストレージ, WindowsServer等 OpenStack, Hadoop ＜備考＞ テレワークあり ＜基本時間＞ 9：00～17：30

作業内容 ・大手外資系製薬会社のデータエンジニアとして参画いただきます。 ・具体的には下記です。 　‐データと分析チームの技術的な問題支援 　‐データインフラストラクチャのニーズのサポート 　‐ビジネスアナリストやその他の利害関係者との連携 　‐ビジネス要件を技術仕様に変換する作業 　‐データプロセスの効率と機能の向上に向けたデータサイエンティストとの連携 　‐データセットの組み立て 　‐Microsoft AzureまたはAWSのいずれかで、最適なデータパイプラインアーキテクチャを設計、構築、テスト、および維持 　‐データソースからのデータの最適な抽出、変換、および読み込みに必要なインフラ構築 　‐データ品質、データセキュリティ、およびデータガバナンスの側面でのデータプラクティスの適用

作業内容 ・Javaを用いた新基盤アプリケーション移行開発案件に携わっていただきます。 ・主に下記作業をご担当いただきます。 　-設計 　-開発 　-テスト 　-改修 　-改修のための設計

作業内容 ・JavaやPythonを用いて分散処理システム開発に携わっていただきます。 ・担当工程は設計以降を想定しております。

作業内容 JOB制御周り、I/F周りのフレームワーク部分対応 主に設計・製造・テスト対応となります ・工程 JOB制御周り、I/F周りのフレームワーク部分の設計・製造・テスト対応 ・技術要素 Python、SAPHANA、Hadoop、NiFi、SQLServer、JobCenter、SQL 【担当工程】　 詳細設計,実装,テスト,運用・保守

作業内容 データプラットフォームのシステムアーキテクチャの作成やシステム開発を行なう上で必要なOSSを中心とした技術要素の選定をご担当頂きます。

作業内容 社内データ分析基盤開発・保守・運用業務を担っていただきます。■Python/Shell/Rubyで開発されているバッチ系システムが主 ・データレイクへの取り込み ・中間テーブル生成 ■追加機能開発 / 不具合調査・修正 / 社内ユーザーからの問合せ対応 ・社内ユーザコミュニケーションや要件定義も含む ・インフラからコードデプロイまでを担当 - ローカルで実装、Sandbox環境で動作検証、Productionデプロイ

作業内容 世界各国で利用されるオンラインサービスにおける、データ分析基盤の開発運用支援をお願い致します。 ＜期間＞ 7月～長期(以降も更新の可能性あり)

作業内容 クライアントが保有するビッグデータの利活用を進めていくにあたりAWSでのデータの加工、修正をお願いいたします。

作業内容 下記3つの担当のいずれかをご担当いただきます。 -サーバ担当 　　　– サーバ設計構築経験(Windowsサーバメイン 仮想基盤特にHCIを扱う予定) -ネットワーク担当 　　　– ネットワークスキル(CCNA相当以上。Dell L3, FortiGate, Cisco VPNなど扱う予定) -DB担当 　　　– DB(MS SQLServer 2019を扱う予定) Hadoopの知識があれば尚可 -共通 　　　– その他(セキュリティSW、ログ、監視、バックアップなどのエージェント導入支援作業、 　　　　ファシリティ関連(ラック構成や調達管理) なども発生する見込み)

作業内容 【概要】 AWSを活用したインフラ保守、構築・開発業務 ・AWSを活用した某テレビ局社内案件などのインフラ保守、構築・開発の大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件(頻度:低) ・インフラ関連業務、及びその他付随業務 ※アサイン後はクラウドから物理環境までを扱う業務内容の いづれかをご担当いただきます。 アサイン予定のチームは他の複数のチームと関わりながら業務を 遂行する横断的な組織になります。 ※【参考】使用サービス例 AWS関連: EC2(AmazonLinux),EBS,AutoScalingGroup,ELB各種,ECS,ECR,S3, EFS,DynamoDB,ElasticsearchService,Aurora,RDS各種, Lambda,Athena,Kinesis,CloudFront,ACM,SNS,SQS, CloudTrail,CodeCommit,CodeBuild,CodeDeploy,Route53, DirectConnect,VPC,CloudWatch,AWSWAF,GuradDuty OSS関連 Apache,Nginx,Redis,MySQL,PostgreSQL,Memcached,Postfix, vsftp,Zabbix,crond,OpenSSL,Elasticsearch,Kibana,Fluentd, Docker,Ansible,Hadoop,HBase,Hive,Pig,ZooKeeper, Git,GitHub,Gitlab,GitlabCIRunner,CircleCI,Redmine, WordPress,Laravel,RubyOnRails,CentOS,Debian,Vernish, Python,Perl,Javascript,PHP ※一般のWEBシステムで使うようなサービスを中心に活用しております。 その他: Fastly、Twilio、Mackerel、Slack、Backlog ▼勤務地等 最寄駅:六本木オフィス※リモート可 勤務時間:10:00-18:00勤務(7時間稼働、1時間休憩) ※土日祝日の出社は基本的にありません。 ▼条件面 面談:1回(Meet予定) 精算:140-180h ※週5日〜OKの案件です！

作業内容 【概要】 AWSを活用したインフラ保守、構築・開発業務 ・AWSを活用した某テレビ局社内案件などのインフラ保守、構築・開発の 大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件(頻度:低) ・インフラ関連業務、及びその他付随業務 ※アサイン後はクラウドから物理環境までを扱う業務内容の いづれかをご担当いただきます。 アサイン予定のチームは他の複数のチームと関わりながら業務を 遂行する横断的な組織になります。 ※【参考】使用サービス例 AWS関連: EC2(AmazonLinux),EBS,AutoScalingGroup,ELB各種,ECS,ECR,S3, EFS,DynamoDB,ElasticsearchService,Aurora,RDS各種, Lambda,Athena,Kinesis,CloudFront,ACM,SNS,SQS, CloudTrail,CodeCommit,CodeBuild,CodeDeploy,Route53, DirectConnect,VPC,CloudWatch,AWSWAF,GuradDuty OSS関連 Apache,Nginx,Redis,MySQL,PostgreSQL,Memcached,Postfix, vsftp,Zabbix,crond,OpenSSL,Elasticsearch,Kibana,Fluentd, Docker,Ansible,Hadoop,HBase,Hive,Pig,ZooKeeper, Git,GitHub,Gitlab,GitlabCIRunner,CircleCI,Redmine, WordPress,Laravel,RubyOnRails,CentOS,Debian,Vernish, Python,Perl,Javascript,PHP ※一般のWEBシステムで使うようなサービスを中心に活用しております。 その他: Fastly、Twilio、Mackerel、Slack、Backlog ▼勤務地等 最寄駅:六本木オフィス※リモート可 勤務時間:10:00-18:00勤務(7時間稼働、1時間休憩) ※土日祝日の出社は基本的にありません。 ▼条件面 面談:1回(Meet予定) 精算:140-180h ※週5日〜OKの案件です！

作業内容 サービス関連ログ、サービス関連データをElasticserach及びHadoopクラスタ基盤（オンプレ）及びSplunkへ集約し、コールセンタの運用改善等のデータ活用を実施しております。

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【概要】 AWSを活用したインフラ保守、構築・開発業務 ・AWSを活用した某テレビ局社内案件などのインフラ保守、構築・開発の 大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件(頻度:低) ・インフラ関連業務、及びその他付随業務 ※アサイン後はクラウドから物理環境までを扱う業務内容の いづれかをご担当いただきます。 アサイン予定のチームは他の複数のチームと関わりながら業務を 遂行する横断的な組織になります。 ※【参考】使用サービス例 AWS関連: EC2(AmazonLinux),EBS,AutoScalingGroup,ELB各種,ECS,ECR,S3, EFS,DynamoDB,ElasticsearchService,Aurora,RDS各種, Lambda,Athena,Kinesis,CloudFront,ACM,SNS,SQS, CloudTrail,CodeCommit,CodeBuild,CodeDeploy,Route53, DirectConnect,VPC,CloudWatch,AWSWAF,GuradDuty OSS関連 Apache,Nginx,Redis,MySQL,PostgreSQL,Memcached,Postfix, vsftp,Zabbix,crond,OpenSSL,Elasticsearch,Kibana,Fluentd, Docker,Ansible,Hadoop,HBase,Hive,Pig,ZooKeeper, Git,GitHub,Gitlab,GitlabCIRunner,CircleCI,Redmine, WordPress,Laravel,RubyOnRails,CentOS,Debian,Vernish, Python,Perl,Javascript,PHP ※一般のWEBシステムで使うようなサービスを中心に活用しております。 その他: Fastly、Twilio、Mackerel、Slack、Backlog ▼勤務地等 最寄駅:六本木,リモート 勤務時間:10:00-18:00勤務(7時間稼働、1時間休憩) ※土日祝日の出社は基本的にありません。 ▼条件面 面談:1回(Meet予定) 精算:140-180h ※週5日〜OKの案件です！

作業内容 人工知能を用いた農業DXサービスの開発に携わっていただきます。 具体的には以下の作業を想定しております。 　- 収集したデータを用いての開発、改善 　- プロダクトの分析アルゴリズムの改善、顧客対応 　- 異常検知、多クラス分類アルゴリズムの開発 　- 検知性能確認の枠組みの開発

作業内容 大規模基幹系システム基盤のシステム導入や更改、ベンダコントロールを含む維持管理業務をお願いします。 システム作業より維持管理支援業務(ドキュメント作成が多い)となり部署間調整やベンダー調整が多いです。 ＜主な業務は下記＞ ・更改検討(方針・ドキュメント作成) ・開発・構築管理(課題管理) ・運用検討(方針・ドキュメント作成) ・移行準備(進捗管理) ＜環境＞ RHEL, LAMP, VMware vSphere, ESXi, KVM, SANストレージ, WindowsServer等 OpenStack, Hadoop ＜備考＞ テレワークあり ＜基本時間＞ 9：00～17：30

作業内容 ・美容系総合ポータルサイト向け会員システムの案件において、 　運用や機能改善業務をご担当いただきます。

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 テックビズなら記帳代行無料！仕事に集中して取り組んでいただけます。 ＜主な業務内容＞ 　　　　　　　AWSを活用したインフラ保守、構築・開発業務 　　　　　　　＜案件例＞ 　　　　　　　・AWSを活用した某テレビ局社内案件などのインフラ保守、構築・開発の 　　　　　　　　大型案件 　　　　　　　・CMSサービスのインフラ保守運用 　　　　　　　・物理サーバー案件（頻度：低） 　　　　　　　・インフラ関連業務、及びその他付随業務 　　　　　　　※アサイン後はクラウドから物理環境までを扱う業務内容の 　　　　　　　　いづれかをご担当いただきます。 　　　　　　　　アサイン予定のチームは他の複数のチームと関わりながら業務を 　　　　　　　　遂行する横断的な組織になります。 　　　　　　　※【参考】使用サービス例 　　　　　　　　AWS関連: 　　　　　　　　EC2(AmazonLinux), EBS, AutoScalingGroup, ELB各種, ECS, ECR, S3, 　　　　　　　　EFS, DynamoDB, Elasticsearch Service, Aurora, RDS各種, 　　　　　　　　Lambda, Athena, Kinesis, CloudFront, ACM, SNS, SQS, 　　　　　　　　CloudTrail, CodeCommit, CodeBuild, CodeDeploy, Route53, 　　　　　　　　DirectConnect, VPC, CloudWatch, AWS WAF, GuradDuty 　　　　　　　　OSS関連 　　　　　　　　Apache, Nginx, Redis, MySQL, PostgreSQL, Memcached, Postfix, 　　　　　　　　vsftp, Zabbix, crond, OpenSSL, Elasticsearch, Kibana, Fluentd, 　　　　　　　　Docker, Ansible, Hadoop, HBase, Hive, Pig, ZooKeeper, 　　　　　　　　Git,GitHub, Gitlab, Gitlab CI Runner, Circle CI, Redmine, 　　　　　　　　WordPress, Laravel, RubyOnRails, CentOS, Debian, Vernish, 　　　　　　　　Python, Perl, Javascript, PHP 　　　　　　　　※一般のWEBシステムで使うようなサービスを中心に活用しております。 　　　　　　　　その他: 　　　　　　　　Fastly、Twilio、Mackerel、Slack、Backlog　　　 ▼勤務地等 　勤務時間　：11:00－19:00（実働7時間、1時間休憩） 　　　　　　　※土日祝日の出社は基本的にありません。 ※以下に該当する方からの応募はお断りしております。 なお、選考を進めるにあたってスキルシートが必要です。 -------------------------------------------------------- ・外国籍の方(永住権をお持ちの方は問題ございません) ・週5日稼働できない方 --------------------------------------------------------

作業内容 某大手通信キャリアが提供する販促プログラムにおいて、加盟店（飲食店、小売等）が 利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）の データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。 ＜開発環境＞ 言語：Python (一部 Javaもあり) フレームワーク：gRPC, OpenAPI インフラ：AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github クラウド：AWS

作業内容 ・Javaを用いたシステム開発案件に携わっていただきます。 ・主に下記業務をご担当いただきます。 　-基本設計以降の実務開発業務 　-API開発

作業内容 現行加工処理をマイグレーションの計画/方式の検討立案を行っていただきます 　【マイグレーション例】 　・現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト 　・ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換する 　　⇒Databricks、snowflake(snowpark)、AWS（Glue,EMR）等のSpark関連マネージド・サービスにマイグレーション

作業内容 ・データ分析（データの前処理、クレンジング、変換） ・モデリング ・SQLを用いたデータベース操作 ・PythonによるAPI開発

作業内容 ・データAIプラットフォーム推進案件にPMとしてご参画いただきます。 ・主に下記作業をご担当いただきます。 　-プロジェクトマネジメント業務 　-提案業務

作業内容 ビックデータ基盤構築・運用案件になります。 現在、オンプレにて社内システムのログをElasticsearch/Hadoopに集約し、 各組織にレポート等の可視化機能を提供している基盤を運用しております。 今回追加データの可視化の要件がありますので、 データパイプライン構築と可視化に伴う設計・構築を中心にご支援いただける人を探しています。

作業内容 ・美容系総合ポータルサイト向け会員システムの案件において、 　API機能の追加機能開発および保守運用をご担当いただきます。

作業内容 ・ご経験やご希望に応じて上流から下流まで幅広く携わっていただきます。 ・主にScalaを利用したウェブアプリケーション開発、および 　Google Cloud PlatformおよびAWSを利用した新業務ツールの開発、運用 　を行っていただきます。

作業内容 ・大規模基幹系システム基盤のシステム導入や更改、ベンダコントロールを含む維持管理業務をお願いします。 ・システム作業より維持管理支援業務（ドキュメント作成が多い）となり部署間調整やベンダー調整が多いです。 ・主な業務は下記となります。 -更改検討（方針・ドキュメント作成） -開発/構築管理（課題管理） -運用検討（方針・ドキュメント作成） -移行準備（進捗管理） ・環境は下記です。 RHEL,LAMP, VMware vSphere, ESXi, KVM, SANストレージ, WindowsServer等 OpenStack, Hadoop

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ★本案件の最新の状況は、担当者までお問合せ下さい。 ★期間：随時～ ・Lob分析サービス開発運用 ・TVなどの操作Logをもとにランキングなどを出力するサービス開発 （AWSインフラ構築または、Pythonを用いたサーバアプリケーション開発） ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎