Hadoopのフリーランス案件・求人一覧 | 4ページ目

作業内容 金融データ分析基盤の運用に関わる業務支援 ・プラットフォーム運営 ※Seniorレベル ・データ収集(ETL作業) ・KPIレポート作成 ・ユーザー権限管理 ・Zeppelin保守 ＜環境等＞ データベース：Hadoop(Cloudera Data Platform), 一部MySQL BIツール：Zeppelin, Tableau ETLツール：内製, 一部Airflow データ量：約500TB(Diskは1PB) ＜備考＞ テレワーク中心

作業内容 業務内容：世界中から集まる製薬データの分析 メインフレームシステムのダウンサイジング

作業内容 ・不動産企業にてHadoop/MongoDB/Chefを利用した、 　インフラ構築、保守運用をご担当頂きます。

作業内容 データ蓄積システム(Hadoop/Spark)を構築し商用トライアルを実施したところ、課題が見つかったため、商用化に向けた改善を行います。 1、HadoopYARN/HDFS/Sparkのチューニング、性能検証：1名 HadoopYARN：メモリ、CPU数、データノード多重度など HDFS：ブロックサイズ、DataNodeへの接続数、Nameノードヒープサイズなど Spark：テーブルキャッシュ、パーティション数、コア数、エグゼキュータ数など 2、OSSの調査・導入・検証：3名 ・HDFSデータの暗号化、圧縮技術の調査・検証 ・大量構造化データの保持方式の調査・検証 GreenplumDB、Hiveなど 環境はHadoop、Spark、PostgreSQL、Java、Linuxとなります。

作業内容 大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/ アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、 環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 ・RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を 　行うように改修、改修のための設計、開発、テスト ・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

作業内容 某大手金融事業社内でのビックデータ案件になります。 現在稼働しているHadoop環境の運用、保守に加え、 7月から新規機能の開発などがスタートするため、 人員の増員を計画しております。 データ分析は別チームが存在しますので、あくまで分析を行うための 環境構築を行って頂くポジションとなりますが、現場の状況、 また適正次第では分析業務にも関わっていただく可能性がございます。 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発 ・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守

作業内容 オンプレミスの大規模データ収集基板構築に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験があればよりマッチいたします。 ＜業務内容＞ ・RDBからデータ取得を行うアプリケーションを、DWH(Hadoopベース)からデータ取得を行うように改修 →改修のための設計、開発、テスト ・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等) ＜開発環境＞ ・Java ・Hadoop(Cloudera) ・Apache kafka ・Apache spark ・Kubernetes/OpenShift/vCenter ＜備考＞ 現状リモートワーク 新型コロナウイルス感染症の終息後は出社予定 ＜基本時間＞ 9：00～18：00

作業内容 化粧品系ECサイトのデータ分析基盤の運用、機能改修をご担当していただきます。

作業内容 通信会社向けのセキュリティプラットフォーム基盤をOSSを利用して 新規構築する案件となります。各種製品ログをデータレイクに蓄積し、 リアルタイムなアラート検知、およびインタラクティブな集計／分析を 可能とするプラットフォームの構築案件です。

作業内容 大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）【開発環境】 ・Java ・Hadoop(Cloudera) ・Apache kafka ・Apache spark ・Kubernetes/OpenShift/vCenter

作業内容 ・サービス会社向けインフラの運用改善に携わっていただきます。 ・現行の開発/運用チームの改善支援を行っていただきます｡ ・下記をご担当いただきます｡ -システム運用､改善 -業務フロー体系化､可視化 -インシデント管理 -障害対応支援 ・構造上の問題の解消や作業負荷を軽減するための 　体系化､共通化､効率化などを別リソースで推進する事を検討中です｡

作業内容 ・AWSクラウド環境にHadoop/Sparkといった技術を用いデータ連携/ データ収集 を行い、AIによる情報活用基盤の更改をご担当いただきます。 ・下記を行っていただきます。 -DaaS環境構築支援 -インフラ構成検討支援 -リアルタイム/機械学習基盤設計支援 -問合せ対応

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【案件名】 大手WEB会社が共同開発しているシステムの保守運用業務をご担当いただきます。 ※基本的に保守運用業務のみで開発は行わない想定です ・Hadoopエコシステム及びHBaseの保守運用 ※経験していると確度が上がります ・手順書の作成、リリース作業、 　障害対応、トラブルシュート、問い合わせ対応など ・休日夜間の対応が必要 ・利用PF/言語:Cuve(HBase),C3(Hadoop)がPFそのもの 【条件等】 場所:リモート可/豊洲 ※基本リモートとなります 面談:1回 ※週5日～OKの案件です！

作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。 データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。

作業内容 業種を問わずお客様が所持しているビッグデータを収集、蓄積、分析するためのプラットフォームをクラウド環境で構築していただきます。

作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。 データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。

作業内容 既存のHadoopシステムの基盤含めた更改案件になります。 メインはHadoopとその上で動くアプリの更改となり、それらアプリ・MW要件に合わせて、既存資料と比較して踏襲/変更/新規の点を　記載した資料を作成します。(基本設計・詳細設計・テスト仕様書等) ・基本設計～構築・単体テストまで12月末 ・結合テスト・統合テストで2月末 ＜備考＞ リモートあり ＜服装＞ ビジネスカジュアル

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【案件名】 大手WEB会社が共同開発している システムの保守運用業務をご担当いただきます。 ※基本的に保守運用業務のみで開発は行わない想定 ・Hadoopエコシステム及びHBaseの保守運用※経験していると確度が上がります ・手順書の作成、リリース作業、 　障害対応、トラブルシュート、問い合わせ対応など ・休日夜間の対応が必要 ・利用PF/言語:Cuve(HBase),C3(Hadoop)がPFそのもの 【場所】リモート可/豊洲※基本リモート 【面談】1回 ※週5日～OKの案件です！

作業内容 大規模データ収集基板構築（オンプレにて構築）に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。・新環境（分散FS環境）向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）、運用機能の開発 開発環境 ・Java・Hadoop(Cloudera)・Apache kafka・Apache spark・Kubernetes/OpenShift/vCenter

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【概要】 大手WEB会社が共同開発しているシステムの保守運用業務 をご担当いただきます。 ※基本的に保守運用業務のみで開発は行わない想定です ・Hadoopエコシステム及びHBaseの保守運用 ※経験していると確度が上がります ・手順書の作成、リリース作業、 　障害対応、トラブルシュート、問い合わせ対応など ・休日夜間の対応が必要 ・利用PF/言語:Cuve(HBase),C3(Hadoop)がPFそのもの 【場所】リモート可/豊洲 【面談】1回想定 ※週5日〜OKの案件です！

作業内容 ・Azureのサービスを活用したPoCに携わって頂きます。

作業内容 データ分析サイトの機能追加 【工程】：・システム仕様の英訳 ・オフショア対応（欧州） 【環境】：Linux、Apache、Tomcat、PHP、MySQL、Hadoop

作業内容 ・生命保険会社へのデータ分析基盤の新規導入に携わっていただきます｡ ・他の損保会社への導入実績のある分析基盤をベースにクラウド上に新規構築になります｡ ・クラウドの設計､構築は他組織が担当するため、 　OS、ミドルウェア以上のレイヤを担当いただきます｡ ・現時点の想定している関連する主な製品は下記です｡ 　・Windows Server、RHEL（Linux） 　・Hadoop 　・Informatica BDM/EDC/EDL 　・Azure Database（SQL Server、My SQL） 　・Active Directory 　・Hinemos 　・Microsoft Azure

作業内容 ・データマネジメントインフラ支援業務にて以下をご担当いただきます。 　-DaaS環境構築支援 　-インフラ構成検討支援 　-リアルタイム/機械学習基盤設計支援 　-問合せ対応 ・AWSクラウド環境にHadoop、Sparkを用いてデータ連携/データ収集を行い、 　AIによる情報活用基盤の更改を行っていきます。 ・またJavaやPHPを用いた一部機能追加も想定しております。

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 詳細： 大手WEB会社が共同開発しているシステムの保守運用業務 ※基本的に保守運用業務のみで開発は行わない想定 ・Hadoopエコシステム及びHBaseの保守運用 　※経験していると確度が上がります ・手順書の作成、リリース作業、障害対応、トラブルシュート、 問い合わせ対応など ・休日夜間の対応が必要 ・利用PF/言語：Cuve(HBase), C3(Hadoop)がPFそのもの 場所：豊洲　※リモート可 精算：あり（確認中） 打ち合わせ：1回（WEB） 勤務時間：基本日勤（夜勤あり） 備考： 夜間休日対応が1ヶ月に1～2回発生する可能性有。 ※週5日〜OKの案件です！

作業内容 ・社内会計システムのリプレイスを行なっていただきます。 ・具体的には以下のような作業をご担当いただきます。 -仕様把握、詳細仕様の策定 -詳細設計の作成 -Hiveクエリの作成、テスト、チューニング -Webアプリケーションの設計、開発、テスト

作業内容 大規模データ収集基盤構築(オンプレにて構築)に伴い、既存システム機能とアプリケーションの新基盤への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。 ・新環境(分散FS環境)向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)、運用機能の開発 ＜開発環境＞ ・Java ・Hadoop(Cloudera) ・Apache kafka ・Apache spark ・Kubernetes/OpenShift/vCenter ＜備考＞ 原則フルリモート 出社の可能性もあり ＜基本時間＞ 9：00～18：00

作業内容 有名ベンチャー企業のサービスの追加開発案件を行っていただきます。

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【概要】マーケティングデータ処理開発 【開発環境】 -言語:Java、Scala(一部:Python、Ruby) 【精算幅】140-180h 【面談】1回 【勤務地】リモート 【備考】 ・服装:自由 ・就業時間:9:00-17:30 ※週5日〜OKの案件です！

作業内容 ・詳細設計書の執筆 ・パラメータシート作成 ・検証環境の構築 ・基盤の構築作業 ・単体/結合試験項目書の作成、テストの実施 ・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます