【サーバー(Linux系)】オンプレミスHadoop環境のアップグレード【リモートOK】
作業内容 ■概要
オンプレミスHadoop環境のアップグレードをお任せいたします。
■具体的な作業内容
・某通信大手様のオンプレミスHadoop環境アップグレードを実施
・重要なシステム且つ200台以上のサーバーで構成されているクラスタリングを扱う
【Azure】在庫管理システムの構築案件/フルリモート
作業内容 大手小売り企業様にての業務となります。
在庫管理等の分散処理システムをHadoop on Sparkで組んでおり
DMCから逆輸入による導入を実施して頂きます。
【体制】
・リーダー:一名 (hadoop有識者、テックリード)
・SIer内hadoopスペシャリストに相談可能
・オフショアメンバー(中国)側と連携して進める。
【商流】
某大手小売流通→大手SIer→同社
リモート併用|【Hadoop/Spark/AmazonKinesis】オンプレミスサーバ運用(バックエンドエンジニア)
業務委託(フリーランス)
HadoopSpark
バックエンドエンジニア
作業内容 【概 要】 Hadoop運用/およびLinuxサーバの運用業務となります。
オンプレサーバ運用かつ、新規運用となりますのでLinux運用経験/運用設計が可能な方を想定しています。
・Hadoopまたは類似システムの運用経験があること
(優先度としては、Hadoop>類似のシステムSpark/AmazonKinesisなど)
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
【フルリモート案件】【AWS】某メーカー向けAWS移行支援
作業内容 お客様にて配賦処理サーバを国内DCプライベートクラウド上に
Hadoopサーバを構築して運用中であるが、RHELサポート切れが近い為、
現行環境をAWS上に移行予定。
現行Hadoopクラスタ環境をAWS EMRに移行するにあたり以下作業を実施予定。
・PoC環境の設計、構築、テスト
・アプリチームの支援(AWS関連)
・性能テスト支援(リソース情報取得等) 等
【Azure】クラウドエンジニアの求人・案件
業務委託(フリーランス)
HadoopAzure
インフラエンジニア
作業内容 在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入
MySQL / Hadoop など 金融データ分析基盤の運用に関わる支援
作業内容 金融データ分析基盤の運用に関わる業務支援
・プラットフォーム運営 ※Seniorレベル
・データ収集(ETL作業)
・KPIレポート作成
・ユーザー権限管理
・Zeppelin保守
<環境等>
データベース:Hadoop(Cloudera Data Platform), 一部MySQL
BIツール:Zeppelin, Tableau
ETLツール:内製, 一部Airflow
データ量:約500TB(Diskは1PB)
<備考>
テレワーク中心
New【Java】アプリケーションの新基板への移行/コンテナ化の求人・案件
業務委託(フリーランス)
JavaPythonWindowsLinuxHadoop
作業内容 大規模データ収集基板構築(オンプレにて構築)に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト
新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)
【Java/Hadoop】Javaのアプリ開発経験ある方!Hadoop経験ある方大歓迎!フルリモート!大規模データ収集基板構築 アプリケーション開発エンジニア
業務委託(フリーランス)
JavaWindowsLinuxHadoop
サーバーサイドエンジニア
作業内容 大規模データ収集基板構築(オンプレにて構築)に伴い、アプリケーションの新基板への移行/
アプリケーションのコンテナ化を支援いただける方を募集します。
アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、
環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。
・RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を
行うように改修、改修のための設計、開発、テスト
・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)
Java / Linux など アプリの新基板への移行・コンテナ化の支援
JavaPythonWindowsLinuxHadoopSparkOpenShiftApacheKafkaKubernetes
作業内容 オンプレミスの大規模データ収集基板構築に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。
アプリケーションの設計、開発、テストがメイン業務となります。
アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験があればよりマッチいたします。
<業務内容>
・RDBからデータ取得を行うアプリケーションを、DWH(Hadoopベース)からデータ取得を行うように改修
→改修のための設計、開発、テスト
・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)
<開発環境>
・Java
・Hadoop(Cloudera)
・Apache kafka
・Apache spark
・Kubernetes/OpenShift/vCenter
<備考>
現状リモートワーク
新型コロナウイルス感染症の終息後は出社予定
<基本時間>
9:00~18:00
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
業務委託(フリーランス)
HadoopAWSTerraform
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
HadoopSparkAWSApache
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
【Java】アプリケーション開発エンジニアの求人・案件
業務委託(フリーランス)
JavaPythonWindowsLinuxHadoop
作業内容 大規模データ収集基板構築(オンプレにて構築)に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。
アプリケーションの設計、開発、テストがメイン業務となります。
アプリ設計、データ投入、環境利用等で分散FS(Hadoop)の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。
RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)【開発環境】
・Java
・Hadoop(Cloudera)
・Apache kafka
・Apache spark
・Kubernetes/OpenShift/vCenter
【Java】システムの保守運用
業務委託(フリーランス)
JavaCPythonLinuxMySQLHbaseHadoopGit
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【案件名】
大手WEB会社が共同開発している
システムの保守運用業務をご担当いただきます。
※基本的に保守運用業務のみで開発は行わない想定
・Hadoopエコシステム及びHBaseの保守運用※経験していると確度が上がります
・手順書の作成、リリース作業、
障害対応、トラブルシュート、問い合わせ対応など
・休日夜間の対応が必要
・利用PF/言語:Cuve(HBase),C3(Hadoop)がPFそのもの
【場所】リモート可/豊洲※基本リモート
【面談】1回
※週5日~OKの案件です!
PM / PL システム基盤リプレイス インフラリーダー
作業内容 既存のHadoopシステムの基盤含めた更改案件になります。
メインはHadoopとその上で動くアプリの更改となり、それらアプリ・MW要件に合わせて、既存資料と比較して踏襲/変更/新規の点を 記載した資料を作成します。(基本設計・詳細設計・テスト仕様書等)
・基本設計~構築・単体テストまで12月末
・結合テスト・統合テストで2月末
<備考>
リモートあり
<服装>
ビジネスカジュアル
【Java】大手WEB会社が共同開発しているシステムの保守
業務委託(フリーランス)
JavaCPythonLinuxMySQLHbaseHadoopGit
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【案件名】
大手WEB会社が共同開発しているシステムの保守運用業務をご担当いただきます。
※基本的に保守運用業務のみで開発は行わない想定です
・Hadoopエコシステム及びHBaseの保守運用
※経験していると確度が上がります
・手順書の作成、リリース作業、
障害対応、トラブルシュート、問い合わせ対応など
・休日夜間の対応が必要
・利用PF/言語:Cuve(HBase),C3(Hadoop)がPFそのもの
【条件等】
場所:リモート可/豊洲
※基本リモートとなります
面談:1回
※週5日~OKの案件です!
New【Java】大規模データ収集基板構築の求人・案件
業務委託(フリーランス)
JavaHadoopApacheKafkaKubernetes
作業内容 大規模データ収集基板構築(オンプレにて構築)に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。・新環境(分散FS環境)向け機能開発、既存機能の新環境向け修正
・アプリケーションの改修、機能追加
・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)、運用機能の開発
開発環境
・Java・Hadoop(Cloudera)・Apache kafka・Apache spark・Kubernetes/OpenShift/vCenter
【Java】大手WEB会社が共同開発しているシステムの保守運用
業務委託(フリーランス)
JavaCPythonLinuxMySQLHbaseHadoopGit
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
大手WEB会社が共同開発しているシステムの保守運用業務
をご担当いただきます。
※基本的に保守運用業務のみで開発は行わない想定です
・Hadoopエコシステム及びHBaseの保守運用
※経験していると確度が上がります
・手順書の作成、リリース作業、
障害対応、トラブルシュート、問い合わせ対応など
・休日夜間の対応が必要
・利用PF/言語:Cuve(HBase),C3(Hadoop)がPFそのもの
【場所】リモート可/豊洲
【面談】1回想定
※週5日〜OKの案件です!
【Python】大手WEB会社向けシステムの保守運用業務
業務委託(フリーランス)
JavaCPythonLinuxMySQLHbaseHadoopGit
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
詳細:
大手WEB会社が共同開発しているシステムの保守運用業務
※基本的に保守運用業務のみで開発は行わない想定
・Hadoopエコシステム及びHBaseの保守運用
※経験していると確度が上がります
・手順書の作成、リリース作業、障害対応、トラブルシュート、 問い合わせ対応など
・休日夜間の対応が必要
・利用PF/言語:Cuve(HBase), C3(Hadoop)がPFそのもの
場所:豊洲 ※リモート可
精算:あり(確認中)
打ち合わせ:1回(WEB)
勤務時間:基本日勤(夜勤あり)
備考:
夜間休日対応が1ヶ月に1~2回発生する可能性有。
※週5日〜OKの案件です!
【AWS(リモート)】電力データ活用基盤移行に伴うインフラ基盤設計/構築支援
業務委託(フリーランス)
HadoopSparkAWS
作業内容 ・詳細設計書の執筆
・パラメータシート作成
・検証環境の構築
・基盤の構築作業
・単体/結合試験項目書の作成、テストの実施
・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます
【Python】マーケティングデータ処理開発
業務委託(フリーランス)
JavaPythonRubyScalaHadoopSparkHive
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】マーケティングデータ処理開発
【開発環境】
-言語:Java、Scala(一部:Python、Ruby)
【精算幅】140-180h
【面談】1回
【勤務地】リモート
【備考】
・服装:自由
・就業時間:9:00-17:30
※週5日〜OKの案件です!
Java / Python / Go フルスタックエンジニア募集
JavaPythonGoHadoopSparkOpenShiftApacheKafkaKubernetes
フルスタックエンジニア
作業内容 大規模データ収集基盤構築(オンプレにて構築)に伴い、既存システム機能とアプリケーションの新基盤への移行/アプリケーションのコンテナ化を支援していただける方を募集いたします。
・新環境(分散FS環境)向け機能開発、既存機能の新環境向け修正
・アプリケーションの改修、機能追加
・新基盤移行に伴う運用面対応(システム運用設計や手順整備、セキュリティ設計等)、運用機能の開発
<開発環境>
・Java
・Hadoop(Cloudera)
・Apache kafka
・Apache spark
・Kubernetes/OpenShift/vCenter
<備考>
原則フルリモート
出社の可能性もあり
<基本時間>
9:00~18:00
【AWS(リモート)】電力データ活用基盤移行に伴うインフラ基盤設計/構築支援
業務委託(フリーランス)
HadoopSparkAWS
作業内容 ・詳細設計書の執筆
・パラメータシート作成
・検証環境の構築
・基盤の構築作業
・単体/結合試験項目書の作成、テストの実施
・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます
【AWS(リモート)】電力データ活用基盤移行に伴うインフラ基盤設計/構築支援
業務委託(フリーランス)
HadoopSparkAWS
インフラエンジニア
作業内容 ・詳細設計書の執筆
・パラメータシート作成
・検証環境の構築
・基盤の構築作業
・単体/結合試験項目書の作成、テストの実施
・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます
【AWS】テレビ視聴データ基盤分析案件
業務委託(フリーランス)
HbaseHadoopSparkAWSHive
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 システム基盤の運用改善をご担当いただきます。
【AWS】データマネジメントシステム更改案件における構築支援業務
作業内容 データマネジメントインフラ支援業務など、
IT基盤戦略担当様のDMシステム更改案件における構築支援業務を行っていただきます。
AWS データマネジメントシステム更改案件における構築支援業務(リモート有り)
作業内容 DMシステム更改案件における構築支援業務
データマネジメントインフラ支援業務
・DaaS環境構築支援
・インフラ構成検討支援
・リアルタイム/機械学習基盤設計支援
・問合せ対応
AWSクラウド環境にHadoop,Sparkといった技術を用いデータ連携/データ収集を行い、
AIによる情報活用基盤の更改を行っていきます。
【Linux】ソフトウェア基盤(ミドルウェア)環境構築
業務委託(フリーランス)
LinuxOracleHadoopSparkApacheJBoss
サーバーエンジニア
作業内容 ソフトウェア基盤(ミドルウェア)環境の設計、構築、維持管理業務全般をしていただきます。
【AWS】地図広告プラットフォーム開発
業務委託(フリーランス)
PythonHadoopSparkAWSHiveGlueAthena
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
【精算幅】140-180h
【面談】1回
【勤務地】虎ノ門※リモート
【備考】
・服装:自由
・就業時間:9:00-18:00
※週5日〜OKの案件です!
【RHEL】DX推進に向けたデータ利活用基盤開発支援
作業内容 ・DX推進の一環として、グループ各社のデータを横断的に利活用できる基盤を開発
・ベンダー側SEとして設計または構築フェーズから参画予定
・業務範囲未定(8/28, 29のMTGでお客様と共に決定)
・現時点で上がっている候補は下記
-Ezmeral Data Fabric構築((Hadoop環境≒旧MapR)
-Ezmeral Runtime構築(Kubernetes環境)
-Ezmeralログ監理
-Ezmeralユーザー管理(認証含む)
-データ移行設計・移行実施
-DWH設計・構築
-Ezmeral Data FabricとTableauの接続
【AWS/Hadoop/Python/リモート併用】地図広告プラットフォーム開発の案件・求人
業務委託(フリーランス)
PythonHadoopSparkAWSHiveGlueAthena
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
★本案件の最新の状況は、担当者までお問合せ下さい。
★期間:随時~
地図広告プラットフォーム開発
※20代〜30代が中心で活気ある雰囲気です。
※成長意欲が高く、スキルを急速に伸ばしたい方に最適
※将来リーダーを目指す方歓迎