現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テーブル定義 (Apache Hive, Spark, HBase etc…) データフロー設計 (Apache NiFi) バッチアプリケーション作成 (Java, Shellスクリプト) インフラセキュリティ対応 (SSL化対応、AD認証連携 etc…) 環境 オンプレサーバー (現地作業等は無し、リモートから接続) OS: RHEL8HPE Ezmeral Data Fabric (Hadoop, Hive, Spark, NiFi etc…) データ分散処理基盤にまつわるpache系OSSをまとめたパッケージ製品 (サポートが付くだけのようなイメージ) HPE Ezmeral Runtime (≒ Kubernetes) OpenShift等に⽐べ、より純正Kubernetesに近い 構成 データレイク: HDFS, minio(≒S3), HBase DWH: Hive or Spark ワークフロー: NiFi or Airflow データ加⼯: Hive, Spark (シェルスクリプト/Java or Python) BI: Tableau, Palantir (本募集スコープの作業範囲外) 体制 アジャイル開発 (スクラム) メンバー10名程度 デイリーで午前にスクラムミーティング有り
3年以上のバックエンドまたはインフラ開発経験
データエンジニアとしての経験 データ基盤における要件定義・設計経験 データ基盤の開発・運用経験 データレイク、DWHの実装経験 データパイプラインの実装経験 Python or Javaによるアプリケーション実装経験 Kubenetesの知見
リモートOK
リモート
週5日
データエンジニア
リモート/在宅
東京都
エネルギー・インフラ
1回
2023年9月9日
※募集中の案件だけでなく過去の募集案件を中心に掲載しております。
※ プロフィールのスキル・ご経験や地域によっては案件が少なく、メールが配信されない場合がございます。
【Python】データプロダクトにおけるバックエンド開発【ビジネスカジュアル】
【Typescript】自社プロダクトのバックエンドエンジニア
New【DBエンジニア】Kubernetes基盤エンジニアの求人・案件
New【SQL/Java/Python】Devopsエンジニアの求人・案件
【Java】警備システムAP開発
テックリード / Java マーケットプレイスシステム開発
【Go/Javaなど】システム構築・データ処理のプログラム開発の求人・案件
New【Node.js】対策システム開発・保守運用の求人・案件
【TypeScript/JavaScript】AIクラウドにおけるサーバーサイド開発の求人・案件
【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件 の案件・求人情報をご覧の方へ
フリーランスエージェントはエンジニア未経験の場合、フリーランス案件を紹介してくれるの?
正直なところ、エンジニア未経験の場合、独学でプログラミングを学習していたとしてもフリーランスとして案件に参画するのは難しい可能性が高いと言えるでしょう。まずは組織に所属し、エンジニアとしての実務経験を積んでからフリーランスとしての働き方を検討するのがおすすめです。フリーランスHubではエンジニア向けの記事を多数掲載しています。フリーランスエージェントとクラウドソーシングサイト(サービス)の違い
フリーランスエージェントは企業の案件とフリーランスを検討している人のマッチングをカウンセリングや営業代行を通してサポートするのに対し。クラウドソーシングはサイト上で直接案件を探すものになります。クラウドソーシングサイトを利用する際は、フリーランスと発注者が直接プラットフォームでやり取りするため、エージェントによるサポートはありません。フリーランスHubではフリーランスエージェントの保有する案件を多数掲載しています。フリーランスHubからエージェントのフリーランス案件に応募した際の流れについて
フリーランスHubからエージェントのフリーランス案件にご応募頂いた後、各エージェントからのメールや電話などで日程調整を行った後、一対一のカウンセリングでスキルや希望の働き方をエージェントの担当者の方からヒアリング、その後希望にあった企業と商談し、案件に参画して頂きます。