【Java】大手コスメ系サイトのデータ分析基盤の運用、機能改修
業務委託(フリーランス)
JavaPythonSQLScalaHadoopSpark
サーバーサイドエンジニア
作業内容 大手コスメ系サイトのデータ分析基盤の運用、機能改修をご担当いただきます。
【Python,Hadoop,Spark】大手外資系医療情報・テクロノジーサービス企業データ分析支援
業務委託(フリーランス)
PythonScalaHadoopSpark
作業内容 業務内容:世界中から集まる製薬データの分析
メインフレームシステムのダウンサイジング
【週5日・首都圏限定】人流統計処理開発支援
業務委託(フリーランス)
SQLScalaUnixSpark
SE
作業内容 【人流統計処理開発支援】
Spark(Scala)によるバッチ処理改修
BashによるShellスクリプト改修
Gitlabでのissue/コード登録
外部設計/内部設計/開発/単体テスト/結合テスト/リリース
本案件は【首都圏】にお住まいで【週5日勤務】が可能な方限定となります。
【週5日・首都圏限定】人流データの抽出処理に関する検証、改修業務
業務委託(フリーランス)
SQLScalaUnixSpark
SE
作業内容 【人流データ抽出処理に関する検証、改修業務】
Spark(Scala)によるバッチ処理改修
BashによるShellスクリプト改修
Gitlabでのissue/コード登録
外部設計~リリース
本案件は【首都圏】にお住まいで【週5日勤務】が可能な方限定となります。
【SPARK GEAR】【ソーシャルゲーム向け】エフェクト制作案件
業務委託(フリーランス)
Spark
エフェクトデザイナー
作業内容 ソーシャルゲーム制作においてSPARK GEARを使用したエフェクト制作をお任せいたします。
※お任せする作業はスキルに応じて異なります。
【 hadoop,kafka,storm,spark】セキュリティプラットフォーム基盤構築
業務委託(フリーランス)
HadoopSparkApacheKafka
作業内容 通信会社向けのセキュリティプラットフォーム基盤をOSSを利用して
新規構築する案件となります。各種製品ログをデータレイクに蓄積し、
リアルタイムなアラート検知、およびインタラクティブな集計/分析を
可能とするプラットフォームの構築案件です。
【Python /一部リモート/週5日】フロー管理システムの開発・保守作業
業務委託(フリーランス)
PythonSQL
サーバーサイドエンジニアバックエンドエンジニア
作業内容
フロー管理システムの開発・保守作業
【Scala,ApacheSpark】ビックデータ/レコメンド機能等に関する開発支援
業務委託(フリーランス)
ScalaSparkApache
アプリケーションエンジニア
作業内容 Webサイトへの導入、機能そのものの改修、データ分析などなど
【AWS】データマネジメントシステム更改案件
業務委託(フリーランス)
HadoopSparkAWS
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・AWSクラウド環境にHadoop/Sparkといった技術を用いデータ連携/
データ収集 を行い、AIによる情報活用基盤の更改をご担当いただきます。
・下記を行っていただきます。
-DaaS環境構築支援
-インフラ構成検討支援
-リアルタイム/機械学習基盤設計支援
-問合せ対応
【ほぼフルリモート】某大手通信事業者向けデータ加工処理マイグレーション検討
業務委託(フリーランス)
SparkAWSApacheSnowflakeGlue
作業内容 現行加工処理をマイグレーションの計画/方式の検討立案を行っていただきます
【マイグレーション例】
・現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
・ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換する
⇒Databricks、snowflake(snowpark)、AWS(Glue,EMR)等のSpark関連マネージド・サービスにマイグレーション
【Spark,Tensorflow】産学連携AIシステム開発における基盤構築
業務委託(フリーランス)
SparkTensorFlow
組み込みエンジニア
作業内容 広告等の宣伝文章を自動構成するAIシステム開発が進んでおり、
日本語・英語を使用したコピーライティングに関するAIを載せる基盤の構築業務。
言語に関する大規模データの処理
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
HadoopSparkAWSApache
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
リモート併用|【Hadoop/Spark/AmazonKinesis】オンプレミスサーバ運用(バックエンドエンジニア)
業務委託(フリーランス)
HadoopSpark
バックエンドエンジニア
作業内容 【概 要】 Hadoop運用/およびLinuxサーバの運用業務となります。
オンプレサーバ運用かつ、新規運用となりますのでLinux運用経験/運用設計が可能な方を想定しています。
・Hadoopまたは類似システムの運用経験があること
(優先度としては、Hadoop>類似のシステムSpark/AmazonKinesisなど)
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
【AWS】システム更改における構築支援業務案件
業務委託(フリーランス)
HadoopSparkAWS
作業内容 ・データマネジメントインフラ支援業務にて以下をご担当いただきます。
-DaaS環境構築支援
-インフラ構成検討支援
-リアルタイム/機械学習基盤設計支援
-問合せ対応
・AWSクラウド環境にHadoop、Sparkを用いてデータ連携/データ収集を行い、
AIによる情報活用基盤の更改を行っていきます。
・またJavaやPHPを用いた一部機能追加も想定しております。
【Java・Python/基本リモート/週5日】某通信会社向け開発支援作業
業務委託(フリーランス)
JavaPythonScalaSparkKafka
サーバーサイドエンジニアバックエンドエンジニア
作業内容
某通信会社向け開発支援作業
【python/Spark】自動販売機商品入れ替え計画提案プログラムの改修
業務委託(フリーランス)
PythonHadoopSparkHive
サーバーサイドエンジニア
作業内容 自動販売機の商品をアソートリストに沿ったものに入れ替える際の入れ替え計画を提案するプログラムの改修(パフォーマンス改善)、自動販売機ごとに最適とされるアソートリスト(商品の数量、種類、並び)をcsvファイルとして出力する処理をしていただきます。
アソートリスト出力処理は シェルスクリプト・python・R (pyspark / sparkRを利用) 入れ替え計画提案プログラムは python(pyspark を利用)
人材業界でのデータエンジニア募集
業務委託(フリーランス)
JavaSQLScalaHadoopSparkApacheHive
アプリケーションエンジニア
作業内容 ■業務内容
(1)Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯
(2)HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化
(3)Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装
稼 働:週2日~5日 相談可能
時 間:9:30 - 18:30(応相談)
服 装:ビジネスカジュアル・私服
【Python】内製開発:ETLチーム
業務委託(フリーランス)
PythonSpark
サーバーサイドエンジニア
作業内容 ・SEからのインプットを基に詳細設計
・ETLコーディング
・ワークフローシナリオ実装
・UT観点項目作成
・UTスクリプト作成
・UT実施
・必要に応じてシミュレーター/スタブ開発
【SPARK GEAR】【運用中ソーシャルゲーム】エフェクト制作案件
作業内容 運用中ソーシャルゲームにおいて、
インゲーム(バトル)や演出で使用するエフェクト全般の制作をご担当いただきます。
※スキルに応じて他の作業もお任せ致します
データ加工処理マイグレーション検討
HadoopSparkAWSApacheSnowflakeGlue
作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。
現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。
現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。
※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ
クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。
現在想定しているマイグレーション例は、以下の通りです。
-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換
→Databricks、Snowflake(Snowpark)、AWS(Glue,EMR)等の
Spark関連マネージド・サービスにマイグレーション
<就業時間>
9:00ー18:00
※※こちらの案件は現在募集を終了しております※※
【Python】在庫管理システムデータ基盤構築
業務委託(フリーランス)
PythonSQLSparkDockerJIRAGitHub
サーバーサイドエンジニア
作業内容 在庫管理システムのデータ基盤構築に携わっていただきます。
【DaaS/AWS/Hadoop/Spark】データマネジメントシステム更改案件における構築支援業務
業務委託(フリーランス)
JavaJavaScriptSQLOracleHadoopStrutsSparkAWS
サーバーエンジニア
作業内容 IT基盤戦略担当様のDMシステム更改案件における構築支援業務
データマネジメントインフラ支援業務をしていただきます。
DaaS環境構築支援、インフラ構成検討支援、リアルタイム/機械学習基盤設計支援、問合せ対応、AWSクラウド環境にHadoop,Sparkといった技術を用いデータ連携/データ収集を行い、AIによる情報活用基盤の更改を行っていきます。
【Python/Spark】自社サービスSaasのデータ基盤開発
作業内容 在庫最適化システムを支えるデータ基盤の構築を行っていただきます。
自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。
顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。
【Python/フルリモート】自社サービス開発支援(在庫管理)
業務委託(フリーランス)
PythonSparkApache
サーバーサイドエンジニア
作業内容 ・データ基盤の運用及び保守開発
・新規データ取得のETLの設計及び実装
・構成/プロセスの見直し
・データウェアハウスの設計及び実装
・データの可視化
【業務委託】【有名王道ファンタジーRPG】SPARK GEARエフェクト制作案件
作業内容 ゲーム内の特殊効果、バトルエフェクトやスキルのエフェクトなど、
様々な演出の制作に携わって頂きます。
有名版権物RPGや新規開発中タイトルなど 、
ご参画のタイミングによりお任せするタイトルは変わります。
【AWS】 ETL環境の設計レビュー・改善・実装・メンテナンス
業務委託(フリーランス)
MySQLDynamoDBSparkAWSApacheRedshiftGlue
インフラエンジニア
作業内容 ・既存のAWS ETL環境の調査改善
・メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となる
【Java/JavaScript】証券システム追加開発案件
業務委託(フリーランス)
JavaJavaScriptNode.jsSpark
作業内容 ・証券会社におけるシステム機能追加開発をご担当いただきます。
・分散処理の作業もご担当頂きます。
【Java】SAPユーザーメーカープロジェクト案件
業務委託(フリーランス)
C++JavaPythonScalaHTML5LinuxHadoopSparkCoffeeScriptJadeSAP
アプリケーションエンジニア
作業内容 ・SAPユーザーのメーカーのプロジェクトに携わって頂きます。
【Java,Javascript,MySQL,基本設計,Hadoop】レコメンドエンジン開発
業務委託(フリーランス)
JavaJavaScriptMySQLHadoopSparkJenkinsAnsible
アプリケーションエンジニア
作業内容 ・node.js でのAPI設計・開発・テスト
・Hiveクエリの作成・テスト・チューニング
・Spark プログラムの設計・開発・テスト
・Jenkinsジョブの作成
・Ansible設定ファイルの作成
【AWS/GCP/Python/フルリモート】AWSデータレイクの構築やGCPデータ基盤の整備
PythonSparkAWSApacheGoogle Cloud Platform
作業内容 データレイクやDWH管理を行っているチームにて、下記業務をご対応いただきます。
・AWSからGCPへの移行作業
・GCPのデータ基盤構築