【Python】データ分析及びDB構築移行案件
業務委託(フリーランス)
JavaPythonSparkAWSDockerJIRA
作業内容
・Pythonを用いたデータ分析およびDB構築、移行に携わっていただきます。
・主に下記作業をご担当いただきます。
-不動産情報サービス企業様が蓄積している大量データの分析
-DB構築やデータ移行に関わるデータ調査、データクレンジング、名寄せ処理
-AWSのマネージドサービス(Glue、Lambda、MWAA等)を用いたデータレイク、
データウェアハウス構築作業
NEW
【Python(Web開発系)】小売関連分析システム開発
作業内容
■概要
全国展開の小売データをもとにした分析システム構築となります。
■具体的な作業内容
・主にPython、AWS各種サービスを使用し製造~テストをメインに担当いただきますがもし対応できるのであれば設計もおねがいする想定
【Python/AWS】データ連携アプリ開発案件※フルリモート
業務委託(フリーランス)
PythonAWSFargate
サーバサイドエンジニア
作業内容
開発中のシステムに対する追加機能の設計実装となります。
・工程:アプリケーション設計~総合テスト
【業務委託】【少年漫画IP新規開発ソーシャルゲーム向け】3Dエフェクト制作案件
MayaUnity3ds Max
3Dデザイナーエフェクトデザイナーグラフィックデザイナー
作業内容
少年漫画IPを用いたソーシャルゲーム開発において、
3Dエフェクトデザイナーとして作業をお任せいたします。
具体的には下記作業を想定しております。
・SPARK GEAR、Shuriken等のツールでの演出効果エフェクト制作
・エフェクトに関する表現手法の研究並びに検証
【Azure】在庫管理システムの構築案件/フルリモート
作業内容
大手小売り企業様にての業務となります。
在庫管理等の分散処理システムをHadoop on Sparkで組んでおり
DMCから逆輸入による導入を実施して頂きます。
【体制】
・リーダー:一名 (hadoop有識者、テックリード)
・SIer内hadoopスペシャリストに相談可能
・オフショアメンバー(中国)側と連携して進める。
【商流】
某大手小売流通→大手SIer→同社
AWS / Docker 地図広告P/Fのインフラ設計、開発、テスト
業務委託(フリーランス)
PythonNode.jsSparkAWSDocker
作業内容
新規プロダクトである地図広告P/Fのインフラ設計、開発、テストを推進していただきます。
AWS上でのデータ処理やクエリーワークロードの設計、デプロイ、監視のためのMapboxのプロセスとツールの簡素化と強化が主要業務となります。
開発、営業、その他チームとの連携も重要となります。
<工程>
設計、開発、テスト
<備考>
フルリモート
<基本時間>
10:00~19:00
【Python】某大手小売・流通のシステム開発または広告や社内プロダクトの開発
業務委託(フリーランス)
PythonMySQLHadoopSparkAWSAzureApacheGoogle Cloud PlatformKubernetes
作業内容
【概要】①某大手小売・流通のシステム開発
②広告や社内プロダクトの開発
上記いずれかにおいてデータエンジニア業務に従事いただきます。
案件カテゴリー: 開発
最寄駅:半蔵門※リモート可
打合せ回数:2回
※週5日〜OKの案件です!
【Python】ビッグデータ処理分析開発
業務委託(フリーランス)
PythonSpark
データサイエンティスト
作業内容
世界的に普及が進んでいる大規模分散処理フレームワークのApacheSpark/Python/Scala
NEW
New【データ分析補佐】GPSデータを用いた予測支援
業務委託(フリーランス)
PythonSQLMySQLHadoopSparkAWSAzureApacheGoogle Cloud Platform
作業内容
1.GPSデータを用いた予測支援2.SaaS型プロダクトの開発支援 上記いずれかにおいてデータエンジニア業務に従事いただきます。
【データエンジニア】
作業内容
DX推進を行っている部署の中で、既存で散らばっている社内のデータを集約する作業を行なっております。
既存のデータはAzureの中に入れており、そこのデータパイプラインの保守作業を行いつつ、新規パイプラインの設計・構築を行っていただきます。(Sparkを想定しております。)
また、集約したデータをBIツールを活用し、データ可視化も行っています。
(既存ダッシュボードの保守、新規ダッシュボード構築など)
【AWS】AWS ETL環境運用案件
業務委託(フリーランス)
MySQLDynamoDBSparkAWSApacheRedshiftGlue
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容
・下記を行っていただきます。
‐既存のAWS ETL環境の調査改善
‐メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となります
【直接取引】【Python】(一部リモート)データエンジニア(クラウド環境上でデータ関連開発経験のある方)
業務委託(フリーランス)
PythonHadoopSparkAWSAzureApacheGoogle Cloud Platform
PL
作業内容
某大手通信キャリアが提供する販促プログラムにおいて、加盟店(飲食店、小売等)が
利用するシステム(クーポン入稿、ターゲティング設定、配信効果分析など)の
データ関連の開発および、顧客企業との仕様調整・実現性検討を行って頂きます。
<開発環境>
言語:Python (一部 Javaもあり)
フレームワーク:gRPC, OpenAPI
インフラ:AWS Athena, AWS Redshift, MySQL, Apache Airflow, Docker,bazel, github
クラウド:AWS
【業務委託】【運用中ソーシャルゲーム】3Dエフェクト作成・ディレクション案件
PhotoshopBlenderMayaUnity3ds MaxAfter EffectsBISHAMON
エフェクトデザイナー
作業内容
運用中ソーシャルゲームにおいて、
3Dエフェクトの作成・3Dエフェクト開発におけるディレクション作業をお任せいたします。
大手キャリア向けPM業務
業務委託(フリーランス)
PythonNode.jsSparkAWSFargate
PM
作業内容
通信会社がポイントを使える街の店舗を紹介するような新規サービスを考えており、そのサービスのうちレコメンド機能部分を開発する。
技術要素としては、AWS上でSpark on EMR環境を構築し、その上で機械学習モデルを動かし、これをクライアントアプリから使えるようWeb API化する(AWSのFargate上で動かすことを想定、アプリケーションのプログラム言語やWebフレームワークはまだ決まっていないが、昨今のトレンドからしてPython, Node.js, Goあたりになると思われる)
<備考>
基本リモート
【Python】ビックデータの基盤構築
作業内容
某大手事業会社内でのビックデータ案件になります。現在稼働しているHadoop環境の運用、保守に加え、新規機能の開発などがスタートしたため人員の増員を計画しております。データ分析は別チームが存在しますので、あくまで分析を行うための環境構築を行って頂くポジションとなりますが、現場の状況、また適正次第では分析業務にも関わっていただく可能性がございます。
【Python/Vue.js】自動車データ向けアプリケーション開発案件
業務委託(フリーランス)
JavaScriptPythonGoSparkVue.js
作業内容
・車載ネットワークのデータを用いたビッグデータアプリケーションの
開発に携わっていただきます。
・担当工程としては、上流工程からご担当いただきます。
※具体的にご担当頂く作業領域はご経験に応じて変動いたします。
【SPARK GEAR】【ソーシャルゲーム向け】エフェクト制作案件
作業内容
ソーシャルゲーム制作においてSPARK GEARを使用したエフェクト制作をお任せいたします。
※お任せする作業はスキルに応じて異なります。
Python / SQL データ分析及び, システムデータ分析基盤構築支援
業務委託(フリーランス)
PythonSQLUnixSparkAWSDockerHive
作業内容
データ分析対応チーム、もしくはデータ分析基盤構築チームにて、AとBのいずれかをご対応いただく予定です。
A: 定型化されたデータ分析の実行(集計/加工/分析/可視化/アドホック対応など)
B: 関連するデータ分析基盤システム構築(インフラ,システム開発/仮想化/など)
・仕様や方針などは、A/B領域共にクライアント側で設定の上、後続対応を実施していただきます。
・Aについては、基本出社対応、Bについては状況に応じて出社を予定しております。
<関連システム/スキルマップ>
・Python, SQL, Excel
・AWS, Spark, Hive, Docker, RDS, UNIX他
<備考>
リモート or 現場常駐
現状、タスクに応じて50/50で対応中
【Python】ネット証券アプリ開発
作業内容
・PySparkでHadoopクラスタ上のデータを分析するアプリの開発・Hadoopクラスタにデータを取込(いわゆるETL)アプリ・スクリプトの保守
【Python,Spark】テキストマイニング
業務委託(フリーランス)
JavaPythonScalaSparkGit
作業内容
AIエージェントAPIの開発を行う企業にて
テキストマイニング
■開発環境
バージョン管理ツール:Git
【Python,Hadoop,Spark】大手外資系医療情報・テクロノジーサービス企業データ分析支援
業務委託(フリーランス)
PythonScalaHadoopSpark
作業内容
業務内容:世界中から集まる製薬データの分析
メインフレームシステムのダウンサイジング
【Scala,ApacheSpark】ビックデータ/レコメンド機能等に関する開発支援
業務委託(フリーランス)
ScalaSparkApache
アプリケーションエンジニア
作業内容
Webサイトへの導入、機能そのものの改修、データ分析などなど
【 hadoop,kafka,storm,spark】セキュリティプラットフォーム基盤構築
業務委託(フリーランス)
HadoopSparkApacheKafka
作業内容
通信会社向けのセキュリティプラットフォーム基盤をOSSを利用して
新規構築する案件となります。各種製品ログをデータレイクに蓄積し、
リアルタイムなアラート検知、およびインタラクティブな集計/分析を
可能とするプラットフォームの構築案件です。
【Python/Spark】自社サービスSaasのデータ基盤開発
作業内容
在庫最適化システムを支えるデータ基盤の構築を行っていただきます。
自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。
顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。
【Spark,Tensorflow】産学連携AIシステム開発における基盤構築
業務委託(フリーランス)
SparkTensorFlow
作業内容
広告等の宣伝文章を自動構成するAIシステム開発が進んでおり、
日本語・英語を使用したコピーライティングに関するAIを載せる基盤の構築業務。
言語に関する大規模データの処理
人材業界でのデータエンジニア募集
業務委託(フリーランス)
JavaSQLScalaHadoopSparkApacheHive
アプリケーションエンジニア
作業内容
■業務内容
(1)Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯
(2)HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化
(3)Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装
稼 働:週2日~5日 相談可能
時 間:9:30 - 18:30(応相談)
服 装:ビジネスカジュアル・私服
【Python】在庫管理システムデータ基盤構築
業務委託(フリーランス)
PythonSQLSparkAWSDockerJIRAGitHub
作業内容
在庫管理システムのデータ基盤構築に携わっていただきます。
【Java,Javascript,MySQL,基本設計,Hadoop】レコメンドエンジン開発
業務委託(フリーランス)
JavaJavaScriptMySQLHadoopSparkJenkinsAnsible
アプリケーションエンジニア
作業内容
・node.js でのAPI設計・開発・テスト
・Hiveクエリの作成・テスト・チューニング
・Spark プログラムの設計・開発・テスト
・Jenkinsジョブの作成
・Ansible設定ファイルの作成
【クラウドエンジニア(AWS)】製品利用ログ分析基盤の開発・運用
作業内容
■概要
Redshift(PostgreSQL)上のDBテーブル設計、クエリ開発をお任せいたします。
■具体的な作業内容
・AWS EMRを使用したETL、データ前処理(Python、Spark)
某大手製造メーカー系会社 データ処理インフラ基盤の構築
業務委託(フリーランス)
SparkAWSGoogle Cloud Platform
作業内容
■業務内容
製造メーカー系会社のデータ処理基盤の設計・構築
→ 大量のログデータを蓄積するクラウド環境及び、製品に埋め込むクライアントの開発運用