【Scala/Java/Pythonなど】大手広告代理店におけるデータ基盤の開発、運用、保守の求人・案件
業務委託(フリーランス)
JavaPythonSQLScalaSparkAWSDockerApacheGitHubSnowflakeKubernetes
作業内容 【業務内容】
大手広告代理店が展開しているインターネット広告代理店業における、膨大な広告データを収集・蓄積したデータレイクからデータを展開するためのデータ基盤(ETL処理、DWH、DM)の開発、運用、保守をお願いします。
【ポイント】
データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、そんな大規模データと向き合った開発にチャレンジすることができます。複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。
【開発チームと配属先について】
当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。
今回お願いしたいポジションはサーバサイドエンジニアです。
チームには現在18名のエンジニアが在籍しています。
また、複数のプロダクトを管理しているチームのため、担当領域ごとにグループ分けをしています。
Infeed領域の広告運用のためのプロダクトを開発するグループインターネット広告関連データをデータレイクに蓄積するシステムを開発するグループインターネット広告関連データが蓄積されたデータレイクを用いたデータ基盤を開発するグループ機械学習を用いたプロダクトを開発するグループ掲載情報や実績情報を出力・レポーティングするための分析用プロダクトを開発するグループ
【技術キーワード】
ApacheSparkAWS GlueSnowflakeデータレイク/データウェアハウス/データマート
New【JavaScript/Python】アジャイル開発エンジニアの求人・案件
業務委託(フリーランス)
JavaScriptPythonDjangoAWSDockerGitJIRAVue.jsSnowflakeGitlabTerraform
作業内容 アジャイル開発プロジェクトにおいて、AWSサービスを利用したWebアプリケーションおよびシステム開発を担っていただきます。1) 顧客折衝および要件定義
2) Vue.jsを用いたフロントエンドの設計・実装
3) Djangoを用いたバックエンドエンドの設計・実装
4) AWSを用いたインフラ設計・構築
5) Snowflakeを用いたDB設計・構築
6) 外部仕様書・内部仕様書の作成
7) 単体テストの作成
8) テスト仕様書の作成
9) マニュアル等各種ドキュメント作成
10) CI/CDの構築・改善
開発言語: JavaScript ( Vue.js, Vuetify ) , Python ( Django )
ツール: Jira, Confluence, Gitlab, VisualStudio Code, IntelliJ, Zoom, Docker, Slack
IICS 大手通信業向けシステム基盤のデータ連携検討
作業内容 大手通信業向けグループ共通システム基盤の財務領域における、データ連携のアーキテクチャ検討をして頂きます。
<業務内容>
IICS(クラウド型データ統合ソリューション)の今後の展開の検討支援
<基本時間>
9:00~17:30
【AWS(リモート)】DWHシステム運用
作業内容 WHシステム運用における、オペレーション/ヘルプデスク業務。
・DWH/Lab/Hubリソース払い出し
・SnowFlakeデータ操作オペレーション
・ジョブ監視/対応
・運用システムの問合せ/トラブルシューティング
・作業マニュアル作成等
【SQL】データ分析基盤保守/改修(リモート)
作業内容 ・データ分析基盤の維持、保守開発および新規機能開発
・DWH、ETLの保守、不具合調査や修正、新規機能開発
【PM】BIツール戦略検討支援
業務委託(フリーランス)
データサイエンティストPMPMO
作業内容 ・BIツールのクラウド運用の改善、マッピング整備
・DICEの可視化、ロードマップ検討などの戦略検討
・若手プロパーメンバーがおり、一緒に検討し、指示出しなど自走して動いていただきたい
【AWS】データ分析基盤の構築
業務委託(フリーランス)
C++JavaJavaScriptCPythonC#RAWSAzureTableau
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
データ分析基盤の構築案件にて要員を募集します。
【作業場所】リモート可/品川※フルリモート応相談
【時間精算】有(下限140H~上限200H)
【面談回数】1回
【その他】クラウド上にSnowflakeを構築した経験のある人は歓迎です。
※週5日〜OKの案件です!
※実務経験1年以上お持ちの方が対象の案件です!
【PM業務】製造・SCM分野のデータ活用の為のシステム開発プロジェクトの求人・案件
作業内容 クライアントがAIや量子コンピューティングを製造分野で有効活用しようとして、複数のプロジェクトを同時並行で立ち上げてます。下記のような複数のプロジェクトの管理、PM業務を担っていただきます。
・車体生産の塗装工程において、塗装順番の効率向上と作業員の身体的負担を最小化する最適な生産順番を、生産計画をInputに量子アニーリングの技術を使って最適解を導出して、システム実装するPJ
・工場の品質管理のある工程において、熟練作業員の耳に頼っていた異音検知の品質確認作業を、マイクで聞き取ってAI学習させて判定させるシステムの構築
・さまざまなSCMやセールスや経営管理指標をInputに、AI技術や量子コンピューティング技術を用いて、最適な生産計画、在庫管理、サプライヤー発注を実現するシステム開発など
※関係者とは英語でのコミュニケーションが求められます。
大手精密機器向けDWH運用・エンハンス案件でのアーキテクト兼PM補佐
AWSRedshiftSnowflakeGlueLambda
PMコンサル
作業内容 大手精密機器向けDWH運用・エンハンス案件にて、
DWHとBIの領域を中心に、顧客のレベル感や優先度を基に示唆出しをご対応いただきます。
現状PMが担っている下記業務の一部をご対応いただく想定です。
・基盤チームリーダー
‐基盤の構築/検証/運用(運営全般/環境見直し)のリード
‐各種システム間連携の企画・交渉・調整・検討・実施
‐新規データ連携の取込計画検討/検証、および既存データ群の維持・整備
‐障害発生時対応(対応方針検討・指示、関係者との情報連携、ポータル上への告知等)
・コンサル
‐活動状況や留意すべき問題から取組対象を抽出し、対応の方向性を週次で提案
‐各領域リーダーと日々の議論の中で、現時点や今後(中長期)での取組を具体化し、
適切なタイミングで施策としての計画を提案
・アーキテクト
‐四半期ごとの施策に基づき、対象アーキテクチャの検討・検証を推進
‐日々の発生事象から急ぎ対応すべき課題を抽出し、対応の方向性を検討・提案
‐必要に応じて、リソース監視、アーキテクチャ構築、ツール開発を実施
※※こちらの案件は現在募集を終了しております※※
【DBエンジニア】某エンタメ企業向けデータ基盤構築支援/フルリモート
業務委託(フリーランス)
BigQuerySnowflake
セキュリティエンジニア
作業内容 ■企業情報
ビジネスコンサルティングやWEBコンサルティング領域において、デジタルを活用した売上・収益向上の支援を行っております。
また、WebシステムやWebマーケティング領域においてシステムの企画や設計、構築および運用業務や新規事業開発業務も手掛けております。
大手事業会社様より1次請けでの請負実績の多い企業様です。
■業務内容
某エンタメ系企業のDX推進支援の一環としてデータ基盤構築を支援しており、
リードエンジニアと協力してデータ基盤の設計構築作業をお任せする想定となります。
■PJT体制
PM、アシスタントPM、コンサルタント、リードエンジニア
■スケジュール
フェーズ1については2024年6月までに小規模なダッシュボード構築
その後拡張していき最終的には売上予測システムの構築を目指しており、数年単位のPJになる想定となっております。
■具体的にお任せしたいこと
・データ基盤(データレイク、データウェアハウス、データマートの三層構造)の設計・構築
・BIによるダッシュボードの設計・構築
・ETL/ELTによるデータパイプラインの設計・構築
【DWH/ETL/クラウド/東京駅】データエンジニアとしてデータ分析基盤の構築/運用業務
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 様々な事業を横断したデータ基盤を担当するデータエンジニア職となります。
各事業のデータ分析基盤(DWHとデータパイプライン)の設計・構築・運用を行っていただきます。
既存の基盤運用を引き継ぎから開始し、その後の運用と信頼性・利便性の向上にコミットいただける方を募集しています。
【具体的な業務内容】
◼︎既存のDWH(BigQuery)とデータパイプラインの拡充
- 利用可能なデータの拡充
- データのリアルタイム性の向上
◼︎将来のデータ基盤戦略の策定とその推進
- 新たなDWHとデータパイプライン(ELT)の設計・構築・運用
◼︎データ分析によるビジネス課題の発見の推進
- データによる課題の可視化
- BIなどを通したモニタリング環境の構築
など
リモート併用|【SQL/SQL Server】情報分析基盤のリプレース(システムエンジニア(SE))
業務委託(フリーランス)
SQLPL/SQLSQL Server
SE
作業内容 現行SAPBWからSnowflakeへの移行
想定している作業は以下、
・移行:計画、移行設計、移行用プログラム開発、移行実施
・処理開発:ストアドを使用したシステム開発、テスト
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
Python Excel業務のシステム化
作業内容 Excel業務のシステム化案件です。
アジャイル開発にて行っており、現在要件定義が終わった段階です。
詳細設計~開発のフェーズからご担当いただきます。
※最終面談前に、簡単な自己紹介シートを作成していただきます。
【Python/SQL/PySpark】リモート可!大手コンビニ向けETL処理開発
業務委託(フリーランス)
PythonSQL
サーバーサイドエンジニア
作業内容 コンビニの顧客分析、商圏分析等の為のAWS Glueを使用したETL処理の開発
・他システムから連携されるファイルの取り込み(to Athena、toSnowflake)
・取り込んだデータを使用してのマート作成(Athena、Snowflake)
【PM】DX推進/各種開発マネジメント
作業内容 ・既存システム改修の企画調整、コンサルティング
・システム開発上流工程全般
(ユーザの課題、要望のヒアリング、解決策を提案、開発者へ連携、その後の進捗管理など)
・最新技術を用いたDX化の提案
・エンドユーザーの方向性と基準に沿って要件決め、提案
AWS 設計・構築対応
作業内容 大手保険会社様の全社横断の設計・構築案件担当として、6名チームに合流してもらいます。
AWS全般の知識とスキルが身につきます。
<備考>
基本テレワーク
状況に応じて出社有
<基本時間>
9:00~18:00
<服装>
出社時はビジネススーツ
【PM/英語】外資系製薬メーカー向けデータ整備推進案件
業務委託(フリーランス)
Python
インフラエンジニアPLPM
作業内容 下記を行っていただきます。
・AWS+Snowflake上でAirflow/Pythonでのデータ加工開発の推進
・サービス設計~開発工程における5~10名程度のチームリード
【Java】データ分析基盤の構築
業務委託(フリーランス)
JavaPHPCPythonSQLWindowsAWSAzureVMwareGoogle Cloud PlatformBigQuerySalesforce
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
データ分析基盤の構築案件にて要員を募集します。
複数案件あり、マッチするものへの参画となります。
【作業場所】リモート可/品川
※フルリモート応相談
【時間精算】有(下限140H~上限200H)
【面談回数】1回
※週5日〜OKの案件です!
【AWS】保険会社向けDWH基盤構築案件
業務委託(フリーランス)
PostgreSQLAWS
インフラエンジニアデータベースエンジニア
作業内容 ・下記のいずれかをご担当いただきます。
-1.データベース担当
-AWS Aurora/RDS及びSnowflakeの詳細設計/構築
-2.AWS担当
-EC2/SG/VPC/CloudWatch Logs/SNS 等AWS全般の詳細設計/構築
AWS AWSシステム構築(リモート)
業務委託(フリーランス)
AWSLambda
インフラエンジニア
作業内容 AWSシステムの要件定義/設計/構築/試験
環 境:
・ S3、privatelink、DMS(Database Migration Service)
・Transfer Family、Direct Connect、EC2、Lambda
【React/Node.js】システム化開発の求人・案件
業務委託(フリーランス)
Node.jsAWSAzureReact
PL
作業内容 エクセル業務をシステム化するアプリケーション開発チームでの募集
大規模プロジェクトの複数の案件に流動的に参画フロントエンド、バックエンドのフルスタック
【フロントエンド】
ReactJestStorybookTypescriptSwift
【バックエンド】
Node.jsPython (FAST API)SwaggerMySQL/Snowflake
【基盤】
Azure (TechBoard)
SQL データ分析基盤の開発/検証(データベースエンジニア)
SQLAzureRedshiftBigQuerySnowflake
データベースエンジニアデータアナリスト
作業内容 データ分析基盤(データクリーンルーム)の設計/開発をご対応いただきます。
既存のデータ分析基盤案件を対応しているチームをベースに、新しくData Engineeringチームの設立を行う予定で、その構成メンバーを募集しています。
同社が対応を進めているデータベース、クラウドベースのDWH案件の各種開発サポート、アドホック対応、PoC対応など全般を各種案件チームの一員としてご対応いただきます。
状況によって、開発されたデータベース、データウェアハウスの検証作業も担当いただきます。
対応すべき案件の幅が広いことから、幅広いご経験と知見を必要としますが、
案件の開発状況に対し、リーダーからメンバー適正に合わせた業務割り振りを行います。
【SQL】物流マッチングプラットフォームのデータ分析の求人・案件
業務委託(フリーランス)
PythonSQLRAWSGoogle Cloud PlatformRedshiftBigQuerySnowflakeAurora
データアナリスト
作業内容 内容:
物流マッチングプラットフォームを展開する企業にて、データエンジニアとしてご参画頂きます。
主に各事業のデータ分析基盤(DWHとデータパープライン)の設計・構築・運⽤を⾏っていただきます。
<具体的な業務内容>
既存のDWH(BigQuery)とデータパイプラインの拡充
利用可能なデータの拡充データのリアルタイム性の向上
将来のデータ基盤戦略の策定とその推進新たなDWHとデータパイプライン(ELT)の設計・構築・運用
データ分析によるビジネス課題の発見の推進データによる課題の可視化BIなどを通したモニタリング環境の構築
技術環境:
・言語:Ruby、Python
・バージョン管理:Git/GitHub
・データ基盤:BigQuery、AWS RDS
・BI: Redash、Google Spread Sheet、Google Data Studio
・コミュニケーション:Slack、Notion
【フルリモート|Ruby on Rails】マーケティングサービスのアプリ開発支援【Ruby】
作業内容 フロントエンドからサーバーサイド、バッチの開発を行って頂きます。
新しい技術をどんどん取り入れている企業ですので、
モダン環境での開発経験が積める案件となっております!
実装〜テストまで
【開発環境】
言語:Ruby?on Rails,Javascript,Vue.js,Java,Go
DB:MySQL,Snowflake
環境:AWS
その他:Git,Redmineなど
【PM業務】小売業界向けデータ分析基盤構築PMの求人・案件
作業内容 グローバルブランドとして国内外に展開している某小売企業においてデータ分析基盤構築推進をご担当いただきます。
想定業務
・プロジェクト管理
・各部門からの問い合わせ対応
・データ分析基盤と社内データを活用するための開発/(必要に応じて)保守運用
・機能改善、新規機能開発 等
【DMP基盤開発】データ加工・抽出の設計(SQL)/出社あり
業務委託(フリーランス)
SQLLinuxPostgreSQL
データサイエンティスト社内SE
作業内容 ■お任せしたいこと概要:
DMP基盤の開発プロジェクトにおいて、
<設計業務>をメインにお任せします。
■具体的な業務内容:
機能設計を担当いただき、
・ETLに必要なテーブル・入出力の設計
・データ加工・抽出のためのSQL設計 をお願いします。
※実装は主に弊社オフショア先が担当するため、
設計担当した機能のコードレビュー、テストレビューなども行って頂く予定です。
Python データ分析サポート業務
PythonSQLAWSDockerJenkinsGitHubTypeScriptSnowflake
作業内容 データ分析担当者をエンジニア面からサポートする仕事を担当いただきます。
バッチ環境の構築から日々の問い合わせへの回答まで、幅広いご対応をお任せします。
以下、具体的な業務の一例です。
バッチ実行環境の運用
-集計バッチ用サーバ 及び Jenkinsサーバの運用
-新規バッチ実行基盤のアーキテクチャ設計・実装
-GitHub ActionsなどのCI/CDツールの検証
データ分析者向けのバッチ・ツールの開発
-集計用バッチの実装
-チーム内向けwebアプリの開発
問い合わせ対応・トラブルシューティング
-データ分析者からの相談に対するサポート
-利用サービスのインシデント発生時の対応方針の策定
-利用ライブラリの脆弱性発覚時の対応方針の策定
チームで利用する技術の標準化
-チーム単位で採用する技術の調査や意思決定サポート
-アップデートや技術移行の手順の作成と実施
-ドキュメント作成や勉強会の実施など
<開発環境>
言語:Python、Typescript
DWH:Snowflake
ソースコード管理:GitHub Enterprise、GitHub Enterprise Cloud
インフラ環境: AWS、Docker
※※こちらの案件は現在募集を終了しております※※
【ITコンサル】DWH運用・エンハンス案件でのアーキテクト兼PM補佐の求人・案件
業務委託(フリーランス)
AWSRedshiftSnowflakeGlueLambda
ITコンサルタントPMコンサル
作業内容 ■概要
膨大なデータから、価値ある情報を迅速に提供する仕組みを構築し、
経営目標を達成するためのモニタリング・分析を可能にしたいが、既存の仕組みでは、スピード・タイミング・柔軟性の観点で十分にデータを活用できない状態。
現状PMが担っている役割(下記3つ)の一部でも巻き取っていただくことを想定している。
【PM】
– PJ規模拡大・利益率向上に向けた戦略的な施策の検討。(仕事の創出)
– 顧客PLからの相談をヒアリングし、必要な情報提供・資料作成を実施。
– 開発Lのテーマ開発推進を支援。必要に応じて、個別テーマの課題解決を支援。
【コンサル】
– 活動状況や留意すべき問題から取組対象を抽出し、対応の方向性を週次で提案。
– 各領域リーダと日々の議論の中で、あるべき姿や今・今後・中長期での取組を
具体化し、適切なタイミングで施策としての計画を提案。
【アーキテクト】
– 四半期ごとの施策に基づき、対象アーキテクチャの検討・検証を推進。
– 日々の発生事象から急ぎ対応すべき課題を抽出し、対応の方向性を検討・提案。
– 必要に応じて、リソース監視、アーキテクチャ構築、ツール開発を実施。
【データマイニング/一部リモート】データ統合基盤構築支援案件
業務委託(フリーランス)
PythonOraclePostgreSQLTableau
データサイエンティスト
作業内容 ・データ統合基盤構築支援案件の開発に携わっていただきます。
・クライアントのDWHへのデータロード作業、運用監視、データ分析作業を行っていただきます。
【Java/Python/AWS/フルリモート】自動車会社向けPoC開発支援案件
業務委託(フリーランス)
JavaPythonSQLAWS
サーバーサイドエンジニア
作業内容 ・自動車関連の不具合自己診断システムのPoC開発に携わっていただきます。
・現行のシステムの移行方式の検討~実装作業に携わっていただきます。
・AWS環境にて主にJava、Pythonを使用した開発に携わっていただきます。
【PM/上流】Concur関連ソリューション企画推進案件
作業内容 ・Concur導入における下記に携わっていただきます。
-業務運用を管理するソリューションをServiceNow上でテンプレート開発を
して提供するソリューションの企画
-クレジットカードの決済データ、その他のデータをSnowflakeというデータ蓄積基盤に貯めて、
BIツールで見せるようなソリューションの企画
-ConcurAPI連携ソリューションをAWS上でテンプレートを作って横展開するソリューションの企画
Pythonエンジニア コンビニ向けETL処理開発
作業内容 ・コンビニの顧客分析、商圏分析等の為のAWSGlueを使用したETL処理の開発
・他システムから連携されるファイルの取り込み(toAthena、toSnowflake)
・取り込んだデータを使用してのマート作成(Athena、Snowflake)
【PM/上流】Concur関連ソリューション企画案件
作業内容 ・Concur導入における下記に携わっていただきます。
-業務運用を管理するソリューションをServiceNow上でテンプレート開発を
して提供するソリューションの企画
-クレジットカードの決済データ、その他のデータをSnowflakeというデータ蓄積基盤に貯め、
BIツールで見せるようなソリューションの企画
-ConcurAPI連携ソリューションをAWS上でテンプレートを作って横展開するソリューションの企画
【Python】データエンジニアの求人・案件
業務委託(フリーランス)
PythonAWSAzureGoogle Cloud Platform
作業内容 【概要】
分析サービスのSaaSプロダクトを展開している企業にて、事業の拡大に向けてデータ基盤ソリューションチームでのデータエンジニアポジション【作業内容】
・Snowflake, dbtなどモダンデータスタックを活用した最先端のデータ基盤の設計、構築、テスト、開発、保守、運用
・クライアントが保有しているデータを課題解決に活用するための分析要件の策定
【Tableau(リモート)】データ分析基盤構築に向けたPoC
作業内容 ・Tableauでのダッシュボード作成
・顧客既存データフローの整理
・データマート設計
【SQL/Python】データエンジニアの求人・案件
作業内容 グローバルブランドとして国内外に展開している某小売企業においてデータエンジニア業務(データ基盤構築、ETL設計・開発)をご担当いただきます。
DWH:Snowflake
ETLツール:dbt
SQL / Shell / Python など データ基盤開発
作業内容 機能設計とテスト設計やETLに必要なテーブル・入出力の設計等を担当していただきます。
※詳細は面談時にご説明させて頂きます
<備考>
ご参画当初は常駐
キャッチアップ期間終了後、リモート相談可能
【Ruby/リモート併用】webシステム開発の案件・求人
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
現行で利用しているマーケティングプラットフォームの新機能開発および機能改善
バックエンド(Ruby)の基本設計〜テストを担当いただく。
◎環境 :フロントエンド:Vue.JS
バックエンド:Ruby(RubyonRails)
基盤:AWS
その他:Docker/GitHub/Slack/snowflake
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
【Vue.js/Ruby/リモート併用】マーケティングプラットフォーム開発新機能開発、機能改善の案件・求人
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
■募集枠:フルスタックエンジニア(設計、実装、テスト)
■環境:
フロントエンド:Vue.JS
バックエンド:Ruby(RubyonRails)
インフラ:AWS全般
その他:Docker/GitHub/Slack/snowflake
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
【SQL】次期データウェアハウス基盤の選定
作業内容 ・Teradataに変わる次期データウェアハウス基盤を選定する為、Amazon Redshift、Snowflake等のプロダクト検証を行います。
・具体的には、現在Teradataで動いているクエリーを選定対象のプロダクトで実行し、負荷の検証等を行います。