【分析基盤エンジニア】AWSからAzureへの移行および拡張(DWH技術者)の求人・案件
業務委託(フリーランス)
AWSAzureRedshiftTableauSnowflake
作業内容 ■クライアント支援範囲 ・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識 ■概要 <1月~3月にて、データ基盤構築(Power BIとTableau込み)の上流工程(基本設計)を予定> 本プロジェクトは、現行のAWS(プロトタイプ環境)からAzureへの移行および拡張となります。 ・Azure Synapse Analyticsへ外部データやユーザーが保有するデータを投入し、Power BIとTableauで分析。 TableauはTableau ServerからTableau Cloudへの移行を伴い、外部データの取り込みには、Synapse Analytics のパイプラインや、Azure FunctionsやAzure Logic Appsを利用。 ■想定業務 ※TableauとPower BIを中心としたDWH技術者 ・ドキュメント作成(基本設計書/移行計画書) ・Tableau ServerからTableau Cloudへの移行設計 ・DWH(SynapseやSnowflakeやRedshiftなど)のデータアーキ
▼関連ソリューション
・Azure Synapse Analytics
・Azure Functions
・Azure Logic Apps
・Tableau Cloud(またはTableau Server)
・Power BI Service
■体制
体制:
AIチームは全部で15名程度
6名~7名→AIエンジニア 6~7名→BI・データ基盤
1クライアントに対して4~5名で体制を組んでいる
■環境
クライアント内ではデータ基盤設計~BI・内製化/運用支援まで行っている
データ基盤:Azure
(クライアント内で基盤設計・構築)
BI:PowerBI
(クライアント内でレポート作成・運用)
【上流/SQL】HR事業向けレコメンド施策データ基盤開発案件
業務委託(フリーランス)
SQLGitRedshiftBigQuery
データサイエンティストデータベースエンジニア
作業内容 ・大手HR事業のレコメンド施策データ基盤開発に携わっていただきます。
・主に下記業務をご担当いただきます。
-データマート開発における要件定義
-レコメンド施策用データマートの開発
(データマート(テーブル)設計、SQL実装、加工処理実装、バッチ実装)
-データマートの保守運用
【Python/AWS/フルリモート】製造業向けデータ基盤構築案件
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
データサイエンティスト
作業内容 ・製造業向けデータ基盤構築案件に携わっていただきます。
・主に下記作業をご担当いただきます。
‐AWSサービス内で連携されたデータ(RDSforOracle)を他システム(原価システム)へのデータ生成
‐BIツール用のデータ生成構築
‐Lambda(Python、SQLArchemy)製造
‐単体テスト(仕様書作成、実施)
‐結合テスト
Tableau BIツールでのダッシュボード構築
作業内容 構築済みのデータ分析基盤(DWH)を対象に、クライアントの要望に応じたアドホックな分析データ抽出や、
BIツールを用いた分析データの可視化などの業務を担当していただける方を募集しております。
具体的な業務内容は以下となります。
・DWH(Redshift)に蓄積されたデータから、対象となるデータをマート化する
・BIツール(tableau)を使用し、どのような見せ方でダッシュボードを構築するか、
仕様の検討(UI及びマート設計)から構築まで行う
※本プロジェクトはTableauでのダッシュボード構築案件のため、Tableauでの構築スキルがある方がフィットします。
<基本時間>
10:00~19:00※フレックスタイム制あり
※※こちらの案件は現在募集を終了しております※※
【分析基盤エンジニア】世代医療分析基盤の大規模開発支援
作業内容 ・10ヵ年計画で実現する次世代医療分析基盤の大規模開発のスタートラインを切るメンバーとして、インフラ設計段階から開発、本番適用まで一貫して携わっていただきます。
・また、国内医療での利用拡大が約束されている分析基盤の継続機能開発及び運用を実施します。
【開発環境】
・AWS:SageMaker、WorkSpaces、VPC Endpoint、Redshift、Aurora、EC2、ECR、S3等
・言語:Python、SQL
【対応内容】
・要件定義及びテスト設計
・インフラ設計及び監修
・ネットワーク及びセキュリティ設計
・開発実装及びテスト実施
・外部ストレージとの繋ぎ込み開発
【GCP/20代30代活躍中】クラウドインフラデータ移行支援
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformBigQuery
作業内容 【概要】
RedshiftからBigQueryへのデータ移行を支援していただきます。
【場所】
秋葉原
※基本リモート
【勤務時間】
9:30~18:30
【精算】
150h~200h
【面談】
1回
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・週5日稼働できない方
--------------------------------------------------------
【GCP/AWSなど】データ基盤エンジニアの求人・案件
業務委託(フリーランス)
PythonSQLRAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 事業横断のデータ基盤(DWHとデータパイプライン)の設計・構築・運用
既存DWH(BigQuery)とデータパイプラインの拡充
将来のデータ基盤戦略の策定と推進
データ分析によるビジネス課題の発見と推進
・受注背景:既存事業の運用基盤を引き継ぎ、信頼性・利便性向上にコミットするため
【Ruby】人事業務システム開発案件
業務委託(フリーランス)
RubyRailsDockerJIRARedshift
作業内容 ・Rubyを用いた人事業務支援サービスのWEB開発に携わっていただきます。
・サービス改善におけるバックエンド開発をご担当いただきます。
【SQL】証券系DX推進データ分析案件
業務委託(フリーランス)
SQL
データサイエンティストデータベースエンジニアデータアナリスト
作業内容 SAS Enterprise Guide、Redshift、データ分析をご担当いただきます。
【AWS Glue】AWSデータ基盤開発案件
業務委託(フリーランス)
AWSGlue
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・下記をご対応いただきます。
‐データ分析基盤の開発
‐データレイク構築
Python 分析用マート作成業務支援(リモート)
作業内容 ・サービスのデータ分析データマート開発・改修業務。
・BtoBのデータトリブンを進めていくためにDWHにデータを集める作業。
・独自ツールよりデータを加工し、移行。
・テーブル内データの整備がメイン。
【リモート】内製開発:SREチーム
業務委託(フリーランス)
PythonAWSJIRAAnsibleRedshiftKubernetes
サーバーサイドエンジニアSRE
作業内容 【業務内容】
・自動化前提のリリースプロセスの策定/リリース手順の作成
・CI/CDパイプラインの整備
・EKSの構築とトラブルシュート
・Staging/Production環境構築とシステムのリリース
・既存Teraform、CFn等の理解と実装
・Staging/Productionへのリリース手順自動化(継続的デリバリーのためのレグレッションテスト自動化含む)
・AWSと議論したのちのコスト最適化に向けた構成変更検討
・セキュリティ審査等の対応
・NW構築、設計
・開発・検証・商用のアカウント管理
【AWS/SQL】データ分析基盤構築/運用
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
インフラエンジニアデータベースエンジニア
作業内容 下記を行っていただきます。
・各種システムからのBigQueryへのデータパイプラインの構築/運用
・BigQuery上のデータウェアハウス、データマートの加工処理の構築/運用
【BigQuery】コーポレート部門が利用するシステム/データエンジニアの求人・案件
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 データ分析基盤の構築・運用をおまかせします・各種システムからのBigQueryへのデータパイプラインの構築・運用
・BigQuery上のデータウェアハウス・データマートの加工処理の構築・運用
開発環境言語 : Python,
データベース : BigQuqery, Aurora MySQL 2.0, Aurora PostgreSQL
インフラ : AWS (EC2, S3, Lambda etc.) , GCP
バージョン管理 : git/Github
CI : CircleCI, Jenkins
コミュニケーション : Slack, JIRA, ClickUP, Notion
【DBA/SQLチューニング】BIシステムのパフォーマンス改善(SQLチューニング、DBA)
作業内容 <BIシステムの概要>
基幹システムのSAPからデータを抽出(Infomatica)後、
RedshiftとAuroraにデータをいったんストアし、
最終的にMicrostrategyに取り込みで画面表示をしています
DB側のパフォーマンス改善を行う。
【BI(リモート)】ダッシュボード構築
作業内容 ・DWH(Redshift)に蓄積されたデータから、対象となるデータをマート化
・BIツール(tableau)を使用し、どのような見せ方でダッシュボードを構築するか、仕様の検討から設計、構築まで
【SQL/データ分析】データ分析析業務支援(SOLによるデータの抽出・集計ができる方)
作業内容 以下の作業を担当していただきます。
・ユーザのデータ分析の要件調整とベンダー調整
・データの可視化、データ集計のためのSQL作成
【DWH】データエンジニア募集
業務委託(フリーランス)
PythonAWSGitGitHubRedshiftBigQuery
サーバーサイドエンジニア
作業内容 人口動態等のデータを用いた混雑予測分析・各種データ整備をご担当頂きます。
New【Ruby/Python】データ基盤エンジニア募集の求人・案件
業務委託(フリーランス)
PythonRubyRailsAWSDockerReactRedshiftTypeScriptGlueAthena
作業内容 AWSで開発・運用されているサービスのデータ基盤エンジニアとして開発・運用・保守を担当いただきます。具体的にはデジタルサービスを開発・運用するための社内プラットフォーム内の基盤群の開発・運用・運用改善を担当。
DWH再構築におけるテックリード
作業内容 顧客にて、販売管理・在庫管理等のシステム刷新と並行して、DWHについても刷新を進めており、
現在は要件定義を完了させ、今後は外部設計以降のフェーズを進め、カットオーバー予定してます。
関連システムの開発状況を考慮した上で、今後の運用方法やコストを踏まえ、
「データをどのような構造で収集・蓄積・活用していくか」を検討しながらDWHを開発していく必要がございます。
基本的にはPMが顧客折衝、メンバーが実作業を担当しており、
その間に入って要件整理・監修・作業指示・構築支援等をサポートしていただくテックリードを募集いたします。
※※こちらの案件は現在募集を終了しております※※
【AWS/設計~】上位会社様交代枠募集
作業内容 お客様内におけるクラウド共通化(AWS)プロジェクトの中で運用監視体制標準化において設計からご対応いただきます。
その中エンジニア2名を募集いたします。
・AWS適用サービス
サービス:CloudWatch、S3、IAM
監視対象:EC2、RDS、RedShift、Lambda
・その他サービス
Datadog
Teraform(Cloudformation)
AWSクラウド共通化運用監視PJ
業務委託(フリーランス)
AWSDatadogCloudFormationLambda
作業内容 お客様内におけるクラウド共通化(AWS)プロジェクトの中で運用監視側における標準化を行っております。
AWS適用サービス
・サービス:CloudWatch, S3, IAM
・監視対象:EC2, RDS, RedShift, Lambda
その他サービス
・Datadog
・Teraform(CloudFormation)
<備考>
フルリモート
AWS DX組織におけるデータマネジメント業務
作業内容 大手小売業のDX組織(分析基盤構築/運用、活用推進組織)におけるデータマネジメント業務をご対応頂きます。
<主に下記業務を実施>
①業務プロセス検討・改善
・基本的な考え方はDMBOKを参考に、データマネジメントに関する業務プロセスの課題整理・改善を実施
・特にメタデータ、セキュリティに関するガバナンスに注力して推進中
②運用業務
セキュリティ関連のレビュー/相談
・顧客会社内のセキュリティレベルに則り、データ利用範囲や格納環境が適切かなどをチェック
データカタログ管理
・分析基盤内で蓄積・加工するデータのカタログ設計と記載内容のレビュー
<環境・ツール>
・AWS(S3, EC2, Glue, RDS, Redshift etc)
・dbt
・Tableau
<服装>
オフィスカジュアル
【分析基盤エンジニア】大手製薬企業/MLOpS基盤立上げ支援の求人・案件
業務委託(フリーランス)
PythonSASRAWSRedshift
作業内容 外資系大手製薬企業のGlobal組織(海外)がメインで、システム運用・保守されるクライアント日本法人組織向けデータ分析基盤のインフラ領域の非機能/運用面の改善検討のリードです。
クライアント日本法人のユーザ部門およびIT部門の意向を踏まえ、ゴールを描きながら検討を行う必要がございます。
【AWS】マーケティングプラットフォーム開発案件
業務委託(フリーランス)
RubySQLOracleAWSGitGitHubRedshift
作業内容 ・プロダクト基盤のインフラ構築・運用を行っていただきます。
・具体的な作業内容は下記です。
-インフラの構築/設計/運用
-データ分析基盤の構築/アップデート
-AWS等のインフラコストの最適化
-ビジネスメンバーと密にコミュニケーションを取りながらの開発・改善
Javaエンジニア募集
JavaSQLMySQLRedisSpringMyBatisjQueryAWSDockerGitRedshiftVue.jsCloudFront
作業内容 大量トラフィック(月間数億PV)のBtoC向けWebサービスの運用開発をご担当頂きます。
<開発環境>
・言語:Java8, 11(一部)、Spock (テストコード)
・FW/Lib:Spring Boot 2.1、SpringBatch、Thymeleaf、Mybatis
・Front:jQuery、Vue.js2系(一部)、Bootstrap(運用者利用画面)
・Infra:AWS(EC2, Redis, S3, CloudFront, Redshift, etc)、MySQL8 on EC2 (InnoDB Cluster)、Docker (ローカルテストやCIで使用)
<基本時間>
10:00~19:00
【PM】データ分析基盤構築の案件のマネジメント/フルリモート
業務委託(フリーランス)
SQLAWSRedshiftBigQuerySnowflake
PMPMO
作業内容 同社は、データエンジニアリングの領域に強みを持つデータテクノロジーカンパニーです。
データ統合を自動化するSaaSとデータ基盤の自社構築を支援するPaaSを提供しております。
誰もがすばやく、簡単にデータを使える環境を構築し、データ活用までのプロセスを最適化。高度なテクノロジーと独自のアイデアで、世界中のビジネスを支援することを目指しています。
データ基盤のアーキテクチャ構成/設計のコンサルティングから基盤構築のPoCまでを一気通貫で担当(リード)いただく想定です。
データ基盤の構築、開発経験に加え、要件定義フェーズを実施したご経験がある方を募集しております。
技術要素:Athena/BigQuery/SQL
React 大規模サービスのフロントエンド開発
JavaScriptCSSHTMLMySQLAWSDockerSwiftGitHubKotlinReactRedshiftTypeScriptNext.js
フロントエンドエンジニアマークアップスマホアプリエンジニア
作業内容 大規模サービス/自社開発のフロントエンジニア募集案件
<具体的な業務>
・開発計画に基づく新機能のフロントエンド開発
・ユーザーフィードバックなどを元にした新機能開発や機能改善
・KPIに基づいた新機能開発や機能改善
・チーム内での相互コードレビュー
<主な技術スタック>
バックエンド:Go
フロントエンド:JavaScript, React, Redux, Next.js ※TypeScript導入中
ネイティブアプリ:Swift, Kotlin
データベース:MySQL, Redshift
インフラ:AWS
開発環境:Docker
リポジトリ管理:GitHub
<基本時間>
10:00~19:00
【Python(リモート)】SaaSのデータ基盤構築
業務委託(フリーランス)
PythonSQLPostgreSQLSparkAWSDockerJIRAGitHubRedshiftAuroraCircleCIElasticsearchLambda
作業内容 ・在庫最適化システムを支えるデータ基盤の構築を行っていただきます。
・顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。
・基本設計、詳細設計、開発、体テスト、結合テスト、総合テスト、運用をご担当いただきます。
〜開発環境〜
・開発言語:Python、SQL
・DB:Aurora(PostgreSQL互換)、Redshift
・検索エンジン:Amazon Elasticsearch Service
・ライブラリ・フレームワーク:Pandas、Numpy、Dask
・インフラ:Amazon Web Services
・AWS製品:ECS、S3、Step Functions、Lambda、CloudWatch
・環境、ツール:Docker、GitHub、Jira、Slack、CircleCI、Sentry
【Python】基本リモート!内製ツール開発及び技術/分析支援
業務委託(フリーランス)
PythonSQLPostgreSQL
サーバーサイドエンジニア
作業内容 ・仕様作成・調整
・ツール開発
・データ分析