【Python】データーレイク開発の求人・案件
業務委託(フリーランス)
PythonLinuxAWSDockerGitRedshift
作業内容 概 要:
世界各国で利用されるオンラインサービスにおけるデータ分析基盤の開発運用支援をお願い致します
【Tableauなど】大手都市銀行向けBI性能改善支援の求人・案件
業務委託(フリーランス)
WindowsAWSRedshiftTableau
作業内容 AWS上で運用されている情報系システムにおいてTableauの性能に問題を抱えており、その調査と対策の検討を実施いただきたいです。
【DBエンジニア(SQL全般)】【業務委託(準委任)】DBエンジニア(データ分析・作業アシスタント)
業務委託(フリーランス)
SQLRedshiftBigQueryTableauSnowflake
作業内容 【20代~30代のITエンジニアが活躍中!】
■概要
音楽フェスのデータを活用したデータ分析業務に携わっていただきます。
■具体的な作業内容
・BigQuery内でSQLを用いデータ抽出
・抽出結果をTableauで可視化
・Pythonを用いた定期ジョブプログラムのメンテナンス
■雇用形態
・業務委託週10時間~
・在宅勤務可(リモートデスクトップ等で社内環境に接続いただく想定)
・給与は応相談
New【Java】データ基盤(AWS)エンハンス開発チームの求人・案件
業務委託(フリーランス)
JavaAWSRedshiftGlue
作業内容 自動車大手のお客様にて開発中のデータ基盤(AWSのESK上で構築)に関連するエンハンス開発や追加要求に対する周辺システムの開発
データ収集・分析・可視化・新規サービスへの情報提供・管理機能などPJ規模
チーム単位で5~8名程度のチームが複数8チームほど存在。
このチームのどこかに参画頂く予定
【SQL】自動車関連サービスに関わるデータ分析基盤の現状調査の求人・案件
業務委託(フリーランス)
SQLAWSAmazon S3RedshiftGlueLambda
作業内容 2年ほど前にAWSをベースに分析基盤が構築されたものの、現状がわかりづらい状況となっています。
現状を調査し調査の後、必要に応じて「システムの再構築」
「一部破棄」または「システムの刷新」の方針決めを行います。
※詳細、募集背景は面談時にご説明いたします。
【ターゲットとなるシステム】
・In Data : Salesforce 他
・Out Data : Tableau 他
商品データの品質維持向上に関する業務支援
SQLAWSRedshiftFargateRPALambdaUipath
作業内容 大手商社の商品データの品質を維持・向上するチームの業務支援案件です。
「データ品質をチェックするシステムの保守・運用」「データの大量更新の業務支援」が主なミッションになり、
データの整合性をとるためのRPA(UiPath)の保守・運用をご支援いただきます。
このRPAでは、データ品質チェックシステムというAWS上(CloudWatch、Fargate、lambda、Redshift(DB))に構築されたシステムに対し、
SQLやExcelマクロを実行することでデータ抽出やアップロードファイルを作成。
その後作成したファイルを別の上流システムにアップロードしています。
クライアントからの依頼に応じ、上記RPAの機能拡張や類似のRPAの開発などの作業がメイン業務となります。
作業管理、作業設計などは上位メンバーが実施するため、作業を実行する業務をご担当いただきます。
New【SQL】大手HR事業のデータ分析基盤開発の求人・案件
業務委託(フリーランス)
PythonSQLAWSGitGoogle Cloud PlatformRedshiftBigQuery
作業内容 【案件概要】弊社クライアント(HR系)のデータサイエンス部署にてデータマート開発実務を担当いただきます。データマート開発実装をメインにご担当いただきますが、要件定義にてクライアントと直接コミュニケーションを取っていただく必要があります。【具体的な業務内容】・分析用データマート開発 ┗ 要件定義、データマート(テーブル)設計、SQL実装、テスト・バッチ基盤(digdag)の実装、運用保守・データエンジニアリング業務 ┗ データの収集、加工、集計・データマートの保守運用・TableauのViz作成
New【SQL/Python】データ分析基盤/開発・移行業務におけるリーダーの求人・案件
業務委託(フリーランス)
JavaPythonSQLC#AWSRedshiftGlueLambda
PMPMO
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務・基盤構築:事業要請に応じたデータレイク,データウェハウス,マートの実装,テスト・基盤移行
■営業担当からのコメント■Pythonでゴリゴリコードを書くというよりも、基盤移行やマート管理等、管理系の業務が主となります。
【データエンジニア/分析補佐】データマート開発業務
業務委託(フリーランス)
PythonSQLAWSGitGoogle Cloud PlatformRedshiftBigQuery
作業内容 大手デジタル支援会社にで受託しているプロジェクトのデータエンジニアを募集しております。
内容としては大手人材系のプロジェクトとなり、転職サービスサイトやアプリのデータマート開発業務がメインとなります。
配属となるデジタルサイエンス部は現在、12名で構成されておりリモート勤務できる環境となっております。
【業務詳細】
●分析用データマート開発
●データマート(テーブル)設計、SQL実装、バッチ(digdag)実装
●保守運用
●開発環境/DB
●AWS/Redshift、GCP/BigQuery両方の環境を触ります。
【Python】CRMシステム グローバル対応、保守・運用の求人・案件
業務委託(フリーランス)
PythonJIRAGitHubGoogle Cloud PlatformRedshiftBigQuery
PGSE
作業内容 ・既存システムの運用、保守、機能追加
・要件定義~運用テストを想定している
リモート可/稼働率80%~ メタデータのETL基盤の改良・構築、視覚化に必要な基盤の構築
業務委託(フリーランス)
JavaScriptPythonSQLVBAMySQLPostgreSQLDjangoFlaskAngularAWSRedshift
作業内容 【業務内容】
・各種メタデータの加工・整備
データサイエンティストと協力し、今まで使っていないような技術も含めて技術選定を行い、使えるデータを構築する
・日々蓄積されるデータを加工し利用しやすい形で格納するための基盤作り・改良
・クライアント向けwebサービスに利用するデータマートの設計・構築
・データサイエンティストが利用するデータベースの整備・データの抽出・クリーニング作業
・お客様のニーズに応じた商品のシステムへの実装、商品化に向けたデータ基盤の整備
【現在の開発環境】
・言語 : Python2.7/3.6/3.7
・フレームワーク:Django, Flask, Angular
・データベース: Redshift/MySQL/PostgreSQL
・インフラ : AWS (EC2,S3, RedshiftRDS,Lambda,Data Pipeline)
・エディタ : 指定なし
・コミュニケーション: Slack,GitHub,Backlog,Confluence
【DWH】データ基盤(Azureプラットフォーム)構築プロジェクトの求人・案件
業務委託(フリーランス)
AWSAzureGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 ■背景
・クライアント内の提案活動に於いて自然言語案件が増え始めており、リソースが必要となった
・クライアント内で自社分析ツール(テキスト分析)あり
■クライアント支援範囲
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■エンドクライアント
・建築・製造・医療など
■想定業務
・データ基盤を構築するプロジェクト。蓄積したデータをBIやAIで活用するためのプラットフォームの設計・構築が主業務となります。要求開発フェーズからご参画いただくことを想定。
・顧客案件におけるデータ基盤構築支援(要件定義・設計・構築・テスト・マニュアル作成など)
・要件定義 /基本設計/詳細設計
New【分析基盤エンジニア】データ分析基盤/Web企業でのデータパイプライン構築や可視化業務
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 ・自社プロダクトであるデータ統合SaaSおよび、AWSやGoogle Cloud等のクラウドサービスを用いたデータ分析基盤構築・データ統合パイプラインの設計および実装・SQLを用いたデータマート作成、名寄せ、クレンジング等の実施・BIツールを用いたデータ可視化・外部サービス(CDP/MA/SFA等)とのデータ連携および活用の支援
【BigQueryなど】大規模データ基盤管理/改善業務の求人・案件
業務委託(フリーランス)
PythonLinuxRedshiftBigQuery
作業内容 【背景】
アクセス解析データ/DBデータ/APIデータ等合計600TBのデータ基盤を管理データ基盤を管理・改善する人員が不足しており今回の募集にいたりました。【お願いしたい業務】
* 運用改善
* データ基盤関連ツールの導入(ELTツール - dataform, データガバナンス - dataplex/DataCatalogなど)
* CDPの構築(店舗向け、ラベル推定/スコア推定など, SFAツールへの連携)【できればお願いしたい業務】
* 新規データ連携対応(DB - embulk, API - Cloud Run/Pythonによる実装)
* データマート整備(Composerなど)DWHはbigqueryBIはtableauはtreasuredataにアクセスし可視化しています
【Python】SaaS型分析アプリケーションの開発・運用・データ基盤運用の求人・案件
業務委託(フリーランス)
PythonAWSRedshiftLambda
作業内容 ■仕事内容
ビッグデータを活用した、SaaS型分析アプリケーションの開発・運用を進めていただきます。
また現在の地上波テレビ放送のみならず、今後新たに動画配信サービスでも同様の視聴データ分析サービスを開発・提供しており、そのサービス設計・開発の立ち上げを担っていただきます。
【プロダクト開発】
・自社サービスのプロダクトの機能開発、運用
・動画配信サービスを対象とした新プロダクトの企画、設計、開発
・データサイエンティストが考案した新たな分析手法に応じたプロトタイプの開発
【データ基盤運用】
・ETLシステムの開発、改善、運用
・AWS上のインフラ基盤の改善、運用
■開発環境
・言語:Python、Typescript
・フレームワーク:Django、Flask、pandas、Angular
・データベース:Snowflake、MySQL、PostgreSQL、Redis
・インフラ:AWS (ECS、Lambda、Batch、Redshift、RDS、Route 53、SES、SNS、etc)
・CI/CD:GitHub Actions
・テスト:pytest、Cypress
・開発ツール:JetBrains PyCharm有償版、DataGrip、VSCode、その他有用なものは積極的に使用、購入
・デザインツール:Figma
・BIツール:Redash、Tableau
・バージョン管理:GitHub
・コミュニケーション:Slack、Zoom、Backlog、Confluence■チーム
執行役員: 1名
エンジニア:9名
データサイエンティスト:4名
【Motion Board】BIツール人材の求人・案件の求人・案件
作業内容 ・大手損保会社における代理店向け販促ツール開発(新規開発・保守開発)
・アクセスログ等を集計し代理店の活動状況、成約状況、進捗管理をBIツールに反映
させる
●環境
・MotionBoard(BIツール)
・AWS REDSHIFT、S3
・Python(pandas)
・SQL
【SQLなど】データエンジニアの求人・案件
業務委託(フリーランス)
PythonSQLRedshiftBigQuerySnowflake
作業内容 データ分析基盤の構築・運用に際し下記業務をご担当いただきます。
・各種システムからのBigQueryへのデータパイプラインの構築、運用
・BigQuery上のデータウェアハウス・データマートの加工処理の構築、運用
◆開発環境
・言語 : Python
・データベース : BigQuqery, Aurora MySQL 2.0, Aurora PostgreSQL
・インフラ : AWS (EC2, S3, Lambda etc.) , GCP
・バージョン管理 : git/Github
・CI : CircleCI, Jenkins
New【Ruby/Python】データ基盤エンジニア募集の求人・案件
業務委託(フリーランス)
PythonRubyRailsAWSDockerReactRedshiftTypeScriptGlueAthena
作業内容 AWSで開発・運用されているサービスのデータ基盤エンジニアとして開発・運用・保守を担当いただきます。具体的にはデジタルサービスを開発・運用するための社内プラットフォーム内の基盤群の開発・運用・運用改善を担当。
【GCP/AWSなど】データ基盤エンジニアの求人・案件
業務委託(フリーランス)
PythonSQLRAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 事業横断のデータ基盤(DWHとデータパイプライン)の設計・構築・運用
既存DWH(BigQuery)とデータパイプラインの拡充
将来のデータ基盤戦略の策定と推進
データ分析によるビジネス課題の発見と推進
・受注背景:既存事業の運用基盤を引き継ぎ、信頼性・利便性向上にコミットするため
【分析基盤エンジニア】世代医療分析基盤の大規模開発支援
作業内容 ・10ヵ年計画で実現する次世代医療分析基盤の大規模開発のスタートラインを切るメンバーとして、インフラ設計段階から開発、本番適用まで一貫して携わっていただきます。
・また、国内医療での利用拡大が約束されている分析基盤の継続機能開発及び運用を実施します。
【開発環境】
・AWS:SageMaker、WorkSpaces、VPC Endpoint、Redshift、Aurora、EC2、ECR、S3等
・言語:Python、SQL
【対応内容】
・要件定義及びテスト設計
・インフラ設計及び監修
・ネットワーク及びセキュリティ設計
・開発実装及びテスト実施
・外部ストレージとの繋ぎ込み開発
【分析基盤エンジニア】AWSからAzureへの移行および拡張(DWH技術者)の求人・案件
業務委託(フリーランス)
AWSAzureRedshiftTableauSnowflake
作業内容 ■クライアント支援範囲 ・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識 ■概要 <1月~3月にて、データ基盤構築(Power BIとTableau込み)の上流工程(基本設計)を予定> 本プロジェクトは、現行のAWS(プロトタイプ環境)からAzureへの移行および拡張となります。 ・Azure Synapse Analyticsへ外部データやユーザーが保有するデータを投入し、Power BIとTableauで分析。 TableauはTableau ServerからTableau Cloudへの移行を伴い、外部データの取り込みには、Synapse Analytics のパイプラインや、Azure FunctionsやAzure Logic Appsを利用。 ■想定業務 ※TableauとPower BIを中心としたDWH技術者 ・ドキュメント作成(基本設計書/移行計画書) ・Tableau ServerからTableau Cloudへの移行設計 ・DWH(SynapseやSnowflakeやRedshiftなど)のデータアーキ
▼関連ソリューション
・Azure Synapse Analytics
・Azure Functions
・Azure Logic Apps
・Tableau Cloud(またはTableau Server)
・Power BI Service
■体制
体制:
AIチームは全部で15名程度
6名~7名→AIエンジニア 6~7名→BI・データ基盤
1クライアントに対して4~5名で体制を組んでいる
■環境
クライアント内ではデータ基盤設計~BI・内製化/運用支援まで行っている
データ基盤:Azure
(クライアント内で基盤設計・構築)
BI:PowerBI
(クライアント内でレポート作成・運用)
【BigQuery】コーポレート部門が利用するシステム/データエンジニアの求人・案件
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 データ分析基盤の構築・運用をおまかせします・各種システムからのBigQueryへのデータパイプラインの構築・運用
・BigQuery上のデータウェアハウス・データマートの加工処理の構築・運用
開発環境言語 : Python,
データベース : BigQuqery, Aurora MySQL 2.0, Aurora PostgreSQL
インフラ : AWS (EC2, S3, Lambda etc.) , GCP
バージョン管理 : git/Github
CI : CircleCI, Jenkins
コミュニケーション : Slack, JIRA, ClickUP, Notion
【分析基盤エンジニア】大手製薬企業/MLOpS基盤立上げ支援の求人・案件
業務委託(フリーランス)
PythonSASRAWSRedshift
作業内容 外資系大手製薬企業のGlobal組織(海外)がメインで、システム運用・保守されるクライアント日本法人組織向けデータ分析基盤のインフラ領域の非機能/運用面の改善検討のリードです。
クライアント日本法人のユーザ部門およびIT部門の意向を踏まえ、ゴールを描きながら検討を行う必要がございます。
【AWS/リモート併用】法人利用向けシステムのAWS基盤構築の案件・求人
業務委託(フリーランス)
PythonLinuxAWSDockerRedshiftSnowflakeTerraformKubernetes
DBA
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
通信会社における法人利用向けのWebサービスシステム(データ分析含む)のAWS基盤構築を行う
New【Python/ShellScript/SQL】インフラメンバー募集の求人・案件
業務委託(フリーランス)
PythonSQLShellAWSGitGoogle Cloud PlatformRedshiftBigQuery
作業内容 ◆概要
持ち帰り案件のインフラメンバーとして参画いただきます。
基本的には、チームとして複数の案件をご対応頂くことになる想定です。◆初めに参画する可能性が高い案件
ウェブマーケティング事業を行っている企業様向けの、ビッグデータ分析基盤の運用、保守開発案件。
AWS上に構築しており、各種AWSリソースの構築や、データパイプライン(データ取り込み、データ加工等)のジョブの実装などを行っています。◆開発ツール
・Bitbucket ・Confluence ・WorkSpaces◆確度が高くなるAWS経験
・ECS ・Glue ・Athena ・LakeFormation ・CloudFormation ・SecretManager ・Amazon MWAA
・クロスアカウントでのデータ受け渡し
【Python(データ分析系)】データ基盤開発(SE)
業務委託(フリーランス)
PythonSQLShellLinux
SE
作業内容 【作業概要】 :データ基盤開発(SE)
機能設計とテスト設計を担当、ETLに必要なテーブル、入出力の設計等
【作業期間】 :即日〜(長期の可能性あり)
【作業時間】 :9:30〜18:00
【作業場所】 :池袋(溜池山王に変わる可能性あり)
リモート可(最初は常駐して慣れてきたら相談)
【Python】クラウドエンジニアの求人・案件
業務委託(フリーランス)
PythonAWS
インフラエンジニア
作業内容 概要:
クラウドエンジニアを募集しております。開発及び分析基盤の設計、構築、運用をお願いします。・使用言語: Python
・クラウド:AWS
・DBMS: RedShift
・ソースコード管理: GitHUB
・プロジェクト管理: Redmine
【Python(データ分析系)】データ基盤開発(SE)
業務委託(フリーランス)
PythonSQLShellLinux
SE
作業内容 【作業概要】 :データ基盤開発(SE)
機能設計とテスト設計を担当、ETLに必要なテーブル、
入出力の設計等
【作業期間】 :即日〜(長期の可能性あり)
【作業時間】 :9:30〜18:00
【作業場所】 :池袋(溜池山王に変わる可能性あり)
リモート可(最初は常駐して慣れてきたら相談)
【DWH】土地・建物情報データ連携基盤構築の求人・案件
業務委託(フリーランス)
PythonAWSAmazon S3GlueLambda
作業内容 土地・建物に関する情報の収集・クレンジングを行うデータ連携基盤(データレイク/DWH)の構築
【GCP/AWSなど】某大手ネット印刷プラットフォームのデータの求人・案件
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 ・某大手ネット印刷プラットフォームのデータ案件
・データ分析基盤の構築/運用
・各種システムからのBigQueryへのデータパイプラインの構築/運用
・BigQuery上のデータウェアハウス・データマートの加工処理の構築/運用
技術環境
・言語 : Python
・データベース : BigQuqery, Aurora MySQL 2.0, Aurora PostgreSQL
・インフラ : AWS (EC2, S3, Lambda etc.) , GCP
・バージョン管理 : git/Github
・CI : CircleCI, Jenkins
・コミュニケーション : Slack, Notion, ClickUP