【SQL】自動車関連サービスに関わるデータ分析基盤の現状調査の求人・案件
業務委託(フリーランス)
SQLAWSAmazon S3RedshiftGlueLambda
作業内容 2年ほど前にAWSをベースに分析基盤が構築されたものの、現状がわかりづらい状況となっています。
現状を調査し調査の後、必要に応じて「システムの再構築」
「一部破棄」または「システムの刷新」の方針決めを行います。
※詳細、募集背景は面談時にご説明いたします。
【ターゲットとなるシステム】
・In Data : Salesforce 他
・Out Data : Tableau 他
【Python(リモート)】AI系サービスデータ基盤構築
業務委託(フリーランス)
PythonSQLWindowsLinuxPostgreSQLSparkAWSGitHubRedshiftBigQueryTreasure DataAuroraCircleCILambda
バックエンドエンジニア
作業内容 顧客の持つ様々なビッグデータをクラウド環境で統合し、その分析/活用が出来る基盤の構築/運用します。
・新規データ取得のETL及びデータウェアハウスの実装
・データ基盤の運用及び保守開発
・データの可視化
・定例MTG対応
・仕様書等ドキュメント作成(一部)
〜技術環境〜
OS:Linux、Windows
言語:Python、SQL
DB:Redshift、Aurora(PostgreSQL互換)
Cloud:AWS(ECS、S3、StepFunctions、Lambda、Redshift、Aurora等)
DWH:BigQuery、TreasureData等
機械学習系:Kedro、MLflow
CI:CircleCI
監視系:Sentry
その他:GitHub、Slack、CircleCI
商品データの品質維持向上に関する業務支援
SQLAWSRedshiftFargateRPALambdaUipath
作業内容 大手商社の商品データの品質を維持・向上するチームの業務支援案件です。
「データ品質をチェックするシステムの保守・運用」「データの大量更新の業務支援」が主なミッションになり、
データの整合性をとるためのRPA(UiPath)の保守・運用をご支援いただきます。
このRPAでは、データ品質チェックシステムというAWS上(CloudWatch、Fargate、lambda、Redshift(DB))に構築されたシステムに対し、
SQLやExcelマクロを実行することでデータ抽出やアップロードファイルを作成。
その後作成したファイルを別の上流システムにアップロードしています。
クライアントからの依頼に応じ、上記RPAの機能拡張や類似のRPAの開発などの作業がメイン業務となります。
作業管理、作業設計などは上位メンバーが実施するため、作業を実行する業務をご担当いただきます。
【Python/SQL】データパイプライン開発
業務委託(フリーランス)
PythonSQL
サーバーサイドエンジニア
作業内容 通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築
主な業務内容は以下を想定しています。
・データパイプラインのpython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
拠点は渋谷ですがフルリモート参画になります。
技術スタックは以下になります。
・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy
・GCP:BigQuery, GCS, CloudFunction, CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:Github Enterprise,CodeCommit
・コラボレーションツール:JIRA, Confluence, Backlog
・コミュニケーションツール:Slack,Google Workspaces
時間は10:00~19:00 応相談
【Python/AWS/フルリモート可能】自社プロダクト製品開発の案件・求人
業務委託(フリーランス)
PythonAWSDockerRedshift
バックエンドエンジニア
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
■製品:位置情報ビッグデータを地図上で可視化するWEBサービス
■業務内容:プロダクトの開発を担当いただきます。
■役割:SE/PG
■作業範囲:調査、設計~テスト
■使用言語・DB・環境等
フロントエンド:React(TypeScript)、wepack
バックエンド:Python
プラットフォーム:AWS
(CloudFront、Cognito、Batch、Lambda、CodeBuild、他多数使用)
データベース、ストレージ:Redshift、DynamoDB、S3
監視ツール:Cloudwatch、Sentry
仮想環境:Docker
その他開発ツール:VSCode、Jupyternootbook
ソース管理:Github
プロジェクト管理:Backlog
コミュニケーション:Slack
AWS 情報系システム刷新(EOS対応)案件の基盤設計・構築支援
作業内容 某信販会社様の情報系システム刷新(EOS対応)における、基盤チームの案件になります。
・2022年3月~基本設計開始、2023年4月にビジネスリリース(2023年1月にシステムリリースして並行稼働開始)
・オンプレ上のNetezza, Marklogicで構築された情報系システムをAWS基盤に移行(移行先のAWS基盤はグループ親企業の銀行共通基盤)
・移行先AWS基盤(Redshift, AWS Glue, EC2)の設計、構築、テストや、銀行共通基盤準拠の運用機能開発、手順作成がスコープ(アプリケーション移植、データ移行は別ベンダーにて担当予定)
・基盤チームとしては7~8名を想定
<備考>
フルリモート
【上流SE/DB/AWS/フルリモート】Webアプリケーションインフラ構築案件
業務委託(フリーランス)
PostgreSQLAWSRedshift
サーバーエンジニアデータベースエンジニアPMサーバーサイドエンジニアSE
作業内容 ・Webアプリケーション開発にあたってのインフラ構築案件にてテックリードとして携わっていただきます。
・AWSのサービス選定等上流工程から構築、導入まで一気通貫でご担当いただきます。
【Go/気温リモート/週5日】人事業務支援のバックエンド開発
業務委託(フリーランス)
AWSDocker
サーバーサイドエンジニアバックエンドエンジニア
作業内容
・ サービス開発案件におけるバックエンドリアーキ Ruby on RailsからGoへのリアーキ
【Python/リモート】新サービス導入に向けたAWS移行作業
作業内容 既存システムをAWS環境へ移行し、以下の作業をご担当いただきます。
・外部サービスとのAPI構築
・S3からRedshiftへのデータ取込バッチ構築
・Redshiftのデータマート構築
・他システムへのデータ連携
【AWS】コーポレートシステムのデータエンジニア
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
DBA
作業内容 データ分析基盤の構築・運用をおまかせします
・各種システムからのBigQueryへのデータパイプラインの構築・運用
・BigQuery上のデータウェアハウス・データマートの加工処理の構築・運用
【SQL】HR系データマート開発実務
業務委託(フリーランス)
SQLGitRedshiftBigQuery
サーバーサイドエンジニア
作業内容 HR系のデータサイエンス部署にてデータマート開発実務を担当いただきます。
SQLでのデータマート開発実装がメインとなりますが、
要件定義やクライアントと直接コミュニケーションを取っていただくこともあるため、
開発ディレクション経験を積むことができます。
New【SQL】大手HR事業のデータ分析基盤開発の求人・案件
業務委託(フリーランス)
PythonSQLAWSGitGoogle Cloud PlatformRedshiftBigQuery
作業内容 【案件概要】弊社クライアント(HR系)のデータサイエンス部署にてデータマート開発実務を担当いただきます。データマート開発実装をメインにご担当いただきますが、要件定義にてクライアントと直接コミュニケーションを取っていただく必要があります。【具体的な業務内容】・分析用データマート開発 ┗ 要件定義、データマート(テーブル)設計、SQL実装、テスト・バッチ基盤(digdag)の実装、運用保守・データエンジニアリング業務 ┗ データの収集、加工、集計・データマートの保守運用・TableauのViz作成
AWS 大手SIer保険会社のDWH構築
AWSRedshiftGlueAthenaAurora
作業内容 下記における要件定義~設計・構築工程で参画いただける方を募集しております。
・AWSネットワーク構成の検討・構築(VPC, ELIの設計、設定等)
・AWS分析基盤サービスの検討・構築(Redshift, Amazon EMR等の設定)
・AWSセキュリティ、可用性検討・構築(リソースアクセス制御、可用性検討)
<備考>
フルリモート
【テックリード/上流】DWH再構築案件
業務委託(フリーランス)
AWSRedshift
PL
作業内容 ・DWH再構築案件にテックリードとして携わっていただきます。
・主に下記作業をご担当いただきます。
- 要件整理、監修、作業指示、構築支援等のサポート
AWS オンプレシステムのマイグレーション
VBAAccessMySQLDynamoDBAWSRedshiftGlueAthenaFargateCloudFormationAuroraCloudFrontLambda
作業内容 オンプレ(VBA+Access+MySQL)で稼働しているシステムのクラウド化PJです。
インフラおよびWebアプリケーションを含む要件定義・設計・実装に携わって頂きます。
<作業工程>
要件定義、設計構築、実装
<使用するAWSサービス>
CloudFormation / CodeCommit / CodePipeline / CodeDeploy / CodeBuild /
EC2 / ECS /S3 / EKS / Fargate /
RDS / Aurora / DynamoDB / ElastiCache / CloudWatch /
CloudFront / VPC /API Gateway /
Well-Architected / Redshift /
ECR / WAF / SQS / SNS /Control Tower /
Auto Scaling / SES / Athena / IAM /
Lambda / Step Functions/
Route 53 /EFS /GuardDuty / CodeStar
Elastic Beanstalk / Amplify
Direct Connect / VPN / Transit Gateway /Cognito /
Glue / ELB / CloudTrail
<開発環境>
インフラ:AWS
OS:指定なし
ネットワーク:閉域環境にする可能性あり
DB:指定なし
言語:指定なし
<備考>
フルリモート
AWS / Python データ活用環境構築支援
作業内容 データサイエンティストが組み立てた機械学習モデルをAWSへ実装(環境構築)して頂きます。
AWSのサービスをフルに活用し、エンハンス開発とシステムの運用保守を同時に行うDevOpsプロジェクトです。
<主な作業>
・Pythonでのプログラム開発
・AWSでのシステム環境構築
・上記に関する設計、テスト、リリース作業
・構築後の運用保守活動
<環境>
モデル開発:Amazon SageMaker
リポジトリ:S3, Amazon ECR, Bitbucket
ジョブ:AWS Batch, AWS Step Functions, Amazon EventBridgeルール
DB:Amazon Redshift
<備考>
原則リモート
<基本時間>
9:00~18:00
【Python】CRMシステム グローバル対応、保守・運用の求人・案件
業務委託(フリーランス)
PythonJIRAGitHubGoogle Cloud PlatformRedshiftBigQuery
PGSE
作業内容 ・既存システムの運用、保守、機能追加
・要件定義~運用テストを想定している
【Python】クラウド型物流システムデータ基盤開発案件
業務委託(フリーランス)
PythonSQLAWSGitGitHubGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 ・クラウド型物流システムにおけるデータ分析基盤の
設計、開発、運用を行っていただきます。
・ご経験に応じて幅広い作業をご担当いただきます。
【データエンジニア/分析補佐】データマート開発業務
業務委託(フリーランス)
PythonSQLAWSGitGoogle Cloud PlatformRedshiftBigQuery
作業内容 大手デジタル支援会社にで受託しているプロジェクトのデータエンジニアを募集しております。
内容としては大手人材系のプロジェクトとなり、転職サービスサイトやアプリのデータマート開発業務がメインとなります。
配属となるデジタルサイエンス部は現在、12名で構成されておりリモート勤務できる環境となっております。
【業務詳細】
●分析用データマート開発
●データマート(テーブル)設計、SQL実装、バッチ(digdag)実装
●保守運用
●開発環境/DB
●AWS/Redshift、GCP/BigQuery両方の環境を触ります。
【Python(リモート)】某ゲーム会社様向け運用中のデータ分析基盤
作業内容 ・バッチ処理コード移行(Java(Spring Boot)→ Google Cloud Composer + Google Data Fusion + dbt) →実装、単体テスト、結合テスト、システムテスト ・SQL構文修正(Redshift(PostgresSQL) → BigQuery) →実装、単体テスト、結合テスト、システムテスト ・テーブルデータ移行(Redshift → BigQuery) →テーブル設計実装、データ移行、データ検証
【AWS】大手HR事業のデータ分析基盤開発
業務委託(フリーランス)
PythonSQLAWSGitGoogle Cloud PlatformRedshiftBigQueryTableau
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【主に行う業務】
データサイエンス部署にてデータマート開発実務を担当いただきます。
データマート開発実装をメインにご担当いただきますが、
要件定義にてクライアントと直接コミュニケーションを取っていただく必要があります。
具体的には、
・分析用データマート開発
┗要件定義、データマート(テーブル)設計、SQL実装、テスト
・バッチ基盤(digdag)の実装、運用保守
・データエンジニアリング業務
┗データの収集、加工、集計
・データマートの保守運用
・TableauのViz作成
などを想定しています。
【開発環境】
SQL
Redshift、BigQuery
Git、GoogleAnalytics、AdobeAnalytics
【求める人物像】
・勤怠/健康状態に問題がなく、中長期的に業務に携わっていける方
・コミュニケーション能力のある方
・ハウスルールなど遵守しつつ業務を遂行できる真面目で責任感のある方
【作業工程】
要件定義~運用保守
【場所】
五反田駅
※完全リモートですが、初日のみ出社発生
【勤務時間】
10:00~19:00
【精算】
140-200h
【面談】
1回
【備考】
・服装:ビジネスカジュアル
※週5日〜OKの案件です!
※実務経験1年以上お持ちの方が対象の案件です!
【SQL(リモート)】データ抽出業務
業務委託(フリーランス)
SQLRedshiftBigQuery
作業内容 ・基幹データやアクセスログからのデータ抽出
→新規のSQL作成、既存SQLの調査/改修
・依頼者(事業担当者)との抽出要件の整理、プロジェクトの進行管理
【Azure、AWS/一部リモート/週5日】Azure、AWSハイブリッド環境でのDWH環境構築案件
業務委託(フリーランス)
AWSAzure
アプリケーションエンジニア
作業内容
基本設計から総合テストまで
Azure、AWSで使用するサービス:
・Glue
・StepFunction
・Redshift
・オンプレミスデータゲートウェイ
・PowerBI Service
・Azure Service Bus
・AzueAD
・Sharepoint
・CloudWath
・AWS Backup
・S3
リモート可/稼働率80%~ メタデータのETL基盤の改良・構築、視覚化に必要な基盤の構築
業務委託(フリーランス)
JavaScriptPythonSQLVBAMySQLPostgreSQLDjangoFlaskAngularAWSRedshift
作業内容 【業務内容】
・各種メタデータの加工・整備
データサイエンティストと協力し、今まで使っていないような技術も含めて技術選定を行い、使えるデータを構築する
・日々蓄積されるデータを加工し利用しやすい形で格納するための基盤作り・改良
・クライアント向けwebサービスに利用するデータマートの設計・構築
・データサイエンティストが利用するデータベースの整備・データの抽出・クリーニング作業
・お客様のニーズに応じた商品のシステムへの実装、商品化に向けたデータ基盤の整備
【現在の開発環境】
・言語 : Python2.7/3.6/3.7
・フレームワーク:Django, Flask, Angular
・データベース: Redshift/MySQL/PostgreSQL
・インフラ : AWS (EC2,S3, RedshiftRDS,Lambda,Data Pipeline)
・エディタ : 指定なし
・コミュニケーション: Slack,GitHub,Backlog,Confluence
【DB】通信キャリア会員向けデータ基盤構築案件
業務委託(フリーランス)
JavaPythonSQLC#AWSRedshiftGlueLambda
データベースエンジニア
作業内容 ・データベースエンジニアとして通信キャリア会員向けデータ基盤の構築をお任せいたします。
・下記を行っていただきます。
- 通信キャリア会員向けEC運営会社でのデータ基盤構築
- データ連携案件管理
- 基盤構築
New【SQL/Python】データ分析基盤/開発・移行業務におけるリーダーの求人・案件
業務委託(フリーランス)
JavaPythonSQLC#AWSRedshiftGlueLambda
PMPMO
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務・基盤構築:事業要請に応じたデータレイク,データウェハウス,マートの実装,テスト・基盤移行
■営業担当からのコメント■Pythonでゴリゴリコードを書くというよりも、基盤移行やマート管理等、管理系の業務が主となります。
【SQL / ~40歳まで / テックビズなら記帳代行無料】データエンジニア/サービスにおける分析業務
業務委託(フリーランス)
SQLOracleRedshiftTableau
作業内容 【案件内容】
大手人材系クライアントが運営するサービスの分析用データマート設計・開発、
マート作成後のBIツールによる可視化をメインに行なっていただきます。
プロダクトのデータアナリティクス部門のため、
ゆくゆくはデータ活用施策支援や企画まで幅広く活躍できる方を期待しています。
【諸条件】
■場 所:大手町、五反田、在宅
■時 間:定時 09:00-18:00
■リモート有無:基本在宅ですがPJ状況に応じて出社の可能性有り
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・40代以上の方
・外国籍の方(永住権をお持ちの方は問題ございません)
・週5日稼働できない方
--------------------------------------------------------
【Python/リモート】SaaS向けデータ連携システムの新バージョンへの移行案件
PythonSQLAWSDockerRedshift
作業内容 すでに運営中のSaaSサービスでのデータ連携システムを新バージョンに移行していただきます。
顧客企業ごとに実装しているデータ変換処理を新バージョンに合わせて移行します。
新旧のデータ仕様を把握の上、移行の設計を行い、その後の実装、テストも含めて、お任せします。
実装に用いる言語は、Python、Bash、SQLとなります。
【Python/AWS(リモート)】位置情報ビッグデータアプリ開発
業務委託(フリーランス)
PythonDynamoDBAWSDockerBacklogGitHubReactRedshiftTypeScriptVSCodeCloudFrontLambda
バックエンドエンジニア
作業内容 アプリケーションの調査、設計、開発をご担当いただきます。
〜環境〜
フロントエンド:React(TypeScript)、wepack
バックエンド:Python
プラットフォーム:AWS
(CloudFront、Cognito、Batch、Lambda、CodeBuild、他多数使用)
データベース、ストレージ:Redshift、DynamoDB、S3
監視ツール:Cloudwatch、Sentry
仮想環境:Docker
その他開発ツール:VSCode、Jupyter nootbook
ソース管理:Github
プロジェクト管理:Backlog
コミュニケーション:Slack
PM / AWS システム基盤のマイグレーション
VBAAccessMySQLDynamoDBAWSRedshiftGlueAthenaFargateCloudFormationAuroraCloudFrontLambda
PM
作業内容 オンプレ(VBA+Access+MySQL)で稼働しているシステムのクラウド化PJです。
PMとして、インフラおよびWebアプリケーションを含む要件定義・設計・実装に携わって頂きます。
<作業工程>
要件定義、設計構築、実装
<使用するAWSサービス>
CloudFormation / CodeCommit / CodePipeline / CodeDeploy / CodeBuild /
EC2 / ECS /S3 / EKS / Fargate /
RDS / Aurora / DynamoDB / ElastiCache / CloudWatch /
CloudFront / VPC /API Gateway /
Well-Architected / Redshift /
ECR / WAF / SQS / SNS /Control Tower /
Auto Scaling / SES / Athena / IAM /
Lambda / Step Functions/
Route 53 /EFS /GuardDuty / CodeStar
Elastic Beanstalk / Amplify
Direct Connect / VPN / Transit Gateway /Cognito /
Glue / ELB / CloudTrail
<開発環境>
インフラ:AWS
OS:指定なし
ネットワーク:閉域環境にする可能性あり
DB:指定なし
言語:指定なし
<備考>
フルリモート