【Python】データ分析基盤の開発及び運用業
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェハウス、マートの実装、テスト
※基盤構築作業が主な作業になります。
【Python】システムバージョンアップ対応
作業内容 ・ETL処理ツールのAWS Glueをバージョンアップする(Ver.1.0→3.0)。 →現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してAWSパラメータをチューニングする。 ・AWS Glueから呼び出すPythonをバージョンアップする。(Ver.3.6→3.7) →現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してPythonスクリプトを改修する。
【Python】システムバージョンアップ対応(リモート)
作業内容 ・ETL処理ツールのAWS Glueをバージョンアップする(Ver.1.0→3.0)。
→現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してAWSパラメータをチューニングする。
・AWS Glueから呼び出すPythonをバージョンアップする。(Ver.3.6→3.7)
→現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してPythonスクリプトを改修する。
Pythonエンジニア データ分析基盤の開発/運用
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
バックエンドエンジニア
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェハウス、マートの実装、テスト
※基盤構築作業が主な作業になります。
【AWS】銀行向けAWS上データ基盤設計/構築案件
業務委託(フリーランス)
AWSAurora
インフラエンジニア
作業内容 ・AWS上でのデータ基盤の設計構築をご担当いただきます。
【AWS(リモート)】データ分析基盤構築運用検討
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェハウス、マートの実装、テスト
※基盤構築作業が主な作業になります
【AWS(リモート)】データ分析基盤構築運用検討
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク、データウェハウス、マートの実装、テスト
※基盤構築作業が主な作業になります
【AWS/リモート併用】データ分析環境基盤設計構築の案件・求人
業務委託(フリーランス)
AWSGlueAthena
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
・データ分析環境について要件に基づき必要な基盤を設計、構築する作業
・AWS上に検証環境を構築し、検証、調整を実施
・他システムを含む全体アーキテクチャに基づきデータ分析環境を設計
・エンドユーザー、データエンジニアと随時打合せにより内容を討議、決定
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
PHP / Java 与信、決済プラットフォーム構築
業務委託(フリーランス)
JavaPHPLinuxMySQLAWSGitLaravelSpringBootGlueAthenaSalesforceLambda
作業内容 建設業向けの金融プラットフォーム構築
・AWSの各種プロダクトを利用した社内に存在する複数データの統合基盤構築(PHP, Java, Salesforce等)
・LINEを利用した工事情報の出来高情報入力システムの開発等をご担当頂きます
<備考>
月火リモート、水木金オンサイト予定
<基本時間>
10:00~19:00
大手不動産企業におけるデータエンジニア業務
業務委託(フリーランス)
SQLAWSGlueAthena
作業内容 住宅系・商業系データの分析用前処理として、実データと最低限の設計ドキュメントを用いてデータクリーニング・加工を行う。実データが定義書と乖離している部分もあったりするため、必要に応じてメンバーとコミュニケーションをとり、ドキュメントとコードにまとめていく。
【AWS/20代30代活躍中】金融機関向けのデータ基盤構築・分析支援
業務委託(フリーランス)
AWSTableauGlueAurora
作業内容 【概要】:
顧客情報子会社の立ち位置にて、下位ベンダーがおこなう納品成果物のチェック
および顧客への報告を担当。
・情報系統合データベース分析・加工対応支援などのユーザ受入れ支援
・大規模データベースに蓄積された情報をBIツールなどを利用してユーザの欲する情報を照会する開発のユーザ支援
#実際の手を動かす作業は基本ありません。
【環境】:AWSのAurora、ETLツール、BIツール
【場所】:豊洲※テレワーク5割程度予定
【時間精算】:140h-200h
【面談回数】:1回
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・週5日稼働できない方
--------------------------------------------------------
【データエンジニア/データサイエンティスト】データ分析基盤開発案件
業務委託(フリーランス)
PythonBacklogRedshiftGlueAthena
データサイエンティスト
作業内容 ・データ分析基盤開発案件に携わっていただきます。
・下記いずれかをご担当いただきます。
-テックリード担当
-SE担当
・主に下記作業をお任せいたします。
-データ収集、加工、集計、可視化、分析結果からの将来予測等の作業
【Python/リモート併用】ヘルスケア関連事業顧客向け社内データ可視化PJの案件・求人
業務委託(フリーランス)
PythonAWSTableauGlueAthena
作業内容 ===========
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・日本語ビジネスレベル必須
・週5日稼働必須
・実務経験3年以上必須
===========
・Pythonを用いたヘルスケア関連事業顧客向け社内データ可視化PJに携わっていただきます。
・ヘルスケア関連事業を展開されているお客様内で、社内データの可視化PJがスタートしております。
・主な作業内容として、各種SQLサーバ-から必要データをDWHに取込み、QuickSightに流し込むまでをユーザーヒアリングを行いながら実施していただく予定です。
AWS / Oracle 基幹システム オンプレミス→AWS移行
PythonVB.NETPL/SQLOracleAWSRedshiftGlueCloudFormationLambda
サーバーサイドエンジニア
作業内容 OracleDB, VB.NETのクライアントアプリケーションの移行/改修になります。
自社オンプレ基幹システムのうち、大小含め複数システムのAWS移行に伴い、
その内の1システムの基本設計から携わって頂きます。
<対象システム>
・レセプトデータを扱う基幹システム
<移行計画>
サーバー:IBM Netezza → AWS RedShift
DB:Oracle → AWS Oracle
アプリ:既存を移行※移行に伴いサーバーサイドの改修をします。
<基本時間>
9:00~18:00
【AWS】大手飲料メーカーでのデータレイク分析環境運用
業務委託(フリーランス)
AWSRedshiftTableauGlue
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【内容】大手飲料メーカーでのデータレイク分析環境運用
【求める人物像】
・心身ともに健康な方
・体調不良などの遅刻/休みは月1回以下の方
・向上心のある方
・勤怠の良い方
・コミュニケーション良好な方
・能動的な方
・報連相の良い方
【精算】140-180h
【場所】中野
※基本的にはリモート作業ですが、週1程度の出社可能性あり
【時間】基本9:30~18:30
【面談】2回(オンライン予定)
※週5日〜OKの案件です!
【Python】データ分析基盤の開発及び運用業
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
作業内容 ・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク,データウェハウス,マートの実装,テスト
※基盤構築作業が主な作業になります。
【AWS】医療保険関連システムのIaCテンプレート開発
業務委託(フリーランス)
AWSGlueTerraformCloudFormationAuroraLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
■内容
官公庁向けシステムに対して、自動構築用テンプレートおよび
単体テスト部分の自動テストの実装、PoCを実施頂きます。
・自動構築:Terraformを使用したテンプレート開発
・自動テスト:ServerSpec等を使用したテストコード開発
下記、既存システム側の構成
・フロント
・Web/APP:ECS/APIGateway/ELB/AutoScaling/ElastiCache
・データベース:DynamoDB/Aurora
・バッグ
・バッチ処理:ECS、AWSBatch、Lambda、StepFunctions
・ETL処理:Glue
・共通部分
・監視:Zabbix、CloudWatch
・認証:Cognito、IAM
・セキュリティ:KMS、CloudHSM、Inspector、GuardDuty
・CI/CD:Codeシリーズ、CloudFormation、ECR
■作業場所
新橋
業務に必要な日本語スキルがあれば外国籍の方もOKです。面談1回。
リモート案件ではありませんのでご注意ください。
・勤務時間:9:00~18:00
・精算:140-180H
※週5日〜OKの案件です!
※実務経験1年以上お持ちの方が対象の案件です!
【AWS/フルリモート】ECシステムクラウド移行及びリプレイス案件の案件・求人
業務委託(フリーランス)
PythonAWSGlueSAPLambda
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
オンプレミスサーバーにて長年運用されているBtoB、BtoC 向け大規模ECシステムのクラウド移行
及びリプレイス案件となります。
AWS 医療保険関連システムの設計・構築
DynamoDBAWSZabbixGlueCloudFormationAuroraLambda
作業内容 業務データの正常性を確認することを目的に、新規Auroraを本番稼働中のシステムで構築済みのAuroraから複製する。
併せて、データ解析用基盤の設計/構築を行う。
<作業詳細>
以下作業を担っていただく想定
・AWSサービスのパラメータ設計・構築・単体テスト
・結合テスト実施・総合テスト実施支援、テストケース・仕様書作成
<プロジェクトの期間>
全体:2022/10~2024/11
<システム環境>
フロントエンド:
Web/APP :ECS/API Gateway/ELB/AutoScaling/ElastiCache
データベース :DynamoDB/Aurora
バッグエンド:
バッチ処理:ECS、AWS Batch、Lambda、StepFunctions
ETL処理 :Glue
共通:
監視:Zabbix, CloudWatch
認証:Cognito, IAM
セキュリティ:KMS, CloudHSM, Inspector, GuardDuty
CI/CD:Codeシリーズ, CloudFormation, ECR
Python データ基盤アプリケーション開発
作業内容 データ基盤アプリケーション開発
・アプリケーション開発(設計~総合テスト)
・各種仕様書の作成
<備考>
フルリモート
【AWS】データ分析基盤構築
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGoogle Cloud PlatformRedshiftBigQueryGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築のPMO案件です。
主な業務内容は以下を想定しています。
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が中心でそれに付随して日程調整などの管理業務
若手メンバーのフォローやレビュー作業を担当します。
拠点は渋谷ですがフルリモート参画になります。
PC貸与はなしです、ご自身の端末からAWSWorkspaces上で作業を行います。
技術スタックは以下になります。
・AWS:Glue,Lambda,StepFunctions,Redshift,RedshiftSpectrum,IAM,SageMaker,S3,EC2,CodePipeline,CodeDeploy
・GCP:BigQuery,GCS,CloudFunction,CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:GithubEnterprise,CodeCommit
・コラボレーションツール:JIRA,Confluence,Backlog
・コミュニケーションツール:Slack,GSuite
時間は10:00~19:00応相談
場所:渋谷、フルリモート
清算方法:140-180上下割
打合せ回数:1回
※週5日〜OKの案件です!
【Python3年以上/リモート併用/週5稼働/20~40代活躍中】データ分析基盤構築支援の案件・求人
業務委託(フリーランス)
PythonAWSGlue
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
★本案件の最新の状況は、担当者までお問合せ下さい。
★期間:随時~
顧客の提供する各プロダクトからのデータ収集、加工・集計・可視化、
分析結果からの将来予測などをお願いします。
基本リモートワーク(必要に応じ顧客オフィスへ出社あり)
※20代〜30代が中心で活気ある雰囲気です。
※成長意欲が高く、スキルを急速に伸ばしたい方に最適
※将来リーダーを目指す方歓迎
【AWS】医療保険関連システムのIaCテンプレート開発
業務委託(フリーランス)
RAWSGlueTerraformCloudFormationAuroraLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
■案件概要
医療保険関連システムのIaCテンプレート開発をご担当いただきます。
■PJ概要
本番稼働中の官公庁向けシステムに対して、自動構築用テンプレート
および単体テスト部分の自動テストの実装、PoCの実施
■作業概要
・自動構築:Terraformを使用したテンプレート開発
・自動テスト:ServerSpec等を使用したテストコード開発
■システム環境
下記、既存システム側の構成
・フロントエンド
・Web/APP:ECS/APIGateway/ELB/AutoScaling/ElastiCache
・データベース:DynamoDB/Aurora
・バッグエンド
・バッチ処理:ECS、AWSBatch、Lambda、StepFunctions
・ETL処理:Glue
・共通部分
・監視:Zabbix、CloudWatch
・認証:Cognito、IAM
・セキュリティ:KMS、CloudHSM、Inspector、GuardDuty
・CI/CD:Codeシリーズ、CloudFormation、ECR
■その他条件
精算条件:140h~180h
面談回数:1回
作業場所:八丁堀出社
勤務時間:9時00分~18時00分
※週5日〜OKの案件です!
※実務経験1年以上お持ちの方が対象の案件です!
【Python/SQL(リモート)】データ分析基盤データ連携/マート定常化作業
業務委託(フリーランス)
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambdaGoogle Workspace
バックエンドエンジニア
作業内容 データパイプラインのPythonでの実装作業です。
・データパイプラインのpython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
〜技術スタック〜
・AWS:Glue、Lambda、StepFunctions、Redshift、Redshift Spectrum、IAM、SageMaker、S3、EC2、CodePipeline、CodeDeploy
・GCP:BigQuery、GCS、CloudFunction、CloudComposer、
・DB:Redshift、PostgreSQL、Oracle、MySQL
・リポジトリ:Github Enterprise、CodeCommit
・コラボレーションツール:JIRA、Confluence、Backlog
・コミュニケーションツール:Slack、Google Workspaces
【AWS】某メガバンク向け金融プラットフォーム開発
業務委託(フリーランス)
AWSGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
▼案件内
某メガバンク向けの金融プラットフォームの開発案件が既存にあり、
インフラチームの一員として要件定義、
設計~構築、運用を一貫して対応いただける
クラウドエンジニアの方を募集致します。
アジャイル形式で開発を続けている
プラットフォームでインフラも
2週間のスプリントでエンハンス対応をしております。
AWSの基礎的な部分からモダンな
サービスまで幅広く利用しております。
▼技術要素
AWS(CDK、lambda、glue、sagemaker、ecs、ec2、rds、etc...)
▼条件等
場所:虎ノ門
※基本出社ですが、リモート併用も相談可能です
清算方法:140-180h(中間割)
打合せ回数:2回
備考:
・勤怠良好、体調に不安のない方
・金融業界向けSIer様ですが、「スマホ持込不可」等の制限はございません
※週5日〜OKの案件です!
【AWS/フルリモート】製造業向けデータ基盤構築案件
作業内容 ・AWSクラウド環境でのAWSサービスを活用したデータ基盤構築に携わっていただきます。
・データ基盤構築により下記のような運用に変わるイメージです。
現運用:データソースの手動取得⇒ETLツールを手動実行⇒BIツール
本運用:データソースを自動取得AWSサービス(AppFlow, Lambda)⇒ETLツールを自動実行⇒BIツール
また、上記処理の監視、エラーハンドリング機能(CloudWatch, StepFunctions)
・ご担当いただくのは主に下記作業です。
-詳細設計書作成
-各インターフェースからデータを取得する収集処理の実装(AppFlow, Lambda(Python))
-収集したデータからデータマートを作成する変換処理の実装(Glue(pySpark, Spark SQL))
-検証作業(単体、結合、総合)
New【Ruby/Python】データ基盤エンジニア募集の求人・案件
業務委託(フリーランス)
PythonRubyRailsAWSDockerReactRedshiftTypeScriptGlueAthena
作業内容 AWSで開発・運用されているサービスのデータ基盤エンジニアとして開発・運用・保守を担当いただきます。具体的にはデジタルサービスを開発・運用するための社内プラットフォーム内の基盤群の開発・運用・運用改善を担当。
【AWS】金融機関向けのデータ基盤構築および分析支援
業務委託(フリーランス)
JavaVB.NETCOBOLRVBWindowsLinuxAWSVMwareReactTableauSpringBootGlueAurora
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
金融機関向けのデータ基盤構築・分析支援をご担当いただけるSEの方を募集しております。
情報子会社の立ち位置にて、ベンダーがおこなう納品成果物のチェックおよび企業への報告を担当。
・情報系統合データベース分析・加工対応支援などのユーザ受入れ支援
・大規模データベースに蓄積された情報をBIツールなどを利用してユーザの欲する情報を照会する開発のユーザ支援
※実際の手を動かす作業は基本ありません。
【環境】:AWSのAurora、ETLツール、BIツール
【場所】:豊洲※リモート可(リモート5割程度予定)
【時間精算】:相談/140-200h
【面談回数】:1回
【その他】:
・コミュニケーションが良好な方
・BIツール経験
※週5日〜OKの案件です!
【AWS/Python】データ連携アプリ開発
業務委託(フリーランス)
PythonAWSFargate
バックエンドエンジニア
作業内容 同社クライアントのDX事業会社様の案件になります。
現在開発中のシステムに対する追加機能の設計実装をお任せ致します。
工程:アプリケーション設計~総合テスト
AWS 某生命保険会社のAWS環境でのDWH構築
DynamoDBAWSRedshiftGlueCloudFormationAurora
インフラエンジニアコンサル
作業内容 某生命保険会社のAWS環境にて構築済のDWH基盤を更に拡充し、更なるデータ集約、外部サイトのビックデータ収集、Redshift, EMRを使った データ分析を新たに構築する。
<以下は補足>
・基盤だけでなくデータマートやスタースキーマ等、分析に適したデータ設計も 実施
・BIツール等のデータを扱う上での権限制御等も実施
・基盤全体のセキュリティに関する改修も実施可能性有
構築済のDWHサービス
・S3, Aurora, QuickSight, OpenAPI, Lamda, Glue, EventBridge, Step Functon, EC2, Athnea
監視・通知系サービス(CloudWatch Trail SNS)
・CloudFormation
新規追加予定のサービス
・Redshift, EMR, LakeFormation, DynamoDB, Kinesis Firehorse
【Java/20代30代活躍中】銀行情報系アプリケーション開発
業務委託(フリーランス)
JavaWindowsLinuxSpringAWSGlueAurora
作業内容 【概要】
銀行情報系アプリケーション開発
【開発環境】
Java
Spring
AWS(各種)、Linux、WindowsSever
【主に行う業務】
金融系クラウドの業務関連システム情報系(データ利活用機能など)の
アプリケーション開発をしていただきます。
【求める人物像】
・勤怠/健康状態に問題がなく、中長期的に業務に携わっていける方
・コミュニケーション能力のある方
・ハウスルールなど遵守しつつ業務を遂行できる真面目で責任感のある方
・主体的に動ける方
【作業工程】
基本設計~運用保守(参画時期により変更の可能性あり)
【場所】
新宿or川崎駅
※基本常駐
【勤務時間】
9:00~18:00(予定)
【精算】
140h~200h
【面談】
1回
【備考】
・服装:ビジネスカジュアルまたはスーツ
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・週5日稼働できない方
--------------------------------------------------------
【Java】銀行情報系アプリケーション開発
業務委託(フリーランス)
JavaWindowsLinuxSpringAWSGlueAurora
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
銀行情報系アプリケーション開発
【開発環境】
Java
Spring
AWS(各種)、Linux、WindowsSever
【主に行う業務】
金融系クラウドの業務関連システム情報系(データ利活用機能など)の
アプリケーション開発をしていただきます。
【求める人物像】
・勤怠/健康状態に問題がなく、中長期的に業務に携わっていける方
・コミュニケーション能力のある方
・ハウスルールなど遵守しつつ業務を遂行できる真面目で責任感のある方
・主体的に動ける方
【作業工程】
基本設計~運用保守(参画時期により変更の可能性あり)
【場所】
新宿or川崎駅
※メインは川崎になります。
一部新宿に出社の可能性もあります。
【勤務時間】
9:00~18:00(予定)
【精算】
140-200h
【面談】
1回
【備考】
・服装:ビジネスカジュアルまたはスーツ
※週5日〜OKの案件です!
New【Python】金融関連システムAWS更改の求人・案件
作業内容 作業内容:PySperkを用いたデータ連携システムの構築工 程 :基本設計~総合試験開発環境:AWS、PySperk
【インフラ/一部リモート】生命保険会社向け次世代クラウドDWH基盤構築案件
業務委託(フリーランス)
JavaOracleSpringAWSAmazon EC2Amazon S3Glue
インフラエンジニア
作業内容 ・生命保険会社向け次世代クラウドDWH基盤構築に携わっていただきます。
・基本設計以降の工程をご担当いただきます。
AWS DX組織におけるデータマネジメント業務
作業内容 大手小売業のDX組織(分析基盤構築/運用、活用推進組織)におけるデータマネジメント業務をご対応頂きます。
<主に下記業務を実施>
①業務プロセス検討・改善
・基本的な考え方はDMBOKを参考に、データマネジメントに関する業務プロセスの課題整理・改善を実施
・特にメタデータ、セキュリティに関するガバナンスに注力して推進中
②運用業務
セキュリティ関連のレビュー/相談
・顧客会社内のセキュリティレベルに則り、データ利用範囲や格納環境が適切かなどをチェック
データカタログ管理
・分析基盤内で蓄積・加工するデータのカタログ設計と記載内容のレビュー
<環境・ツール>
・AWS(S3, EC2, Glue, RDS, Redshift etc)
・dbt
・Tableau
<服装>
オフィスカジュアル
【Python/AWS】製造業向けデータ基盤構築案件
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
データサイエンティスト
作業内容 ・製造業向けデータ基盤構築案件に携わっていただきます。
・主に下記作業をご担当いただきます。
‐AWSサービス内で連携されたデータ(RDSforOracle)を他システム(原価システム)へのデータ生成
‐BIツール用のデータ生成構築
‐AWS Lambda(Python、SQLArchemy)での製造
‐単体テスト(仕様書作成、実施)
‐結合テスト
【データエンジニア/AWS】電機メーカー向けデータインフラ基盤構築案件
業務委託(フリーランス)
AWS
データサイエンティスト
作業内容 ・電機メーカー向けデータインフラの基盤構築を担当していただきます。
AWS データレイク・DWH管理等
PythonSparkAWSGitGoogle Cloud PlatformBigQueryHiveGlueAthenaTerraformCircleCILambda
作業内容 動画やECサイト等、Webコンテンツを数多く提供しているサービス企業において、サービス提供の根幹となるデータレイク・DWH管理などの対応をしていただきます。
主な業務内容は以下を想定していますが、詳細についてはご面談時に説明させていただきます。
1. AWSのデータレイクからBigqueryへのデータ移行作業
2. GCPデータ基盤の整備(ワークフローエンジン導入等)
→2番の作業関しては、ご意向と経験に応じてご相談となります。
<開発環境>
言語:Python, Hive, Spark
AWS:EMR, Glue, Athena, Lambda, APIGateway
GCP:BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows
CI・CD・その他:Terraform, CircleCI, GithubActions, digdag, embulk
<備考>
基本リモート
<基本時間>
10:00~19:00
【GCP】スニーカー売買プラットフォームのデータ分析基盤の開発の求人・案件
業務委託(フリーランス)
AWSApacheGitGoogle Cloud PlatformGlueCircleCI
作業内容 話題沸騰中のスニーカーフリマアプリのデータ分析基盤の開発を行っていただきます。
具体的には、データアナリストチームで以下の業務を想定しています。
・データパイプライン(Data Ware House/Data Mart)の構築/運用
・データの品質管理
・コスト監視体制構築
【AWS】大手小売業のDX組織におけるデータマネジメント
業務委託(フリーランス)
AWSTableauGlue
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
▼案件
・大手小売業のDX組織(分析基盤構築/運用、
活用推進組織)におけるデータマネジメント業務頂きます。
・4,5名のチーム体制で主に下記業務を実施
▼業務プロセス検討・改善
・基本的な考え方はDMBOKを参考に、
データマネジメントに関する業務プロセスの課題整理・改善を実施
・特にメタデータ、セキュリティに関するガバナンスに注力して推進中
▼運用業務
・セキュリティ関連のレビュー/相談
顧客会社内のセキュリティレベルに則り、
データ利用範囲や格納環境が適切かなどをチェック
・データカタログ管理
分析基盤内で蓄積・加工するデータのカタログ設計と
記載内容のレビュー
▼環境・ツール
・AWS(S3,EC2,Glue,RDS,Redshiftetc)
・dbt
・Tableau
▼条件等
場所:麹町(リモート可)
清算方法:140‐180h(中間割)
打合せ回数:2回
※週5日〜OKの案件です!