【AWS】IoTデータ分析基盤(レイクハウス)の設計・構築・テストの求人・案件
業務委託(フリーランス)
PythonAWSGitGlue
作業内容 AWS上にIoTデータを集積したレイクハウスを設計・構築いたします。
設計・構築の依頼はAWS Glue、StepFunctionsによる設計・構築、テストが依頼範囲となります。
データ規模が大きいシステムのため、AWS Glue、Sparkの技術に明るく性能面、コスト面から最適化のアプローチができる方を希望します。
【AWS】不動産ベースレジストリのプラットフォーム開発
業務委託(フリーランス)
PostgreSQLAWSRedshiftGlueFargateLambda
インフラエンジニア
作業内容 ビッグデータを取り扱うETL環境を構築
データ分析基盤の開発(テックリード)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
・仕様策定
・要求の明確化
・エンジニアのチーミング
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
【AWS】エンドユーザー向けAWS基盤の調査・改善
業務委託(フリーランス)
AWSGlueAthena
サーバーエンジニア
作業内容 既存のAWSデータレイク基盤の調査改善と、
ログ管理機能及びセキュリティの設計、構築を行う。
【SQLなど】小売業でのDr.SumからRedShiftへのシステムリプレースの求人・案件
作業内容 作業フェーズとして設計、開発、単体テスト、総合テスト、データ移行、リリースを担当していただく作業内容:テーブル設計・作成、glueでのデータ加工の設計・開発・テスト①DB:Dr.Sum+データ加工:Connectで作成しているシステムを
②DB:RedShift+データ加工:glueでリプレースする
③対象システム数:7
【Python3/SQL】某大手携帯会社向けDWH基盤構築プロジェクトの求人・案件
業務委託(フリーランス)
PythonSQLAWSAmazon S3DynamoRedshiftGlueLambda
作業内容 ETL処理(設計、実装、単体テスト、結合テスト、システムテスト)
【AWS/Python】ポイント関連の管理システム新規構築
業務委託(フリーランス)
JavaJavaScriptPythonNode.jsAWSGlueLambda
作業内容 大手通信事業者様のポイント関連システムの新規構築案件です。
アジャイル開発(スクラム開発)手法で推進しており、お客様との要件定義から開始し設計〜開発※〜試験〜リリースまでを対応頂く想定です。
【クラウドエンジニア】事業会社向け AWS を用いたETL処理及び開発
業務委託(フリーランス)
PythonSQLAWSRedshiftGlue
作業内容 ■業務内容
大手事業会社向け、AWSを用いたETL処理及び開発業務を担っていただきます。
具体的にお任せしたい業務としては以下の通りです。
└Amazon RDS/Redshiftに格納されたデータの読み込み
└上記データを用いたAWS GlueでのETL処理の開発
└EC2上に配置されたファイルのAWS GlueでのETL処理の開発
└設計書、報告用資料の作成
■同社について
独立系SIer企業として、創業から製造、流通、金融などの幅広い業界分野にわたり、多種多様な業務系システム構築を手がけてこられた企業様です。
お客様先での常駐開発、自社受託開発などの業務系システム構築から、データ統計解析、Iot支援等 幅広く事業展開をされていらっしゃいます。
【SQL】データ分析基盤の開発支援の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 顧客内の情報を一元的に管理・可視化する、データ分析基盤の開発支援です。
チームメンバーと共に試行錯誤しながら業務を進めていただきます。
下記業務をご担当いただく予定です。
・データソースの収集
・S3への蓄積
・AWS Glueを使用したデータ加工
・外部ツールからのデータ収集/外部ツールへの加工データ連携
・QuickSightを使用したデータ集計
・データ加工の自動化(Lambda、StepFunctionを想定)
・terraformを利用した構成管理(Glueのジョブ、IAMロール、S3
、Quicksight)
【AWS/Python】ポイント関連の管理システム新規構築
業務委託(フリーランス)
JavaJavaScriptPythonNode.jsAWSGlueLambda
作業内容 大手通信事業者様のポイント関連システムの新規構築案件です。
アジャイル開発(スクラム開発)手法で推進しており、お客様との要件定義から開始し設計〜開発※〜試験〜リリースまでを対応頂く想定です。
【PM】物流/倉庫会社向けデータ分析基盤構築案件
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
データベースエンジニアPM
作業内容 ・物流企業の案件で、データ分析基盤構築プロジェクトにおいて、大量データを効率的に蓄積/管理し、領域横断的なビジネスの課題提起、施策検証に活用するための分析環境ならびに BIツールの整備等に携わっていただきます。
・具体的には下記作業のサポートを行っていただきます。
-データ加工パイプライン作成
-Glue及びGlue DataBrewにてRedshiftへのETL処理
-LambdaにてDWH処理の自動化及びデータクレンジング
-DWHの論理設計
-AWS全般の作業
-プロジェクト管理 等
AWS / Python IoTデータ分析基盤の設計・構築・テスト
作業内容 AWS上に、IoTデータを集積したレイクハウスを設計・構築いたします。
AWS Glue、StepFunctionsによる設計・構築・テストが依頼範囲となります。
データ規模が大きいシステムのため、AWS GlueやSparkの技術に明るく、性能面、コスト面から最適化のアプローチができる方を募集しております。
<基本時間>
10:00~19:00
New【Python/SQL】AWS/ETL処理開発の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 小売業様向けに、AWS環境でETL処理の追加開発を行う
Amazon RDS/Redshiftに格納されたデータの読み込み
上記データを用いたAWS Glue(Python+SQL)でのETL処理の開発
EC2上に配置されたファイルのAWS Lambda(Python)を用いた取り込み処理の開発
設計書、報告用資料の作成
(リーダのみ)顧客との各種折衝、メンバの管理
Pythonエンジニア システムバージョンアップ対応
作業内容 ・ETL処理ツールのAWSGlueをバージョンアップする(Ver.1.0→3.0)。→現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してAWSパラメータをチューニングする。・AWSGlueから呼び出すPythonをバージョンアップする。(Ver.3.6→3.7)→現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してPythonスクリプトを改修する。
New【SQL】データ分析基盤の開発支援の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 顧客内の情報を一元的に管理・可視化する、データ分析基盤の開発支援です。チームメンバーと共に試行錯誤しながら業務を進めていただきます。
下記業務をご担当いただく予定です。
・データソースの収集
・S3への蓄積
・AWS Glueを使用したデータ加工
・外部ツールからのデータ収集/外部ツールへの加工データ連携
・QuickSightを使用したデータ集計
・データ加工の自動化(Lambda、StepFunctionを想定)
・terraformを利用した構成管理(Glueのジョブ、IAMロール、S3、Quicksight)
【Python】ポイント関連の管理システム新規構築(リモート)
業務委託(フリーランス)
JavaJavaScriptPythonNode.jsAWSGlueLambda
作業内容 ・ポイント関連システムの新規構築案件です。
・アジャイル開発(スクラム開発)手法で推進しており、お客様との要件定義から開始し設計〜開発※〜試験〜リリースまでを対応頂く想定です。
【AWS】クラウドデータ分析基盤構築案件
業務委託(フリーランス)
PythonAWS
インフラエンジニア
作業内容 ・クラウドデータ分析基盤の構築に携わっていただきます。
・下記を行っていただきます。
-AWS Glueを活用したデータ連携
-Snowflakeへのデータ活用基盤構築
【BI/地方OK】データ分析(リーダー)募集
業務委託(フリーランス)
SQLAWSGlue
データサイエンティスト
作業内容 顧客内の情報を一元的に管理・可視化する、データ分析基盤の開発支援です。
リーダーとして工程管理、本部横断調整などをお願いします。
各アカウントと連携を取りながら推進していくため、
高いコミュニケーションとBI/ETLの深い知識が必要になります。
環境は下記の想定。
・データソースの収集
・S3への蓄積
・AWS Glueを使用したデータ加工
・外部ツールからのデータ収集/外部ツールへの加工データ連携
・QuickSightを使用したデータ集計
・データ加工の自動化(Lambda、StepFunctionを想定)
・terraformを利用した構成管理(Glueのジョブ、IAMロール、S3
、Quicksight)
【AWS Glue】会計ソフトメーカー向けデータ分析基盤構築PJ
業務委託(フリーランス)
AWSGlue
インフラエンジニアデータベースエンジニア
作業内容 ・会計ソフトメーカー向けデータ分析基盤構築PJに携わっていただきます。
・主にご担当いただきます。
-データ分析基盤の構築
-データを収集、加工するための調査、設計、実装
-機能の設計、実装
【AWS/フルリモート】AWS移行案件
業務委託(フリーランス)
SQLLinuxAWSGitSVNviGlue
作業内容 ・車検やタイヤ交換など、車の整備専門検索サイトのAWS移行作業に携わっていただきます。
・具体的な作業内容は以下の通りです。
-AWS Glueを用いた開発
【AWS Glue+QuickSight/基本リモート】データ分析基盤構築(データエンジニア)
業務委託(フリーランス)
AWSGlue
データサイエンティスト
作業内容 ①新しく立ち上げるサービスのリリースに向けてデータの収集、加工、可視化対応を行う
②既存のデータ抽出の移行や統合対応
⇒イメージ:要件化したものを自動化し更新できる仕組みづくりを対応いただく
③マーケティング施策のための顧客データ基盤構築対応
【Python】顧客社内データ可視化PJの求人・案件
業務委託(フリーランス)
PythonAWSGlueAthena
作業内容 ヘルスケア関連事業を展開されているお客様内で、社内データの可視化PJがスタートしております。
主な作業内容として、各種SQLサーバ-から必要データをDWHに取込み、
QuickSightに流し込むまでをユーザーヒアリングを行いながら
実施していただく予定です。
開発環境 :Python(PySpark, pandas)AWS(RDS、Athena、Lambda、Glue、QuickSight)など
【Python】カード会社向けシステムリプレイス
業務委託(フリーランス)
PHPCPythonSQLAWSGlue
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
案件
カード会社向けシステムリプレイス
をご担当いただきます。
現行DWHシステムのOracleExadata→AWS載替
▼条件等
場所:恵比寿
精算:あり
お顔合わせ:1回
※週5日〜OKの案件です!
【リモート】データ分析基盤の開発要員
業務委託(フリーランス)
Glue
データサイエンティスト
作業内容 各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など。
テックリードとSE2名ずつの募集です。
【AWS】カード会社向けシステムリプレイス
業務委託(フリーランス)
PHPCSQLAWSGlue
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
▼案件
カード会社向けシステムリプレイス
をご担当いただきます。
現行DWHシステムのOracleExadata→AWS載替
▼条件等
場所:恵比寿
精算:あり
お顔合わせ:1回
※週5日〜OKの案件です!
【AWS(リモート)】データ分析基盤の開発
作業内容 ・情報を一元的に管理・可視化するデータ分析基盤の開発・構築
・AWSの各種サービスを活用した実現可能性の調査
・各システムからのデータ収集・データ加工・データ整形機能の設計・実装
・BIツールによるデータ可視化機能の設計・実装
【Python】製造業向けデータエンジニアの求人・案件
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
作業内容 クライアントの調達部門にてAWSを利用した購買データのデータパイプライン構築~運用をご担当いただきます。
【クラウドエンジニア(AWS)】製造メーカー向け/新統合基盤構築に伴うMuleSoftの開発【リモートOK】
PL/SQLTransact-SQLAWSGlue
作業内容 ■概要
製造メーカー向け/新統合基盤構築に伴うMuleSoftの開発をお任せいたします。
■具体的な作業内容
・上記システムの開発に携わって頂きます。
【Python】システムバージョンアップ対応
作業内容 ・ETL処理ツールのAWS Glueをバージョンアップする(Ver.1.0→3.0)。 →現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してAWSパラメータをチューニングする。 ・AWS Glueから呼び出すPythonをバージョンアップする。(Ver.3.6→3.7) →現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してPythonスクリプトを改修する。
AWS データ分析基盤の開発要員募集
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
作業内容 各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測等をご担当頂きます。
会計系のシステムをメインとしてはご担当頂く予定ですが、状況に応じて他業界の業務を担当頂く可能性もあります
<環境>
インフラ:AWS(Athena, Redshift, Glue, QuickSightなど)
DB:RDS(Aurora MySQL)
ETL:AWS Glue
BIツール:QuickSight
言語:Python
その他:Slack, Zoom, Backlog, DocBase
開発手法:アジャイル開発