データ分析基盤の開発(SE)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
SE
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
【AWS Glue】データ分析基盤構築PJ|フルリモート
業務委託(フリーランス)
AWSGlue
サーバーサイドエンジニア
作業内容 ・会計ソフトメーカーにて情報を一元管理・可視化する
データ分析基盤の構築を計画しております。
業務内容として、AWS環境上にて各システムから
データを収集/加工するための調査・設計・実装や
BIツールと連携してデータを可視化する機能の設計・
実装まで広範に渡り対応して頂きます。
【AWS】エンドユーザー内におけるデータ分析・基盤構築支援の求人・案件
作業内容 ■データ分析基盤チーム
エンド会社が提供する各プロダクトからのデータ収集、加工・集計対応。
その後可視化、分析結果からの将来予測など。
データレイク、DWH。
【開発環境】
インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
データベース:RDS(Aurora MySQL)
ETL:AWS Glue
BIツール:QuickSight
言語:Python
コミュニケーション:Slack、Zoom、Backlog、DocBase
【Tableau】医療系データマネジメント案件
業務委託(フリーランス)
AWSTableauGlue
作業内容 検診やカルテ、レセプトといった医療データから匿名化、標準化を行い企業、大学、研究機関、自治体向けに医療ビッグデータの提供を行います。
利用者はWebでダッシュボード(Tableau)での表示/分析を行います。
・ログイン・認証や設定/管理画面をJavaで開発を行う
・AWS Glueを使用し、データの編集・加工を行う(使用言語はPython )
・ダッシュボードの表示にはTableau Serverを使用し、オンラインでサービスを提供する
Python / Glue データ分析基盤構築
作業内容 データ分析基盤構築
・データ加工、INPUT及びOutput(Tableau)の要件から処理設計及び構築
※Tabelau部分については定例会などでフォローを実施
【AWS】AWSを利用したDWH構築案件
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
AWSを利用して、大手金融子会社のデータウェアハウス (DWH) 構築プロジェクトを担当します。RedshiftやGlueを活用し、データ管理の一元化を図ります。
■具体的な業務内容
・AWS Glueを用いたETL処理の構築
・AWS Redshiftを用いたDWH構築
・既存オンプレ環境からのデータ移行と管理
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【AWS】不動産ベースレジストリのプラットフォーム開発
業務委託(フリーランス)
PostgreSQLAWSRedshiftGlueFargateLambda
インフラエンジニア
作業内容 ビッグデータを取り扱うETL環境を構築
SQL Dr.SumからRedShiftへのシステムリプレース
作業内容 小売業でのDr.SumからRedShiftへのシステムリプレース
作業フェーズとして設計、開発、単体テスト、総合テスト、データ移行、リリースを担当していただく
<作業内容>
テーブル設計・作成、glueでのデータ加工の設計・開発・テスト
DB:Dr.Sum+データ加工:Connectで作成しているシステムを
DB:RedShift+データ加工:glueでリプレースする
・対象システム数:7
<基本時間>
9:00~18:00
<服装>
基本的には自由
Web会議でクライアントとお話する時はビジネスカジュアル
【AWS】IoTデータ分析基盤(レイクハウス)の設計・構築・テストの求人・案件
業務委託(フリーランス)
PythonAWSGitGlue
作業内容 AWS上にIoTデータを集積したレイクハウスを設計・構築いたします。
設計・構築の依頼はAWS Glue、StepFunctionsによる設計・構築、テストが依頼範囲となります。
データ規模が大きいシステムのため、AWS Glue、Sparkの技術に明るく性能面、コスト面から最適化のアプローチができる方を希望します。
データ分析基盤の開発(テックリード)
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
作業内容 <業務内容>
・各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など
・データレイク、DWH
・仕様策定
・要求の明確化
・エンジニアのチーミング
<開発環境>
・インフラ:AWS(Athena、Redshift、Glue、QuickSightなど)
・データベース:RDS(Aurora MySQL)
・ETL:AWS Glue
・BIツール:QuickSight
・言語:Python
・コミュニケーション:Slack、Zoom、Backlog、DocBase
<基本時間>
9:00~18:00
フレックス
【Python】システム開発および基盤構築(リモート)
業務委託(フリーランス)
PythonDynamoDBAWSDockerGlueAthenaLambda
バックエンドエンジニア
作業内容 ・AWS上でLLMを活用するシステム開発および機能追加
・Pythonを利用したバックエンド開発
※メイン作業
(RestAPIのWEBシステム、Lambda、Glueなど)
・AWSインフラ設計、構築
・新技術調査、要件定義、設計、実装、テスト
【AWS】エンドユーザー向けAWS基盤の調査・改善
業務委託(フリーランス)
AWSGlueAthena
サーバーエンジニア
作業内容 既存のAWSデータレイク基盤の調査改善と、
ログ管理機能及びセキュリティの設計、構築を行う。
【AWSGlueなど】大手金融機関向け データ分析基盤構築の求人・案件
業務委託(フリーランス)
AWSGoogle Cloud PlatformGlue
作業内容 クラウドサービスを活用したデータ分析基盤構築をお任せいたします。
【Python(Web開発系)】分析システムにおけるデータ連携・加工処理構築
業務委託(フリーランス)
PythonSQLAWSRedshiftGlueLambda
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
データプラットフォームの企画および設計、データパイプラインの構築、データ分析基盤の運用など、データエンジニアリング全般を担当します。
■具体的な業務内容
・データプラットフォームの設計および構築
・データパイプラインの設計および運用
・BIの開発、運用、データ分析支援
【SQLなど】小売業でのDr.SumからRedShiftへのシステムリプレースの求人・案件
作業内容 作業フェーズとして設計、開発、単体テスト、総合テスト、データ移行、リリースを担当していただく作業内容:テーブル設計・作成、glueでのデータ加工の設計・開発・テスト①DB:Dr.Sum+データ加工:Connectで作成しているシステムを
②DB:RedShift+データ加工:glueでリプレースする
③対象システム数:7
【クラウドエンジニア】事業会社向け AWS を用いたETL処理及び開発
業務委託(フリーランス)
PythonSQLAWSRedshiftGlue
作業内容 ■業務内容
大手事業会社向け、AWSを用いたETL処理及び開発業務を担っていただきます。
具体的にお任せしたい業務としては以下の通りです。
└Amazon RDS/Redshiftに格納されたデータの読み込み
└上記データを用いたAWS GlueでのETL処理の開発
└EC2上に配置されたファイルのAWS GlueでのETL処理の開発
└設計書、報告用資料の作成
■同社について
独立系SIer企業として、創業から製造、流通、金融などの幅広い業界分野にわたり、多種多様な業務系システム構築を手がけてこられた企業様です。
お客様先での常駐開発、自社受託開発などの業務系システム構築から、データ統計解析、Iot支援等 幅広く事業展開をされていらっしゃいます。
【SQL】データ分析基盤の開発支援の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 顧客内の情報を一元的に管理・可視化する、データ分析基盤の開発支援です。
チームメンバーと共に試行錯誤しながら業務を進めていただきます。
下記業務をご担当いただく予定です。
・データソースの収集
・S3への蓄積
・AWS Glueを使用したデータ加工
・外部ツールからのデータ収集/外部ツールへの加工データ連携
・QuickSightを使用したデータ集計
・データ加工の自動化(Lambda、StepFunctionを想定)
・terraformを利用した構成管理(Glueのジョブ、IAMロール、S3
、Quicksight)
【PM】物流/倉庫会社向けデータ分析基盤構築案件
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
データベースエンジニアPM
作業内容 ・物流企業の案件で、データ分析基盤構築プロジェクトにおいて、大量データを効率的に蓄積/管理し、領域横断的なビジネスの課題提起、施策検証に活用するための分析環境ならびに BIツールの整備等に携わっていただきます。
・具体的には下記作業のサポートを行っていただきます。
-データ加工パイプライン作成
-Glue及びGlue DataBrewにてRedshiftへのETL処理
-LambdaにてDWH処理の自動化及びデータクレンジング
-DWHの論理設計
-AWS全般の作業
-プロジェクト管理 等
New【Python/SQL】AWS/ETL処理開発の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 小売業様向けに、AWS環境でETL処理の追加開発を行う
Amazon RDS/Redshiftに格納されたデータの読み込み
上記データを用いたAWS Glue(Python+SQL)でのETL処理の開発
EC2上に配置されたファイルのAWS Lambda(Python)を用いた取り込み処理の開発
設計書、報告用資料の作成
(リーダのみ)顧客との各種折衝、メンバの管理
【Python3/SQL】某大手携帯会社向けDWH基盤構築プロジェクトの求人・案件
業務委託(フリーランス)
PythonSQLAWSAmazon S3DynamoRedshiftGlueLambda
作業内容 ETL処理(設計、実装、単体テスト、結合テスト、システムテスト)
Pythonエンジニア システムバージョンアップ対応
作業内容 ・ETL処理ツールのAWSGlueをバージョンアップする(Ver.1.0→3.0)。→現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してAWSパラメータをチューニングする。・AWSGlueから呼び出すPythonをバージョンアップする。(Ver.3.6→3.7)→現新バージョン差異、互換性を確認し、必要に応じて改修設計を実施してPythonスクリプトを改修する。
【AWS/Python】ポイント関連の管理システム新規構築
業務委託(フリーランス)
JavaJavaScriptPythonNode.jsAWSGlueLambda
作業内容 大手通信事業者様のポイント関連システムの新規構築案件です。
アジャイル開発(スクラム開発)手法で推進しており、お客様との要件定義から開始し設計〜開発※〜試験〜リリースまでを対応頂く想定です。
AWS / Python IoTデータ分析基盤の設計・構築・テスト
作業内容 AWS上に、IoTデータを集積したレイクハウスを設計・構築いたします。
AWS Glue、StepFunctionsによる設計・構築・テストが依頼範囲となります。
データ規模が大きいシステムのため、AWS GlueやSparkの技術に明るく、性能面、コスト面から最適化のアプローチができる方を募集しております。
<基本時間>
10:00~19:00
【AWS/Python】ポイント関連の管理システム新規構築
業務委託(フリーランス)
JavaJavaScriptPythonNode.jsAWSGlueLambda
作業内容 大手通信事業者様のポイント関連システムの新規構築案件です。
アジャイル開発(スクラム開発)手法で推進しており、お客様との要件定義から開始し設計〜開発※〜試験〜リリースまでを対応頂く想定です。
New【SQL】データ分析基盤の開発支援の求人・案件
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 顧客内の情報を一元的に管理・可視化する、データ分析基盤の開発支援です。チームメンバーと共に試行錯誤しながら業務を進めていただきます。
下記業務をご担当いただく予定です。
・データソースの収集
・S3への蓄積
・AWS Glueを使用したデータ加工
・外部ツールからのデータ収集/外部ツールへの加工データ連携
・QuickSightを使用したデータ集計
・データ加工の自動化(Lambda、StepFunctionを想定)
・terraformを利用した構成管理(Glueのジョブ、IAMロール、S3、Quicksight)
【AWS】AWSを利用したDWH構築案件(20代〜40代活躍中!・週4日以上稼働可能な方にぴったり!)
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
大手財閥系金融子会社において、AWSを利用したデータウェアハウス (DWH) の構築プロジェクトを担当します。データの一元管理を目指し、RedshiftやGlueを活用してシステムを構築します。
■具体的な業務内容
・AWS Glueを用いたETL処理の設計・実装
・AWS Redshiftを用いたDWH構築
・既存データの移行および管理
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【Python】ポイント関連の管理システム新規構築(リモート)
業務委託(フリーランス)
JavaJavaScriptPythonNode.jsAWSGlueLambda
作業内容 ・ポイント関連システムの新規構築案件です。
・アジャイル開発(スクラム開発)手法で推進しており、お客様との要件定義から開始し設計〜開発※〜試験〜リリースまでを対応頂く想定です。
【Python】カード会社向けシステムリプレイス
業務委託(フリーランス)
PHPCPythonSQLAWSGlue
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
案件
カード会社向けシステムリプレイス
をご担当いただきます。
現行DWHシステムのOracleExadata→AWS載替
▼条件等
場所:恵比寿
精算:あり
お顔合わせ:1回
※週5日〜OKの案件です!
【リモート】データ分析基盤の開発要員
業務委託(フリーランス)
Glue
データサイエンティスト
作業内容 各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測など。
テックリードとSE2名ずつの募集です。
【Python】製造業向けデータエンジニアの求人・案件
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
作業内容 クライアントの調達部門にてAWSを利用した購買データのデータパイプライン構築~運用をご担当いただきます。