【Python】データレイク基盤構築プロジェクト(20代〜40代活躍中!・週4日以上稼働可能な方にぴったり!)
業務委託(フリーランス)
PythonSQLShellAWSGitRedshiftLambda
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
このプロジェクトでは、大手小売企業向けのデータレイク基盤を構築するため、Pythonエンジニアを募集します。AWSを使用したサーバーレスアーキテクチャの対応移行作業や、既存ソースコードの修正が主な作業です。特に、AWS LambdaやGlueなどのサービスを活用し、Python3での設計・実装経験が求められます。SQLやGit、Shellの知識も必要です。
■具体的な業務内容
・新アーキテクチャ対応移行に伴う単体テスト、結合テスト、システムテスト
・移行テスト、パフォーマンステスト、運用テストの実施
・既存ソースコードの修正(AWS Lambda、AWS Glue)
・Python3を使用した設計および実装作業
・Amazon RedshiftおよびS3を使用したデータ処理
・GitおよびShellスクリプトの使用
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【Salesforce/リモート】営業支援システム
業務委託(フリーランス)
JavaSQLApexAWSJIRARedshiftSalesforce
作業内容 ・営業支援システムのSF開発、Java/SQL開発(要件定義〜リリース)
・障害対応、および、保守作業(仕様調査、データ調査、データ訴求、マスタデータメンテ等)
・月2回のリリース(定常)
【SQL】次期データウェアハウス基盤の選定
作業内容 ・Teradataに変わる次期データウェアハウス基盤を選定する為、Amazon Redshift、Snowflake等のプロダクト検証を行います。
・具体的には、現在Teradataで動いているクエリーを選定対象のプロダクトで実行し、負荷の検証等を行います。
PHP フードデリバリーサービスのサーバーサイド(稼働率60%)【週3日】
業務委託(フリーランス)
PHPMySQLPostgreSQLAWSHerokuLaravelGitHubGoogle Cloud PlatformRedshiftBigQuery
サーバーサイドエンジニア
作業内容 主に新機能追加がメインとなります。
要件定義は既に担当者がいるので、要件を踏まえ、基本設計に落とし込んで実装していける方を募集しております。
<開発環境>
サーバー/クラウド:AWS, Redshift, 一部GCP, BigQueryを使用
DB:MySQL, PostgreSQL
ツールやミドルウェア:Heroku, GitHub, Slack
<備考>
完全リモート
※掲載金額は週3日(稼働率60%)での金額となります
<基本時間>
基本自由ですが、MTG等は参加して頂きたい為、状況に応じて調整をお願い致します。
<服装>
自由
【DWH/ETLなど】内製開発:ETLチームの求人・案件
業務委託(フリーランス)
MySQLMongoDBSparkAWSApacheJIRARedshiftKafkaLambda
作業内容 ・SEからのインプットを基に詳細設計
・ETLコーディング
・ワークフローシナリオ実装
・UT観点項目作成
・UTスクリプト作成
・UT実施
・必要に応じてシミュレーター/スタブ開発
【Snowflake/Tableau】データ分析基盤移行案件
業務委託(フリーランス)
PythonSQLGitHubRedshiftTableauSnowflake
サーバーエンジニア
作業内容 ・データ分析基盤移行に携わっていただきます。
・主に下記の作業を担当いただきます。
-BigQueryからSnowflakeへのクエリ、テーブル、スプレッドシートの移行
-Lookerから新BIツール(Tableau等)への移行
-上記サービスを利用している社内ユーザとのコミュニケーション
・担当範囲はスキルや経験および進捗状況により変動いたします。
データエンジニア兼ソフトウェアエンジニア:自社プロダクトを活用した今までにないソリューションエンジニア
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud PlatformRedshiftBigQuery
データベースエンジニア
作業内容
・自社プロダクトの開発・運用
→webアプリケーションのAPI連携など
・機械学習によるクライアントの課題解決
→AWS上でのDWH構築やCRMの連携やWebアプリケーションの開発など
・社内及びクライアントの技術支援
・上記に関連する技術調査
主に弊社がコンサルタント契約をしているクライアントの課題解決の開発業務、自社プロダクトの開発業務になります。
クライアント先の技術的な対応や、AWS上でのDWH構築やCRMの連携やWebアプリケーションの開発などに携わります。
ご希望に応じて自社プロダクトにも携わることができますので幅広くキャリアアップをすることができます。
【Python/AWS】消費者金融情報提供用RDBシステム更改(リモート)
作業内容 ・エンドユーザー向け情報提供用RDBシステム更改(DataStegeへ刷新)。
・一部の現行システムはPythonで再構築予定。
・ph1の課題対応(csvファイルをParquet形式に変換+Redshiftに投入。日本語Viewの作成など)
【Go/気温リモート/週5日】人事業務支援のバックエンド開発
業務委託(フリーランス)
AWSDocker
サーバーサイドエンジニアバックエンドエンジニア
作業内容
・ サービス開発案件におけるバックエンドリアーキ Ruby on RailsからGoへのリアーキ
【BigQueryなど】大規模データ基盤管理/改善業務の求人・案件
業務委託(フリーランス)
PythonLinuxRedshiftBigQuery
作業内容 【背景】
アクセス解析データ/DBデータ/APIデータ等合計600TBのデータ基盤を管理データ基盤を管理・改善する人員が不足しており今回の募集にいたりました。【お願いしたい業務】
* 運用改善
* データ基盤関連ツールの導入(ELTツール - dataform, データガバナンス - dataplex/DataCatalogなど)
* CDPの構築(店舗向け、ラベル推定/スコア推定など, SFAツールへの連携)【できればお願いしたい業務】
* 新規データ連携対応(DB - embulk, API - Cloud Run/Pythonによる実装)
* データマート整備(Composerなど)DWHはbigqueryBIはtableauはtreasuredataにアクセスし可視化しています
【Ruby】人事業務支援サービス改善開発案件
業務委託(フリーランス)
RubyRailsDockerJIRARedshift
作業内容 ・Rubyを用いた人事業務支援におけるWEBサービスバックエンド開発案件に携わっていただきます。
【AWS/基本リモート】DX組織におけるデータマネジメント
業務委託(フリーランス)
AWSRedshiftTableau
作業内容 要件定義,基本設計,詳細設計,実装,テスト,運用・保守
大手小売業のDX組織におけるデータマネジメント業務に携わって頂きます。
●業務プロセス検討・改善
・DMBOKを参考に、データマネジメントに関する業務プロセスの課題整理・改善を実施
・特にメタデータ、セキュリティに関するガバナンスに注力して推進中
●運用業務
・セキュリティ関連のレビュー/相談顧客会社内のセキュリティレベルに則り、
データ利用範囲や格納環境が適切かなどをチェック
・データカタログ管理分析基盤内で蓄積・加工するデータのカタログ設計と
記載内容のレビュー
<開発環境>
・AWS(S3, EC2, Glue, RDS, Redshift etc)
・dbt
・Tableau
【データ分析/3年以上】DX/デジタルマーケティング分野のデータエンジニアリング業務
業務委託(フリーランス)
JavaJavaScriptPHPPythonSQLHTML5LinuxAWSCSS3Google Cloud PlatformRedshiftBigQuery
作業内容 基本設計,詳細設計,実装,テスト,運用・保守
デジタルマーケティングツールやデータ分析ツールへのデータ投入のための ETL 準備、実装に携わって頂きます。
・某社向けデータ分析のためのデータ処理基盤の開発・保守・運用・機能追加
【Python】アパレル向けDWH開発案件
業務委託(フリーランス)
PythonSQLPostgreSQLAWSRedshiftGlue
サーバーサイドエンジニア
作業内容 ・Pythonを用いたアパレル向けDWH開発案件に携わっていただきます。
・主に下記作業をご担当いただきます。
-DBテーブルおよびデータETL処理プログラムの設計、実装、テスト
【SQL】データエンジニアの求人・案件
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQueryTableau
作業内容 日本最大級の化粧品クチコミサイト運営企業にてデータ分析・モニタリング環境の整備など、メインに担当しているデータ戦略推進室にて業務していただき、データエンジニアとして必要なデータの抽出などお任せいたします。
下記アサイン想定の作業内容となります!
・BigQueryから施策モニタリング用のデータパイプライン作成
・tableauを用いたダッシュボード作成
【具体的には…】
・ビジネスモニタリング/データ分析業務
・200行前後のSQLを記述
・データ要件、分析要件の定義
・ダッシュボード作成など
★5月開始【AWS/リモート】Terraform構築推進支援
業務委託(フリーランス)
AWSAnsibleRedshiftTerraform
インフラエンジニア
作業内容 ■業務内容
Platform(インフラ)チームメンバーとして、以下の業務を行っていただきます。
・お客様よりヒアリング済の要件を基に基本設計・詳細設計書を作成、レビューを推進する。
・メンバーにAWS上のリソース(S3、IAM、EC2など)をterraformを用いて構築を推進する。※既存コードあり
・詳細設計書に従い、単体テストケースの作成・テストを推進する。
・本番作業手順の作成、レビューを推進する。
【SQL】旅行会社データ活用基盤の求人・案件
業務委託(フリーランス)
PythonSQLAWSRedshiftGlue
PLSE
作業内容 【作業内容・工程・環境】
データ利活用基盤に新規データマートの構築開発案件
既存の2種のデータマートを統合し、新規のデータマートを構築する。
要件資料と現行設計を元に、データ抽出の設計作業(200項目×11システム)
※最適化のため、一部の項目では現行仕様と新規要件を元に調整・検討を行う場合あり。
設計書を元にSQL製造、及び検証作業(単体~総合試験)
【Python/SQL】データ分析業務
作業内容 ・運用中のデータ分析基盤(Redshift)の、GoogleCloud環境への移行。
・GoogleCloud環境では、DWHとしてBigQueryを利用し、データパイプラインにはGoogleCloudのマネージドサービスと、データ変換ツールdbtを使用する想定。
【Python】エネルギー会社アプリ運用改善(リモート)
業務委託(フリーランス)
PythonGitHubTerraform
作業内容 ・リリース済みアプリの工数改善業務
・リリース済みアプリの運用業務
・他必要に応じた付随業務
【PHP】アドベンチャーゲーム新規開発
業務委託(フリーランス)
PHPSymfonyLaravel
作業内容 AIを組み込んだソーシャルコミュニケーションを楽しむSNSアドベンチャーゲームをしていただきます。
・新規開発中アプリのAPI開発
・Symfonyを利用したAPI開発
・Redshift等を利用したレコメンドロジックの実装
【DWH】データ基盤(Azureプラットフォーム)構築プロジェクトの求人・案件
業務委託(フリーランス)
AWSAzureGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 ■背景
・クライアント内の提案活動に於いて自然言語案件が増え始めており、リソースが必要となった
・クライアント内で自社分析ツール(テキスト分析)あり
■クライアント支援範囲
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■エンドクライアント
・建築・製造・医療など
■想定業務
・データ基盤を構築するプロジェクト。蓄積したデータをBIやAIで活用するためのプラットフォームの設計・構築が主業務となります。要求開発フェーズからご参画いただくことを想定。
・顧客案件におけるデータ基盤構築支援(要件定義・設計・構築・テスト・マニュアル作成など)
・要件定義 /基本設計/詳細設計
★元請直/リモート/AWS+EMR データ蓄積基盤構築
業務委託(フリーランス)
SQLHadoopSparkAWSRedshiftHiveAthena
データサイエンティスト
作業内容 ビッグデータを蓄積するオンプレHadoop基盤をAWS EMRを利用した基盤に変更する
その後、既存データを新基盤に移行する作業も実施予定。
【SQL】小売系情報データ分析案件
業務委託(フリーランス)
PythonSQLMySQLSQL ServerHadoopRedshiftBigQuery
インフラエンジニアデータベースエンジニア
作業内容 ・下記を行っていただきます。
-業務理解、業務データ整理および集計
-データ分析基盤設計、構築、運用
-データ処理アプリケーション開発
-データ分析業務の効率化、自動化
-データ基盤関連技術の調査、検証、導入
-パブリッククラウドやSaaSを活用したシステム構築
-事業やプロダクトのKPI、施策に基づくデータ整備、ログ設計
【SQL/DWH】小売系情報データ分析案件
業務委託(フリーランス)
PythonSQLMySQLSQL ServerHadoopRedshiftBigQuery
インフラエンジニアデータベースエンジニア
作業内容 ・下記作業を行っていただきます。
-業務理解、業務データ整理および集計
-データ分析基盤設計、構築、運用
-データ処理アプリケーション開発
-データ分析業務の効率化、自動化
-データ基盤関連技術の調査、検証、導入
-パブリッククラウドやSaaSを活用したシステム構築
-事業やプロダクトのKPI、施策に基づくデータ整備、ログ設計
【DBエンジニア(SQL全般)】【業務委託(準委任)】データエンジニア業務
PHPPythonSQLMySQLHadoopAWSDockerGoogle Cloud PlatformRedshiftBigQueryDevOpsKubernetes
作業内容 ■概要
某社が手掛けるゲーム事業の分析基盤の開発及び運用でご活躍頂きます。
■具体的な作業内容
・分析基盤はBigQuery、Airflowなどのサービスを利用します。
・設計から運用までご自身の裁量で開発をすることができます。
・企画担当者やインフラ担当者とコミュニケーションを取りながら進めて頂きます。
【BI/MicroStrategy】BI要件定義・設計案件
作業内容 BIシステムの運用保守要員として、ダッシュボード構築や新規レポートの要件定義・設計案件の対応などをお願いします。
現行システムは、下記のとおりです。
UI(ユーザ画面):MicroStrategy
DB(データベース):Redshift
【Azure、AWS/一部リモート/週5日】Azure、AWSハイブリッド環境でのDWH環境構築案件
業務委託(フリーランス)
AWSAzure
アプリケーションエンジニア
作業内容
基本設計から総合テストまで
Azure、AWSで使用するサービス:
・Glue
・StepFunction
・Redshift
・オンプレミスデータゲートウェイ
・PowerBI Service
・Azure Service Bus
・AzueAD
・Sharepoint
・CloudWath
・AWS Backup
・S3
【Python/AWS】消費者金融情報提供用RDBシステム更改
作業内容 ・エンドユーザー向け情報提供用RDBシステム更改(DataStegeへ刷新)。
・一部の現行システムはPythonで再構築予定。
・ph1の課題対応(csvファイルをParquet形式に変換+Redshiftに投入。日本語Viewの作成など)
直案件【Python/Terraform】エネルギー会社向けアプリ運用改善(リモート)
業務委託(フリーランス)
PythonGitHubTerraform
作業内容 ・リリース済みアプリの工数改善業務
・リリース済みアプリの運用業務
・他必要に応じた付随業務
【AWS/SQL/Linux】データ基盤保守/運用/改善案件
業務委託(フリーランス)
PythonSQLGoLinuxPostgreSQLAWSGitGitHubRedshiftBigQuery
インフラエンジニアサーバーエンジニアデータベースエンジニア
作業内容 ・下記を行っていただきます。
- データ作成アプリケーションの保守、運用
- データソースの変更を検知する仕組みの構築
- データレイクのデータ種類を増やす
- DWHでの中間テーブルの設計、実装
- データマートの設計、実装