【Azure】旅行会社向けデータ分析基盤構築
業務委託(フリーランス)
WindowsLinuxPostgreSQLAzureEclipseGitBacklogRedmineGitHubSnowflake
作業内容 旅行会社向けにデータ分析基盤の構築を行います。
Azure上にSnowflakeを構築します。
上流工程の経験が豊富な方がマッチします。
開発工程
要件定義, 基本設計, 詳細設計, 単体テスト, 結合テスト, システムテスト, 運用・保守, 構築
AWSデータ分析基盤構築プロジェクト
業務委託(フリーランス)
PythonWindowsAWSGlueLambda
作業内容 〇ご依頼範囲
・CI/CD環境構成およびライフサイクルの自動化の範囲決定におけるアドバイス
・上記に必要な検証環境構築作業および要件定義資料化
※上記の取り組みを顧客案件および社内研究開発の作業として行います。
〇対象プロジェクト※①②両方が依頼範囲です。
①製造業向けデータ分析基盤構築:要件定義
②社内向け研究開発
〇①顧客案件
顧客向けに弊社のデータ分析基盤の構築ソリューションをベースにシステムを構築します。
AWS Glueを中心したETL/ELT機能とBIツール(Power BI)、DWH(Snowflake)が主な構成要素になります。
要件定義の作業になりますので、
どこまでできるか明確でないところも踏まえて一緒に考えていける方がいらっしゃるとありがたいと思います。
今のところ、このようなサービスが必要なのではと考えております。
AWS Glue
AWS Lambda
AWS Code Pipeline
AWS Code Commit
合わせて以下のサービスを組み合わせてジョブの実行管理・フロー制御を行う想定です。
AWS Step Functions(詳細フロー制御)
Amazon Managed Workflow for Apache Airflow(実行管理)
上記の設定内容をリポジトリへ保存してバージョン管理を行うことも必要と考えていますので、
そのあたりの統合についてもテーマになります。
〇②研究開発
上記顧客案件にデリバリーするためのソリューションの整備環境として、CI/CD環境を社内に構築します。
Snowflakeを用いたデータ基盤の構築を早期化するソリューション
【Python/基本リモート/週5日】分析基盤開発「Python」
業務委託(フリーランス)
PythonMySQLAWSTableau
サーバーサイドエンジニアバックエンドエンジニア
作業内容
クラウド上にEC2、S3の構築および分析基盤等ミドルレイヤの初期セットアップの対応。
【Python(データ分析系)】【週4日以上稼働可能な方にぴったり・20代〜40代活躍中!】データ基盤開発エンジニア(SE)
業務委託(フリーランス)
PythonSQLShellLinux
SE
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
データ基盤の開発において、機能設計とテスト設計を担当します。ETLプロセスに必要なテーブルや入出力の設計を行い、長期的なプロジェクトとしてデータ基盤の整備に貢献します。リモートワークも可能です。
■具体的な業務内容
・データ基盤における機能設計およびテスト設計
・ETLに必要なテーブルおよび入出力の設計
・要件の整理および設計への落とし込み
・SQL、Shell、Pythonを用いた開発支援
・Oracle、Redshift、Snowflakeを使用したDB設計
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【Python(データ分析系)】【週4日以上稼働可能な方にぴったり・20代〜40代活躍中!】データ基盤開発エンジニア(SE)|リモートワーク可
業務委託(フリーランス)
PythonSQLShellLinux
SE
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
データ基盤の開発において、機能設計とテスト設計を担当します。ETLプロセスに必要なテーブルや入出力の設計を行い、長期的なプロジェクトとしてデータ基盤の整備に貢献します。リモートワークも可能です。
■具体的な業務内容
・データ基盤における機能設計およびテスト設計
・ETLに必要なテーブルおよび入出力の設計
・要件の整理および設計への落とし込み
・SQL、Shell、Pythonを用いた開発支援
・Oracle、Redshift、Snowflakeを使用したDB設計
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【DBエンジニア(SQL全般)】DBエンジニア(SQL全般) データ分析・作業アシスタント(週4日以上稼働可能な方にぴったり・20代〜40代活躍中!)
業務委託(フリーランス)
PythonSQLRedshiftBigQueryTableauSnowflake
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
音楽フェスのデータを活用したデータ分析業務を担当していただきます。SQLを用いたデータ抽出や、Tableauによる可視化、Pythonを用いた定期ジョブのメンテナンスなどを行います。
■具体的な業務内容
・BigQuery内でSQLを用いたデータ抽出
・Tableauを用いたデータの可視化およびレポート作成
・Pythonを用いた定期ジョブプログラムのメンテナンス
・データ分析結果の報告および顧客との調整
・音楽フェス関連データの管理および分析
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【クラウドエンジニア(AWS)】【業務委託(準委任)】大手電力会社・メーカ向け工場での機械の稼働状況のデータ蓄積案件/リモート可【リモートOK】
作業内容 【20代~30代のITエンジニアが活躍中!】
■概要
大手電力会社・メーカ向け工場での機械の稼働状況のデータ蓄積に関する業務をお任せします。
■具体的な作業内容
工場での機械の稼働状況のデータ蓄積を目指す。
データクレンジングし、大量データを集めてBIで集計。
今後パッケージ化して再販していく。
・ベンダーからきた情報に対するQA対応
・非機能要件※重要
・性能要件
・上流経験
・体制検討
■作業環境:Windows/Mac選択可
■開発環境
■プログラミング言語:Python、Java、Go、C++、Swift、Kotlin
■データベース:MySQL、Redis、Amazon DynamoDB
■Webフレームワーク:Bootstrap、.NET Framework
■環境・OS:iOS、Android、AWS
■ツール:GitHub、Docker、Figma
■開発工程
要件定義|基本設計|運用・保守
【東京の出社可能な方】【Oracle/SQL Server】【業務委託(準委任)】DB開発・構築運用・ヘルプデスク・オペレーション業務
業務委託(フリーランス)
SQLOracleSQL Server
ヘルプデスク
作業内容 ========================
※必ずお読みください※
【必須要件】
東京の顧客先に常駐できる方
【外国籍の方の場合】
日本語能力検定1級お持ちの方
日本語が母国語の方
========================
自動車メーカー様DWHシステム運用における、以下のジョブ監視、ヘルプデスク、オペレーション、および顧客への問題提起・提案作業になります。
【具体的な業務内容】
・システムリソース払い出し (DWH/Lab/Hub)
・運用システムの問合せ/トラブルシューティング
・データベース操作オペレーション
・本番環境クエリ実施対応 (AWS : IAM/EC2/Workspace/ECS/S3/…)
・作業マニュアル作成
・オフショア対応としてのマニュアル英語化
・課題管理/業務改善活動
【クラウドエンジニア(AWS)】AWS/DWH運用ヘルプデスク
業務委託(フリーランス)
SQLOracleSQL ServerAWS
ヘルプデスク
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
≪フルリモート可の案件です!!≫
自動車メーカーのDWH(データウェアハウス)システム運用を支援するプロジェクトです。ジョブ監視やデータベース操作オペレーション、問合せ対応、トラブルシューティングなど、幅広い運用業務を担当します。AWS環境(IAM、EC2、ECS、S3など)を活用し、顧客への問題提起や提案活動を行うため、運用・保守業務を超えた課題解決型の支援が求められます。また、作業マニュアル作成やオフショア対応のための英語化業務も含まれます。土日のジョブ監視対応は当番制で実施されますが、代休が付与されます。
■具体的な業務内容
・AWS環境でのジョブ監視および問題対応(分析・解決)
・SQLを使用したデータベース操作(Oracle Database、SQL Server)
・運用システムの問合せ対応およびトラブルシューティング
・本番環境におけるクエリ実行対応
・DWH/Lab/Hubシステムリソースの払い出し業務
・作業マニュアルの作成およびオフショア対応のための英語化
・顧客への問題提起および提案活動
・土日のジョブ監視対応(当番制・半日程度/代休あり)
【Ruby /フルリモート/週5日】データ分析基盤の総合支援サービスのソフトウェアエンジニア(Ruby)
業務委託(フリーランス)
JavaRubyScalaRailsKotlin
フロントエンドエンジニアサーバーサイドエンジニアバックエンドエンジニア
作業内容 基本設計,詳細設計,実装,テスト,運用・保守
■提供するサービス
・データ基盤の総合支援サービス
・データの発見・理解・活用を促進するデータカタログ
・データ活用環境の構築からデータ利活用の実現までを、データエンジニアリング・コンサルティングの観点から支援する
主力事業でデータ基盤の総合支援サービスは、2024年3月時点で1000を超える企業や団体に提供しています。
また、グローバル展開も推進しており、高度なテクノロジーと独自のアイデアで、世界中のビジネスを支援しています。
■仕事内容
分析基盤構築や運用にかかるデータエンジニアの手間を削減すべく、新機能開発、データソース(DB、広告API)への対応、顧客要望対応など、サービスがより広く・深く課題を解決するためのバックエンド・フロントエンドの開発を行います。
※データカタログサービスの配属になる可能性もございます。
①コア機能開発チーム
・ワークフロー機能の開発
・新規プロダクトの開発
・データパイプラインの設定情報をGitHubから取り込む機能の開発
・BigQuery/Snowflake上のデータの依存関係を可視化する機能の開発(データカタログ、データリネージ)
・データエンジニアリングの課題を解決する、各種新機能の開発
・バグの調査・改修
②コネクターチーム
コネクターに関する課題に注力いただく予定です。
・コネクター開発全般
・顧客(CS経由)、社内からの問い合わせのトリアージ・調査・改修対応
・週次での差し込み対応内容のチーム振り返りを実施し、改善対応
・Rollbar系のアラート一次請け対応
・dependabotの一次請け対応
【PowerBI/要件定義~】BI構築支援
業務委託(フリーランス)
Azure
データサイエンティスト
作業内容 Azure環境とPowerBIを用いて、データウェアハウスの構築やBIツールの開発支援を行います。
【Snowflake】Snowflakeデータ基盤設計構築の求人・案件
業務委託(フリーランス)
PythonSQLAWSRedshiftSnowflakeLambda
作業内容 【作業内容】Snowflakeの設計・実装
【環境】AWS Lambda、Amazon Redshift、Amazon Linux
【Snowflake/AWS】ログデータの分析基盤構築(リモート)
作業内容 ・製造業における各種ログデータが蓄積されている基盤から、Snowflakeへ連携する仕組みの構築
・環境:Snowflake、AWS
【Snowflake】製造向けデータ分析基盤構築の求人・案件
業務委託(フリーランス)
PythonSQLAWSRedshiftSnowflakeLambda
作業内容 【案件概要】Snowflakeデータ基盤設計構築
【作業内容】Snowflakeの設計・実装
【環境】AWS Lambda、Amazon Redshift、Amazon Linux
【分析基盤エンジニア】Snowflakeデータ基盤設計構築の求人・案件
業務委託(フリーランス)
OracleRedshiftSnowflake
作業内容 Snowflakeを利用したデータ蓄積+活用。
連携されたファイルなどのデータをSnowflakeにてデータを蓄積。
蓄積後ユーザに使いやすいように加工し活用してもらうよう設計・開発を行う。
【主なスキル技術セット】
Snowflake
Python
Javascript
AWS
Informatica Intelligent Cloud Services(IICS)
その他(ツール作成等)
Powershell
bash
Excelマクロ
【分析基盤エンジニア】AWS・Snowflakeデータ分析基盤構築の求人・案件
業務委託(フリーランス)
SQLAWSSnowflakeGlue
作業内容 ・大手文具メーカーにおけるデータ分析基盤構築案件
・要件定義から設計、開発、リリースまでを担当
・AWSとSnowflakeを用いたデータ分析システム(ETL、DWH、BIなど)の開発を行うチームに参画予定
【環境】
・AWSサービス:S3、Glue、StepFunctions、CloudWatch、QuickSight、DataZone
・DWH:Snowflake
・開発ツール:dbt
【リモート併用/週3日】証券会社のSnowflakeアーキテクト
作業内容 基本設計,詳細設計
証券会社でSnowflakeのアーキテクトをご担当いただきます。
コンサルタントのような方で、アドバイスだけでなく設計までできる方が理想です。
■エンタープライズアーキテクチャの理解
- アカウント設計・組織設計
- データメッシュ型での複数アカウント運用(マルチアカウント戦略)の設計
- 組織全体のデータ管理ポリシー策定
■Snowflakeのロール・権限設計
- RBAC(Role-Based Access Control)の設計と実装
- アカウントレベルのロール設計(SECURITYADMIN, SYSADMIN, USERADMIN など)
- スキーマ・データベース単位のロール管理
- カラムレベル・行レベルのアクセス制御(Row Access Policy, Column Masking Policy)
- データ共有時のアクセス制御(Secure Views, Secure UDFs)
【Python/Snowflake】ビッグデータ関連案件
業務委託(フリーランス)
PythonSQLAWSSnowflake
データサイエンティスト
作業内容 ・関西の電機メーカーもしくは通信会社向けのビッグデータ案件です。
・基盤部分及びデータ分析をご担当いただきます。
・SnowflakeやDatabricksを用います。
・詳細は商談内でお伝えさせていただきます。
【Snowflake】某製薬会社向けデータ連携基盤設計構築の求人・案件
業務委託(フリーランス)
AWSJP1SnowflakeGlue
作業内容 【案件概要】データ連携基盤の構築
【作業内容】会計系データを取り込み⇒他データとマージ⇒レポート系のシステム(DWH/BIなど)へ連携
【工程/スケジュール】
2024/01- 現行調査など
2024/02- 要件定義工程
【分析基盤エンジニア】Snowflakeデータ基盤設計構築の求人・案件
業務委託(フリーランス)
PythonSQLOracleAWSRedshiftSnowflake
作業内容 エンドクライアント内にある散らかったデータ(BtoB向けの受発注や契約関係のデータ等)を連携しsnowflakeに蓄積してデータ利活用を推進していきたいと考えております。
業務スコープは以下を想定
・Snowflakeを利用したデータ蓄積+活用。
・連携されたファイルなどのデータをSnowflakeにてデータを蓄積。
・蓄積後ユーザに使いやすいように加工し活用してもらうよう設計・開発を行う。
【主なスキル技術や環境】
AWS(Lambda等)
Snowflake
Python
SQL
GitやGithub
CI/CD
Javascript
GCP
Informatica Intelligent Cloud Services(IICS)
その他(ツール作成等)
Powershell
bash
Excelマクロ
PJTの進め方
毎朝大手Slerの開発チームとクライアントの開発メンバーを交えた朝礼を行なっております。
必要に応じてエンド企業との打ち合わせが日中発生する想定です。
【AWS(リモート)】損保会社向けAWSインフラ構築案件
業務委託(フリーランス)
AWSRedshiftSnowflake
作業内容 既存AWSインフラの追加開発や改修等をご担当いただきます。
大型AWSインフラシステムを学ぶことができます。
ツール:
・AWS
・SnowFlake
・RedShift
【Snowflake/AWS】原則リモート!面談1回/DWH構築
作業内容 データウェアハウス(DWH)構築案件にご参画いただきます。
現在は要件定義フェーズを対応しており、今後設計フェーズへと進めていく想定です。
※その他詳細は、面談時にご説明させていただきます。
<基盤>
Snowfrake
【PM業務】Snowflakeデータ分析基盤構築の求人・案件
業務委託(フリーランス)
SQLAWSSnowflake
PM
作業内容 クライアント(銀行)内におけるSnowflakeに蓄積のデータを分析するための基盤構築
【主なスキル技術セット】
Must
・戦略に基づいた基盤構築の全体絵を描くことができる
・基盤構築のプロマネ経験
Want
・システム開発案件経験者
その他(ツール作成等)
・Microsoft Office
【Snowflake】データ蓄積+活用ならびに置き換えの求人・案件
作業内容 連携されたファイルなどのデータをSnowflakeにてデータを蓄積
蓄積後ユーザに使いやすいように加工し活用してもらうよう設計・開発を行う。
また、基盤構築も併せて実施するが基盤チームへの作業依頼が主な作業となる。
クラウド環境ではあるもののNW等の設定依頼が多く発生するため、オンプレでの
基盤構築経験があった方が良い。
AWS データ基盤構築PJ
PythonSQLAWSSnowflakeCDKTerraformCloudFormationLambda
作業内容 大手製造業の事業部門で利用されるデータ基盤の構築をご担当いただける方を募集します。
<具体的な業務>
・AWSやSnowflake、dbtなどを利用したデータエンジニアリング(ETL/ELT、データパイプライン、ファンクション)
・IaCによるクラウドシステムの構築
<環境>
・技術環境:AWS、Snowflake、dbt、CloudFormation、Terraform
・使用言語 :Python、SQL
<就業時間>
10:00~19:00
※※こちらの案件は現在募集を終了しております※※
SQL 大手通信会社向けデータ活用支援
作業内容 以下業務を行っていただきます。
1. Snowflakeを用いたデータ抽出・加工
・モニタリング用の定期集計
・配信リスト用データ作成
・効果測定用のデータ作成
・施策検討用のSIMデータ作成
2. Tableauを用いたモニタリング用ダッシュボード構築
・モニタリングが必要な指標のためのデータ抽出から可視化まで対応
3. データ調査
・データの定義や、抽出可否について調査。
※※こちらの案件は現在募集を終了しております※※
【リモート相談可(目黒) / SalesForce / 週5日/ 30~40代活躍中】Tableau案件★分析基盤刷新プロジェクト
業務委託(フリーランス)
AWSTableauSnowflakeSalesforce
ITアーキテクトデータアナリスト
作業内容 -------------------------------------------------------------------
■35歳~50歳が活躍中
■フルタイム案件(副業不可)
■国内在住者の方限定 ※セキュリティ担保の観点
■日本語ネイティブの方が活躍中
-------------------------------------------------------------------
【企業】
AI、IoT、BigData、RPAなど
ハイエンドテクノロジーを活用したデジタルトランスフォーメーションと、
クラウド・WEB・ITインフラストラクチャといった
ICTのベースとなるシステムインテグレーションの融合により、
社会のデジタルトランスフォーメーションを実現し、価値あるイノベーションの創出に努めています。
【業務内容】
分析基盤刷新プロジェクト
データ分析・SalesForce
AWS/Snowflake/Tableauで環境構築中、Tableau領域で上流から対応
【環境】
AWS/Snowflake/Tableau
【その他】
リモートメイン ※出社が必要な場合は目黒駅より徒歩5分
就業時間:9:00~18:00
稼働開始希望時期:2024年11月~2025年2月
【DB/一部リモート】精密機器メーカー向けSnowflake運用・設計案件
業務委託(フリーランス)
SQLLinuxSnowflake
作業内容 ・精密機器メーカー向けSnowflakeの運用、設計案件に携わっていただきます。
・主に下記作業を担当いただきます。
‐関連の設計ドキュメント作成データ連携処理
‐SQL開発
‐関連インフラ部門への申請
‐データカタログの作成
‐運用方法検討
【Azure】保持データのハッシュ化などの求人・案件
業務委託(フリーランス)
PythonSQLShellAzureSnowflake
データアナリスト
作業内容 ■概要
保持データのハッシュ化(Snowflake、Azure Synapse、Azure Blob)
- 処理の改修:I/F・バッチ処理(主にデータ加工・ロード/アンロード処理)(Python、SQL)
- 機能の新規開発:ハッシュ化・復号ツール(Python、PHP、Shell)
■詳細
クライアントグループPOINTのデータ(主にグループ全体のPOS明細およびPOINTの会員情報)分析基盤において、個人情報等に該当するID情報をハッシュ化するため、処理方式およびデータ保持方式の変更を設計・実装。
想定される影響範囲について、I/F処理、バッチ処理、DL/DWH、Webアプリ、分析ツールが想定される。
【Ruby on Rails】KPIコミュニケーションアプリ開発(フルリモート)
業務委託(フリーランス)
JavaJavaScriptRubyMySQLRailsAWSGitRedmineReactVue.jsSnowflake
作業内容 ・要件チームとの調整
・フロントエンドからサーバーサイド、バッチの開発
〜主な開発環境〜
言語:Ruby on Rails、Javascript、Vue.js、Java、Go
DB:MySQL、Snowflake
環境:AWS
その他:Git、Redmineなど