Python / SQL / AWS データウェアハウス基盤構築案件
PythonSQLShellAWSRedshiftGlueLambda
作業内容 某大手携帯会社様向けのデータウェアハウス基盤構築プロジェクトになります。
<作業内容>(上から優先度が高い順)
ETL処理の開発作業
・設計・設計書作成・実装・単体テスト
・ETL処理の開発テンプレートの理解
ETL処理の結合テスト作業以降
・結合テスト、システムテスト
<基本時間>
9:30~18:30
フレックスタイム制
SQL 大手HR事業のデータ領域におけるプロジェクトマネージャー
SQLAWSBacklogGoogle Cloud PlatformRedshiftBigQuery
PM
作業内容 国内最大級の転職サービスにおいて、データドリブン事業運営を構築するため、膨大なデータを様々な視点から分析し、事業状況の見える化を推し進め、事業PDCAの高速化や新たな機能・サービスの創出を実現していきます。
その実現に向け、データ領域のプロジェクトマネージャーとしてクライアントと共に、長期的な成長戦略の策定及び推進業務をご担当いただきます。
<開発体制及び方法>
クライアントのグループマネージャーと二人三脚でデータ領域における成長戦略を推進いただきます。
<開発環境>
データベース:Redshift, BigQuery
インフラ:AWS, GCP
コミュニケーション: Outlook・Teams・Slack・Backlog
<基本時間>
10:00~19:00
【Java/リモート併用】某大手通信会社におけるDWH再構築の案件・求人
業務委託(フリーランス)
JavaPythonSQL ServerAWSAzure
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
★本案件の最新の状況は、担当者までお問合せ下さい。
★期間:随時~
現在稼働しているDWH(オンプレ、Azure)について、性能的な問題から、AWSが提供するDWH(AWSRedshift)に移行するため、データの取得~取り込み~展開といった一連の移行作業の実施、および関連システムを構築する。
◆主なアーキテクチャ
・開発言語:Java、Python(Lambda)、SQL、shell
・DB:PostgreSQL(AWSRedShift)
・その他:AWSec2、AWSS3など、AWS系サービス
Azure系サービス(既存DWH)
※20代〜30代が中心で活気ある雰囲気です。
※成長意欲が高く、スキルを急速に伸ばしたい方に最適
※将来リーダーを目指す方歓迎
【Python】データレイク構築支援
業務委託(フリーランス)
PythonAWSRedshiftGlue
作業内容 ・Pythonを用いたデータ加工
・技術要件としては、Glue+Step Functionで、Redshift間のETL処理をPythonでコーディングしていただく形
AWS 小売業向けシステム再構築案件
MySQLPostgreSQLSQL ServerAWSRedshiftAurora
作業内容 小売業向けシステム再構築
<担当工程>
調査・分析、見積もり作業、テクニカルアドバイス
・CPU, メモリ, IO負荷など調査し、適切なH/Wスペックの見直し
・既存で動いているRedshiftと比較した際の性能評価
・DBの見直し(SQLServer→Aurora PostgreSQL or MySQL)等
※その後、設計・構築を含めた保守作業に従事していただく可能性が御座います
Lambda / SQL AWSデータエンジニアリング
PythonSQLDynamoDBAWSRedshiftGlueLambda
作業内容 AWS基盤上に収集する、車載機から送られてくる生データの整形や分析をして頂きます。
データ分析をするためのツールのプログラム言語としては、Pythonを使用する想定です。
データエンジニアリングが得意な方をお待ちしております。
<作業工程>
設計、開発、テスト(分析に関わるLambda周り)
<開発環境>
インフラ:AWS上
言語:Python予定
<使用するAWSサービス>
Lambda/S3/DynamoDB/Glue/Atena/QuickSight
※使用の可能性があるもの
Redshift/SageMaker
<備考>
フルリモート
【上流SE/フルリモート】医薬品卸向けシステム再構築PJ案件
業務委託(フリーランス)
RedshiftTableau
社内SEPMOSE
作業内容 ・医薬品卸向けのシステム再構築PJに携わっていただきます。
・現行作りこみされている画面からTableauへの移植を行っていただきます。
【Python】データーレイク開発の求人・案件
業務委託(フリーランス)
PythonLinuxAWSDockerGitRedshift
作業内容 概 要:
世界各国で利用されるオンラインサービスにおけるデータ分析基盤の開発運用支援をお願い致します
【AWS/フルリモート可能】エンドユーザー向けAWS ETL環境の設計レビュー・改善・実装・メンテナンスの案件・求人
業務委託(フリーランス)
MySQLDynamoDBSparkAWSApacheGitHubRedshift
作業内容 ===========
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・日本語ビジネスレベル必須
・週5日稼働必須
・実務経験3年以上必須
===========
既存のAWS ETL環境の調査改善
・メンテ作業の手順化、運用作業(テーブル追加、カラム変更程度)
※対象環境は、ミッションクリティカルではないデータ処理基盤となる上位にて他PJへのスライド案件も御紹介可能で御座います。
New【Python/GAS】データ集計・分析補佐の求人・案件
業務委託(フリーランス)
PythonSQLGoogle Cloud PlatformRedshiftBigQueryGoogle Analytics
作業内容 Google Analitycsからの情報に基づいて顧客の購買行動を促す業務およびマーケティング分析・Pythonスクリプトでデータの投入・AWS環境での開発・ビッグデータの分析(4千万件数PV)・ビジネス英語でアメリカの技術者と打合せ■環境:・Windows・Google Cloud Platform(GCP)・mPartical(CDP)■言語:・Python・Google Apps Script(GAS)・Shell
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【AWS/MySQL/リモート併用】ETL環境の設計レビュー・改善・実装・メンテナンスの案件・求人
業務委託(フリーランス)
MySQLDynamoDBSparkAWSApacheRedshiftGlue
作業内容 ===========
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・日本語ビジネスレベル必須
・週5日稼働必須
・実務経験3年以上必須
===========
・既存のAWSETL環境の調査改善・メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)※対象環境はミッションクリティカルではないデータ処理基盤となる
【日本語ネイティブの方、活躍中!】
【20代・30代・40代、活躍中!】
【出社可能な方、活躍中!】
AWS|経験5年|医療スマホアプリ開発支援|クラウドエンジニア
業務委託(フリーランス)
AWSGitGitHubRedshiftAthenaTerraformLambda
作業内容 Terraformでインフラ構築した経験のある方を募集
・週1回 打ち合わせ実施(1時間程度/Web)
・フルフレックスで対応時間は日中帯以外可能(早朝や夕方以降深夜含)
【Pythonなど】マイクロサービス群の運用・保守の求人・案件
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 ・お客様からの問い合わせに対する調査
発生した障害や不具合の調査、修正対応
・システム負荷軽減やコスト削減などの調査、修正対応
・使用しているミドルウェア/ライブラリ群のアップデート対応
【PHP】広告業界向けクラウドマイグレーション開発案件
業務委託(フリーランス)
PHPPythonRubyCSSHTMLMySQLAWSDockerJIRARedshiftBigQuery
作業内容 ・広告業界向けシステムの新規開発案件にて、
主に設計から実装、運用までをご担当いただきます。
SQL 商品データの品質維持向上に関する業務支援
SQLPL/SQLAWSRedshiftFargateLambda
作業内容 大手商社の商品データの品質を維持・向上するチームの業務支援となります。
「データ品質をチェックするシステムの保守・運用」「データの大量更新の業務支援」が主なミッションになります。
AWSに構築されたデータ品質チェックシステムの保守・運用を実施していただきます。
当システムはCloudWatch, Fargate, Lambda, Redshift(DB)で構築されており、機能追加(リリース)や簡易なSQL作成がメイン業務になります。その他システムのログ取得などの定型作業もあります。
また、業務支援としてマスタデータ作成の支援(Excelマクロを使ったアップロード用ファイルの作成)など、クライアントからの依頼に応じた作業も発生します。
作業管理、作業設計などは上位メンバーが実施するため、作業を実行する業務をご担当いただきますが、前向き・積極的に業務に取り組み、必要に応じて追加作業の確認などを自発的に行う姿勢を重視します。
<備考>
フルリモート
大手製造業データ統合基盤開発
作業内容 大手製造業データ統合基盤開発案件です。
<具体的には…>
・基本設計書から詳細設計の作成(バッチ・ETL設計)
・ETLツールを用いた実装
・テスト計画書作成とテスト実施(単体テスト、結合テスト、システムテスト)
※※こちらの案件は現在募集を終了しております※※
【AWS】マーケティングプラットフォームのインフラエンジニア
JavaScriptPHPPythonMySQLAWSGoogle Cloud PlatformRedshiftBigQueryAthenaDevOps
データサイエンティストインフラエンジニア
作業内容 マーケティングプラットフォームのインフラ設計・構築・運用全般を担当して頂きます。
【具体的には】
*コードの保守性を考慮した設計、継続的な開発、運用。
*システムのアーキテクチャを分析・改善し、スケーラビリティを向上。
*システムの成長に合わせて新しい技術を評価・選定し、導入・システムの成長に合わせてスケール可能に。
※記載の月額報酬は、週4日稼働時の金額となります。
商品データの品質維持向上に関する業務支援
SQLAWSRedshiftFargateRPALambdaUipath
作業内容 大手商社の商品データの品質を維持・向上するチームの業務支援案件です。
「データ品質をチェックするシステムの保守・運用」「データの大量更新の業務支援」が主なミッションになり、
データの整合性をとるためのRPA(UiPath)の保守・運用をご支援いただきます。
このRPAでは、データ品質チェックシステムというAWS上(CloudWatch、Fargate、lambda、Redshift(DB))に構築されたシステムに対し、
SQLやExcelマクロを実行することでデータ抽出やアップロードファイルを作成。
その後作成したファイルを別の上流システムにアップロードしています。
クライアントからの依頼に応じ、上記RPAの機能拡張や類似のRPAの開発などの作業がメイン業務となります。
作業管理、作業設計などは上位メンバーが実施するため、作業を実行する業務をご担当いただきます。
AWS データ分析基盤の開発要員募集
PythonMySQLAWSBacklogRedshiftGlueAthenaAurora
作業内容 各プロダクトからのデータ収集、加工・集計・可視化、分析結果からの将来予測等をご担当頂きます。
会計系のシステムをメインとしてはご担当頂く予定ですが、状況に応じて他業界の業務を担当頂く可能性もあります
<環境>
インフラ:AWS(Athena, Redshift, Glue, QuickSightなど)
DB:RDS(Aurora MySQL)
ETL:AWS Glue
BIツール:QuickSight
言語:Python
その他:Slack, Zoom, Backlog, DocBase
開発手法:アジャイル開発
【データアナリスト/フルリモート/週5日】大手HR事業のデータアナリスト
業務委託(フリーランス)
SQLAzureRedshiftTableau
データアナリスト
作業内容 データ分析
弊社クライアント(HR系)のプロダクト企画部署にてデータアナリスト業務を担当いただきます。
プロダクト企画チーム内にて、施策効果測定のためのデータ抽出、Tableauでのモニタリング開発、データ分析実査など幅広い範囲で活躍していただきます。
【魅力ポイント】
企画チーム内での分析業務のため、ビジネス観点を持った分析を行うことができます。
【対応工程】
・データ抽出
・Adobe Analyticsでのアクセス解析
・Tableauでのモニタリング画面開発
・探索的データ分析実査
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【データアナリスト/基本リモート/週5日】大手HR事業のデータアナリスト
業務委託(フリーランス)
SQLAzureRedshiftTableau
データアナリスト
作業内容 要件定義,基本設計,詳細設計,実装,テスト,運用・保守
■クライアント(HR系)のプロダクト企画部署にてデータアナリスト業務を担当いただきます。
プロダクト企画チーム内にて、施策効果測定のためのデータ抽出、Tableauでのモニタリング開発、データ分析実査など幅広い範囲で活躍していただきます。
・データ抽出
・Adobe Analyticsでのアクセス解析
・Tableauでのモニタリング画面開発
・探索的データ分析実査
【BigQuery/データエンジニア/フルリモート】コーポレートシステムのデータ分析基盤の構築・運用
PythonSQLAWSGoogle Cloud PlatformRedshiftBigQuerySnowflake
作業内容 データ分析基盤の構築・運用をおまかせします
・各種システムからのBigQueryへのデータパイプラインの構築・運用
・BigQuery上のデータウェアハウス・データマートの加工処理の構築・運用
【C#.NET、PL/SQL】基幹システムの運用/保守(リモート)
業務委託(フリーランス)
ShellPL/SQLC#.NETOracleSVNSubversionRedmineRedshiftVisual Studio
作業内容 運用している複数あるシステムに係る保守改修や機能追加を対応いただく案件となります。
工程:設計〜テストをご担当いただきます。
〜開発環境〜
・ASP.net C#(VisualStudio2019)
・Oracle、Redshift
・AsteriaWarp
・PL/SQL、ShellScript
・Subversion(SVN)
・Redmine
【AIX】ECサイト向けシステム運用/保守案件
業務委託(フリーランス)
DB2AWSAIXRedshift
ネットワークエンジニアインフラエンジニア
作業内容 ・ミドルウェアチームのメンバーとしてご参画いただきます。
・下記を行っていただきます。
-ウェブ系のインフラの運用および保守
-IBM系のミドルウェアツールの運用(WAS/MQ/DB2)
-セキュリティ脆弱性対応
-障害対応
Python(pandas)でのデータレイク基盤構築
PythonSQLShellDynamoDBAWSGitBacklogRedshiftLambda
作業内容 Python3のデータ分析であるpandasを使用してのデータレイク基盤構築案件になります。
AWS EC2→AWS Glueへの新アーキテクチャ対応移行作業をご担当していただく予定です。
<主な作業内容>
・既存ソースコードの修正
・単体テスト、結合テスト、システムテスト
・移行テスト、パフォーマンステスト、運用テスト
SQL FP&A BIツール開発
SQLVBAAccessRedshiftTableau
バックエンドエンジニア
作業内容 AccessVBA、ExcelVBA、Redshift、Tableauで構築された予算周りのBIツールの保守エンハンスにおいて、
主に要件定義、クライアント調整、進捗管理、案件推進を行っていただきます。
※※こちらの案件は現在募集を終了しております※※
【AWS】自社サービスにおけるAWS開発ポジション(フルリモート)
作業内容 ■商流
大手SIer⇒同社
■業務内容
自社サービスの開発エンジニアとして、主にAWS周りの仕様確認やサービス設計への落とし込みの技術支援を頂きます。社内開発のため、ウォーターフォールでのスケジュール計画としながらも、実際はアジャイル的に進めています。
【作業工程】
基本設計、詳細設計、構築、テスト、運用マニュアル策定
【使用するAWSサービス】
IAM、Organization、AWS SSO、CloudTrail、CloudWatch Logs、AWS Network
Firewall、Security Hub、
Amazon GuardDuty、EC2, S3, RDS, ELB,
Redshift、Workspaces、VPC,VGW,TGW,Subnet,SecurityGroup, Lambda
【SPSS・SQL】大手通信会社でのデータ分析/ビジネス課題解決支援
業務委託(フリーランス)
JavaPythonSQLROracleAWSRedshiftTableauSPSS
作業内容 ・データ分析作業(クロス集計やクラスタリング 等)
・分析インサイトをもとに課題設定と解決策検討支援
【データ分析 / フルリモート】データ分析・機械学習案件(週5日)
作業内容 顧客データを分析、機械学習し、保険商品ごとに顧客へのおすすめ度を計算するためのバッチ処理を開発及び保守しています。
機械学習済みモデルとSQLを分析専門の別チームから受け取り、本番化のためにバッチ処理に組み込み問題がないか試験を行います。
========================
※必ずお読みください※
【外国籍の方の場合】
日本語能力検定1級お持ちの方
日本語が母国語の方
========================
Python データエンジニア募集
PythonSQLAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 GCP/AWS上で運用しているマイクロサービス群の運用業務をご担当頂きます。
主な業務は下記となります。
・お客様からの問い合わせに対する調査
・発生した障害や不具合の調査、修正対応
・システム負荷軽減やコスト削減などの調査、修正対応
・GCP/AWS上で運用しているマイクロサービス群の保守業務
・使用しているミドルウェアのアップデート対応
・使用しているライブラリ群のアップデート対応
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【AWS/~40歳まで/4月稼働開始】製造業様向けAWSを用いたデータ利活用支援
作業内容 テックビズなら記帳代行無料!仕事に集中して取り組んでいただけます。
案件内容 :・次期DX基盤構築のための各種作業支援
・AWSを用いたデータ利活用領域の調査、環境構築
・ETLツールを用いたデータ加工、集計
・AWSサービスを用いたデータ利活用支援
・各種ドキュメント、マニュアル作成
作業場所 :原則リモート(東京駅近郊に出社可能性あり)
作業期間 :2022年4月~長期
面談回数 :1~2回
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・40代以上の方
・外国籍の方(永住権をお持ちの方は問題ございません)
・週5日稼働できない方
--------------------------------------------------------
ソーシャルゲームデータマイニング案件
作業内容 情報システム環境の開発、保守をご担当頂きます。
主に下記作業となります。
‐分析DWH(Redshift)のテーブルメンテナンス
‐分析用データマート作成処理の設計、開発
‐分析用ツールの導入や開発
【Python/AWS/フルリモート可能】自社プロダクト製品開発の案件・求人
業務委託(フリーランス)
PythonAWSDockerRedshift
バックエンドエンジニア
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
■製品:位置情報ビッグデータを地図上で可視化するWEBサービス
■業務内容:プロダクトの開発を担当いただきます。
■役割:SE/PG
■作業範囲:調査、設計~テスト
■使用言語・DB・環境等
フロントエンド:React(TypeScript)、wepack
バックエンド:Python
プラットフォーム:AWS
(CloudFront、Cognito、Batch、Lambda、CodeBuild、他多数使用)
データベース、ストレージ:Redshift、DynamoDB、S3
監視ツール:Cloudwatch、Sentry
仮想環境:Docker
その他開発ツール:VSCode、Jupyternootbook
ソース管理:Github
プロジェクト管理:Backlog
コミュニケーション:Slack
AWS 情報系システム刷新(EOS対応)案件の基盤設計・構築支援
作業内容 某信販会社様の情報系システム刷新(EOS対応)における、基盤チームの案件になります。
・2022年3月~基本設計開始、2023年4月にビジネスリリース(2023年1月にシステムリリースして並行稼働開始)
・オンプレ上のNetezza, Marklogicで構築された情報系システムをAWS基盤に移行(移行先のAWS基盤はグループ親企業の銀行共通基盤)
・移行先AWS基盤(Redshift, AWS Glue, EC2)の設計、構築、テストや、銀行共通基盤準拠の運用機能開発、手順作成がスコープ(アプリケーション移植、データ移行は別ベンダーにて担当予定)
・基盤チームとしては7~8名を想定
<備考>
フルリモート
【Python/SQL】フルリモート可/顧客企業でのデータ・ID連携開発支援
業務委託(フリーランス)
PythonSQLRedshiftBigQuery
データサイエンティスト
作業内容 ■概要:
CDP(mParticle)と社内システム基盤とのデータ連携開発
およびCDPとDMP(デジタル広告配信基盤)とのID連携開発
■内容:
Google Analitycsからの情報に基づいて顧客の購買行動を促す業務
・Pythonスクリプトでデータの投入
・AWS環境での開発
・ビッグデータの分析(4千万件数PV)
■環境:
・Windows
・Google Cloud Platform(GCP)
・mPartical(CDP)
■言語:
・Python
・Google Apps Script(GAS)
・Shell
【AWS/フルリモート/週5日】AWS上のデータ分析基盤における構築・運用支援
LinuxAWSRedshiftWindows Server
インフラエンジニアサーバーサイドエンジニア
作業内容 基本設計,詳細設計,実装,テスト,運用・保守
AWS上で稼働しているデータ分析基盤の機能拡張および運用を担当。
構築・運用両面での対応が必要で、既存システムの改修や新サービスの検証作業もあり。
長期参画前提のポジションで、前任者も5年以上在籍していた案件です。
AWS 分析基盤システム運用支援
PythonWindowsLinuxAWSRedshiftTableauSPSS
作業内容 AWS上に構築されているマーケティング分析環境で使用するデータの収集、加工、ロードジョブの開発、運用作業を行っていただきます。
<主な業務>
・AWS新サービスの機能検証、適用
・分析業務で使用しているツールのバージョンアップ
<環境>
OS:Linux/Windows
DB:Redshift
言語:Python
他:Tableau, IBM SPSS
<基本時間>
9:30~18:00
New【Java】データ基盤(AWS)エンハンス開発チームの求人・案件
業務委託(フリーランス)
JavaAWSRedshiftGlue
作業内容 自動車大手のお客様にて開発中のデータ基盤(AWSのESK上で構築)に関連するエンハンス開発や追加要求に対する周辺システムの開発
データ収集・分析・可視化・新規サービスへの情報提供・管理機能などPJ規模
チーム単位で5~8名程度のチームが複数8チームほど存在。
このチームのどこかに参画頂く予定
【DB】学習塾における基幹データベースの次世代化プロジェクト
業務委託(フリーランス)
SQLAWSRedshiftTableauGlueLambda
社内SE
作業内容 ■業務内容
大手学習塾企業がクライアントとなります。
DBエンジニアとして同社のプロジェクトを推進いただきます。
・AWS DMSの構築、マネジメントと保守運用。
・Tableauでのアウトプット
・DMSと社内環境との接合、運用
・複数テーブル結合におけるデータベース及びView設計
・クエリの設計と作成
・クエリの動作確認におけるテストの実施
・AWSのデータ取り込みの管理、運用
・デイリーバッチの理解と管理
【SQL】自動車関連サービスに関わるデータ分析基盤の現状調査の求人・案件
業務委託(フリーランス)
SQLAWSAmazon S3RedshiftGlueLambda
作業内容 2年ほど前にAWSをベースに分析基盤が構築されたものの、現状がわかりづらい状況となっています。
現状を調査し調査の後、必要に応じて「システムの再構築」
「一部破棄」または「システムの刷新」の方針決めを行います。
※詳細、募集背景は面談時にご説明いたします。
【ターゲットとなるシステム】
・In Data : Salesforce 他
・Out Data : Tableau 他
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。