【週4-5日/一部リモート/Python,Java,Go】データエンジニア
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
--------------------------------
日本最大級の位置情報系IoTプラットフォームにかかわるデータの処理・分析基盤の設計、開発、運用をしていただきます。
<業務内容>
- 外部とのデータ連携
- 取引先あるいは社内フロントメンバーとデータ仕様や処理のスキームについて要件を議論し決める。
- AWS S3, Google Cloud Storage, Google Drive と言った各種ストレージと BigQuery 間でのデータの転送処理を Cloud Functions と Airflow を用いて実装・管理する。
- IAM の発行・管理、データのアクセスコントロールを行う。
- データサイエンティストと意見交換しながら、データの取得や前処理、予測モデル・予測値生成、および抽出のバッチ化・運用を行う。
- データ処理に係るコストのモニタリング、最適化施策を行う。
- データ連携に係るプライバシーマークへの対応を行う。
<仕事の魅力>
- 市場で誰も見たことのない新サービス・新データプロダクトに携わることが可能です
- 最新のデータ分析/インフラ技術にキャッチアップし、自社サービスやプロジェクトに反映することが奨励されます
- 自身で物事を推進する文化のため、自身のスキルを活かして上記業務内容にとどまらず活躍いただくことが奨励されます
【週5日/リモートメイン/Python】バックエンドエンジニア
業務委託(フリーランス)
PythonAWSAzureGitGitHubReactGoogle Cloud PlatformTypeScript
サーバーサイドエンジニアフルスタックエンジニアバックエンドエンジニア
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
※すでにFindy Freelanceで担当がついている方は、直接ご連絡いただいた方がスムーズです
--------------------------------
◆仕事概要
ウェアラブルデバイス等のデータを活用して医療課題を解決する、ヘルステックスタートアップ企業です。
◆プロダクト概要
ウェアラブルデバイス等で取得できるモニタリングデータや医フルスタックエンジニア療関連データの解析に特化した、デジタルバイオマーカー(dBM) 開発プラットフォームです。
研究機関や、製薬・保険会社等の企業向けに提供し、疾病者を含む累積1000人以上の解析に使われています。
◆業務内容
上記プロダクトやヘルスケア関連の新規プロダクトのWeb フロントエンド開発・バックエンド開発を、企画・設計・開発・運用などサービス提供に必要なすべてのフェーズに携わっていただきます。
【週4-5日/フルリモート/TypeScript,Ruby】フルスタックエンジニア(プラットフォーム戦略室 / 新規プロダクト開発担当)
業務委託(フリーランス)
RubyRailsAWSReactTypeScript
フルスタックエンジニア
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
※すでにFindy Freelanceで担当がついている方は、直接ご連絡いただいた方がスムーズです
--------------------------------
支出管理クラウドに蓄積されたデータを活用し、新しい価値を生み出す新規プロダクトの開発をお任せします。
この新規プロダクトは、BIツールのようなレポーティング機能や、ビッグデータを活用した改善提案機能等を提供する想定です。特に、バックエンド〜クラウドインフラ領域における深い知識と豊富な実務経験を活かし、エンタープライズのお客様からの要望を実現するための、リーンな新規開発に関わっていただきたいと考えております。
- AWSを活用した商用プロダクトの開発
- データ基盤の設計と構築
- BIツールを用いたダッシュボードの開発
- ユーザー認証や権限管理を含むWebアプリケーションの開発
- 要件定義からデプロイ、運用保守まで幅広く担当
【週5日/リモートメイン/Python】バックエンドエンジニア
業務委託(フリーランス)
PythonAWSAzureGitGitHubReactGoogle Cloud PlatformTypeScript
サーバーサイドエンジニアフルスタックエンジニアバックエンドエンジニア
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
※すでにFindy Freelanceで担当がついている方は、直接ご連絡いただいた方がスムーズです
--------------------------------◆仕事概要
ウェアラブルデバイス等のデータを活用して医療課題を解決する、ヘルステックスタートアップ企業です。
◆プロダクト概要
ウェアラブルデバイス等で取得できるモニタリングデータや医フルスタックエンジニア療関連データの解析に特化した、デジタルバイオマーカー(dBM) 開発プラットフォームです。
研究機関や、製薬・保険会社等の企業向けに提供し、疾病者を含む累積1000人以上の解析に使われています。
◆業務内容
上記プロダクトやヘルスケア関連の新規プロダクトのWeb フロントエンド開発・バックエンド開発を、企画・設計・開発・運用などサービス提供に必要なすべてのフェーズに携わっていただきます。
【リモート可(東銀座) / AWS / 週4日〜/ 30~40代活躍中】エンタープライズ向け新規開発を担うリードエンジニアをお任せします!
業務委託(フリーランス)
RubyRailsAWSReact
フロントエンドエンジニアデータベースエンジニアバックエンドエンジニア
作業内容 -------------------------------------------------------------------
■35歳~50歳が活躍中
■フルタイム案件(副業不可)
■国内在住者の方限定 ※セキュリティ担保の観点
■日本語ネイティブの方が活躍中
-------------------------------------------------------------------
【企業】
IT技術を活用して法人向け事業を展開し、デジタルマーケティングやシステムインテグレーション、データ分析などのサービスを提供しています。
デジタルマーケティング領域に強みを持っており、独自のマーケティングプラットフォームを構築し、顧客の購買行動分析など高度なサービスでこれにより、幅広いクライアントのニーズに応じることができます。
【業務内容】
支出管理クラウドに蓄積されたデータを活用し、新しい価値を生み出す新規プロダクトの開発を担当。
この新規プロダクトは、BIツールのようなレポーティング機能や、ビッグデータを活用した改善提案機能等を提供する想定。
特に、バックエンド〜クラウドインフラ領域における深い知識と豊富な実務経験を活かし、エンタープライズのお客様からの要望を実現するための、リーンな新規開発に関わっていただく想定。
【具体的な仕事内容】
・AWSを活用した商用プロダクトの開発
・データ基盤の設計と構築
・BIツールを用いたダッシュボードの開発
・ユーザー認証や権限管理を含むWebアプリケーションの開発
・要件定義からデプロイ、運用保守までの全フェーズを担当
【開発環境】
・バックエンド:RubyonRails/Unicorn/Nginx/PostgreSQL/Redis/Docker/Elasticsearch
・フロントエンド:TypeScript/React/Redux/styled-components/Storybook/Webpack
・インフラ:AWS(EC2/RDS/ElastiCache/S3/ElasticsearchService/Lambda/ElasticBeanstalkなど)/Ansible/Datadog/CircleCI/EngineYard
・その他主要なツール:GitHub/Slack/JIRA/Notion
※技術は現プロダクトでの標準であり、新機能開発においては状況に応じて柔軟に技術選定を行います。
【稼働条件】
・週4〜5日での稼働
・期間:6ヶ月以上(延長の可能性あり)
・フルリモート可(必要に応じて都内オフィス(東銀座駅徒歩2分)への出社の可能性あり)
・入場時期:可能ならば即日、希望9月上旬
・就業時間 9:30〜18:30(休憩60分)
【一部リモート可(恵比寿) / React Native / 週5日/ 30~40代活躍中】新時代型の位置情報共有サービスの 開発に携わっていただくエンジニアを募集します
業務委託(フリーランス)
Node.jsReact
インフラエンジニアアプリケーションエンジニアデータベースエンジニアUI・UXデザイナーマークアップフルスタックエンジニアプロダクトマネージャーPG
作業内容 -------------------------------------------------------------------
■35歳~50歳が活躍中
■フルタイム案件(副業不可)
■国内在住者の方限定 ※セキュリティ担保の観点
■日本語ネイティブの方が活躍中
-------------------------------------------------------------------
【企業概要】
弊社のエンジニアチームは、CEOであり世界に50⼈しかいないRubyの
コミッターを筆頭に高い技術感度を持ったメンバーから異⾊の経歴でセンスと
ガッツでプロダクトに貢献するメンバーもいる多様的なチームです。
自社プロダクトを13つ運営しており、ユーザー200万人を超えるサービスからグロースフェーズの
サービスまで多様なフェーズのプロダクトに関わることができます。
また新規プロダクトを年に3~4つはリリースしており、立ち上げフェーズをweb、アプリ、インフラまで少人数で進めることも珍しくなく、お持ちの技術⼒を余すこと無く発揮しつつ挑戦の機会が圧倒的に多い環境です。
-創業9年目
-従業員250人、エンジニア比率30%以上
-自社サービス13
【関わる事業】
Node.jsとReactで作られている一部サービスについて紹介させていただきます。
-米国向けチケットC2Cサービス
-ハイスペック向けマッチングアプリ
-位置共有SNS
-新規事業(年に3~4事業をリリースしています)
小さいチームで大きな仕事を行うことに注力しておりイシューをアサインさせて頂きお願いするところから始まり、
希望されればPM,PdMとのシステム開発方針に関する議論・連携からフルサイクルでお渡しをしたいと思っています。
スクラム開発など生産性が最大化する仕組みは積極的に取り入れています。
【業務内容】
-web/appの設計・開発・テスト
-PM,PdMとのシステム開発方針に関する議論・連携
-ユーザーや社内から出たUI/UXの改善
-既存コードのリファクタリング・パフォーマンスチューニングなど
-生成AIを活用した開発・機能提案など
【得られる経験】
-事業をグロースさせていく経験
-多職種と一体となってプロダクトを成長させていく経験
-企画から開発、運用、効果測定まで、希望すればフルサイクルで担当可能
-サービス運用やパフォーマンスチューニング経験
-モダンな技術の使用
【プログラミング⾔語/フレームワーク】
-webサーバーサイド:NestJS,Hasura,RubyonRails
-webフロントエンド:React,Next.js13,mantine,MUI
-appフロントエンド:ReactNative,Expo,Unity
-BE/FE共通:turborepo,Typescript
-DB:MySQL,PostgreSQL,Redis,memcached,Redshift,ScyllaDB
-CI/CDツール:CircleCI,GithubAction,Cloudbuild
-インフラ:AWS(ELB,EC2,RDS,S3,ElastiCache,...),GCP(Cloudbuild,CloudRun...)
-その他:Live2DやBlender
-IaC:Terraform
-データ分析:Re:dash
-リポジトリ管理:GitHub
-コミュニケーション:Slack,notion
【働き方】
・リモート可能(状況によって出社していただきたい)
※出社場所(恵比寿駅徒歩1分)・交通費支給
・勤務時間 8:20~17:20
【一部リモート / Go /週5日/ 30~40代活躍中】開発課題の改善をさらに実施、運用効率の向上
業務委託(フリーランス)
インフラエンジニアデータベースエンジニアQAエンジニアPMSE
作業内容 -------------------------------------------------------------------
■35歳~50歳が活躍中
■フルタイム案件(副業不可)
■国内在住者の方限定 ※セキュリティ担保の観点
■日本語ネイティブの方が活躍中
-------------------------------------------------------------------
【募集背景】
自社システムの開発規模の拡大に伴い、システム運用人材の増員募集です。
システム開発において分析・振り返りを実施しているが、開発課題の改善をさらに実施し
運用効率を上げていただける方を求めています。
【求めるミッション】
・開発規模・開発プロジェクトの増加に伴い、生産性の改善や運用効率の最適化。
・開発プロジェクトの振り返りから課題の洗い出し。
・自社サービスの品質の見える化。
▶︎具体的な業務
大きく分けると、三つの役割があります。
①:リリースした機能やサービスが正常に運用されているかのチェック
└各KPI(利用者数や利用回数など)を監視し、問題なく機能しているかを確認します
②:開発の過程における生産性の振り返り行い、改善可能な箇所を可視化
└一連の開発工程が完了したのち、プロジェクト過程での改善点を洗い出します。
③:①・②の結果について、各チームと連携し改善のためのファシリテート
上記を遂行するにあたって必要になる業務詳細は以下のとおりです。
・定期作業(現在の品質分析、プロジェクト分析、分析チームのファシリテート)
・プロジェクトの振り返りと課題の洗い出し、対策提案。
・既存の月次の品質・コストレポート作成指示とその分析、改善提案。
・その他生産性の改善や運用効率の最適化支援。
【得られる経験やスキル、中長期的に狙えるキャリアステップ】
★単一サービスで売上62億(2022年度)、ユーザー100万人、法人40万社を超えるサービス運用のご経験がいただけます。
大規模かつ開発のスピード感の速いプロダクトに関わることができます。
競合の多い業界ながらも、常に新しい機能や価値を顧客に提供し続けている事業に
リアルタイムで携わりながら、今後もさらにサービスが成長していくための仕組みを作るやりがいがあります。
どのようにすれば、より良い開発過程を築けるか・ユーザーに質の良いサービスを提供できるかを常に試行錯誤し
現状分析・情報精査・課題発見・課題解決・組織内連携などといった力を身につけることができます。
【主な技術スタック】
・監視ツール:NewRelic
・タスク管理:Redmine,ClickUP
・バックエンド:Go
・フロントエンド:React,Redux,
・ネイティブアプリ:Swift,Kotlin
・データベース:MySQL,Redshift
・インフラ:AWS
・開発環境:Docker
・リポジトリ管理:Github
※業務で使用するPCは、当社が貸出するPC(MacBookPro)のみとなっております。
【ミイダスでの働き方や環境】
★入社初日からフルリモートで勤務可能◎居住地も日本国内であれば問いません
★ミイダスはコロナ収束後もフルリモートの組織運営を継続します
★開発チームの月間平均残業時間は8時間ほど
★遅入り/早上がり/中抜けなど比較的勤怠調整がしやすくワークライフバランスが保ちやすい
【求める人物像】
・他チームを巻き込み改善を主導していけるコミュニケーション能力のある方
・困難な課題に対して改善を力強く推進できる課題解決能力の高い方
・主体性/自主性をお持ちの方
【働き方】
・稼働開始:要相談
・勤務時間 10:00-19:00※配属部署の運用に準ずる
・標準時間:フレックスタイム制 160時間(時間幅:140〜180時間)
・長期での参画を想定
【BI(Tableau)/RedShift】スーパーマーケットのBIダッシュボード構築案件/フルリモート/フレックス!
業務委託(フリーランス)
RedshiftBigQueryTableau
サーバーサイドエンジニア
作業内容 BI側はTableau、データソースはRedShift。
先方担当者の要件に従い、Tableauでの帳票作成を実施
【AWS】Redshiftデータ移行業務
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 【概要】
Redshiftに登録されているデータをBigQueryに移行する
【場所】
秋葉原
※リモート可
【勤務時間】
9:30~18:30
【精算】
150h~200h
【面談】
1回
※週5日〜OKの案件です!
【GCP】Redshiftに登録されているデータの移行業務
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 【概要】
Redshiftに登録されているデータをBigQueryに移行する
【場所】
秋葉原※リモート可
【勤務時間】
9:30~18:30
【精算】
150h~200h
【面談】
1回
※週5日〜OKの案件です!
【Snowflake】Snowflakeデータ基盤設計構築の求人・案件
業務委託(フリーランス)
PythonSQLAWSRedshiftSnowflakeLambda
作業内容 【作業内容】Snowflakeの設計・実装
【環境】AWS Lambda、Amazon Redshift、Amazon Linux
★元請直!【データ移行 / リモート可】大手インターネットサービス会社様DWH基盤移行
作業内容 ・現在稼働中のデータウェアハウス基盤であるTeradata Databaseから、次世代基盤となるAmazon Redshiftへ移行する
DWH移行(teradata→Redshift)
【Python】統合データ分析基盤保守
業務委託(フリーランス)
PythonRedshift
サーバーサイドエンジニア
作業内容 某ゲーム会社様の統合データ分析基盤保守プロジェクト案件となります。
PythonおよびSQLにて詳細設計書から実装を行っていただきます。
【AWS】Redshift登録データのBigQuery移行業務
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
Redshiftに登録されているデータをBigQueryに移行する
【場所】
秋葉原
※リモート
【勤務時間】
9:30~18:30
【精算】
150h~200h
【面談】
1回
※週5日〜OKの案件です!
【AWS Glue/lambda/Redshift/Quicksite】某SI様向けデータ分析基盤AWS技術支援
業務委託(フリーランス)
PythonAWSRedshiftGlueLambda
サーバーサイドエンジニア
作業内容 ETLとしてAWS Glueを利用しておりグローバルのAWS環境でございます。構築自体は別会社の為環境はできており、参画後は保守対応を実施していただきます。AWS Glue、lambda、Redshift、Quicksiteを使用、モニタリングしとてIAM,KMS,cloudTrailを利用しております。
【C#.NET、PL/SQL】基幹システムの運用/保守(リモート)
業務委託(フリーランス)
ShellPL/SQLC#.NETOracleSVNSubversionRedmineRedshiftVisual Studio
作業内容 運用している複数あるシステムに係る保守改修や機能追加を対応いただく案件となります。
工程:設計〜テストをご担当いただきます。
〜開発環境〜
・ASP.net C#(VisualStudio2019)
・Oracle、Redshift
・AsteriaWarp
・PL/SQL、ShellScript
・Subversion(SVN)
・Redmine
【BI/DWH】データ分析システム(PowerBI,Redshift)保守、運用,要件整理
業務委託(フリーランス)
Redshift
データサイエンティスト
作業内容 ・PowerBIServiceをRedshiftに疎通させるための構成設計
・方針整理
・各工程のテスト計画(単体、結合、統合)
・PowerBIを用いた権限整理(画面、データ)
・運用要件整理(監視項目,障害時対応,ユーザー管理,ログ管理)
BIシステム運用保守の求人・案件
作業内容 Business Inteligence(ビジネス・インテリジェンス) システムの運用保守要員として、ダッシュボード構築や新規レポートの要件定義・設計案件の対応などをお願いします。
【現行システム】
UI(ユーザ画面):MicroStrategy
DB(データベース):Redshift
【分析基盤エンジニア】AWSのデータレイク基盤(蓄積基盤)の設計、構築(Infrastructure)
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 AWSを用いて実現する蓄積基盤の設計、構築(特にRedshift、Glueまわり)
勘定系システムなどからデータを受け取るAWSのデータレイク基盤(蓄積基盤)の設計、構築
【分析基盤エンジニア】大手卸小売業 データ分析基盤構築、分析
業務委託(フリーランス)
PythonAWSRedshiftTableau
作業内容 大手卸小売業のデータエンジニアとして下記業を担当いただきます。
・AWS等のクラウドサービスを活用したデータ分析
・Redshiftでのデータ分析基盤構築
・各種KPI設計およびTableauなどのBIツールでのダッシュボード作成
Redshift / Tableau データ分析基盤の構築運用
SQLAWSRedshiftTreasure DataTableau
作業内容 データ分析基盤の構築および運用における上流工程をご担当頂きます。
DWH(RedshiftやTreasureDataといった一般的な製品)とBIツール(TableauやPowerBI)を連携させ、クーポン利用実績やアプリ利用実績の効果測定をする為の基盤構築及び運用をしていくプロジェクトになります。
<備考>
フルリモート
<基本時間>
10:00~19:00
【Python/SQL(リモート)】データ分析基盤データ連携/マート定常化作業
業務委託(フリーランス)
PythonSQLOracleMySQLPostgreSQLAWSBacklogJIRAGitHubGoogle Cloud PlatformRedshiftBigQueryGlueLambdaGoogle Workspace
バックエンドエンジニア
作業内容 データパイプラインのPythonでの実装作業です。
・データパイプラインのpython実装
・データパイプラインのテスト自動化
・テスト駆動開発のチームへの教育
〜技術スタック〜
・AWS:Glue、Lambda、StepFunctions、Redshift、Redshift Spectrum、IAM、SageMaker、S3、EC2、CodePipeline、CodeDeploy
・GCP:BigQuery、GCS、CloudFunction、CloudComposer、
・DB:Redshift、PostgreSQL、Oracle、MySQL
・リポジトリ:Github Enterprise、CodeCommit
・コラボレーションツール:JIRA、Confluence、Backlog
・コミュニケーションツール:Slack、Google Workspaces
【AWS(リモート)】損保会社向けAWSインフラ構築案件
業務委託(フリーランス)
AWSRedshiftSnowflake
作業内容 既存AWSインフラの追加開発や改修等をご担当いただきます。
大型AWSインフラシステムを学ぶことができます。
ツール:
・AWS
・SnowFlake
・RedShift
【AWS/20代30代活躍中】大手通信業向けAWS Redshift構築支援
業務委託(フリーランス)
WindowsAWSRedshiftTableau
インフラエンジニア
作業内容 ■仕事内容__:
【案件概要】
大手通信業向けにデータ分析基盤(AWS)とデータ可視化支援(tableau)を行っております。
今回はAWS Redshiftの構築を担当いただける方を求めております。
他サーバーへの接続、tableauへの繋ぎこみも担当いただく予定です。
■作業環境__:Windows/Mac選択可
■開発環境
ツール___:AWS Redshift (Amazon Redshift),Tableau
■体制____:複数人
■人物像___:
・勤怠に問題がない方
・コミュニケーションをしっかり取れる方
■就業時間__:9:00〜18:00
■勤務地___:池袋
■勤務地補足_:基本的にフルリモート
■平均稼働__:170時間前後
■面接回数__:1回
■時間幅___:140時間~ 180時間
■服装____:カジュアル
■営業コメント:
元請けの案件を豊富に保有しているマザーズ上場企業でございます。
様々な案件があるので終了した際にもスライド可能でございます。
※以下に該当する方からの応募はお断りしております。
なお、選考を進めるにあたってスキルシートが必要です。
--------------------------------------------------------
・週5日稼働できない方
--------------------------------------------------------
【Python】Web企業でのデータパイプライン構築や可視化業務の求人・案件
業務委託(フリーランス)
PythonSQLAWSRedshiftBigQuerySnowflake
作業内容 ・自社プロダクトであるデータ統合SaaSおよび、AWSやGoogle Cloud等のクラウドサービスを用いたデータ分析基盤構築・データ統合パイプラインの設計および実装
・SQLを用いたデータマート作成、名寄せ、クレンジング等の実施
・BIツールを用いたデータ可視化
・外部サービス(CDP/MA/SFA等)とのデータ連携および活用の支援
【ツール】
AWS(Redshift, QuickSightなど), trocco
■開発環境
言語____:SQL
環境・OS_:AWS (Amazon Web Services)
ツール___:AWS Redshift (Amazon Redshift)
■開発工程__:基本設計|詳細設計|実装・構築・単体試験
【AWS】不動産ベースレジストリのプラットフォーム開発
業務委託(フリーランス)
PostgreSQLAWSRedshiftGlueFargateLambda
インフラエンジニア
作業内容 ビッグデータを取り扱うETL環境を構築
AWS 基盤構築
作業内容 AWS基盤 基本設計~構築・テスト(単体+結合)を対応
<作業工程>
基本設計~
<環境>
AWS
ECS, S3, WorkSpaces, Provided DNS, Streaming Gateway, Redshift, Linux, クライアント30台前後
<備考>
リモートあり
<基本時間>
9:00~17:30
<服装>
ビジネスカジュアル
DWHのシステム移行案件
業務委託(フリーランス)
JavaPythonSQLLinuxOracleAzureRedshiftTreasure Data
インフラエンジニアサーバーエンジニアデータベースエンジニア
作業内容 ・クラウド移行(AWS+Treasuredata)をご対応いただきます。
New【分析基盤エンジニア】データ分析基盤実装案件
業務委託(フリーランス)
PythonSQLAWSGoogle Cloud Platform
作業内容 携帯キャリア子会社でのデータパイプラインのPythonでの実装作業です。・AWS:Glue, Lambda, StepFunctions, Redshift, Redshift Spectrum, IAM, SageMaker, S3, EC2, CodePipeline, CodeDeploy・GCP:BigQuery, GCS, CloudFunction, CloudComposer,・DB:Redshift,PostgreSQL,Oracle,MySQL・リポジトリ:Github Enterprise,CodeCommit・コラボレーションツール:JIRA, Confluence, Backlog・コミュニケーションツール:Slack,Google Workspaces
【Python/基本リモート】Pythonによるバッチ開発
業務委託(フリーランス)
PythonAWSRedshiftLambda
サーバーサイドエンジニア
作業内容 ・外部データベースサイトからAPI経由で定期的にデータを取り出し、中間DBに格納します。
・中間DBは、AWS S3に一旦よりこみ、Lambdaを使ってPythonでバッチファイルを作成し、AmazonのDWHであるRedshiftに落とし込んでいきます。
・Redshiftにたまったデータは、他チームにてTableau 等を使ってデータ分析を行います。
・AWS上のLambdaやRedshiftなどのインフラ構築は他チームで行うので範囲外です。
・主な仕事は、Pythonでのバッチファイル作成になります。
・データ取り込み時の設計~開発~検証まで行います。
(注意点)
・本案件はお客様によるENDへの提案中の案件です(複数社が提案しています)。
・9月中旬ごろにベンダが決定し、10月より開発がスタートします。
・そのためベンダ選定から漏れた場合には、本案件はキャンセルになります。