【クラウドエンジニア】事業会社向け AWS を用いたETL処理及び開発
業務委託(フリーランス)
PythonSQLAWSRedshiftGlue
作業内容 ■業務内容
大手事業会社向け、AWSを用いたETL処理及び開発業務を担っていただきます。
具体的にお任せしたい業務としては以下の通りです。
└Amazon RDS/Redshiftに格納されたデータの読み込み
└上記データを用いたAWS GlueでのETL処理の開発
└EC2上に配置されたファイルのAWS GlueでのETL処理の開発
└設計書、報告用資料の作成
■同社について
独立系SIer企業として、創業から製造、流通、金融などの幅広い業界分野にわたり、多種多様な業務系システム構築を手がけてこられた企業様です。
お客様先での常駐開発、自社受託開発などの業務系システム構築から、データ統計解析、Iot支援等 幅広く事業展開をされていらっしゃいます。
【Python3/SQL】某大手小売企業様向け/データレイク基盤構築プロジェクトの求人・案件
業務委託(フリーランス)
PythonSQLShellAWSAmazon S3GitRedshiftLambda
作業内容 1.新アーキテクチャ対応移行作業(単体テスト、結合テスト、システムテスト)
2.新アーキテクチャ対応移行作業(移行テスト、パフォーマンステスト、運用テスト)
3.既存ソースコードの修正(新アーキテクチャ対応移行作業)(AWS Lambda、AWS Glue)
【Python】データレイク基盤構築プロジェクト
業務委託(フリーランス)
PythonSQLShellAWSGitRedshiftLambda
DBA
作業内容 <概要>
某大手小売企業様向けのデータレイク基盤構築プロジェクトにて
Pythonエンジニアを募集いたします。
<作業内容>(上から優先度が高い順)
1.新アーキテクチャ対応移行作業
(単体テスト、結合テスト、システムテスト)
2.新アーキテクチャ対応移行作業
(移行テスト、パフォーマンステスト、運用テスト)
3.既存ソースコードの修正(新アーキテクチャ対応移行作業)
(AWS Lambda、AWS Glue)
【AWS】大手学習塾企業AWSマネジメント保守運用
業務委託(フリーランス)
SQLAWSRedshiftTableauGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
▼案件内容
・大手学習塾企業AWSマネジメント保守運用
・AWSマネジメントと保守運用
・複数テーブル結合におけるデータベース及びView設計
・クエリの設計と作成
・クエリの動作確認におけるテストの実施
・AWSのデータ取り込みの管理、運用
・デイリーバッチの理解と管理
・AWSGlue
・AWSLambda
・AWSRedshift
▼条件等
場所:リモート作業が基本必要に応じて対面打合せあり
清算方法:140-180
打合せ回数:1回
※週5日〜OKの案件です!
※実務経験1年以上お持ちの方が対象の案件です!
【AWS/リモート】データ収集/システム構築
業務委託(フリーランス)
AWSRedshiftTableauAuroraLambda
サーバーサイドエンジニア
作業内容 AWSを使用したデータ収集/システム構築を行っていただきます。
リモートでの作業が可能な案件でございます。
業務処理のCI/CDも行っていただきます。
New【SQL】データ分析・機械学習の求人・案件
業務委託(フリーランス)
PythonSQLAWSGitRedshift
作業内容 ・顧客データを分析、機械学習し、保険商品ごとに顧客へのおすすめ度を計算するためのバッチ処理を開発及び保守。
・機械学習済みモデルとSQLを分析専門の別チームから受け取り、本番化のためにバッチ処理に組み込み問題がないか試験を行う。
Go / Python 動画配信サービス サーバサイド開発及びコードレビュー
PythonGoMySQLRedisDynamoDBNode.jsAWSGitSwiftKotlinGoogle Cloud PlatformRedshiftBigQueryTypeScriptCDKCloudFormation
スマホアプリエンジニア
作業内容 動画配信サービスのサーバーサイド開発を担当していただきます。
<開発環境>
言語:Go/Python/Node.js/TypeScript/Kotlin/Swift
DB:MySQL/DynamoDB/Redis/BigQuery/Redshift
インフラ:AWS/GCP
構成管理:CDK/CloudFormation
監視:CloudWatch/NewRelic
CI/テスト:CodeBuild/CloudBuild/GitLab CI
<備考>
フルリモート
【AWS】AWS ETL環境運用案件
業務委託(フリーランス)
MySQLDynamoDBSparkAWSApacheRedshiftGlue
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 ・下記を行っていただきます。
‐既存のAWS ETL環境の調査改善
‐メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となります
【Java/フルリモート】ECサイト構築システムやCRMシステムなどの既存システムをPHP→Javaへのリプレイス
JavaPHPMySQLSpringAWSEclipseGitRedshiftSpringBoot
作業内容 自社で開発した既存のPHPシステムを新たにJavaで構成するプロジェクトを進めています。
この新規メンバーとしてご活躍いただける方を新たに募集します。
ECショップ構築ASPサービスやCRMによるマーケティングオートメーションシステムなどの開発に携わっていただく予定です。
【SQL】BIエンジニアの求人・案件
業務委託(フリーランス)
SQLRedshiftBigQueryTableau
アナリスト
作業内容 美容系総合ポータルサイトを展開しているクライアントにてBIエンジニアとして以下業務をご担当いただきます。
・tableauでのダッシュボード作成 ・BigQueryから施策モニタリング用のデータパイプライン作成 ・ビジネスモニタリング/データ分析業務
DWH:BigQuery
ETL:Trocco
BI:Tableau
Python / SQL / AWS ECデータチェックツール開発支援
作業内容 クライアントが運営するECサイトのデータチェックツール開発をご支援いただきます。
PythonとSQL(Postgres, Redshift)を利用した開発をご担当いただきます。
<具体的な業務>
・AWSプログラム開発
・商品ページ情報のデータ調査
<備考>
フルリモート
【Python/フルリモート】インフラ・データ基盤設計及び構築
業務委託(フリーランス)
PythonAWSRedshiftNext.jsGlue
サーバーエンジニア
作業内容 【案件】
インフラ・データ基盤設計及び構築
【内容】
アグリテックに取り組むベンチャー企業にて、Webアプリ(自社プロダクト)開発PJや
官公庁からの受託PJ(ビッグデータ分析/画像解析等)で利用するインフラ基盤、
データ基盤の構築をお任せいたします。
【開発環境】
Typescript / Python
redux / atomic design
React.js / Next.js / Django REST framework
PostgreSQL ( PostGIS )
インフラ:AWS( EC2 / EKS / S3 / RDS等 )
Git/GitHub/Slack / Zoom / Discord
【必須スキル】
・データ分析基盤構築経験
・データ分析関連サービスの経験
(EC2・Lamda・Redshift・Glue・DateCatalog等)
・Pythonを用いたAWS環境構築経験
【尚可スキル】
・ML関連サービス(SageMaker等)の利用経験
・RDS/PostgreSQLの利用経験
【SQLなど】小売業でのDr.SumからRedShiftへのシステムリプレースの求人・案件
作業内容 作業フェーズとして設計、開発、単体テスト、総合テスト、データ移行、リリースを担当していただく作業内容:テーブル設計・作成、glueでのデータ加工の設計・開発・テスト①DB:Dr.Sum+データ加工:Connectで作成しているシステムを
②DB:RedShift+データ加工:glueでリプレースする
③対象システム数:7
【Python/基本リモート】 データウェアハウス基盤構築
業務委託(フリーランス)
PythonSQLShellDynamoDBAWSAmazon SQSJenkinsLESSRedmineRedshiftGlueLambda
コンサル
作業内容 基本設計,詳細設計,実装,テスト,運用・保守
某大手小売企業様向けのデータウェアハウス基盤構築プロジェクトにて携わって頂きます。
・ETL処理の開発作業
(設計、設計書作成、実装、単体テスト)
・ETL処理の結合テスト作業以降
(結合テスト、システムテスト)
【Python/基本リモート】データウェアハウス基盤構築
業務委託(フリーランス)
PythonSQLShellDynamoDBAWSAmazon SQSJenkinsLESSRedmineRedshiftGlueLambda
作業内容 基本設計,詳細設計,実装,テスト,運用・保守
大手小売り企業様向けのデータウェアハウス基盤構築に携わって頂きます。
・ETL処理の開発作業(設計~単体テストまで)
・ETL処理の結合テスト作業以降(結合テスト、システムテスト)
【Python/SQL/Big Query】QR決済システム開発支援
業務委託(フリーランス)
PythonSQLRedshiftBigQuery
サーバーサイドエンジニア
作業内容 ・外部(AWS,SaleForce等)データをGCP(Bigquery)取り込む連携パイプライン処理の開発及び運用保守
※データの変換・マスキング・クレンジング等の処理
・上記、業務情報の管理のためのデータマネジメント作業
※データクオリティ・連携処理・メタデータ管理等の運用にまつわる作業
<開発環境>
Python、SQL、Big Query
Kotlin 動画配信サービス Android開発及びコードレビュー
PythonAndroidMySQLRedisDynamoDBNode.jsAWSGitSwiftKotlinGoogle Cloud PlatformRedshiftBigQueryTypeScriptCDKCloudFormation
スマホアプリエンジニア
作業内容 動画配信サービスのAndroid開発を担当していただきます。
<開発環境>
言語:Go/Python/Node.js/TypeScript/Kotlin/Swift
DB:MySQL/DynamoDB/Redis/BigQuery/Redshift
インフラ:AWS/GCP
構成管理:CDK/CloudFormation
監視:CloudWatch/NewRelic
CI/テスト:CodeBuild/CloudBuild/GitLab CI
<備考>
フルリモート
AWS / Python / React プロダクト開発(データ分析基盤)案件
PythonSQLDynamoDBAWSReactRedshiftTerraformLambda
フロントエンドエンジニア
作業内容 データ分析基盤の新バージョン開発プロジェクトです。
データをDWH(主にRedshift)に登録、SQLまたはPythonを使ったELT処理を行います。
データ登録やELT処理を実行するためのジョブ管理がデータ分析基盤の主要な機能です。
新バージョン開発にあたりアーキテクチャを大幅に刷新します(AWSマネージドサービスの活用)。
開発チームに参加し、プロダクト開発を担当していただきます。
AWS / Oracle 基幹システム オンプレミス→AWS移行
PythonVB.NETPL/SQLOracleAWSRedshiftGlueCloudFormationLambda
サーバーサイドエンジニア
作業内容 OracleDB, VB.NETのクライアントアプリケーションの移行/改修になります。
自社オンプレ基幹システムのうち、大小含め複数システムのAWS移行に伴い、
その内の1システムの基本設計から携わって頂きます。
<対象システム>
・レセプトデータを扱う基幹システム
<移行計画>
サーバー:IBM Netezza → AWS RedShift
DB:Oracle → AWS Oracle
アプリ:既存を移行※移行に伴いサーバーサイドの改修をします。
<基本時間>
9:00~18:00
【Python】データ分析基盤開発案件
業務委託(フリーランス)
PythonSQLAWSRedshift
サーバーサイドエンジニア
作業内容 【概要】
顧客パッケージのデータ分析基盤を使っての開発案件になります。
基盤導入後にお客様のデータをDWH(主にRedshift)に登録、
SQLまたはPythonを使ったELT処理を行います。
※ETLの処理の割合としてSQLが多いです。
【主な作業内容】
基盤導入後のデータの登録、ETL処理になります。
ジョブを実行する機能があり、そのジョブから実行するプログラム(SQL、Python)を開発するイメージなります。
案件の特性として規模は大きくなく2-3名体制で1-3か月ぐらいの案件が多いです。
そのため複数案件にかかわっていただくことがあります。
【Java/】損害保険に関する調査、査定システム再構築案件
業務委託(フリーランス)
JavaPythonAWSintra-mart
作業内容 ・損害保険に関する調査、査定システム再構築に携わっていただきます。
・主に既存システムのデータをAWS環境へ取込み、以下の作業を行っていただきます。
-詳細設計外部サービスとのAPI構築
-S3からRedshiftへのデータ取込バッチ構築
-Redshiftのデータマート構築
-他システムへのデータ連携
Swift 動画配信サービス iOS開発及びコードレビュー
PythoniOSMySQLRedisDynamoDBNode.jsAWSGitSwiftKotlinGoogle Cloud PlatformRedshiftBigQueryTypeScriptCDKCloudFormation
スマホアプリエンジニア
作業内容 動画配信サービスのiOS開発を担当していただきます。
<開発環境>
言語:Go/Python/Node.js/TypeScript/Kotlin/Swift
DB:MySQL/DynamoDB/Redis/BigQuery/Redshift
インフラ:AWS/GCP
構成管理:CDK/CloudFormation
監視:CloudWatch/NewRelic
CI/テスト:CodeBuild/CloudBuild/GitLab CI
<備考>
フルリモート
Go HRサービスバックエンドエンジニア募集
MySQLAWSDockerSwiftGitHubKotlinReactRedshift
スマホアプリエンジニアバックエンドエンジニア
作業内容 顧客が展開している自社サービスにおけるバックエンド開発をご担当頂きます。
<担当工程>
基本設計~テスト
<開発環境>
言語:Go, React, Redux, Swift, Kotlin
DB:MySQL, Redshift
インフラ:AWS
開発環境:Docker, GitHub
【DBエンジニア】PythonでのDBアクセスプログラミング
業務委託(フリーランス)
PythonAWSGoogle Cloud PlatformRedshiftBigQuery
作業内容 大手製造メーカー様案件で、データ解析・データ解析のプログラミング
~DBアクセスプログラミングを担当していただきます。
※参画いただいた後は、相談の上プロジェクトの中でその他の役割も
担って頂く可能性もございます。
【Python】データ分析基盤の開発及び運用
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGoogle Cloud PlatformRedshiftBigQueryGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【案件】
データ分析基盤の開発及び運用をご担当いただきます。
通信キャリア会員向けECを運営しているグループ子会社での
データ基盤構築をおねがします。
【主な業務内容】
・データ連携案件管理:
データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:
事業要請に応じたデータレイク,データウェハウス,
マートの実装,テスト
※基盤構築作業が主な作業になります。
【技術スタック】
・AWS:Glue,Lambda,StepFunctions,Redshift,RedshiftSpectrum,
IAM,SageMaker,S3,EC2,CodePipeline,CodeDeploy
・GCP:BigQuery,GCS,CloudFunction,CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:GithubEnterprise,CodeCommit
・コラボレーションツール:JIRA,Confluence,Backlog
・コミュニケーションツール:Slack,GSuite
【条件等】
最寄駅:リモート可/渋谷
※週1の出社が発生する可能性がございます
打合せ回数:1回
時間は10:00~19:00
服装:オフィスカジュアル
精算方法:140-180h上下割
※週5日~OKの案件です!
【Python】データ基盤構築
業務委託(フリーランス)
JavaCPythonSQLC#OracleMySQLPostgreSQLAWSBacklogJIRAGoogle Cloud PlatformRedshiftBigQueryGlueLambda
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
▼概要
通信キャリア会員向けECを運営している
グループ子会社でのデータ基盤構築をご担当いただきます。
▼主な業務内容
・データ連携案件管理:データ供給元からデータ利用者のために日程調整や管理業務
・基盤構築:事業要請に応じたデータレイク,データウェハウス,マートの実装,テスト
※基盤構築作業が主な作業になります。
▼技術スタック
・AWS:Glue,Lambda,StepFunctions,Redshift,RedshiftSpectrum,
IAM,SageMaker,S3,EC2,CodePipeline,CodeDeploy
・GCP:BigQuery,GCS,CloudFunction,CloudComposer,
・DB:Redshift,PostgreSQL,Oracle,MySQL
・リポジトリ:GithubEnterprise,CodeCommit
・コラボレーションツール:JIRA,Confluence,Backlog
・コミュニケーションツール:Slack,GSuite
▼条件等
時間:10:00~19:00応相談
場所:リモート可/渋谷
※基本フルリモートです
※週1の出社が発生する場合がございます
清算方法:140-180h上下割
打合せ回数:1回
※週5日~OKの案件です!
【上流】製薬系AWSデータ分析基盤構築案件
業務委託(フリーランス)
SQLAWSBigQueryTableau
インフラエンジニア
作業内容 ・製薬系AWSデータ分析基盤構築案件に携わっていただきます。
・下記を行っていただきます。
-要件定義
-設計
-開発
-運用保守
-トレーニング
-PoC環境構築
【BigQuery/DWH】DBチューニング案件
業務委託(フリーランス)
SQLRedshiftBigQuerySnowflake
データサイエンティスト
作業内容 ・DBチューニングに携わっていただきます。
・データ活用している社内ユーザ(非エンジニア含む)の相談や要望の対応もございます。
・担当範囲はスキルや経験および進捗状況により変動いたします。
【分析基盤エンジニア】Snowflakeデータ基盤設計構築の求人・案件
業務委託(フリーランス)
OracleRedshiftSnowflake
作業内容 Snowflakeを利用したデータ蓄積+活用。
連携されたファイルなどのデータをSnowflakeにてデータを蓄積。
蓄積後ユーザに使いやすいように加工し活用してもらうよう設計・開発を行う。
【主なスキル技術セット】
Snowflake
Python
Javascript
AWS
Informatica Intelligent Cloud Services(IICS)
その他(ツール作成等)
Powershell
bash
Excelマクロ
【C#.NET、PL/SQL】基幹システムの運用/保守(リモート)
業務委託(フリーランス)
ShellPL/SQLC#.NETOracleSVNSubversionRedmineRedshiftVisual Studio
作業内容 運用している複数あるシステムに係る保守改修や機能追加を対応いただく案件となります。
工程:設計〜テストをご担当いただきます。
〜開発環境〜
・ASP.net C#(VisualStudio2019)
・Oracle、Redshift
・AsteriaWarp
・PL/SQL、ShellScript
・Subversion(SVN)
・Redmine