データ移行プロジェクト リーダー/メンバー
作業内容 【募集背景】
データ基盤の移行プロジェクトに伴い、移行開発・検証・プロジェクト推進を担う人材を募集しています。
【作業内容】
既存データ基盤からDatabricksへの移行において、現行環境と新環境の比較・差異分析、データ移行開発、コーディング支援を担当します。Lakebridgeおよびコーディングエージェントを活用した移行支援、テスト計画の策定・試験推進、移行結果の検証、課題の切り分け・原因分析・対応を行います。関係者との調整、進捗管理、チーム・タスクのリーディングも担当します。
【求める人物像】
移行に伴う差異や課題を自ら整理し、解決に向けて行動できる方を求めています。関係者と円滑にコミュニケーションを取れる方を歓迎します。リーダーの場合は、メンバーへの指示や進捗管理ができる方を求めています。
【ポジションの魅力】
データ基盤移行における開発・検証からプロジェクト推進まで、幅広い業務に携わることができます。
【開発環境】
Teradata、Informatica、Databricks、Lakebridge、Git、Shell、JP1、Spark、PySparkを活用します。
【Python】ビッグデータ・ETL関連対応支援案件
業務委託(フリーランス)
PythonSQLAWSAzure
作業内容 ・ビッグデータ・ETL関連対応支援案件に携わっていただきます。
・主に下記作業をご担当いただきます。
‐ビックデータの取得、加工、アナリストに共有
‐アプリ開発
(リモート)【Databricks】Databricksを利用したCANデータ基盤構築(Snowflakeからの移行)
作業内容 ・CAN基盤を利用する各サービス開発者に対するDatabricks移行支援・各種調整
・Databricks環境での運用設計・運用手順書の作成
・インフラ基盤の環境構築(IaCなど)
(リモート)【SE】配信入稿管理システム
業務委託(フリーランス)
JavaScriptDockerReactTypeScriptNext.jsTerraform
SE
作業内容 配信入稿管理システムの設計、開発、運用を担当いただきます。
(リモート)【データエンジニア】データカタログシステムの保守・開発
業務委託(フリーランス)
PythonSQLHadoop
作業内容 ・ETL基盤(Airflow、Python、Kubernetes)を利用した、データ加工ジョブの開発/改善業務
・分析用データ、MLモデル向けFeatureデータ、決済・金融関連データなどのデータの開発、保守運用業務
・MLツールを利用したベクトルデータ、推定属性データの開発、保守運用業務
・プロダクト運営(会議への参画・ファシリテート、ユーザ問い合わせ対応、システムアラート対応、など)
・作業環境:Laketahoe
・クエリエンジン:Trino、Spark
・ETLツール:Managed Airflow、ACP、IU Vinitus
インタフェース開発【ETL】
作業内容 ・IF各種設計書作成
・MS Fabric環境での実装(検証及びテストも含む)
・その他上記に付随する業務
【週5日/出社メイン/AWS,Google Cloud,Azure】プロジェクトマネージャー - 大手自動車メーカー向けビッグデータ基盤構築プロジェクト
作業内容 --------------------------------
※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です
※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です
※20代〜40代の経験者が望ましい案件です
※平日日中での稼働が前提となります。
※すでにFindy Freelanceで担当がついている方は、直接ご連絡いただいた方がスムーズです
--------------------------------
- インフラ基盤のビジョン策定・ロードマップ提案
将来的なデータ量増加やAI活用を見据えた、次世代データ基盤(クラウド/ハイブリッド)の最適化提案
- 大規模プロジェクトのインフラマネジメント
進捗管理、課題管理、リスクコントロール、品質管理
- マルチステークホルダーとの合意形成・調整
自動車メーカー(顧客)のカウンターパート、アプリ開発チーム、外部ベンダーとの連携および仕様調整
- Platform Engineeringの推進
開発チームが迅速に機能リリースできるよう、インフラの自動化や共通基盤の高度化
インフラ・データエンジニア募集
業務委託(フリーランス)
SQLAWSGoogle Cloud PlatformBigQueryGlueTerraform
作業内容 ・データレイク / ETL 基盤の構築
・AWS Glue(Apache Spark)による分散処理、ETL 開発
・S3 / Lake Formation を用いたデータ管理、セキュリティ設計
・BigQuery ベースの DWH 環境整備
・AWS → GCP 間データ連携パイプラインの最適化
・BigQuery によるデータモデリング、クエリ最適化
・IaC を軸としたマルチクラウド管理
・Terraform による環境差分管理、自動化
・品質管理、運用効率化
・Airflow などのワークフロー管理と CI/CD 整備
・データ品質テストの自動化
【Python(Web開発系)】学習支援サービス向けデータ分析基盤保守開発
業務委託(フリーランス)
PythonSQLSparkAzureApache
作業内容 【業務内容】
小中学生向け学習支援サービスのデータ分析基盤において、既存システムの理解と機能把握を行いながら、保守対応や機能追加開発を実施します。クラウドサービスやSQL、Python(PySpark)、Apache Sparkを活用して安定的な分析基盤運用と開発を担当します。
【作業内容】
・既存システムのソースコード、設計書、ドキュメントをもとにシステムの動作を理解
・Azure Data Factoryを用いたデータパイプラインの保守・開発
・Azure Data Lake Storageへのデータ格納、管理、処理
・Azure Databricksを用いたデータ分析処理の開発・保守
・SQLを用いたデータクエリ・加工
・Python(PySpark)とApache Sparkを用いたバッチ処理、データ変換、分析処理
【DBエンジニア(SQL全般)】データ加工基盤刷新データベース開発
作業内容 【業務内容】
大手SIer向けに老朽化したデータ加工基盤の刷新を目的とし、ApacheSparkで構築された既存システムをDatabricksへ移行する業務です。EOSL対応の一環として、データ加工処理基盤のマイグレーションを推進し、Databricksを活用した新たな開発標準の策定と現場への導入を行います。移行計画の立案から実行管理、チームリードまでを担い、安定したデータ基盤の再構築と運用性向上を実現します。
【作業内容】
・ApacheSparkで記述された既存データ加工処理のDatabricks移行
・Databricks向け開発標準の策定と導入
・移行作業全体の計画立案と実行管理
・プロジェクト進捗管理と課題解決
・メンバーへの作業指示とチームリード
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【DBエンジニア(SQL全般)】電力データ管理システムのクラウド移行と刷新
作業内容 【業務内容】
電力会社向けのロードカーブ作成システムの刷新を担当します。スマートメーターや子局からの計測値を用いて既存システムをクラウド環境へ移行し、計算ライブラリをSparkからSnowflakeに変更してシステムの性能向上を図ります。
【作業内容】
・既存システムのSnowflake化対応
・クラウド環境へのシステム移行
・ロードカーブ作成システムの設計・構築
・計算ライブラリの変更作業
・オンプレミス環境からクラウド環境へのデータ移行
【Python(Web開発系)】既存システムのETL処理改善プロジェクト
業務委託(フリーランス)
PythonMySQLMongoDBSparkAWSJIRARedshiftKafkaLambda
作業内容 【案件概要】
大規模データ処理基盤の構築および既存システムのETL処理改善を行うプロジェクトです。
Pythonを用いたETL開発チームのリーダーとして、要件定義からテストまで幅広い工程を担当します。
SparkやKinesisなどを活用したデータ処理基盤の構築に携わります。
AWS環境での開発を前提とし、アジャイル開発手法でプロジェクトを進めます。
【作業内容】
・ETL処理の詳細設計および設計内容の整理
・Pythonを用いたETL処理のコーディング
・ワークフローシナリオの実装
・単体テスト観点作成およびテストスクリプト作成、実施
・必要に応じたシミュレーターやスタブの開発
【サーバー(Linux系)】医療ビッグデータプラットフォーム構築
業務委託(フリーランス)
SQLLinuxPostgreSQLSparkAWSRedshiftGlueAurora
PL
作業内容 【業務内容】
医療ビッグデータを活用したデータプラットフォーム構築において、プロジェクトリーダーとしてAWS環境での設計、構築、移行、運用を担当します。システム化構想や要件定義から参画し、データベース設計やステークホルダーとの合意形成、ベンダー管理、運用準備まで幅広く携わります。
【作業内容】
・システム化構想や要件定義からのプロジェクト立ち上げ参画
・Redshift、Aurora PostgreSQL、S3、Spark等を用いたデータベース物理設計
・医療データのデータカタログ設計、抽出設計、実データ調査を含む論理設計
・プロジェクトメンバーやベンダー、データ提供元との合意形成
・フェーズレビュー支援(ゲートレビューによる品質確認)
・ベンダーコントロール(設計レビュー、成果物レビュー、受入テスト実施)
・Shell、PowerShell、Pythonを用いた設計作業
・運用準備(運用手順書作成、社内勉強会実施、関係者調整)
【Java(その他FW)】カード基幹系システム向けデータ中継システムの刷新プロジェクト
業務委託(フリーランス)
JavaWindowsLinux
作業内容 【案件概要】
クレジットカードシステムおよび加盟店データ中継システムの刷新プロジェクトです。
ホストシステムからHadoop基盤への移行により、大規模データ処理の高速化と効率化を図ります。
カードデータの分析基盤を構築し、安定性と拡張性の向上を目指します。
最新技術を活用し、安全性と信頼性を備えた基幹システムの再構築を推進します。
【作業内容】
・Javaを用いた基本設計および詳細設計
・Hadoop(HDFS、Hive)を活用したデータ中継システムの設計開発
・ホストシステムからのデータ移行プログラム開発
・Sparkを用いたデータ処理プログラム開発
・Parquet形式でのデータ保存設計および管理
・各種テストの実施および本番リリース支援
【Python(Web開発系)】流通業向けAPI開発とAWS環境構築
業務委託(フリーランス)
JavaPythonAWSSpringBoot
作業内容 【業務内容】
流通業向けアプリケーションの開発を担当し、既存システムの機能拡張や改善を行います。JavaとSpringBootを用いたAPI開発や、AWS環境でのWorkspaces自動構築およびネットワーク設定変更を通じてシステム運用を支援します。
【作業内容】
・JavaとSpringBootを用いたREST APIの設計、開発、テスト
・AmazonWorkspacesの自動構築スクリプト作成と実行
・AWS環境でのネットワーク設定変更
【クラウドエンジニア(その他クラウド)】データウェアハウス移行と基盤構築
作業内容 【業務内容】
既存のデータウェアハウスから新しいクラウド基盤へのデータ移行と構築を担当します。Azure Data Factoryを用いたデータ統合・変換処理の設計や実装、移行作業に伴う検証やテスト工程にも携わります。
【作業内容】
・既存データウェアハウスからAzure Data Factoryへのデータ移行
・Azure Data Factoryを用いたデータ変換処理の設計・実装
・SQLを用いたデータ抽出・加工
・各種システムとのデータ連携テスト
【Java(Spring)】メガバンク向けAMLパッケージのカスタマイズ開発
作業内容 【案件概要】
海外ベンダー製AMLパッケージをメガバンク向けにカスタマイズするプロジェクトです。
海外ベンダーの日本進出に伴う案件で、他の日系金融機関への導入実績もあり今後の拡大が見込まれます。
参画前に2ヶ月間の英語オンライン研修を受講いただき、プロジェクト理解を深めてから参画いただきます。
金融機関の本番データを扱うため、東京駅近辺の客先常駐にて業務を行います。
【作業内容】
・AMLパッケージのカスタマイズ設計および開発
・Java(Spring)を用いた機能改修および追加開発
・海外ベンダーとの仕様確認および調整
・各種テスト対応および不具合修正
・ドキュメント作成および導入支援
【Java(その他FW)】会計システムの機能開発および運用保守
業務委託(フリーランス)
JavaJavaScriptHTMLSpringAngularAWS
作業内容 【業務内容】
会計システムにおける機能開発および運用保守業務をご担当いただきます。既存システムの機能拡張や不具合修正を行いながら、安定したサービス提供を支えます。バックエンドおよびフロントエンドの開発に加え、データベース設計やインフラ構築運用にも携わり、システム全体の品質向上に貢献していただきます。また、大規模データ処理を考慮した設計および開発を行い、パフォーマンス向上にも取り組みます。
【作業内容】
・バックエンド開発
・フロントエンド開発
・データベース設計
・データベース開発
・インフラ構築
・インフラ運用
・パイプライン構築
・パイプライン運用
・結合テスト
・保守対応
【Python(Web開発系)】道路マネジメントプラットフォームのバックエンド・データ基盤開発支援
業務委託(フリーランス)
JavaPythonSQLNode.jsGit
バックエンドエンジニア
作業内容 【案件概要】
道路マネジメントプラットフォームの構築フェーズにおけるバックエンドおよびデータ基盤開発案件です。
データ志向のシステム設計を前提に、複数データの統合およびモデリングを行います。
社内外システムとの連携を含めたプラットフォーム全体の設計・開発に携わっていただきます。
大量データを扱うデータ基盤の構築を推進するポジションです。
【作業内容】
・Python、Java、Node.jsいずれかを用いたバックエンド開発
・REST APIの設計および開発
・SQLおよびRDBを用いたデータ操作および設計
・ETLおよびデータパイプラインの設計および構築
・大量データ処理およびパフォーマンス改善
・Gitを用いたチーム開発対応
【データ分析系(Python/SQL/R/BI)】大手企業向けデータ分析基盤開発支援
業務委託(フリーランス)
PythonSQLGoScalaSpark
作業内容 【案件概要】
・大手企業向けデータ分析基盤およびETL基盤のシステム開発支援。
・データ活用を目的としたアーキテクチャ検討から設計・実装までを担当。
・ビッグデータ分析・加工のための分散処理基盤を構築。
・Python/SQL/クラウド基盤/BIなどを活用したデータエンジニアリング業務。
【作業内容】
・データ分析基盤/ETL基盤におけるアーキテクチャ検討(要件整理、方式検討、ツール選定)
・データレイク/DWH/マート構成の設計(スキーマ設計、パイプライン構成、データフロー設計)
・Python/SQLを用いたETL処理の実装(データ抽出、加工、統合、ロード処理の自動化)
・分散処理基盤(Spark、Hadoop、クラウドネイティブ基盤等)の構築・パフォーマンス最適化
・各種データパイプラインのジョブ設計・バッチ開発
・データ品質管理(クレンジング、検証ロジック実装、異常検知処理の整備)
・BIツール向けデータマートの整備、レポート用データセット設計
・基盤運用に向けたドキュメント作成(設計書、データフロー図、運用手順書など)
【開発環境】
・OS(インフラ)/クラウド(GCP、IaaS、PaaS、FaaS)、Spark、Kubernetes、Linux
・DB/Cassandra、Redis、Elasticsearch、mySQL、PostgreSQL
・ツール/JIRA、Confluence、GitLab、Slack、GoogleWorkspace
・運用/IaC(Terraform、Ansible、Helm)、CI/CD(GitLabCI、kubectl)
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【クラウドエンジニア(AWS)】AWSデータ確認を中心としたテスト案件
作業内容 【業務内容】
開発中のAWS環境のシステムにおいて、外部データソースとの疎通確認や前処理・分析処理の結合テストを実施し、安定稼働に向けた検証作業を行います。
【作業内容】
・AWS外部のデータソースとの疎通確認(結合テスト)
・前処理パイプライン(Step Functions、EMR、Spark)の結合テスト、サイクルテスト、シナリオテスト
・Lambdaを用いた前処理・分析処理の検証
【稼働日数】週5日
【リモート日数】週1のMTGで出社有
【データ分析系(Python/SQL/R/BI)】データ蓄積基盤構築プロジェクのデータパイプラインの設計・構築
業務委託(フリーランス)
PythonSQLAWSGlueAthenaLambda
作業内容 Databricks on AWS 環境におけるデータ蓄積基盤構築プロジェクトにて、データパイプラインの設計・構築を担当いただきます。
データエンジニアリングの実務経験を活かし、最適なデータフロー設計と処理基盤の整備を推進できる方を募集しています。
【業務内容】
Databricks on AWS 環境でのデータパイプライン設計・構築
データ蓄積基盤の要件定義・設計支援
各種データソースからのデータ収集・加工・統合処理
性能最適化および運用性向上に向けた改善提案
【稼働日数】週5日
【リモート日数】フルリモート
【Python(Web開発系)】設備事業向け統合データ基盤の構築プロジェクト
作業内容 【案件概要】
既存のTableau環境に対し、Databricksを追加採用し、社内外データを一元的かつ効率的に管理する統合データ基盤を構築するプロジェクトです。
現状はTableauのみが導入されており、分析基盤の拡張およびデータ活用高度化が課題となっています。
Databricksを中核としたデータ基盤を新たに構築し、データレイクとDWH(データウェアハウス)を統合します。
あわせて、周辺のデータ準備処理やワークフローを整備し、持続的に運用可能なBI基盤の実現を目指します。
【作業内容】
・Databricksを活用したデータ基盤環境の設計および構築
・データレイクおよびDWHの統合設計
・Pythonを用いたデータパイプラインの設計および構築
・データ準備処理およびワークフローの整備
・既存Tableau環境と連携したデータ活用基盤の構築
【サーバー(Windows/系)】インターネット企業向け新規DWH構築プロジェクト
業務委託(フリーランス)
WindowsBigQuery
作業内容 【案件概要】
大手インターネット企業にて、社内に点在する各種データを一元管理するための新規DWH構築プロジェクトです。
データ取り込みから加工・集約までを担う基盤を整備し、全社的なデータ活用を支える役割を担います。
BigQueryおよびApache Airflowを活用し、データパイプラインの設計・開発・運用改善までを一貫して対応します。
Google系およびオープンソース技術を組み合わせながら、拡張性と運用性を意識したデータ基盤構築を進める想定です。
【作業内容】
・新規DWH構築に向けた全体アーキテクチャ設計
・BigQueryを用いたDWH設計およびテーブル設計
・Airflowによるデータ取り込み/加工パイプラインの設計および実装
・各種データソースからのデータ連携、加工、集約処理
・データパイプラインの運用設計および改善対応
・性能や安定性を考慮したチューニングおよび最適化
・関係部署との要件調整および技術的な検討支援
【技術環境】
・DWH/分析基盤:BigQuery
・ストレージ:Google Cloud Storage(GCS)
・データ形式:Parquet
・データ処理:Spark
・実行コンテナ:Google Kubernetes Engine(GKE)
・パイプライン制御:Airflow
・連携(ストリーミング/CDC):Kafka, Debezium
【備考】
・PC貸与:無し(ご自身のPCからVDIで作業。PCのOSやスペック不問)
・本エンドに弊社から10名以上参画中(本PJにも3名参画中)
【Python】ビッグデータ処理分析開発
業務委託(フリーランス)
PythonSpark
データサイエンティスト
作業内容 世界的に普及が進んでいる大規模分散処理フレームワークのApacheSpark/Python/Scala
【クラウドエンジニア(AWS)】【業務委託(準委任)】環境設計レビュー・改善・実装・メンテナンス
MySQLDynamoDBSparkAWSApacheRedshiftGlue
作業内容 ■概要
環境設計レビュー・改善・実装・メンテナンスをお任せいたします。
■具体的な作業内容
以下の業務をお願いします。
・既存のAWS ETL環境の調査改善
・メンテ作業の手順化および運用作業(テーブル追加やカラム変更程度)
※対象環境はミッションクリティカルではないデータ処理基盤となります。
【クラウドエンジニア(AWS) / リモート案件紹介可能】AWS・GCPを活用したデータ基盤整備と移行プロジェクト
業務委託(フリーランス)
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
AWSデータレイクからBigQueryへのデータ移行作業や、GCPデータ基盤の整備を行うプロジェクトです。PythonやSparkを活用し、データ基盤の設計・開発を進めるとともに、効率的なデータ処理環境を構築します。TerraformやCI/CDツールを利用した開発プロセスにも携わります。
■具体的な業務内容
・AWSデータレイク(S3 + Glue data catalog)からBigQueryへのデータ移行
・GCPデータ基盤の整備およびワークフローエンジンの導入
・PythonやSparkを使用したアプリケーション開発および保守
・TerraformやCI/CDツールを利用した開発環境の整備
・データ基盤設計および運用改善
【クラウドエンジニア(AWS)】【業務委託(準委任)】クラウドを使用した製品利用ログ分析基盤の開発・運用
作業内容 ■概要
Redshift (PostgreSQL)上のDBテーブル設計、クエリ開発をお任せいたします。
■具体的な作業内容
・AWS EMRを使用したETL、データ前処理(Python、Spark)
【クラウドエンジニア(AWS) / リモート案件紹介可能】AWSおよびGCPを活用したデータ基盤整備プロジェクト
業務委託(フリーランス)
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
AWSおよびGCP環境でのデータ基盤整備プロジェクトです。データレイクからBigQueryへの移行作業や、GCPのデータ基盤整備を担当します。PythonやSparkを活用し、TerraformやCI/CDツールを使用した効率的な基盤開発を進めます。
■具体的な業務内容
・AWSのデータレイク(S3+Glue data catalog)からBigQueryへのデータ移行作業
・GCPデータ基盤の設計および整備(ワークフローエンジン導入など)
・AWS上で動作するアプリケーションの課題発見および解決
・Python、Hive、Sparkを使用したデータ基盤の構築
【Python(Web開発系)】データ基盤サービスの設計開発運用
業務委託(フリーランス)
PythonSQLSpark
作業内容 【業務内容】
データドリブンでの意思決定を支えるデータ基盤の設計・開発・運用に携わり、データアナリストやマーケティング、アプリケーションエンジニアと協力しながら事業課題の解決を行います。
【作業内容】
・データ基盤の設計
・Pythonを用いたデータ処理・ETL開発
・データ分析用の環境構築
・テストおよび運用フローの整備
・関係者との調整および改善提案
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。
【Python】ビックデータの基盤構築
業務委託(フリーランス)
PythonSpark
サーバーサイドエンジニア
作業内容 某大手事業会社内でのビックデータ案件になります。現在稼働しているHadoop環境の運用、保守に加え、新規機能の開発などがスタートしたため人員の増員を計画しております。データ分析は別チームが存在しますので、あくまで分析を行うための環境構築を行って頂くポジションとなりますが、現場の状況、また適正次第では分析業務にも関わっていただく可能性がございます。
【Python(Web開発系)】データドリブン意思決定基盤の設計・開発
業務委託(フリーランス)
PythonSQLSpark
作業内容 【業務内容】
意思決定をデータドリブンで行うための基盤の設計・開発・運用を担当します。データアナリストやマーケティング担当、アプリケーションエンジニアと協力しながら、事業を支えるデータ基盤を整備・改善し、課題解決を行います。
【作業内容】
・データ基盤の設計および構築
・データパイプラインの開発と運用
・データ品質チェックおよび改善
・データ分析・可視化基盤の整備
・関係者との調整および改善提案
【Unity / 3か月以内稼働開始希望の方優先】スマートフォン向けゲームコンテンツのエフェクトデザイン業務
業務委託(フリーランス)
SparkFlashUnitySpriteStudioBISHAMON
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
スマートフォン向けゲームのエフェクトデザイナーを募集しています。魔法やスキル、背景エフェクトの制作に加え、画面演出や文字演出の制作も行います。
■具体的な作業内容
・魔法やスキルのエフェクト制作
・背景(環境)エフェクト制作
・画面および文字演出の制作
【PHP】証券取引サービスにおける設計開発(BtoC)
業務委託(フリーランス)
PHPOracleMySQLPostgreSQLApacheNginx
サーバーサイドエンジニア
作業内容 証券取引サービスにおけるDB及び検索基盤の設計・開発を行います。PythonをI/Fとして、CassandraとSparkを利用したシステムの開発を行います。工程としては詳細設計〜テストまで一貫して担当頂きますがドキュメントの作成もお願いします。
【AWS】データレイク構築(python)
業務委託(フリーランス)
PythonAWSGlue
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
AWS環境でデータレイクの設計および更改対応を行います。PythonやScalaを使用した大規模バッチ処理の開発経験が求められ、ビッグデータに関わる開発意欲のある方が対象です。
■具体的な業務内容
・データレイクの設計および構築
・ドキュメント作成(設計資料、説明資料)
・大規模バッチ処理の開発
・AWSサービス(Glue、EC2、S3)を使用したデータ処理
【AWS】システム開発案件
業務委託(フリーランス)
JavaPythonSQLCSSHTMLWindowsLinuxMySQLDjangoSparkFlaskAWSGitHub
データサイエンティスト
作業内容 開発、運用を繰り返すイメージです。
AWS上でのデータ解析基盤の構築
画面側はPython,html,cssなどを使います。
利用するAWSサービスの候補
- Redshift,EMR(spark),Athena,RDS,EC2,VPC,CloudFormation,Lambda,StepFunction
開発工程
基本設計, 詳細設計, 実装, 単体テスト, 結合テスト, システムテスト
【Python / リモート案件ご紹介可能】AWSデータ解析基盤開発(大手メーカー内バックオフィス業務)
業務委託(フリーランス)
JavaPythonSQLCSSHTMLSparkAWS
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
大手メーカーのバックオフィス業務を支えるデータ解析基盤の開発を担当します。AWSを活用し、RedshiftやEMR(Spark)、Athenaなどのデータ処理技術を用いたシステムを構築します。Pythonを中心としたデータ処理・分析のスキルが求められます。
■具体的な業務内容
・AWS環境上でのデータ解析基盤の設計・開発
・Pythonを用いたデータ処理スクリプトの作成
・SQLを用いたデータ抽出・集計処理の実装
・AWS Lambda、Step Functionsを活用したワークフロー構築
・Tableauを用いたデータ可視化(可能であれば対応)
【Python】Pythonによる開発経験者募集(分析基盤システム開発支援)(20代〜40代活躍中!・週4日以上稼働可能な方にぴったり!)
業務委託(フリーランス)
PythonSQLSpark
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
小売業向けの分析基盤システムの開発を担当します。要件定義から導入までの一連のシステム開発を進め、PythonやSQLを用いたデータ分析および基盤構築に携わります。
■具体的な業務内容
・PythonおよびSQLを用いたデータ分析および基盤構築
・要件定義から導入までのシステム開発プロセスの遂行
・AzureおよびDatabricksの活用に関する調査および提案
・統計手法を用いたデータ分析および改善提案
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【Java(Spring Boot)】【業務委託(準委任)】道路交通系開発案件【リモートOK】
作業内容 【20代~30代のITエンジニアが活躍中!】
■概要
道路交通系開発をお任せいたします。
Hadoop上で動作する道路交通系システムの開発をご担当いただきます。
■作業工程:詳細設計~結合テスト
【その他】予兆監視システム改修
作業内容 プロダクトベースに開発した予兆監視システムの機能拡張・改修プロジェクトの開発
設定していない条件はありませんか?
スキル・リモート・単価などで絞り込み、
効率よく案件を探せます。