Glueのフリーランス案件・求人一覧 | 21ページ目

作業内容 ■ プロジェクト内容 ・グローバル企業の各本社、支店のデータ蓄積、変換、提供(ETL)を構築、周辺システムの改修 ※非常に大規模なPJとなっており、2年以上はかかるようなものです。 ■ 仕事内容 ・業務システムの開発 ■ 詳細 扱うデータとしては会計情報がメインになります。 インフラとして AWS, GCP を利用しており、各サービスによって違うため、クラウドサービス間を跨いだデータ連携も必要になってきます。 本社や海外本社などは、各 CRM サービスなども利用しているため、各種フォーマットを変換しまとめる必要もできます。 また、既存の販売システムの改修（各種改善）を行いつつ、変換しやすいように機能の改修も行う必要があります。 支店として会計情報をまとめているシステムは GCP 内に Golang で構築しているものがメインになります。 データ変換に関しては、 Java で行っている箇所もあります。 キーワード GCP, Cloud Run, Firestore, Datastore, Filestore, Dataflow, Google App Engine, Cloud Functions, Storage, BigQuery AWS, EC2, S3, Lambda, Glue, Lake, Redshift Terraform Github, Cloud Source Repositories, CircleCI, Github Actions, CodePipeline, Cloud Build DevOps Golang, Java

作業内容 ■案件概要 　国内大手自動車メーカー向けに、顧客接点システム・販社システムなどの 　業務システム群を新規で開発するうえで、 　当該システム群のAWSインフラ基盤の構築のご支援をいただける方を募集いたします。 ■AWS利用サービス 　IAM, Organizations, S3, Athena, Cloud Watch, SNS, Event Bridge, Code Commit, Cloud Front, 　WAF, SES, Glue, Cloud Trail, Config, Cloud Formation, Code Pipeline, Code Deploy 他

作業内容 ・ウォレットサービスの開発に携わって頂きます。 ・設計や開発から幅広く担当いただきます。 ・直近の作業としては、 　データ抽出集計の効率化を行うスクリプトやツールを作成いただきます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。

作業内容 ■概要 『不動産×IT』を掲げ、市場規模の大きい住宅不動産業界において高い成長率で拡大を続けている同社のクラウドエンジニア として下記業務をご担当頂きます。 ・現インフラ環境の改善への提案 ・各種システム、インフラの運用保守 ・各種パラメータ設定 設計構築に関しては外部ベンダーへ発注をするため本ポジションでは一任する可能性は低いですが、 スキル的に可能であればベンダーと並走しご対応いただく様にご相談をするかもしれません。 ■環境 ・AWS Route53/Cloudfront/S3/ECR/ECS/EKS/Cognito/Cloudsearch/VPC/ELB/ALB/ElastiCache/ASG/DynamoDB/RDS/AWS System Manager/Elasticsearch/API Gateway/Lambda/EC2/Secrets Manager/SES/SNS/SQS/Athena/Glue/Kinesis Firehose/IAM Role/Cloud Watch/Cloud Trails/RedShift/ Lake Formation/CDK 2023年12月に同社は全てのインフラのクラウドシフトおよび最適化が完了し運用フェーズに移りました。 しかしながら同社内にはAWSの技術者が少なく、尚且つその方々は年度明けには新規プロダクト開発の方にリソースが偏ってしまうため、 外部よりAWS運用のスペシャリストを募集するに至りました。

作業内容 主に業務運用を行うためのデータ連携領域。周辺システムの連携データを元に集計・加工結果を他システムに出力するしくみとして構築する。 ・コンテナ、マネージドサービスを利用したサーバレス構成。 ・顧客所有のAWSを採用し、以下のサービスを利用する想定 （★はインフラが構築想定） Glue/EventBridge/CodePipelines/CodeDeploy ★VPC★ECS Fargate★ECR★ELB★Aurora PostgreSQL ★RDS Proxy★S3★CloudWatch★CloudFormation★WAF ・以下のサービス、ソフトウェアを導入する想定。 WafCharm/Trend Micro Cloud One ・当依頼はこのインフラの開発要員をご提案頂きたいものになります。 ◆担当タスク ・設計工程から移行展開までの全工程の作業を担当頂きます。 ・インフラ全体の管理はお客様にて行いますが、作業計画や進捗管理・問題課題管理等のチーム運営・推進はリーダーの方に担って頂きます。 ・基本的に顧客の定例には全員出席頂き、場合によっては顧客への説明をお願いすることがあります。 ◆開発スケジュール ①2022年10月～2022年12月：インフラ設計 ②2022年12月～2023年2月：開発環境構築・テスト ③2023年3月～2023年5月：本番環境構築・テスト ④2023年5月～2023年9月：システムテスト支援、運用手順書作成・引継ぎ ⑤2023年10月～2023年11月：移行支援 ※要件定義は2022年8月末に完了予定 ※アプリの外部設計は2022年9月開始ですが、インフラは10月から参画します

作業内容 ＜関わるプロダクト＞ 日本最大級のコスメショッピングアプリ ＜業務内容＞ * AWSを用いたインフラの設計・構築・運用 * セキュア・高耐久・高可用・低コストなシステムの設計及び構築 * AWSリソースを用いたシステムパフォーマンスのチューニング * RDBMSのパフォーマンスチューニング * その他サービスの運用にあたり発生した様々な課題への取り組み ＜課題＞ * コンテナ型仮想化（Kubernetes）をこれから導入予定のため、DockerｘKubernetesノウハウを貯めていきたい * Infrastructure As A Code（以下IaC）のツールとしてTerraformを利用しているが、すべてのクラウド環境のIaC化途上なので更に進めたい ＜開発組織体制＞ フルスタックエンジニア　1名 フロントエンドエンジニア　2名 サーバサイドエンジニア　3名 アプリエンジニア　4名 ＜開発環境＞ * 言語：Ruby, Python, JavaScript, Typescript, Node.js, サーバーサイドKotlin, Kotlin, Swift, Dart * フレームワーク：Ruby on Rails, Vue.js, Nuxt.js, React, Next.js, Flutter, Spring boot * DB：MySQL, MongoDB, Aurora, DynamoDB, DocumentoDB * 検索エンジン：Elasticsearch * インフラ(AWS)：Athena, CloudFront, CloudWatch, ElastiCache, EC2, EMR, Elastic Transcoder, Glue, Kinesis, Lambda, Batch, ECR, ECS, Fargate, EBS, RDS, SNS, S3, Kinesis, Pinpoint, Step Functions, SageMaker, Route53, Amplify, Appsync, Cognito * インフラ(Firebase)：RemoteConfig, Crashlytics, A/B Testing * 構成管理：Ansible, Docker * ツール：Github, Redash, Asana, Slack, Confluence, esa.io

作業内容 某求人プロダクトのSRE業務を担って頂きます。 開発部が機能ごとに分かれており、UXやデータチーム（各チーム5名～10名ほど）から出る課題とタスクに対し、SREチームで対応頂きます。 主な業務例 ・主にAWSを利用したサービス提供のための基盤作り ・IaC（現在はTerraformが主） ・CI/CD、auto scaling、プロビジョニング自動化 ・分析、監視の構築 ・各種サブシステムのアーキテクティング ・ソフトウェアの更新やセキュリティ脅威への対応 ・稼働中のシステムに対する保守運用業務（例えば障害時の調査、対応、ログ収集など）

作業内容 【業務概要】新プロダクトの機械学習エンジニアとして、プロダクト立ち上げを担当して頂きます。 現在MVPの開発段階のため、ご参画頂くタイミングでは本番リリースに向けたβ版開発や機能拡充、ブラッシュアップ、本格ローンチとプロダクトの成長をエンジニアという立場から担って頂きます。 【具体的な業務】新プロダクト開発において、以下のような業務に従事していただきます。 機械学習アルゴリズム選定、モデルチューニングのためのEDA 機械学習アルゴリズムの設計・実装 モデルで利用するデータ・特徴量生成のためのパイプライン開発 機械学習タスクとしては時系列予測、他クラス分類が当面のターゲットになります。プロダクトの成長に伴って自然言語処理も取り組んでいく予定です。 また、自動発注の最適化のために数理最適化技術も用いており、経験者の方には数理最適化モデルの実装も担っていただきたいと考えています。 ◇利用技術・Python ・TypeScript ・AWS サービス ・Glue ・Athena ・Fargate ・SageMaker ・Lamdba ・CDK ・機械学習/データサイエンス/数理最適化ライブラリ ・Pandas ・NumPy ・Scikit-Learn ・LightGBM ・Prophet ・PuLP

作業内容 【関わるサービス】 データ統合自動化SaaSサービスに関わる新規プロジェクト（CRMアプリ開発）。 【業務内容】 CRMの顧客情報画面（顧客の属性情報、対応履歴などの画面）の改修及び新機能追加開発。 Reactによるフロント側の開発、及びRuby on RailsでのAPIの繋ぎ込み。 ※既にプロト版は完成しており、顧客の要望により適宜追加開発が必要となってくるフェーズ 【外部人材活用理由】 事業拡大による増員 【開発環境/言語/フレームワーク】 ＜言語＞ Ruby, Go, Python, JavaScript/TypeScript ＜フレームワーク＞ Ruby on Rails, PySpark, React ＜インフラ＞ Docker, Kubernetes, MySQL, Redis, Fluentd, Embulk, Apache Spark, Terraform, AWS(EC2, ECS, EKS, Lambda, ELB, S3, CloudFront, RDS, DynamoDB, SQS, Kinesis, Redshift, Athena, Glue, EMR), GCP(Google App Engine, Cloud SQL, Cloud Pub/Sub, Cloud Dataflow, Google Kubernetes Engine, Cloud Composer, BigQuery, Stackdriver, Cloud Bigtable) ＜監視/モニタリング＞ New Relic, Rollbar, Redash ＜ツール＞ GitHub, CircleCI, Slack, JIRA, Confluence

作業内容 エンドユーザー(企業)のDX化を支援するためにデータ事業の展開や社内のデータ利活用を推進する、ETL/ELT処理開発、DWH構築などのデータ基盤開発の責務を担っていただきます。 ◆業務内容の詳細◆ Databricks、Airflow、AWS Glueを利用したデータパイプラインの開発・運用 Apache Sparkを利用したETL処理の開発 各サービス開発チームのデータエンジニアリングの支援 ◆今後の進展について◆ 昨年夏頃にDatabricksを導入したばかりのため、既存基盤からの移行を実施し、全社横断データ基盤として活用していきます。 それに伴い、各サービス開発チームを中心とした分散オーナーシップ型データ基盤開発組織化の推進と全社横断的なデータマネジメントに注力していきます。

作業内容 基本設計,詳細設計,実装,テスト,運用・保守 【企業概要】 Eコマースを中心としたIT事業を展開している企業様です。 国内家具・インテリアECを主軸にしつつ、新規事業のグローバルECプラットフォームへの事業投資も行っており、国内外におけるEC事業を軸に事業展開しております。 インテリアECにおける業界トップクラスとして、企画製造から販売まで一貫して自社で行う企業様では、マーケティング、サプライチェーン、商品企画といった顧客に商品を届けるまでの一連のシステム開発や、業界に先駆けたARサービスの開発等を、企画の段階から全て社内で実施しています。 現在、70名を超えるエンジニアが在籍しておりますが、インテリア×テクノロジーの領域で、福岡発のグローバルテックカンパニーを目指し、今後更にエンジニアを増員・強化していく予定です。 【具体的な業務例】 社内で開発中のECもしくはSCMシステムにおけるサーバーサイドの開発を担当していただきます。 カート/決済/マイページ/その他サービス機能などのWebアプリケーション設計、開発、運用またはAPI設計、開発、運用 ※社内ではフロントエンドの開発を行うチームもあり、人材交流がありますので、将来的にフルスタックエンジニアを目指したい方にも向いてる環境です ※サービス力を強化する為、最新の技術やフレームワーク導入・活用に積極的な文化です ------------------------------------------ 【開発環境】 ■利用技術（一部） ・開発言語/フレームワーク Ruby / PHP / Python3 / Elixir / JavaScript / SQL Ruby on Rails / CakePHP / Laravel / Phoenix / Vue.js 他 ・AWS Fargate / Lambda / ECR / Lake Formation / Glue ・GCP 　BigQuery / App Engine / Cloud Pub/Sub / Cloud Functions / Firebase Cloud Messaging ・DB/データ分析基盤 　PostgreSQL / SQL Server / Oracle Database / Embulk / Digdag / Elasticsearch ・主な使用ツール 　Slack / Backlog / G Suite 　GitHub / GitHub Actions / NewRelic ------------------------------------------

作業内容 【業務内容】 大手広告代理店が展開しているインターネット広告代理店業における、膨大な広告データを収集・蓄積したデータレイクからデータを展開するためのデータ基盤（ETL処理、DWH、DM）の開発、運用、保守をお願いします。 【ポイント】 データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、そんな大規模データと向き合った開発にチャレンジすることができます。複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。 【開発チームと配属先について】 当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。 今回お願いしたいポジションはサーバサイドエンジニアです。 チームには現在18名のエンジニアが在籍しています。 また、複数のプロダクトを管理しているチームのため、担当領域ごとにグループ分けをしています。 Infeed領域の広告運用のためのプロダクトを開発するグループインターネット広告関連データをデータレイクに蓄積するシステムを開発するグループインターネット広告関連データが蓄積されたデータレイクを用いたデータ基盤を開発するグループ機械学習を用いたプロダクトを開発するグループ掲載情報や実績情報を出力・レポーティングするための分析用プロダクトを開発するグループ 【技術キーワード】 ApacheSparkAWS GlueSnowflakeデータレイク/データウェアハウス/データマート

作業内容 【業務概要】 ・ToB向けに経理精算や請求書処理といった経理領域におけるSaaSサービスを 展開されている企業様になります。 ・今回はその展開されているサービスにBIツールを用いた新規機能の開発の データエンジニアとして参画して頂きます。 ・具体的には、既存にあるデータを利用し、データウェアハウスやBIツールの構築等に携わって頂きます。 【参画メリット】 ・新規機能を0→1で携わって頂きますので今後のスキルアップに繋がりやすいかと存じます。 ・フルリモートになりますのでリラックスした環境で働けるかと存じます。 【技術環境】 ・開発言語：未定（PdMの方と決めて頂きます） ・DB：PostgreSQL、RDS ・その他:：AWS（Glue、Athena）、CircleCI、JIRA

作業内容 製薬向けデータプラットフォーム設計、実装プロジェクト。 【業務内容】 ・新データプラットフォームの設計及び実装 ・既存データプラットフォームのメンテナンス ・データガバナンスの構築

作業内容 ・予約サイトのテイクアウトメテ?ィアと順番待ちメテ?ィアの統合に伴い以下業務を担当 ・開発テ?ィレクション ・フ?ロシ?ェクト計画策定 ・要求分析~要件定義 ・PJ全体のスケシ?ュール管理 ・開発環境 環境:AWSOS:Amazon Linux2 webサーハ?:nginxDB:Aurola MySQL 言語:PHP(laravel) /vue.js/python/node.js/JavaScript等 その他:ElasticSearch/Glue/Lambda等

作業内容 個人向け感染症対応支援アプリのサーバサイド開発

作業内容 新規Webサービスのサーバーサイドの開発全般をお任せします。 （新サービスは随時企画部門から発生します） ローンチ後の機能追加や改修・保守を行ってもらうこともあります。

作業内容 ・データ分析基盤の開発/データレイク構築

作業内容 データレイク分析環境運用を実施する

作業内容 データレイク分析環境運用を実施する

作業内容 ・新規データ取込機能の設計・開発 ・SQLによるデータマージ

作業内容 お客様基幹システムから外部システムへのデータ連携をご担当頂きます。 設計に落とされた内容を基に製造メインでデータパイプラインの構築をご担当頂きます。

作業内容 ・AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 ・GCPデータ基盤の整備(ワークフローエンジン導入等)

作業内容 ・AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 ・GCPデータ基盤の整備(ワークフローエンジン導入等)

作業内容 ・Tableauでのダッシュボード開発 ・AWS Glueを使用したETL処理の開発 ・マート開発

作業内容 ・Pythonを用いたデータ加工 ・技術要件としては、Glue＋Step Functionで、Redshift間のETL処理をPythonでコーディングしていただく形

作業内容 ・保険会社が使用する、マーケットマイニングシステムの移行案件に携わっていただきます。

作業内容 ・データ分析基盤の開発/データレイク構築

作業内容 ・データ分析基盤の開発/データレイク構築

作業内容 下記の業務をご担当いただきます。 ・データレイクの設計および更改対応 ・ドキュメント作成（設計資料・説明資料）