Kubernetes / ShellScript / Git Webアプリケーション基盤構築
作業内容 アジャイル開発プロジェクトにおいて、Webアプリケーションインフラの設計・構築・運用とDevOpsに関わる開発を担っていただきます。
具体的には、スマホデバイスから収集したデータを収集し、蓄積したデータを加工・可視化するWebアプリケーション開発において、以下の業務を行うスクラムチームの一員として活動していただきます。
・Kubernetesを用いたアプリケーションインフラの設計・構築・保守
・CI/CDの構築・改善
・Blue Green Deploymentの構築・改善
・分散システムの設計と構築(e.g Message System, ETL, RDB を組み合わせたシステム開発等)
・パブリッククラウドを用いたセキュアなインフラ構築
<備考>
リモートは応相談
フルリモートも検討可
<基本時間>
10:00~19:00
<服装>
自由
【Ruby/React】ペーパーレス化システム運用案件
業務委託(フリーランス)
RubyPostgreSQLRedisRailsAWSDockerNginxUnicornReact
サーバーサイドエンジニア
作業内容 ・BtoB向けペーパーレス化システム運用ににおいて、
主に下記作業をご担当いただきます。
‐AWSを活用した商用プロダクトの開発
-データ基盤の設計と構築
-BIツールを用いたダッシュボードの開発
-ユーザー認証や権限管理を含むWebアプリケーションの開発
-要件定義からデプロイ、運用保守まで
【Java/フルリモート可能】求人検索エンジンのBFF開発業務の案件・求人
業務委託(フリーランス)
JavaKotlin
バックエンドエンジニア
作業内容 =====
※重要※
▼必ずお読みください▼
【必須要件】
・20~40代までの方、活躍中!
・社会人経験必須
・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須
・週5日稼働必須
・エンジニア実務経験3年以上必須
=====
★本案件の最新の状況は、担当者までお問合せ下さい。
★期間:随時~
【職種】バックエンドエンジニア
【作業内容】
求人検索エンジンのネイティブアプリチームにて、BFF(BackendforFlontend)の開発をご担当いただきます。
Airflowを活用した、検索キーワードの組み合わせ群の追加や更新、およびキーワード同士の関連性を管理する一連のシステムの開発、運用を実施します。また、Scalaを用いたAPI開発、運用を実施します。
スクラム開発でプロダクトオーナーやチームメンバーと相談しながら要件定義、設計、開発、運用まで、一気通貫で実施します。
【環境】
サーバーサイド:Scala,PlayFramework,ZIO,Flink,Akka
クラウドサービス:AWS(ECS,EKS,Fargate,KinesisDataStream,Lambda,EMR,RDS,
Aurora,S3,CloudFront,ElastiCache)
仮想化基盤:Docker,Kubernetes
分析基盤:fluentd,AWS(Glue,Athena,CDK),Airflow,BigQuery,GoogleData
Studio,Redash
プロビジョニング:Terraform,Ansible
監視:DataDog,Kibana
ミドルウェア:nginx,MySQL,ClickHouse
開発ツール:Github,Slack,IntellijIDEA,Jenkins,JIRA,SlackBot
※20代〜30代が中心で活気ある雰囲気です。
※成長意欲が高く、スキルを急速に伸ばしたい方に最適
※将来リーダーを目指す方歓迎
【AWS】某信販会社様の情報系システム刷新
業務委託(フリーランス)
WindowsLinuxAWSJP1
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
某信販会社様の情報系システム刷新(EOS対応)案件の基盤チームの案件になります。
・2022年6月~詳細設計開始、2023年4月にビジネスリリース
(2023年1月にシステムリリースして並行稼働開始)
・オンプレ上のNetezza、Marklogicで構築された情報系システムをAWS基盤に移行する
(移行先のAWS基盤はグループ親企業の銀行共通基盤)
・移行先AWS基盤(Redshift,AWSglue,EC2)の設計、構築、テストや、
銀行共通基盤準拠の運用機能開発、手順作成がスコープ
(アプリケーション移植、データ移行は別ベンダーにて担当予定)
・基盤チームとしては7~8名を想定
〈担当範囲〉
・詳細設計書
・パラメータシート
・環境構築
・AWS共通基盤との調整(ガイド読み込み、ヒアリング、QA)
・単体/結合テスト(ケース作成、仕様書、エビデンス作成)
場所:八丁堀※リモート
清算方法:140-180h
打合せ回数:1回
備考:
◆マインド
・リモートワークで丁寧なコミュニケーション可能な方。
・不明点があれば自分なりに答えを考えた上で、積極的に質問できる方。
・柔軟性のある方。相手に合わせて考えを変えられる、毛色の違うタスクでも相談可。
◆その他
・PC設定/入館証受け取りで初日は出社がございます。
・PM補佐的な議事録、進捗資料更新、会議案内設定といった動きが出来る方も歓迎です。
※週5日〜OKの案件です!
【Go】サーバーエンジニアの求人・案件
業務委託(フリーランス)
PHPSQLGoAWSGoogle Cloud Platform
サーバーエンジニア
作業内容 大手エンタメ企業におけるサーバーエンジニアを募集いたします。
【担当工程】
・要件定義
・基本設計
・詳細設計
・保守改修
【開発環境】
・クラウドインフラ:
GCP(Bigquery, CloudRun, CloudBigTable, CloudSpanner, MemoryStore, Pub/Sub)
AWS(Fargate, Athena, Glue, Lambda, S3, ALB, RDS MySQL, Elasticache Redis and Memcached, SQS, CloudFront)
・オンプレミス環境あり
・開発言語:Go, TypeScript,PHP
・その他ツール:Github, Bitbucket, CircleCI, Jenkins, Datadog, Docker, Terraform, Slack, Confluence
・開発マシン:Mac(M1)
PHPのバージョンは5.6、フレームワークはCodeigniter3(3.0.2)です
【業務環境】
マーケティングテクノロジー部:31名
配属チーム:12名
内)
開発者:24
ディレクターなどビジネス職:7
男女比 100%男性(男性9割)
平均年齢:30代半ば
配属先チーム人数 リーダー1名、メンバー11名
【AWS】国内大手自動車メーカー向け顧客接点システム基盤構築|リモート併用
業務委託(フリーランス)
AWSCloudFormation
インフラエンジニアPM
作業内容 ■案件概要
国内大手自動車メーカー向けに、顧客接点システム・販社システムなどの
業務システム群を新規で開発するうえで、
当該システム群のAWSインフラ基盤の構築のご支援をいただける方を募集いたします。
■AWS利用サービス
IAM, Organizations, S3, Athena, Cloud Watch, SNS, Event Bridge, Code Commit, Cloud Front,
WAF, SES, Glue, Cloud Trail, Config, Cloud Formation, Code Pipeline, Code Deploy 他
【Java/AWS+GCP/SQL/リモート】グローバル企業の大規模システム改修プロジェクト
業務委託(フリーランス)
JavaSQLGoAWSGoogle Cloud PlatformTerraform
インフラエンジニアバックエンドエンジニア
作業内容 ■ プロジェクト内容
・グローバル企業の各本社、支店のデータ蓄積、変換、提供(ETL)を構築、周辺システムの改修
※非常に大規模なPJとなっており、2年以上はかかるようなものです。
■ 仕事内容
・業務システムの開発
■ 詳細
扱うデータとしては会計情報がメインになります。
インフラとして AWS, GCP を利用しており、各サービスによって違うため、クラウドサービス間を跨いだデータ連携も必要になってきます。
本社や海外本社などは、各 CRM サービスなども利用しているため、各種フォーマットを変換しまとめる必要もできます。
また、既存の販売システムの改修(各種改善)を行いつつ、変換しやすいように機能の改修も行う必要があります。
支店として会計情報をまとめているシステムは GCP 内に Golang で構築しているものがメインになります。
データ変換に関しては、 Java で行っている箇所もあります。
キーワード
GCP, Cloud Run, Firestore, Datastore, Filestore, Dataflow, Google App Engine, Cloud Functions, Storage, BigQuery
AWS, EC2, S3, Lambda, Glue, Lake, Redshift
Terraform
Github, Cloud Source Repositories, CircleCI, Github Actions, CodePipeline, Cloud Build
DevOps
Golang, Java
【エンド直/リモート可】Ruby|健康経営SaaSプロダクト開発・運用の案件
業務委託(フリーランス)
RubySQL
サーバーサイドエンジニア
作業内容 健康経営SaaS・その他関連サービスのプロダクト開発・運用
・モジュラーモノリスサービスを含む分散システムの新規開発、機能拡充、性能改善
・AWSクラウド基盤上の運用
・Glueなどを活用した大規模データ処理
【開発フロー】
・全体のロードマップをもとに、各サービスごとにチームで開発しています。
・チーム毎に1週間から3週間サイクルのアジャイル開発を実施しています。
・Github Copilot を活用したAIフレンドリーな開発を志向しています。
【開発方針】
・開発は GitHub を用いたプルリクエストベースで行っています。
・原則としてテストコードを書き、マージされるすべてのコードはレビューされています。
【技術・ツール】
・サーバーサイド: Ruby on Rails, Node.js, Kotlin
・フロントエンド: Node.js, React.js, TypeScript
・データベース Amazon Aurora (MySQL), Elasticsearch, ElastiCache Redis
・CI/CD: CircleCI, Bitrise
・監視・分析: Datadog, Sentry
・ML/データ: SageMaker, Bedrock, BigQuery, Redash
・開発補助: Github Copilot
・ソースコード管理: GitHub
・プロジェクト管理: Asana
・情報共有ツール: Slack, Google Drive
【週5日/フルリモート】大手不動産企業におけるインフラ運用保守業務支援(AWS)
作業内容 ■概要
『不動産×IT』を掲げ、市場規模の大きい住宅不動産業界において高い成長率で拡大を続けている同社のクラウドエンジニア
として下記業務をご担当頂きます。
・現インフラ環境の改善への提案
・各種システム、インフラの運用保守
・各種パラメータ設定
設計構築に関しては外部ベンダーへ発注をするため本ポジションでは一任する可能性は低いですが、
スキル的に可能であればベンダーと並走しご対応いただく様にご相談をするかもしれません。
■環境
・AWS
Route53/Cloudfront/S3/ECR/ECS/EKS/Cognito/Cloudsearch/VPC/ELB/ALB/ElastiCache/ASG/DynamoDB/RDS/AWS System Manager/Elasticsearch/API Gateway/Lambda/EC2/Secrets Manager/SES/SNS/SQS/Athena/Glue/Kinesis Firehose/IAM Role/Cloud Watch/Cloud Trails/RedShift/ Lake Formation/CDK
2023年12月に同社は全てのインフラのクラウドシフトおよび最適化が完了し運用フェーズに移りました。
しかしながら同社内にはAWSの技術者が少なく、尚且つその方々は年度明けには新規プロダクト開発の方にリソースが偏ってしまうため、
外部よりAWS運用のスペシャリストを募集するに至りました。
【AWS】AWS上でのデータ基盤構築PJ(設計・構築・テスト・移行)
作業内容 主に業務運用を行うためのデータ連携領域。周辺システムの連携データを元に集計・加工結果を他システムに出力するしくみとして構築する。
・コンテナ、マネージドサービスを利用したサーバレス構成。
・顧客所有のAWSを採用し、以下のサービスを利用する想定
(★はインフラが構築想定)
Glue/EventBridge/CodePipelines/CodeDeploy
★VPC★ECS Fargate★ECR★ELB★Aurora PostgreSQL
★RDS Proxy★S3★CloudWatch★CloudFormation★WAF
・以下のサービス、ソフトウェアを導入する想定。
WafCharm/Trend Micro Cloud One
・当依頼はこのインフラの開発要員をご提案頂きたいものになります。
◆担当タスク
・設計工程から移行展開までの全工程の作業を担当頂きます。
・インフラ全体の管理はお客様にて行いますが、作業計画や進捗管理・問題課題管理等のチーム運営・推進はリーダーの方に担って頂きます。
・基本的に顧客の定例には全員出席頂き、場合によっては顧客への説明をお願いすることがあります。
◆開発スケジュール
①2022年10月~2022年12月:インフラ設計
②2022年12月~2023年2月:開発環境構築・テスト
③2023年3月~2023年5月:本番環境構築・テスト
④2023年5月~2023年9月:システムテスト支援、運用手順書作成・引継ぎ
⑤2023年10月~2023年11月:移行支援
※要件定義は2022年8月末に完了予定
※アプリの外部設計は2022年9月開始ですが、インフラは10月から参画します
【東京に出社可能な方】【Python・Node.js /フルリモート/週5日】システム追加開発・運用保守
PythonDynamoDBNode.jsGitCircleCILambda
サーバーサイドエンジニアバックエンドエンジニア
作業内容 基本設計,詳細設計,実装,テスト,運用・保守
========================
※必ずお読みください※
【必須要件】
東京の顧客先に出社可能な範囲にお住まいの方
(フルリモートでも不定期に出社が必要な可能性がございます)
【外国籍の方の場合】
日本語が母国語の方
========================
大手通販会社の発注業務に関わるシステム運用保守・ならびに追加開発をご支援いただきます。
クライアントの発注グループが利用するシステムにおいて、データ登録ミスや基幹システムとのデータ不整合が起きた際に、調査・原因分析・対処(暫定、恒久)などを実施いただきます。
また、月末や月初に実施する月次処理(運用保守チームが担当する部分)や、発注グループが担当する月次処理の結果を確認し、問題があればご対応いただきます。
システム追加開発のニーズもあるため、新規画面作成や既存システム改修もご担当いただきます。
クライアント社員(リーダ)の元、1人称でご担当いただきます。
AWSのサーバレスを中心とした技術がメインとなり、採用する技術を提案することもできるため、特に技術面でやりがいがある案件となります。
なお、本業務を担当している社員の工数減に伴う募集となります。
そのため、稼働率について、年内は50%や80%となる可能性がございます
(年明け以降は100%となる予定です。現時点では50%稼働の方を優先して検討いたします)。
曜日や時間の固定はございませんので、週次MTGなどは参画時の調整となります。
また、月次処理など重要な作業については、随時ご相談となります。
日本最大級!コスメショッピングアプリのインフラ構築支援
C++JavaPHPGoScalaLinuxMySQLAWSLaravel
インフラエンジニア運用・監視
作業内容 <関わるプロダクト>
日本最大級のコスメショッピングアプリ
<業務内容>
* AWSを用いたインフラの設計・構築・運用
* セキュア・高耐久・高可用・低コストなシステムの設計及び構築
* AWSリソースを用いたシステムパフォーマンスのチューニング
* RDBMSのパフォーマンスチューニング
* その他サービスの運用にあたり発生した様々な課題への取り組み
<課題>
* コンテナ型仮想化(Kubernetes)をこれから導入予定のため、DockerxKubernetesノウハウを貯めていきたい
* Infrastructure As A Code(以下IaC)のツールとしてTerraformを利用しているが、すべてのクラウド環境のIaC化途上なので更に進めたい
<開発組織体制>
フルスタックエンジニア 1名
フロントエンドエンジニア 2名
サーバサイドエンジニア 3名
アプリエンジニア 4名
<開発環境>
* 言語:Ruby, Python, JavaScript, Typescript, Node.js, サーバーサイドKotlin, Kotlin, Swift, Dart
* フレームワーク:Ruby on Rails, Vue.js, Nuxt.js, React, Next.js, Flutter, Spring boot
* DB:MySQL, MongoDB, Aurora, DynamoDB, DocumentoDB
* 検索エンジン:Elasticsearch
* インフラ(AWS):Athena, CloudFront, CloudWatch, ElastiCache, EC2, EMR, Elastic Transcoder, Glue, Kinesis, Lambda, Batch, ECR, ECS, Fargate, EBS, RDS, SNS, S3, Kinesis, Pinpoint, Step Functions, SageMaker, Route53, Amplify, Appsync, Cognito
* インフラ(Firebase):RemoteConfig, Crashlytics, A/B Testing
* 構成管理:Ansible, Docker
* ツール:Github, Redash, Asana, Slack, Confluence, esa.io
SRE|経験5年|某求人プロダクトのSRE支援|インフラエンジニア
業務委託(フリーランス)
PythonScalaMySQLAWSAzureDockerNginxJenkinsJIRASolrGitHubGoogle Cloud PlatformAnsibleBigQueryTypeScriptVue.jsNuxt.jsGlueAthenaFargateCDKDatadogTerraformAuroraKubernetesCloudFrontfluentdElasticsearchLambda
インフラエンジニアSRE
作業内容 某求人プロダクトのSRE業務を担って頂きます。
開発部が機能ごとに分かれており、UXやデータチーム(各チーム5名~10名ほど)から出る課題とタスクに対し、SREチームで対応頂きます。
主な業務例
・主にAWSを利用したサービス提供のための基盤作り
・IaC(現在はTerraformが主)
・CI/CD、auto scaling、プロビジョニング自動化
・分析、監視の構築
・各種サブシステムのアーキテクティング
・ソフトウェアの更新やセキュリティ脅威への対応
・稼働中のシステムに対する保守運用業務(例えば障害時の調査、対応、ログ収集など)
【Python/AIエンジニア】新規事業における機械学習エンジニア
業務委託(フリーランス)
PythonAWSTypeScript
AIエンジニア機械学習エンジニア
作業内容 【業務概要】新プロダクトの機械学習エンジニアとして、プロダクト立ち上げを担当して頂きます。 現在MVPの開発段階のため、ご参画頂くタイミングでは本番リリースに向けたβ版開発や機能拡充、ブラッシュアップ、本格ローンチとプロダクトの成長をエンジニアという立場から担って頂きます。
【具体的な業務】新プロダクト開発において、以下のような業務に従事していただきます。
機械学習アルゴリズム選定、モデルチューニングのためのEDA 機械学習アルゴリズムの設計・実装 モデルで利用するデータ・特徴量生成のためのパイプライン開発 機械学習タスクとしては時系列予測、他クラス分類が当面のターゲットになります。プロダクトの成長に伴って自然言語処理も取り組んでいく予定です。 また、自動発注の最適化のために数理最適化技術も用いており、経験者の方には数理最適化モデルの実装も担っていただきたいと考えています。
◇利用技術・Python ・TypeScript ・AWS サービス ・Glue ・Athena ・Fargate ・SageMaker ・Lamdba ・CDK ・機械学習/データサイエンス/数理最適化ライブラリ ・Pandas ・NumPy ・Scikit-Learn ・LightGBM ・Prophet ・PuLP
【React/Ruby on Rails】ソリューションプロジェクトのフロントエンド開発支援
RubyRailsAWSGitReactGoogle Cloud Platform
フロントエンドエンジニア
作業内容 【関わるサービス】
データ統合自動化SaaSサービスに関わる新規プロジェクト(CRMアプリ開発)。
【業務内容】
CRMの顧客情報画面(顧客の属性情報、対応履歴などの画面)の改修及び新機能追加開発。
Reactによるフロント側の開発、及びRuby on RailsでのAPIの繋ぎ込み。
※既にプロト版は完成しており、顧客の要望により適宜追加開発が必要となってくるフェーズ
【外部人材活用理由】
事業拡大による増員
【開発環境/言語/フレームワーク】
<言語>
Ruby, Go, Python, JavaScript/TypeScript
<フレームワーク>
Ruby on Rails, PySpark, React
<インフラ>
Docker, Kubernetes, MySQL, Redis, Fluentd, Embulk, Apache Spark, Terraform,
AWS(EC2, ECS, EKS, Lambda, ELB, S3, CloudFront, RDS, DynamoDB, SQS, Kinesis, Redshift, Athena, Glue, EMR),
GCP(Google App Engine, Cloud SQL, Cloud Pub/Sub, Cloud Dataflow, Google Kubernetes Engine, Cloud Composer, BigQuery, Stackdriver, Cloud Bigtable)
<監視/モニタリング>
New Relic, Rollbar, Redash
<ツール>
GitHub, CircleCI, Slack, JIRA, Confluence
【Ruby/週5日/リモートメイン】サーバーサイドエンジニア募集!!アプリの機能開発・運用(jd01766)
業務委託(フリーランス)
RubySQLGitHub
サーバーサイドエンジニア
作業内容 【弊社について】
弊社は予防ヘルスケア×AI(人工知能)に特化したヘルステックベンチャーです。私たちの身近には寿命と健康寿命のギャップや、体型のコンプレックス、肩こり、腰痛などの体の不具合と、健康に関する課題や悩みが数多く存在しています。私たちは人々の行動変容を起こすためFiNCアプリを中心とし、
最先端のテクノロジーを駆使して様々なサービスをお届けすることでお客様一人ひとりが、自分らしい世界を描ける世界を創り出すことに注力しております。
【具体的な業務内容】
・アプリの機能開発・運用
・健康経営SaaSのプロダクト開発
・モジュラーモノリスサービスを含む大規模分散システムを支えるAPIの新規開発、機能拡充、性能改善
・AWS によるクラウド基盤上の運用
・Glueなどを活用した大規模データ処理
※基本的に在宅メインとなりますが、必要に応じてオフィスへ出勤いただきます。
【開発フロー】
・全体のロードマップをもとに、各サービスごとにチームで開発しています。
・チーム毎に1週間から3週間のサイクルのアジャイル開発を実施しています。
・Github Copilot を活用したAIフレンドリーな開発を志向しています。
【開発方針】
・開発は GitHub を用いたプルリクエストベースで行っています。
・原則としてテストコードを書き、マージされるすべてのコードはレビューされています。
■チーム体制:3-4名
■面談1回:CTO、開発責任者
【分析基盤エンジニア】データ利活用を推進するETL/ELT処理開発、DWH構築などのデータ基盤開発支援
業務委託(フリーランス)
AWSAzureGoogle Cloud Platform
サーバーサイドエンジニア
作業内容 エンドユーザー(企業)のDX化を支援するためにデータ事業の展開や社内のデータ利活用を推進する、ETL/ELT処理開発、DWH構築などのデータ基盤開発の責務を担っていただきます。 ◆業務内容の詳細◆ Databricks、Airflow、AWS Glueを利用したデータパイプラインの開発・運用 Apache Sparkを利用したETL処理の開発 各サービス開発チームのデータエンジニアリングの支援 ◆今後の進展について◆ 昨年夏頃にDatabricksを導入したばかりのため、既存基盤からの移行を実施し、全社横断データ基盤として活用していきます。 それに伴い、各サービス開発チームを中心とした分散オーナーシップ型データ基盤開発組織化の推進と全社横断的なデータマネジメントに注力していきます。
【Ruby/Rails/フルリモート/週5】家具・インテリアECのサーバーサイドエンジニア
RubyRails
サーバーサイドエンジニアバックエンドエンジニア
作業内容 基本設計,詳細設計,実装,テスト,運用・保守
【企業概要】
Eコマースを中心としたIT事業を展開している企業様です。
国内家具・インテリアECを主軸にしつつ、新規事業のグローバルECプラットフォームへの事業投資も行っており、国内外におけるEC事業を軸に事業展開しております。
インテリアECにおける業界トップクラスとして、企画製造から販売まで一貫して自社で行う企業様では、マーケティング、サプライチェーン、商品企画といった顧客に商品を届けるまでの一連のシステム開発や、業界に先駆けたARサービスの開発等を、企画の段階から全て社内で実施しています。
現在、70名を超えるエンジニアが在籍しておりますが、インテリア×テクノロジーの領域で、福岡発のグローバルテックカンパニーを目指し、今後更にエンジニアを増員・強化していく予定です。
【具体的な業務例】
社内で開発中のECもしくはSCMシステムにおけるサーバーサイドの開発を担当していただきます。
カート/決済/マイページ/その他サービス機能などのWebアプリケーション設計、開発、運用またはAPI設計、開発、運用
※社内ではフロントエンドの開発を行うチームもあり、人材交流がありますので、将来的にフルスタックエンジニアを目指したい方にも向いてる環境です
※サービス力を強化する為、最新の技術やフレームワーク導入・活用に積極的な文化です
------------------------------------------
【開発環境】
■利用技術(一部)
・開発言語/フレームワーク
Ruby / PHP / Python3 / Elixir / JavaScript / SQL
Ruby on Rails / CakePHP / Laravel / Phoenix / Vue.js 他
・AWS
Fargate / Lambda / ECR / Lake Formation / Glue
・GCP
BigQuery / App Engine / Cloud Pub/Sub / Cloud Functions / Firebase Cloud Messaging
・DB/データ分析基盤
PostgreSQL / SQL Server / Oracle Database / Embulk / Digdag / Elasticsearch
・主な使用ツール
Slack / Backlog / G Suite
GitHub / GitHub Actions / NewRelic
------------------------------------------
【Scala/Java/Pythonなど】大手広告代理店におけるデータ基盤の開発、運用、保守の求人・案件
業務委託(フリーランス)
JavaPythonSQLScalaSparkAWSDockerApacheGitHubSnowflakeKubernetes
作業内容 【業務内容】
大手広告代理店が展開しているインターネット広告代理店業における、膨大な広告データを収集・蓄積したデータレイクからデータを展開するためのデータ基盤(ETL処理、DWH、DM)の開発、運用、保守をお願いします。
【ポイント】
データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、そんな大規模データと向き合った開発にチャレンジすることができます。複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。
【開発チームと配属先について】
当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。
今回お願いしたいポジションはサーバサイドエンジニアです。
チームには現在18名のエンジニアが在籍しています。
また、複数のプロダクトを管理しているチームのため、担当領域ごとにグループ分けをしています。
Infeed領域の広告運用のためのプロダクトを開発するグループインターネット広告関連データをデータレイクに蓄積するシステムを開発するグループインターネット広告関連データが蓄積されたデータレイクを用いたデータ基盤を開発するグループ機械学習を用いたプロダクトを開発するグループ掲載情報や実績情報を出力・レポーティングするための分析用プロダクトを開発するグループ
【技術キーワード】
ApacheSparkAWS GlueSnowflakeデータレイク/データウェアハウス/データマート
【AWS / フルリモート】AWS上でのデータ分析基盤の構築・運用(週5日)
作業内容
【AWS / フルリモート】大手人材会社向けAWSの設計・構築・運用(週3日以上)
作業内容
【Python/リモート】分析システムデータ連携/加工処理
業務委託(フリーランス)
PythonSQL
バックエンドエンジニア
作業内容 ・テーブル定義書、ETL設計書の作成
・ETL処理の開発、単体テスト
・結合テストの実施(個別ジョブの実行、結果確認、修正、エビデンス取得)
・QuickSightレポートの設計、開発
,【データエンジニア】新規機能のデータエンジニアの求人・案件
作業内容 【業務概要】
・ToB向けに経理精算や請求書処理といった経理領域におけるSaaSサービスを
展開されている企業様になります。
・今回はその展開されているサービスにBIツールを用いた新規機能の開発の
データエンジニアとして参画して頂きます。
・具体的には、既存にあるデータを利用し、データウェアハウスやBIツールの構築等に携わって頂きます。
【参画メリット】
・新規機能を0→1で携わって頂きますので今後のスキルアップに繋がりやすいかと存じます。
・フルリモートになりますのでリラックスした環境で働けるかと存じます。
【技術環境】
・開発言語:未定(PdMの方と決めて頂きます)
・DB:PostgreSQL、RDS
・その他::AWS(Glue、Athena)、CircleCI、JIRA
【Python/リモート】データレイク構築支援
業務委託(フリーランス)
PythonAWSRedshiftGlue
作業内容 ・Pythonを用いたデータ加工
・技術要件としては、Glue+Step Functionで、Redshift間のETL処理をPythonでコーディングしていただく形
【AWS】新サービスのAWSデータ基盤開発(リモート)
作業内容 ・データ分析基盤の開発/データレイク構築
【AWS】生保・ETL開発
業務委託(フリーランス)
AWSGlue
サーバーエンジニア
作業内容 AWS上でのDWH構築(設計~)を行って頂きます。
【AWS/リモート】データレイク分析環境運用
業務委託(フリーランス)
AWSRedshiftGlue
作業内容 データレイク分析環境運用を実施いただきます
【Python(リモート)】情報系システム刷新に伴うDWH再構築
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 ・新規データ取込機能の設計・開発
・SQLによるデータマージ
【Python(リモート)】情報系システム刷新に伴うDWH再構築
業務委託(フリーランス)
PythonSQLAWSGlue
作業内容 ・新規データ取込機能の設計・開発
・SQLによるデータマージ
金融向けAWSのデータレイク基盤(蓄積基盤)の設計、構築支援
作業内容 【業務内容】
勘定系システムなどからデータを受け取るAWSのデータレイク基盤(蓄積基盤)の設計、構築