Spark × 在宅・リモートのフリーランス案件・求人一覧 | 2ページ目

作業内容 ・Ruby on Railsを用いたアプリケーション開発支援案件に携わっていただきます。 ・主に開発及び運用保守作業をご担当いただきます。

作業内容 kubernetes上に構築したアプリケーションの開発や運用業務。• アプリケーション開発• データ系アプリケーションのワークフロー開発• 運用改善 ======================== ※必ずお読みください※ 【外国籍の方の場合】 日本語能力検定１級お持ちの方 日本語が母国語の方 ========================

作業内容 Google Cloud環境では、DWHとしてBigQueryを利用し、データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定です。<作業内容>（上から優先度が高い順） 1．バッチ処理コード移行（Java（Spling Boot）→ Google Cloud Composer + Google Data Fusion + dbt） （実装、単体テスト、結合テスト、システムテスト） 2．SQL構文修正（Redshift（PostgresSQL） → BigQuery） （実装、単体テスト、結合テスト、システムテスト） 3．テーブルデータ移行（Redshift → BigQuery） （テーブル設計・実装、データ移行、データ検証） ======================== ※必ずお読みください※ 【外国籍の方の場合】 日本語能力検定１級お持ちの方 日本語が母国語の方 ========================

作業内容 Q&Aに特化したライブ配信アプリを開発しております。 インフラエンジニアとしてアプリの開発に加わっていただけるメンバーを募集しております。具体的にはライブ配信アプリのインフラ環境の設計、構築、運用をお任せします。 ■チーム構成 ・PdM：1名 ・バックエンドエンジニア：2名 ・モバイルエンジニア：3名 ・プロダクトデザイナー：1名 ■開発環境 ? 分散DB（Cloud Spanner） ? 言語：Go言語 ? 通信 ：connect-go proto ? コンピューティング：Kubernetes → Cloud Run ? DWH・パイプライン構築 ? BigQuery ? Apache Spark ■会社の魅力 大企業の持つ資本力とベンチャーの持つスピード感を両立しており、０ベースでの技術的負債が無い状態でのスタートを切ることができます。そしてビジネス的にもスピード感を持って大きなことにチャレンジできる土壌が整っております。 ユーザーの質問にライバーが回答することに特化したライブストリーミングサービス（Q&Aに特化したライブ配信アプリ）を今年の春、リリース予定となっております。 ■部署の魅力や雰囲気 ・積極的に新しい仕組みやツールに挑戦する ・ビジネスとエンジニアの距離が近い ・エンジニアからも機能提案などする機会が多い

作業内容 -------------------------------- ※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です ※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です ※すでにFindy Freelanceで担当がついている方は、直接ご連絡いただいた方がスムーズです -------------------------------- 私たちは広告データ分析系SaaSおよびキャリアプラットフォームのさらなる進化を目指し、 データ基盤・分析基盤、LLM/AI基盤の構築・運用を強化し、革新的なプロダクトを支えるため、LLMを用いたプロダクトのバックエンドAPI開発に臨むエンジニアを募集いたします。 ▼役割 SaaS/キャリアプラットフォームに用いるデータ基盤の構築・運用、バックエンドAPIの開発 ▼具体的な業務内容 - LLMを用いたプロダクトのバックエンドAPI開発、運用 - スケーラブルなクラウドインフラの構築、運用 - LLM用のベクトルデータストアの整備 ▼上記業務に慣れてきたら以下にもトライいただきたいです - LLM/AIエージェントの構築 - ビジネス部門との連携によるデータニーズの把握、データ活用支援 - ドキュメンテーション、技術共有、チームへの貢献 ▼このポジションの魅力 - Python、Node.js、LangChain、PostgreSQL、AWSなど、多様な技術を駆使してバックエンドスキルの幅が広げられる - データパイプラインやデータウェアハウスの設計・運用を通じ、企業の意思決定基盤に携わる事が可能 - 自由度の高い開発環境で新しい技術を試せる - エンジニアリングとプロダクトの両方の視点を養える - 迅速かつ効率的なアジャイル開発で即座にアイデアを形にできる - エンジニア同士の学び合いを大切にする環境

作業内容 大手自動車部品メーカーにて、 主に画像データを、MLOpsで利用できるデータセットとして管理する基盤の構築PJにおける データエンジニアを募集しております。 顧客の要望に応じ、データの加工、それに伴うデータベースの構築等をご担当いただく想定です。 また、直近ではDWHの移行などの作業もございます。 ＜環境＞ 開発形式：アジャイル 使用言語： 　・Python言語 使用ツール： 　・AWS (Sagemaker、Lambda、SQS、ECS、step functions、DocumentDBなど) 　・snowflake 　・IaC (Terraform) ＜オンサイト時の勤務地＞ クライアント先、または秋葉原駅

作業内容 ・検索ソリューション事業における、 　データ分析基盤の構築、運用保守とデータ分析に携わっていただきます。 ・具体的な作業の内容としては、以下を想定しております。 　-データ活用の基盤構築 　-データの加工、および整理 　-データ分析における要件定義

作業内容 ------------------------------------------------------------------- ■35歳～50歳が活躍中 ■フルタイム案件（副業不可） ■国内在住者の方限定　※セキュリティ担保の観点 ■日本語ネイティブの方が活躍中 ------------------------------------------------------------------- 【業務内容】 ・職種　　　：Webアプリケーション開発エンジニア（フロント・バックエンド・クラウドインフラ） ・スキル言語：後述 ・概要　　　：社内外公開APIの申し込み及び各種情報確認ポータル（PC向け）のフロントWEB及びそのバックエンドシステムの開発 ・勤務地　　：フルリモート ・就業時間.:9:00～17:30（実働：7時間30分）※コアタイム無しフレックス制度導入（全社員対象）12:00～13:00（休憩時間） ・稼働希望日：10月～ ・開発端末　：MacBook（貸与） ・募集人数　：2名 ＜開発言語＞ 利用頻度順 ・AWS(代替：インフラ知識。LinuxコマンドやDNSについての知識等) ・Typescript(代替：Javascript) ・React.js(代替：Vue.js) ・Node.js ・Go ・Java(SpringBoot3) ・Python ・MySQL ・AWSOpenSearch ・DynamoDB ・Docker ・Jenkins ・Nginx ・ApacheSpark(Pyspark/AWSGlue) ・プロジェクト運用でGitHub、Slack、Jira、Confluence、Cacoo等を利用

作業内容 ------------------------------------------------------------------- ※重要※ 必ずご確認いただきご応募ください。 【必須要件】 ・20代後半～40代の方、活躍中！ ・基本的なコミュニケーションが取れる方必須 ・外国籍の方は、JLPT N1相当またはJPT700点以上のビジネス日本語上級レベル必須 ・フルタイム案件（副業不可） ・エンジニア実務経験3年以上必須 ------------------------------------------------------------------- 【企業概要】 弊社では、下記三つの事業を展開しております。 ・クラウドインテグレーション事業 ・データ分析サービス事業 ・DevOps関連サービス事業 クラウド、OSS、アジャイル、DevOps、データ解析・機械学習等の先端技術について 多くの経験および知識を有するITプロフェッショナル企業として顧客企業と共に、 様々な付加価値を社会に提供し、「社会」および「人々」の進化に貢献している企業です。 【案件内容】 大手自動車部品メーカー様の主に画像データをMLOpsで利用できるデータセットとして管理する基盤の構築するプロジェクトでエンジニアを募集してます。 顧客の要望に応じ、データを加工しデータを用意したり、それに伴うデータベースの構築などご担当いただきます。 また直近ではDWHの移行などの作業もございます。 【配属予定プロジェクト】 ・クライアント/プロジェクト：大手自動車部品メーカー様のMLOps基板構築 ・プロジェクトチーム体制 …5名(エンジニア x4) +顧客PM ・開発形式：アジャイル 　 ・開発環境 　▼使用言語 　・Python言語 　▼使用ツール 　・AWS (Sagemaker、Lambda、SQS、ECS、step functions、DocumentDBなど) 　・snowflake 　・IaC (Terraform)大 【得られるキャリア・職場の魅力】 クライアントや他メンバーと同じチームを組んで、大規模データ処理基盤の構築を行っていただきます。最新の技術スタックに関わりながら大手自動車メーカーの社会プロジェクトへの貢献ができます。 クライアントとも同じメンバーとして働くことができるため密なコミュニケーションが取れるほか、改善や意見を率直に言える環境です。 フルリモート、コアタイムなしのフルフレックス。残業時間も少なく（平均10時間程度）、ワークライフバランスを実現しやすい働き方をお約束します。 【条件】 ・フルリモート ・参画期間 ：2025年4月〜　半年以上 ・面談　　 ：1～2回予定 （PJの弊社PMとの面談後に顧客先との面談実施の可能性あり）

作業内容 -------------------------------- ※「エンジニアとしての実務経験3年以上」「必須要件に記載されている言語の実務経験が2年以上」の方が対象の案件です ※外国籍の方は、「日本語能力検定1級」「日本語が母国語の方」の方が対象です -------------------------------- 「アルゴリズムで、社会はもっとシンプルになる。」をミッションに掲げ、 アルゴリズムを用いて事業開発を行うAIスタートアップです。 【募集背景】 ChatGPTをはじめとする大規模モデルと隆盛により、データ活用の社会的ニーズが高まってきております。 特に、弊社では金融業界でのデータ活用に向けた取り組みを進めており、技術的には、セキュリティや大規模なデータを扱うことを考えて、モダンなデータスタックの導入ができるように社内での検証を進めてきており、 今回大型のプロジェクトを実行するため、技術ケイパビリティ・経験を持ったエンジニアを今回募集しております。 【業務内容】 メインとして顧客環境に、特にMicrosoft Azureを想定としたデータ基盤を構築し、運用できるようにして頂きます。 データの収集元はテキストデータを中心に多岐に渡る想定であり、収集したデータはLLM/RAGと言われる技術を活用し、ChatGPTのようなボットの活用を行い、問い合わせの自動対応を実現することが目的です。 また、セキュリティ的を十分に考慮しながら設計できることが必要であり、業務としてはデータの基盤の設計及び実行のマネジメントも含めて実行頂きます。 また、必要に応じてクライアントコミュニケーションも行って頂くこともございます。 大型プロジェクトのデータエンジニアとしてのご参画を想定しております。 - アーキテクチャの設計 (既存にAzure上に一定構成されたものは存在) - プロジェクトの技術面での実行 - 顧客環境 (特にMicrosoft Azureを想定)にデータ基盤を構築し運用できるようにする。データの収集元は多岐に渡る想定。 - データ基盤の活用の支援 (BIツール等のデータ基盤の活用に関する助言。場合によっては活用基盤の構築) - 実行メンバーを採用及びメンバーの実行マネジメントの検討・実行 - クライアントコミュニケーション - 他データ基盤のプロジェクトへのアドバイス - アーキテクチャレビュー

作業内容 ・Spark gear を用いた3Dエフェクト制作 ・バトル用スキルエフェクト ・マップの環境エフェクトなどの作成

作業内容 現行加工処理をマイグレーションの計画/方式の検討立案を行っていただきます 　【マイグレーション例】 　・現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト 　・ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換する 　　⇒Databricks、snowflake(snowpark)、AWS（Glue,EMR）等のSpark関連マネージド・サービスにマイグレーション

作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。 データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。

作業内容 【概　要】　Hadoop運用/およびLinuxサーバの運用業務となります。 オンプレサーバ運用かつ、新規運用となりますのでLinux運用経験/運用設計が可能な方を想定しています。 ・Hadoopまたは類似システムの運用経験があること （優先度としては、Hadoop>類似のシステムSpark/AmazonKinesisなど) 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 ゲーム内の特殊効果、バトルエフェクトやスキルのエフェクトなど、 様々な演出の制作に携わって頂きます。 有名版権物RPGや新規開発中タイトルなど 、 ご参画のタイミングによりお任せするタイトルは変わります。

作業内容 ・データ基盤の運用及び保守開発 ・新規データ取得のETLの設計及び実装 ・構成/プロセスの見直し ・データウェアハウスの設計及び実装 ・データの可視化

作業内容 在庫管理システムのデータ基盤構築に携わっていただきます。

作業内容 ・詳細設計書の執筆 ・パラメータシート作成 ・検証環境の構築 ・基盤の構築作業 ・単体/結合試験項目書の作成、テストの実施 ・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【概要】マーケティングデータ処理開発 【開発環境】 -言語:Java、Scala(一部:Python、Ruby) 【精算幅】140-180h 【面談】1回 【勤務地】リモート 【備考】 ・服装:自由 ・就業時間:9:00-17:30 ※週5日〜OKの案件です！

作業内容 ・既存のAWS ETL環境の調査改善 ・メンテ作業の手順化および運用作業（テーブル追加やカラム変更程度） ※対象環境はミッションクリティカルではないデータ処理基盤となる

作業内容 データレイクやDWH管理を行っているチームにて、下記業務をご対応いただきます。 ・AWSからGCPへの移行作業 ・GCPのデータ基盤構築

作業内容 大手通信事業者向け、データ加工処理マイグレーション検討案件です。 現行のデータ加工処理をマイグレーションするための、移行計画および移行方式の検討立案を実施頂きます。 現状、上位会社が移行計画/移行方式の検討立案を進めている状況で、今回はその業務をご支援頂きます。 ※参画後は、現行のデータ加工処理基盤をご理解頂き、ユーザ要件を確認しつつ 　クラウドシフトをするための移行計画/移行方式の検討を進めて頂きます。 現在想定しているマイグレーション例は、以下の通りです。 　-現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト 　-ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換 　→Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）等の 　　Spark関連マネージド・サービスにマイグレーション ＜就業時間＞ 9:00ｰ18:00 ※※こちらの案件は現在募集を終了しております※※

作業内容 既存のAWSデータレイク基盤をベースにした追加開発

作業内容 ・詳細設計書の執筆 ・パラメータシート作成 ・検証環境の構築 ・基盤の構築作業 ・単体/結合試験項目書の作成、テストの実施 ・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます

作業内容 ・詳細設計書の執筆 ・パラメータシート作成 ・検証環境の構築 ・基盤の構築作業 ・単体/結合試験項目書の作成、テストの実施 ・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます

作業内容 ソフトウェア基盤（ミドルウェア）環境の設計、構築、維持管理業務全般をしていただきます。

作業内容 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！ 【概要】 【精算幅】140-180h 【面談】1回 【勤務地】虎ノ門※リモート 【備考】 ・服装:自由 ・就業時間:9:00-18:00 ※週5日〜OKの案件です！

作業内容 新規プロダクトである地図広告P/Fのインフラ設計、開発、テストをご担当していただきます。 AWS上でのデータ処理やクエリーワークロードの設計、デプロイ、 監視のためのMapboxのプロセスとツールの簡素化と強化が主要業務となります。 開発、営業、その他チームとの連携も重要となります。 　

作業内容 システム基盤の運用改善をご担当いただきます。

作業内容 データマネジメントインフラ支援業務など、 IT基盤戦略担当様のDMシステム更改案件における構築支援業務を行っていただきます。