Sparkのフリーランス案件・求人一覧 | 3ページ目

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 在庫最適化システムを支えるデータ基盤の構築を担当します。顧客から提供される大規模データを加工し、SQLやPythonを用いてデータストアに投入するための基盤を構築します。スクラムチームの一員として、メンバーと協力しながらスプリントを消化し、システムの機能改善および新機能の追加を行います。 ■具体的な業務内容 ・PythonおよびSQLを用いたデータ基盤の構築 ・大規模データの加工および集計 ・データストアへのデータ投入機構の開発 ・スクラムイベントへの参加およびスプリントの消化 ・AWS環境でのインフラ構築および管理 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 ■概要 新規プロダクトのサーバーサイドエンジニアをお任せいたします。 ■具体的な作業内容 ・RDBのデータベース設計 ・GlueジョブでPythonを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナーと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・Git flowベースの開発進行

作業内容 ■概要 某社のクレジット基幹システム内の売上処理の再構築案件をお任せいたします。 ■具体的な作業内容 ・Host(COBOL)のシステムをオープン化(Java化)しているが、ストレートコンバージョンによる実施の為、Host特有のロジック等があり非効率なロジックが多く、無駄な処理時間がかかっている。 ・ロジックを見直しながら、純粋にJavaで一から作り直すことで性能改善を図る。 ・また、現状バッチ処理による一括更新だが、Kafkaを導入し、トランザクション処理化を行う。 ・他担当の技術的サポート・ソースレビューなどもできる開発者を要望。 ・フェーズがテストよりになるため、結合テスト/システムテストをひと通り従事したことあり、具体的にどのようなタスクかを理解している方。 ・在宅勤務下であることから、コミュニケーション能力があり、各種報告等をしっかりできる方。

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 新規プロダクトのサーバーサイドエンジニアをお任せいたします。 ■具体的な作業内容 ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計、開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・Gitflow ベースの開発進行

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 某社のクレジット基幹システム内の売上処理の再構築案件に携わっていただきます。 ■募集理由 ・Host(COBOL)のシステムをオープン化(Java化)しているが、ストレートコンバージョンによる実施の為、Host特有のロジック等があり非効率なロジックが多く、無駄な処理時間がかかっている ・ロジックを見直しながら、純粋にJavaで一から作り直すことで性能改善を図る ・また、現状バッチ処理による一括更新だが、Apache Kafkaを導入し、トランザクション処理化を行う ■求める方 ・他担当の技術的サポート、ソースレビューなどもできる開発者 ・フェーズがテストよりになるため、結合テスト/システムテストをひと通り従事したことあり、具体的にどのようなタスクかを理解している方 ・在宅勤務下であることから、コミュニケーション能力があり、各種報告等をしっかりできる方

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 全国展開の小売データを元にした分析システム構築です。PythonやAWS各種サービスを使用した製造からテストまでを担当します。 ■具体的な業務内容 ・PythonおよびSQLを用いた分析システムの開発 ・AWS環境でのシステム設計および実装 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 道路交通系システムの開発を担当していただきます。Hadoop上で動作するシステムの詳細設計からテストまでの工程を行います。 ■具体的な業務内容 ・Hadoopを使用したシステムの詳細設計 ・JavaおよびSQLを使用したシステム開発 ・システムの結合テストおよび運用支援 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 ------------------------------------------------------------------ 弊社は様々なプロジェクトの提案を強みとしております。お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 ▽チーム体制 開発責任者　1名 └プロダクトオーナー1名 └フロントエンドエンジニア 3名 └バックエンドエンジニア　5名 └SRE　0名（★ここが今回の募集ポジションです） └QAエンジニア0名 └データエンジニア1名 ※上記は社員のみ 業務委託で複数名のエンジニアにご参画頂いております。 ▽業務内容 ・自社SaaSサービスを支えるインフラ環境構築・運用などのシステム管理業務 ・サービスの監視やパフォーマンス・チューニング ・運用業務効率化のツール作成 ・プロダクト開発チームとともに信頼性の高いサービスの設計と実装 ▽環境 - AWS: EC2、ECS、StepFunctions、S3、Aurora(PostgreSQL)、Elastic Search、Cloud Watch - Python、Rust、Spark 【募集背景】 新バージョンの機能追加が急務であり、エンジニアリソースが不足しているため。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 開発中のシステムに対する追加機能の設計および実装を担当します。アプリケーション設計から総合テストまでの対応が求められます。 ■具体的な業務内容 ・データ連携アプリケーションの設計および実装 ・AWS Fargate環境での開発およびテスト ・Dockerイメージの作成およびデータ処理関連の対応 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 データレイクの更改対応および運用業務の技術リーダーを担当します。要件定義から開発計画作成、他部署との調整、レビュー業務を行い、システム全体の品質向上を図ります。 ■具体的な業務内容 ・要件定義および開発計画作成 ・作業スケジュールの調整 ・ソースコードおよびドキュメントのレビュー ・他部署との連携および調整 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ 某企業の各プロダクトのバックエンド開発を行って頂きます。 スクラム開発を採用しており、同じチームに居るプロダクトマネージャ、デザイナー、フロントエンジニア、バックエンドエンジニア、薬剤師などと共に、バックエンドの専門家としてリーダーシップを取って開発を行って頂きます。 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 データ加工、バッチ開発、WebAPI開発、新規技術検証分析チームが別でいるので、そのメンバーの分析を基に話し合いながら進めていただきます。 開発工程 要件定義, 基本設計, 詳細設計, 実装, 単体テスト, 結合テスト, システムテスト, 運用・保守

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ・モバイルアプリケーションエンジニアとして、自社サービスや業務に関連するアプリ（iOS・Android）の設計・開発・テストから運用・保守まで、全体をエンド・ツー・エンドで担当・リード ・進化するビジネス要件に基づいて、フロントエンドおよびバックエンドのサービスを強化 ・マーケティング・UXデザイン・業務企画・事業開発・カスタマーサービス・営業等と連携し、クロスファンクショナルなチームでの業務推進 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 独自のデータ集積プラットフォームを運営する企業での、DBバッチ開発および運用業務です。Pythonを使用したバッチ開発や、データのインサート作業を行います。Google Cloud Platform（GCP）環境下で、5名のチーム体制でデータ処理を手掛けます。 ■具体的な業務内容 ・Pythonを用いたバッチ開発、改修、運用 ・データインサート業務 ・GCP環境でのデータ処理（BigQuery、Cloud Composerなど） ・データの高速化や自動化対応 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 大手保険会社グループのデジタルトランスフォーメーション（DX）推進プロジェクトに携わり、データ処理や機械学習を用いた業務効率化に取り組みます。ビッグデータの処理やデータパイプラインの開発を担当します。 ■具体的な業務内容 ・PySparkおよびPythonを用いたデータ処理と分析 ・SQLによるデータベースクエリの作成および最適化 ・データパイプラインの設計、開発、テスト、運用 ・クラウドプラットフォームを活用したビッグデータ処理 ・機械学習を用いた業務自動化の提案と実装 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 ＝＝＝＝＝ ※重要※ ▼必ずお読みください▼ 【必須要件】 ・20～40代までの方、活躍中！ ・社会人経験必須 ・外国籍の場合、JLPT(N1)もしくはJPT700点以上のビジネス上級レベル必須 ・週5日稼働必須 ・エンジニア実務経験3年以上必須 ＝＝＝＝＝ ・フルスタックエンジニアとして、自社サービスや業務に関連するシステムの設計・開発・テストから運用・保守まで、全体をエンド・ツー・エンドで担当・リード ・進化するビジネス要件に基づいて、フロントエンドおよびバックエンドのサービスを強化 ・マーケティング・UXデザイン・業務企画・事業開発・カスタマーサービス・営業等と連携し、クロスファンクショナルなチームでの業務推進 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活躍中！】 【出社可能な方、活躍中！】

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 機械学習エンジニアとしてサービスの改善／開発を行っていただきます。 データを活用したアルゴリズムの開発とその基盤開発を担当していただきます。 サービス成長のために必要があればなんでも挑戦したい方、ユーザー視点でサービスの成長を一緒に考えていける方をお待ちしております。 某社は香水だけでなく、香りを軸にしたECプラットフォームを目指しています。 香りに関するデータを武器に、香り×テクノロジーの領域を一緒に切り拓いていく仲間を募集しております。 ■具体的な作業内容 ・機械学習技術を用いたサービス開発および改善 ※具体的には推薦システムや診断といったサービスに従事していただきます。 ・機械学習モデルの安定的な運用、基盤整備(ML pipeline/MLOps) ・香りのデータを活かしたチャレンジングな課題の解決(R&D) ・データ利活用のためのデータ基盤整備(Data Engineering/Data pipeline)

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 RDBのデータベース設計やETL処理の設計・開発、APIの構築などを行うバックエンドエンジニアのポジションです。AWS関連リソースを積極的に活用し、データ処理やAPI開発に貢献します。 ■具体的な業務内容 ・RDBのデータベース設計 ・Glue Jobを利用したETL処理の設計・開発 ・API GatewayやLambdaを使用したAPI開発 ・AWSリソースの活用および管理 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 検索・機械学習エンジンの開発・実装を担当し、自然言語処理を用いた検索エンジンの開発や性能改善を行います。大規模データを扱うスキルが求められ、分散処理技術の知識も歓迎します。 ■具体的な業務内容 ・検索・機械学習エンジンの開発・実装、性能改善 ・自然言語処理技術を用いた検索エンジンの開発 ・大規模分散処理を伴う機械学習モデルの開発 ・Pythonを使用したデータ探索、特徴量変換、システム実装 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 機械学習を活用し、キャディのデータを基にしたモデルの開発や保守運用を行います。画像認識やサプライチェーンのデータ分析など、多岐にわたる業務を担当します。 ■具体的な業務内容 ・画像認識システムの構築および保守 ・Deep Learningを用いたモデル構築および評価 ・サプライチェーンデータの分析および仮説検証 ・最適化アルゴリズムの開発および導入 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20 代から40 代の方が活躍中！】 ※週４日〜OK案件です！ ※実務経験2年以上ありの方が対象の案件です！ ■概要 AWSを使用したビッグデータ解析や分散処理基盤の開発を担当します。ビジネスサイドの要望を踏まえ、最適なアーキテクチャを設計し、運用フローの自動化なども提案・実装します。 ■具体的な業務内容 ・AWSを使用したビッグデータ解析および基盤設計 ・運用フローの自動化提案および実装 ・ビジネスニーズに応じたデータセット作成 ・機械学習モデルのAPI環境の実装 ・CI/CD環境の構築および運用維持 勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。 ------------------------------------------------------------------ 直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。 弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。 ------------------------------------------------------------------ ※弊社では、法人、請負いの案件は取り扱っておりません。

作業内容 【20代~30代のITエンジニアが活躍中！】 ■概要 薬局経営を支援する薬局ダッシュボードのデータベース設計、API開発、ETL処理の開発をする責務を担っていただきます。 2020年に正式版をローンチし、利用ユーザーからは一定の高評価やフィードバックをいただいております。 今後は大規模チェーン店舗への導入や単独事業化などによる事業成長を考えており、機能拡充や品質向上のための開発を強化する必要性が高まってきています。 <サプライチェ－ン事業とは？> ・薬局における在庫管理、発注業務や流通といった業務はコンビニなど他業界と比較すると、勘と経験に多くの部分を依存しており、テクノロジーによる最適化の介在余地を多く残しています ・AIを活用した自動発注サービス、その先には薬の二次流通への介入などを通じて、業界の変革を目指します ■具体的な作業内容 ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計、開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・Git-Flowベースの開発進行 ■開発環境： ■作業環境：Windows/Mac選択可 ■プログラミング言語：Python　　　　　　 ■環境・OS：AWS　　　　　 ■ツール：GitHub　Slack　　　　　 ■その他：G Suite　　　　　　 ■作業工程：基本設計|詳細設計|実装、構築、単体試験|結合試験|総合試験|受入試験|運用、保守

作業内容 製造～テストをご担当いただきます（設計もお任せする可能性あり）

作業内容 DataStageで作成している業務APをマイグレーションに伴いSparkで刷新・DBA業務系（モデリング、SQL開発など）・SPARK要員Spark経験者・JP1要員ジョブネットの詳細設計以降

作業内容 某通信キャリアの情報系システムのエンハンス対応

作業内容 ＤＷＨシステムのマイグレーションに関わる開発

作業内容 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守

作業内容 現行加工処理をマイグレーションの計画/方式の検討立案を行っていただきます 　【マイグレーション例】 　・現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト 　・ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換する 　　⇒Databricks、snowflake(snowpark)、AWS（Glue,EMR）等のSpark関連マネージド・サービスにマイグレーション

作業内容 ・詳細設計書の執筆 ・パラメータシート作成 ・検証環境の構築 ・基盤の構築作業 ・単体/結合試験項目書の作成、テストの実施 ・その他障害対応、技術検証、ベンダー問い合わせ対応などをご担当いただきます

作業内容 【主な支援内容】 機械学習モデル、推論機能の設計・実装を行うチームの一人として業務 ・機械学習モデル、推論機能の設計・実装 ・設計、実装はAzure Databricks上で行う