【Python / リモート案件紹介可能】システム開発エンジニア(ビッグデータ基盤システム担当)
業務委託(フリーランス)
JavaPHPPythonSQLGoAWSGit
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
ビッグデータ基盤システムの構築・開発・保守を担当する案件です。Pythonを中心とした開発を行い、SQLを用いたデータベースプログラミングやAWS環境でのサービス開発を進めます。Hadoopエコシステムや高負荷対策の経験がある方はさらに活躍できる環境です。
■具体的な業務内容
・ビッグデータ基盤システムの構築・開発・保守
・データの加工(ETL)およびソフトウェア開発
・SQLを活用したデータ処理およびプログラミング
・AWSを利用したサービス開発および運用
【Hadoop】データ取得ジョブの新規作成など
作業内容 ■概要
某株式会社にて、Hiveを使用して、社内の大量データに対してデータ取得を行うデータサイエンティストに近い業務となります。
■具体的な作業内容
・データ取得ジョブの新規作成、改修(主なツールとしてTalendを使用)
・Hadoop - Teradata間のデータ整備
・MySQL等のデータベース間とのデータ整備
【開発系PMO】【業務委託(準委任)】某大手通信事業者/Hadoop環境移行支援
作業内容 ■概要
某大手通信事業者/Hadoop環境移行PMO支援をお任せいたします。
■具体的な作業内容
・Hadoop環境移行及び現行/新規にて発生する障害に対するPMO支援
・ユーザー側PMOチームメンバー
・クラスタ運用に伴う課題解決
・スケジュール、課題の管理、ステークホルダー調整
【DBエンジニア(SQL全般)】データ分析基盤上でのデータエンジニアリング利用者支援案件(20代〜40代活躍中!・週4日以上稼働可能な方にぴったり!)
業務委託(フリーランス)
PythonSQLHadoopHive
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
全社横断のデータ分析基盤上で、データエンジニアリングや利用者支援を行うプロジェクトです。HiveやDatabricksを活用し、バッチ処理の運用・保守、新規バッチ処理の開発、APマイグレーションなど幅広いタスクを担当します。
■具体的な業務内容
・既存バッチ処理(Hive/Informatica/Databricks)の運用・保守
・Databricksを利用した新規バッチ処理の開発
・Informatica/HiveからDatabricksへのAPマイグレーション対応
・メタデータ登録およびデータカタログ製品の比較検討
・分析者マニュアル作成およびバリューエンジニアリング提案
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【クラウドエンジニア(AWS) / リモート案件紹介可能】AWSおよびGCPを活用したデータ基盤整備プロジェクト
業務委託(フリーランス)
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
AWSおよびGCP環境でのデータ基盤整備プロジェクトです。データレイクからBigQueryへの移行作業や、GCPのデータ基盤整備を担当します。PythonやSparkを活用し、TerraformやCI/CDツールを使用した効率的な基盤開発を進めます。
■具体的な業務内容
・AWSのデータレイク(S3+Glue data catalog)からBigQueryへのデータ移行作業
・GCPデータ基盤の設計および整備(ワークフローエンジン導入など)
・AWS上で動作するアプリケーションの課題発見および解決
・Python、Hive、Sparkを使用したデータ基盤の構築
【クラウドエンジニア(AWS)】【業務委託(準委任)】自社サービス開発
作業内容 ■概要
テレビ視聴データを分析するデータ基盤のインフラエンジニアとして、特にAWS EMRでのSpark、HBase、Hive、Presto、Hudiといった分散DBの知見のある方を募集いたします。
■具体的な作業内容
・データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
【クラウドエンジニア(AWS) / リモート案件紹介可能】AWS・GCPを活用したデータ基盤整備と移行プロジェクト
業務委託(フリーランス)
AWSGoogle Cloud Platform
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
AWSデータレイクからBigQueryへのデータ移行作業や、GCPデータ基盤の整備を行うプロジェクトです。PythonやSparkを活用し、データ基盤の設計・開発を進めるとともに、効率的なデータ処理環境を構築します。TerraformやCI/CDツールを利用した開発プロセスにも携わります。
■具体的な業務内容
・AWSデータレイク(S3 + Glue data catalog)からBigQueryへのデータ移行
・GCPデータ基盤の整備およびワークフローエンジンの導入
・PythonやSparkを使用したアプリケーション開発および保守
・TerraformやCI/CDツールを利用した開発環境の整備
・データ基盤設計および運用改善
【Java】オークションサイト開発
業務委託(フリーランス)
JavaSQLLinuxMySQLSpringEclipse
PG
作業内容 某大手オークションサイトの開発案件になります。
膨大なデータを抽出するためのETLツールの作成、抽出したデータを基にシステムの構築を行います。
・Talendで作成された既存ジョブの改修
・データ整備
・Javaでのコーディング作業
開発工程
基本設計, 詳細設計, 実装, 単体テスト, 結合テスト, システムテスト, 運用・保守
【PHP】ビッグデータ関連Webアプリ改修
業務委託(フリーランス)
PHPMySQLLaravel
サーバーサイドエンジニア
作業内容 ビッグデータのインフラチームによるWebアプリの改修を行って頂きます。
大量のデータに対してどのようなアプローチを行えば、
効率よく利用できるかを考えつつ作業をとりおこなう業務となります。
現在導入中のWebアプリがVDI化をすることにより改修が必要となりました。
それに伴いHiveのクエリをブラウザ上から実行するアプリの改修が必要になります。
開発工程
詳細設計, 実装, 単体テスト, 結合テスト
【JavaScript】ロガーライブラリの開発・運用(webアプリケーション開発)
業務委託(フリーランス)
JavaScriptTypeScript
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
フロントエンド組み込み型ライブラリの開発・運用を担当します。ユーザ行動をトラッキングするためのログをクライアントサイドから送信するライブラリの開発と運用が主な業務です。
■具体的な業務内容
・クライアントサイドのWebアプリケーション開発
・JavaScriptやTypeScriptを使用したロガーライブラリの開発・運用
・社内向けドキュメントの整備および各種プラットフォーム対応
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【JavaScript】自社マーケティングプラットフォームシステム開発支援(週4日以上稼働可能な方にぴったり・20代〜40代活躍中!)
業務委託(フリーランス)
JavaScriptRubyRailsAWSAzureGoogle Cloud PlatformVue.js
作業内容 【20 代から40 代の方が活躍中!】
※週4日〜OK案件です!
※実務経験2年以上ありの方が対象の案件です!
■概要
自社マーケティングプラットフォームのシステム開発支援を担当します。具体的には、アプリケーションの実装方針の検討、概要設計、実装、および実装内容のレビューを行います。また、アーキテクチャの見直しやパフォーマンス改善といった高度な課題解決にも取り組んでいただきます。
■具体的な業務内容
・アプリケーションの実装方針の検討
・概要設計および実装の実施
・実装内容のコードレビュー
・アーキテクチャの見直しおよび設計
・パフォーマンスチューニング
・AWS/GCP/Azure環境での開発作業
・サービスの新規立ち上げにおける技術支援
勤務開始時には、プロジェクトの一員として、コミュニケーションを取りながら業務を進めて頂く予定です。また、緊急時に出社が必要となる場合がございます。
------------------------------------------------------------------
直近の参画案件の経験とご希望に併せた案件のご紹介をさせて頂きます。
弊社は様々なプロジェクトの提案を強みとしておりますので、お気軽にご相談頂けますと幸いです。
------------------------------------------------------------------
※弊社では、法人、請負いの案件は取り扱っておりません。
【クラウドエンジニア(AWS)】【業務委託(準委任)】クラウドを活用したインフラ保守・構築・開発業務【リモートOK】
業務委託(フリーランス)
PythonShellAWS
作業内容 【20代~30代のITエンジニアが活躍中!】
■概要
AWSを活用したインフラ保守、構築、開発業務をお任せいたします。
■具体的な作業内容
・AWSを活用したテレビ朝日案件などのインフラ保守、構築、開発の大型案件
・CMSサービスのインフラ保守運用
・物理サーバー案件(頻度:低)
・インフラ関連業務、及びその他付随業務
※アサイン後はクラウドから物理環境までを扱う業務内容のいずれかをご担当いただきます。
アサイン予定のチームは他の複数のチームと関わりながら業務を遂行する横断的な組織になります。
■参考 使用サービス例
・AWS関連
Amazon EC2(Amazon Linux)、EBS、AutoScalingGroup、ELB各種、ECS、ECR、Amazon S3、EFS、DynamoDB、Elasticsearch Service、 Aurora、 RDS各種、Lambda、Athena、Kinesis、CloudFront、ACM、SNS、Amazon SQS、CloudTrail、CodeCommit、CodeBuild、CodeDeploy、Route53、Direct Connect、VPC、CloudWatch、AWS WAF、GuradDuty
・OSS関連
Apache、Nginx、Redis、MySQL、PostgreSQL、memcached、Postfix、vsftp、Zabbix、crond、OpenSSL、Elasticsearch、Kibana、fluentd、Docker、Ansible、Hadoop、Hbase、Hive、Pig、ZooKeeper、Git、GitHub、GitLab、 GitLab CI Runner、CircleCI、Redmine、WordPress、Laravel、Ruby on Rails、CentOS、Debian、Vernish、Python、Perl、JavaScript、PHP
※一般のWebシステムで使うようなサービスを中心に活用しております。
・その他
Fastly、Twilio、Mackerel、Slack、Backlog
【AWS(リモート)】損保会社向けAWSインフラ構築案件
業務委託(フリーランス)
AWSRedshiftSnowflake
作業内容 既存AWSインフラの追加開発や改修等をご担当いただきます。
大型AWSインフラシステムを学ぶことができます。
ツール:
・AWS
・SnowFlake
・RedShift
不動産サービス向けデータ基盤構築/機械学習エンジニア募集【Python】
業務委託(フリーランス)
PythonSQL
機械学習エンジニア
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
不動産サービスサイトのデータ基盤を整備し、マンション価格査定の精緻な算出を実現するプロジェクトです。10億件を超えるビッグデータを活用し、複雑なデータワークフローを構築・改善します。新しいデータセットの解析やビジネス要件に基づいたアウトプットの作成を通じて、事業成長を支える重要な役割を担います。
■具体的な業務内容
・PythonおよびSQLを用いたデータ処理基盤の構築および整備
・ビッグデータを活用したデータワークフローの設計・実装・改善
・新規データセットの傾向分析およびデータモデル構築
・ビジネス要件に基づく的確なデータ分析およびアウトプットの作成
・Tableauなどを用いたデータ可視化およびレポート作成
不動産ビッグデータ基盤構築/機械学習エンジニアリング【Python】
業務委託(フリーランス)
PythonSQL
機械学習エンジニア
作業内容 ※エンジニアとしての実務経験が2年以上ある方が対象の案件です!!
■概要
不動産サービスにおけるデータエンジニア/機械学習エンジニアとして、マンション価格査定サイトを支えるデータ基盤整備に取り組むプロジェクトです。10億件を超えるビッグデータを活用し、精緻な査定価格算出を実現するため、データワークフロー整備や新規データセットの解析を行います。ビジネス要件を理解し、的確なデータ分析や基盤の最適化を進めることが求められます。
■具体的な業務内容
・ビッグデータ基盤の整備および最適化
・データワークフローの設計、実装、改善
・新規データセットの傾向分析および解析
・Python、SQLを用いたデータ処理および分析の実施
・ビジネス要件に基づくデータアウトプットの作成
【Python】不動産サービス向け データエンジニア/機械学習エンジニア
業務委託(フリーランス)
PythonSQL
機械学習エンジニア
作業内容 ★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★
■概要
不動産価格査定サイトのデータ基盤を支えるデータエンジニア/機械学習エンジニアとして、ビッグデータを活用したシステム構築を担当します。10億件を超える膨大なデータを基に、精度の高い査定価格の算出を目指します。データワークフローの整備や新規データセットの解析を通じて、事業成長に貢献する重要なポジションです。
■具体的な業務内容
・不動産サービスのデータ基盤の設計・構築・最適化
・PythonおよびSQLを用いたデータ処理・分析
・新規データセットの解析および傾向分析
・ビジネス要件に基づいたデータ活用戦略の立案・実行
【Python】マーケティングデータ処理開発
業務委託(フリーランス)
JavaPythonRubyScalaHadoopSparkHive
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】マーケティングデータ処理開発
【開発環境】
-言語:Java、Scala(一部:Python、Ruby)
【精算幅】140-180h
【面談】1回
【勤務地】リモート
【備考】
・服装:自由
・就業時間:9:00-17:30
※週5日〜OKの案件です!
【データベース】データ連携システム開発案件
業務委託(フリーランス)
SQLOracleSQL ServerHive
データベースエンジニア
作業内容 ・データ連携システム開発に携わっていただきます。
・下記を行っていただきます。
-受領データ加工処理
-後続システムへのデータ連携処理の開発
-新環境への処理移行に向けて既存処理(Oracle)の解析、新環境での検証
【Oracle Exa】DWHのデータ移行
業務委託(フリーランス)
SQLShellLinuxOracleHadoopHive
サーバーエンジニア
作業内容 データ移行をメインでご担当頂きます。
【AWS】インフラ設計/構築案件
業務委託(フリーランス)
RubyGoBigtableAWSApacheHiveTerraform
インフラエンジニア
作業内容 ・マーケティングプラットホーム開発のインフラ設計/構築をご担当いただきます。
【AWS】テレビ視聴データ基盤分析案件
業務委託(フリーランス)
HbaseHadoopSparkAWSHive
データサイエンティストインフラエンジニアデータベースエンジニア
作業内容 システム基盤の運用改善をご担当いただきます。
【Java】統合システム開発案件
業務委託(フリーランス)
JavaApacheHive
作業内容 ・Javaを用いた統合システム開発案件に携わっていただきます。
・主に下記作業をご担当いただきます。
-機能追加開発
-設計~テストまで
【DB】手数料計算システム開発案件
業務委託(フリーランス)
LinuxHive
データベースエンジニア
作業内容 ・手数料計算システムの開発をご担当いただきます。
・ストアドプロシージャを用いて、設計からテストまでをご担当いただきます。
【SQL】手数料計算システム開発
業務委託(フリーランス)
SQL
サーバーサイドエンジニア
作業内容 ストアドプロシージャを使用した手数料計算システム開発でございます。
ポジションはSE/PGとして、設計から試験を担当して頂きます。
【AWS】地図広告プラットフォーム開発
業務委託(フリーランス)
PythonHadoopSparkAWSHiveGlueAthena
作業内容 テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!
【概要】
【精算幅】140-180h
【面談】1回
【勤務地】虎ノ門※リモート
【備考】
・服装:自由
・就業時間:9:00-18:00
※週5日〜OKの案件です!
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
HadoopSparkAWSApache
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
ビッグデータ開発案件
業務委託(フリーランス)
JavaHadoopHivefluentd
サーバーエンジニアデータベースエンジニア
作業内容 ・ビッグデータを分散処理で集計、分析するシステム開発を担当して頂きます。
【AWS/EMR/Hadoop/フルリモート】分散DBを用いたデータ基盤のインフラエンジニア募集
業務委託(フリーランス)
HadoopAWSTerraform
インフラエンジニア
作業内容 データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudiといった分散DBの知見のある方を募集いたします。
データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。
【Python】ビッグデータ基盤システム開発案件
業務委託(フリーランス)
PythonSQLHadoopAWSGitHive
サーバーサイドエンジニア
作業内容 一般ユーザー向けにコンテンツ制作を手掛けている企業にて
ビッグデータ基盤システム開発案件にご参画いただきます。
インフラエンジニアやアプリケーションエンジニアといった垣根なく、
ご活躍いただく業務になります。
【AWS】インフラ構築案件
業務委託(フリーランス)
JavaPHPPythonRedisMemcacheDBHadoopAWSGitJenkinsChefHive
インフラエンジニアサーバーエンジニア
作業内容 ・AWSを使ったインフラ構築、及び運用に携わっていただきます。