【フレックス有!ハイブリッド型勤務】次世代データプラットフォームの設計・構築をリードするデータエンジニア_Agent
株式会社Nint
給与:700万円〜1000万円
雇用形態:正社員
勤務地:東京都
仕事内容
■募集背景と業務概要
事業の急成長に伴い、日々生成される数十TBのデータを扱う既存のデータ基盤が大きな変革期を迎えています。
AI活用や迅速なR&Dを加速させるため、3〜5年後を見据えた次世代データプラットフォームの設計・構築をリードしていただくデータエンジニアを募集します。
本ポジションは、単なる開発・運用に留まらず、アーキテクチャの選定から経営層への提案、上海のグローバルチームとの連携まで、裁量権を持ってプロジェクト全体を牽引する、非常にやりがいのあるポジションです。
■主な業務内容(一例)
・次世代データ基盤のアーキテクチャ選定、設計、開発、運用までを一貫してリード
・上海開発チームとの技術連携やデータパイプラインとクラウドインフラの構築・最適化
・最新技術のR&D(調査・検証)とプロダクトへの導入提案
・ビジネス要件の定義からプロジェクト全体の計画策定、リスク管理、推進
■現在の課題
現在のデータ基盤は、上海チームが管理するClickhouse, ElasticSearch, TiDB, Mysqlといった複数のDBで構成されていますが、以下のような課題を抱えています。
・データサイエンティスト、データアナリストやWeb App開発者が安全かつ迅速にデータへアクセスできる環境が整備できていない。
・データソースが複数のDBやクラウドストレージに分散し、一元的なデータ管理や品質担保ができていない。
・現行DBのアーキテクチャでは、事業拡大に伴うデータ量の増加に対応できるスケーラビリティが確保できたとは言えない。
応募資格
【必須スキル】
・大規模データ基盤の設計・構築・運用経験(3年以上)
・分散処理/クエリエンジン (Spark, Presto, Hadoop, ClickHouse, TiDB 等)
・クラウドサービス (AWS, GCP, Azure 等)
・ワークフロー管理 (Airflow, dbt 等)
・Python、SQLを用いたデータ処理・開発経験(3年以上)
・大規模なデータクローリングシステムの開発・運用経験