【中途】パブリッククラウド環境でのデータウェアハウス構築を担うデータエンジニア ※リモートOK
株式会社Sun Asterisk
給与:605万円〜1500万円
雇用形態:正社員
勤務地:東京都
仕事内容
同社では「アイデアを持つパートナー(起案者)」に対して、サービスデザインから技術選定、開発までを一気通貫で提供しています。
スタートアップの開発支援から大手企業の新規サービス立ち上げまで様々な規模のプロジェクトがあり、その中でもパブリッククラウド環境でのデータウェアハウス構築を担うデータエンジニアとして業務を担っていただきます。
【業務詳細】
・パブリッククラウド(AWS、GCP、Azure など)上でのデータ基盤・データパイプラインの設計、構築、運用
・データ収集、加工、ストレージに関わるシステムの開発
・大規模データを対象としたETL (ELT) 処理の最適化
・リアルタイムデータの処理
・データクレンジング処理やデータマートの構築
・データの可視化および分析基盤の構築支援
・データパイプラインの品質管理、パフォーマンスの向上
・データウェアハウスの運用保守
・ステークホルダー(データアナリスト、データサイエンティストなど)との連携
・顧客との要件定義や設計フェーズでのコミュニケーション
応募資格
<応募資格(必須)>
■パブリッククラウド(AWS、GCP、Azure)を利用したデータ基盤の構築経験
Amazon Redshift、Google BigQuery、Azure Synapse Analytics など
■ETLプロセスの設計・開発経験
dbt、dagster、Airflow、Glue、Dataform、DataFactory、Kafka、Amazon Kinesis など
■Python、Java、またはScalaを用いたデータ処理の実務経験
■SQLの高度なスキル
■CI/CDツールを用いたパイプラインの自動化経験