日本を代表する大手テック企業で、GCP・PySpark・Databricksを活用した大規模データ基盤の設計・構築を担うデータエンジニアのポジションです。
多様な業界の大規模データを扱い、優秀なAI・データエンジニアと英語中心の国際的な環境で協働しながら、最先端のデータエンジニアリング技術を磨けます。
GCPを中心としたデータ基盤の構築経験を活かし、英語中心の開発環境で技術力を活かしてキャリアを伸ばしたい方におすすめです。
主な職務内容
- GCPを活用した大規模データパイプラインおよびETL/ELTワークフローの設計・構築・運用
- PySpark、Databricksを使用した分散データ処理ジョブの開発およびパフォーマンス最適化
- 大規模データに対応するデータレイクおよびデータウェアハウスの設計・構築・運用
- クラウドデータ基盤のスケーラビリティ、信頼性、パフォーマンス向上
- 国際的なアジャイル開発環境において、AI、データ、エンジニアリングチームと連携しながらプロジェクトを推進
必須条件
経験・資格:
- データエンジニアリングの実務経験 5年以上
- Google Cloud Platform(GCP)に関する深い知識・実務経験:BigQuery、Cloud Composer、Dataflow、Google Cloud Storage(GCS)、Pub/Sub
- Python、SQL、PySparkを用いた大規模データ処理の高い技術力
- Databricks環境での実務経験:Delta Lake、Unity Catalog、Workflows
- Airflowの実務経験
- 現在日本国内に居住し、有効な就労資格を保有していること
ソフトスキル:
- 国際的かつアジャイルなエンジニアリング環境で円滑に協働できる方
- 複雑かつ大規模なデータシステムに対する高い分析力・問題解決力
- AI、データ、エンジニアリング分野のスペシャリストと積極的に連携できるコミュニケーション力
語学力:
- 日本語: 基礎レベル
- 英語: 中級〜ビジネスレベル
歓迎条件
- 大規模・高ボリュームなデータセットを扱った経験
- AI、機械学習、データ分析を支えるデータエンジニアリングプロジェクトの経験
- 大規模なEコマース、デジタルプラットフォーム、コンシューマーテクノロジー領域での経験
採用企業について
日本を代表する大規模なデジタルサービス企業です。
多様な業界にまたがる大規模データを活用できる環境で、AIやビッグデータ領域の優秀なエンジニアと協働しながら、国内の消費者向けサービスを支えるデータ基盤の構築に携われます。
この求人がおすすめの理由
- 日本有数のデジタルサービス環境で、多様な業界の大規模データを扱える
- GCP・PySpark・Databricksの専門性を活かし、大規模なクラウドデータ基盤の構築に携われる
- 優秀なAI・データエンジニアと協働できる
- 国際的な環境で英語を活かせる
転職のご相談もお気軽にどうぞ。
