シニアAIデータエンジニア(Databricks)
クライアントのモダナイゼーション案件向けに、本番品質の Databricks データ基盤を構築します。ソフトウェアデリバリーチームの一員として、信頼性の高いパイプラインと AI 対応システムを開発します。
仕事内容
- ソフトウェアデリバリーチーム内で協働する
- クライアントの本番品質のデータ基盤整備を支援する
- モダナイゼーション、プラットフォーム、データ、AI 対応の案件を支援する
- データエンジニアリングの主要プラットフォームとして Databricks を使用する
- 本番環境を重視し、堅牢で綿密に設計されたデータシステムを構築する
応募要件
- データエンジニア、シニアデータエンジニア、データプラットフォームエンジニア、または Databricks エンジニアとしての最近または現在の経験
- Delta Lake、Spark または PySpark、Unity Catalog、あるいはレイクハウスプロジェクトを含む Databricks の本番環境での経験
- Python、テスト、Git、CI/CD、コードレビュー、デプロイ、または Infrastructure as Code に関する高いスキル
- データ品質、オーケストレーション、監視、リネージ、スキーマ進化、またはデータコントラクトの管理経験
- クライアントデリバリー、ステークホルダー対応、モダナイゼーションプロジェクト、メンタリング、またはチーム横断のエンジニアリング経験
- AWS または Azure の経験。いずれか一方のクラウドプラットフォームで可
- ML または AI の特徴量パイプラインの開発、MLflow の利用、モデルリネージの管理、埋め込みやベクトル検索の利用、または評価用データセットの準備経験
