シニアAIプラットフォームエキスパート(Azure Databricks)
Visiumのプラットフォームチームに、Azure Databricksのアーキテクチャ、MLOps、セキュリティ、信頼性について助言します。 エンジニアを指導し、規制の厳しい業界向けAIシステムを強化します。
仕事内容
- Visiumの社内チームを導き、Azure Databricks AIプラットフォームの設計、構築、改善を支援します。
- ワークスペース、開発・テスト・本番環境、Unity Catalog、セキュリティ、ネットワーク、Azure連携のアーキテクチャを策定し、レビューします。
- コード、データ、モデル向けのCI/CD/CTパイプラインについて助言します。自動テスト、環境昇格、モデルレジストリのワークフロー、継続的なトレーニングも対象です。
- アーキテクチャ上の判断、コード、Terraform設定、パイプラインの実装を評価し、実践的な提案を行います。
- 再利用可能なMLOpsの標準、テンプレート、エンジニアリング手法を確立します。
- プラットフォームの信頼性、拡張性、ガバナンス、セキュリティ、運用を改善します。
- 実践的なトラブルシューティングとリファレンス実装を通じて、チームの課題解決を支援します。
- チームメンバーを指導し、設計レビューとコードレビューを主導するとともに、知識を共有してチームの自立性を高めます。
応募要件
- データエンジニアリング、MLエンジニアリング、プラットフォームエンジニアリング、またはMLOpsで豊富な経験があること。関連分野で8年以上の経験が望ましいです。
- Azure Databricksの本番環境での豊富な経験があること。3年以上の経験が望ましいです。
- MLflow、モデルレジストリ、Model Serving、Feature Engineering、Databricks Workflows、モニタリングなど、MLOpsとDatabricksエコシステムを理解していること。
- CI/CD/CTパイプラインを設計・実装した経験があり、できればGitLabを使用した経験があること。また、Infrastructure as Codeの実践経験があること。
- Terraformとクラウドインフラの実務経験があること。DatabricksおよびAzureプロバイダーの使用経験があれば尚可です。
- ADLS Gen2、Key Vault、Entra IDなどのAzureサービスと、VNetインジェクションやプライベートエンドポイントを含むクラウドネットワークに詳しいこと。
- PythonとPySparkに精通し、テスト、パッケージ化、コード品質にソフトウェアエンジニアリングの手法を適用できること。
- Unity Catalogを使ったデータガバナンス、リネージ、アクセス制御の経験があること。
- エンジニアの指導、設計レビューとコードレビューの主導、技術標準の策定ができること。
- Vector Search、Mosaic AI Agent Framework、AI Gatewayなど、DatabricksのGenAI/LLMOpsツールの経験があれば尚可です。
- セキュアなプライベートネットワークのクラウド環境構築と機密データの取り扱い経験を高く評価します。
関連求人
求人が見つかりません
フィルターを調整またはクリアして、他の求人を探してみてください。
