
シニア Databricks プラットフォームエンジニア
グローバルな保険・資産運用会社向けに、安全な Databricks プラットフォームを構築・運用します。 クラウドインフラ、ガバナンス、信頼性、AI ワークロードを担当します。
仕事内容
- 複数のクラウド環境にわたるエンタープライズ向け Databricks プラットフォームを設計・運用する。
- Azure および/または AWS 上に Databricks ワークスペース、クラスター、プラットフォームコンポーネントを展開する。
- 拡張性、安全性、高可用性を備えた Databricks 環境を維持する。
- プラットフォーム標準、アーキテクチャパターン、運用プラクティスを定める。
- Unity Catalog、Delta Lake、ワークスペースのガバナンスを管理する。
- プラットフォームのライフサイクル管理、アップグレード、キャパシティ計画を担う。
- Terraform でインフラをプロビジョニングし、デプロイと構成管理を自動化する。
- ネットワーク、プライベート接続、安全な統合を設計する。
- バックアップ、災害復旧、高可用性を実装する。
- クラウドリソースの利用効率を高め、プラットフォームコストを管理する。
- 企業のセキュリティ統制とコンプライアンス要件を適用する。
- ロールベースのアクセス制御と最小権限モデルを設定する。
- シークレット、Key Vault 連携、暗号化標準を管理する。
- 監視、監査ログ、ガバナンス制御を設定する。
- 規制およびセキュリティ監査に対応する。
- プラットフォームの健全性、可用性、パフォーマンスを監視する。
- インフラとデータワークロードのオブザーバビリティを構築する。
- プラットフォーム、ネットワーク、ワークロードの問題をトラブルシューティングする。
- 運用手順書とサポートプロセスを作成する。
- 根本原因分析と修復を主導する。
- データ、AI、クラウドインフラの各チームと連携する。
- プラットフォームアーキテクチャと運用の卓越性について助言する。
- エンジニアリング標準と再利用可能な自動化パターンを作成する。
- エンジニアを指導し、クラウドエンジニアリングの実践を推進する。
- Databricks AI と機械学習の環境をサポートする。
- MLflow による実験、モデル追跡、デプロイを可能にする。
- Mosaic AI、Vector Search、Feature Store、RAG アーキテクチャをサポートする。
- 生成 AI や大規模言語モデルのソリューションを構築するチームを支援する。
- AI ワークロード向けのインフラとガバナンスを開発する。
- Databricks AI の新機能を評価し、導入方針を提案する。
応募要件
- コンピューターサイエンス、情報技術、工学、または関連分野の学士号。
- クラウド、プラットフォーム、またはインフラエンジニアリングの実務経験が5年以上。
- Databricks 環境の展開・管理に関する実務経験が3年以上。
- Azure および/または AWS のエンタープライズクラウドプラットフォームをサポートした経験。
- 安全で拡張性と高可用性を備えたクラウドソリューションの設計経験。
- Databricks の管理、Unity Catalog、Delta Lake、ワークスペース管理、クラスター構成と最適化、ワークフロー、ジョブスケジューリングのスキル。
- Microsoft Azure と Amazon Web Services (AWS) の知識。
- Terraform の実務経験。
- Azure DevOps または GitHub Actions の経験。
- CI/CD パイプラインの経験。
- PowerShell、Python、または Bash のスクリプト作成スキル。
- RBAC、プライベートエンドポイント、VNET/VPC 設計、暗号化と鍵管理、ID フェデレーション、シークレット管理の知識。
- Databricks の監視、Azure Monitor、CloudWatch、Log Analytics、パフォーマンスチューニング、キャパシティ管理の経験。
- 歓迎:Databricks Certified Platform Administrator、Databricks Certified Data Engineer Professional、Azure Administrator Associate、Azure Solutions Architect、または AWS Solutions Architect の認定資格。
- 歓迎:エンタープライズ AI および機械学習プラットフォームの実装経験。
- 歓迎:保険や金融サービスなど、規制対象業界でのサポート経験。
- Mosaic AI、MLflow、Databricks Model Serving、Vector Search、Feature Store、RAG、大規模言語モデル、AI ガバナンスと責任ある AI の実践、AI を活用したデータエンジニアリングパターンに関する知識が望ましい。
福利厚生
- 契約者としての業務形態(PJ)。
- ハイブリッド勤務。週3日はサンパウロの Pinheiros オフィスに出社。









