
シニアデータエンジニア – Databricks(インド・リモート)
インドにおける Oportun の金融サービス業務向けに、安全な Databricks データプロダクトとレイクハウス基盤を主導します。 アーキテクチャ、本番パイプライン、ガバナンス、連携、会員コミュニケーションデータを担当します。
仕事内容
- オーディエンス選定、適格性、設定、同意、キャンペーン入力、配信データ、運用レポート向けの安全でスケーラブルなデータプロダクトを構築・運用する。
- データモデル、契約、リネージ、所有権標準を含む安全なデータアーキテクチャを定義する。
- 技術調査と設計から本番リリースまで、複雑なデータエンジニアリング施策を担当する。
- エンジニアと関係者を調整し、依存関係、リスク、技術的な意思決定を管理する。
- Databricks、Apache Spark、PySpark、Spark SQL、Delta Lake、SQL を使用して、本番パイプラインと連携を開発・最適化する。
- 適切なレガシーデータワークロードをモダナイズする。
- データロード、照合、リトライ、冪等性、リカバリ、デプロイのための信頼性の高いパターンを実装する。
- パフォーマンス、完全性、可用性、セキュリティを確保するため、レイクハウスと運用データ資産を維持する。
- 検証、監視、アラート、ダッシュボード、ランブック、リネージを通じてデータ品質とガバナンスの管理策を確立する。
- プライバシー、コンプライアンス、リスク、セキュリティチームと連携し、個人識別情報、同意、設定、抑制、保持、アクセス制御を扱う。
- 設計レビューとコードレビューを通じて技術的な方向性を示し、ジュニアエンジニアを指導し、複雑な本番調査を主導する。
- インシデントの根本原因を追跡し、永続的な是正策を提供する。
- プロダクト、コミュニケーション、アナリティクス、エンジニアリング、リスク、プライバシー、コンプライアンスなどのチームと協働する。
- 自動テスト、CI/CD、展開計画、リリース後の測定を通じてリリースを準備する。
- パイプラインのパフォーマンス、品質、適時性、コスト、信頼性を追跡する。
- 反復作業を減らし、エンジニアリング上の意思決定を強化するため、AI ツールを適切に活用する。
応募要件
- アーキテクチャ、パイプライン、プラットフォーム、データベースまたはレイクハウス運用にわたる、少なくとも6年のデータエンジニアリング経験。
- コンピューターサイエンス、データサイエンス、工学、または関連分野の学士号もしくは修士号、または同等の実務経験。
- Python、PySpark、SQL を高度に実務で扱えること。
- リーダーシップ、分析的な問題解決力、適切な判断力、明確なコミュニケーション能力を発揮した実績。
- Databricks、Apache Spark、Spark SQL、Delta Lake、ワークフローオーケストレーション、CI/CD、Git ワークフロー、自動テスト、エンドツーエンドのデータ連携またはプロダクトに関する本番経験。
- データ品質、オブザーバビリティ、アラート、リネージ、クラウドサービス、特に AWS に関する知識。
- アクセス制御、シークレット管理、暗号化、監査可能性によって機微な会員データを保護した経験、およびアジャイル開発の経験。
- 金融サービス、融資、マーケティングテクノロジー、顧客コミュニケーション、その他の規制産業での経験。
- Unity Catalog または類似のガバナンスプラットフォームに精通し、Java または Scala の知識があること。
- ChatGPT や Copilot などのツールを、エンジニアリングの生産性、テスト、ドキュメント、トラブルシューティング、データ品質、運用の改善に活用した経験。
- AI エージェントや自動化への理解があり、セキュリティ、プライバシー、正確性、人による監督について慎重に判断できること。
福利厚生
- 医療、歯科、眼科保険。
- 積立基金。
- 生命保険および傷害保険。
- インターネット手当。
- 燃料手当。
- 食事手当。
- 電話手当。
- 身体的、経済的、専門的なウェルビーイングを支援するよう設計された報酬・福利厚生パッケージ。









