データエンジニアリング、クラウド移行およびプラットフォームエンジニア——ゼネラルモーターズ(ハイブリッド)
クラウド移行とプラットフォームエンジニアリングを通じて、ゼネラルモーターズの Oracle ワークロードを近代化します。 安全でガバナンスの効いたデータプラットフォームとパイプラインを構築し、インフラ自動化と信頼性の高い運用プラクティスを実現します。
仕事内容
- Oracle ベースのアーキテクチャ、ワークロード、依存関係、インターフェース、データフロー、運用プロセスを評価し、移行を計画・実行する。
- データの取り込み、変換、検証、照合、公開のためのスケーラブルなバッチおよびニアリアルタイムパイプラインを作成する。
- データ、スキーマ、ETL/ELT ワークロード、ストアドプロシージャ、インターフェース、下流利用者向けの移行アプローチを策定する。
- Azure、Google Cloud Platform、マルチクラウド環境でクラウドデータプラットフォームの機能を構築・運用する。
- 必要に応じて Databricks Workflows、Unity Catalog、Delta Lake、MLflow、Asset Bundles を適用する。
- クラウド、ネットワーク、データプラットフォーム、Databricks リソース向けに、再利用可能な Terraform の Infrastructure as Code を作成する。
- CI/CD ワークフローを設計し、開発、テスト、ステージング、本番環境間のデプロイと環境昇格を自動化する。
- ID とアクセス管理、暗号化、シークレット、鍵のローテーション、最小権限を対象とするデータセキュリティ管理を適用する。
- カタログ化、リネージ、分類、保持、監査可能性、責任あるデータ利用に関するガバナンスプラクティスを確立する。
- 監視、ログ記録、アラート、データ品質チェック、運用ダッシュボードを実装する。
- 自動化と継続的な最適化によって、プラットフォームの信頼性、拡張性、性能、コスト効率を高める。
- インシデント対応、サービス復旧、根本原因分析、インシデント後レビューを主導または支援する。
- SLA、SLO、データ鮮度目標、復旧目標、エラーバジェットのプラクティスを定義・支援する。
- 自動化された単体、統合、データ品質、回帰、エンドツーエンドテストを構築する。
- アーキテクト、アプリケーションチーム、分析・AI 実務担当者、セキュリティパートナー、プロダクトオーナー、グローバル技術チームと協働する。
- 2週間のスプリント、バックログのリファインメント、見積もり、デリバリープランニング、デモ、継続的改善に貢献する。
- アーキテクチャ図、データフロー記録、API・インターフェース文書、ランブック、オンボーディングガイド、README ファイル、本番稼働準備資料を維持する。
応募要件
- コンピューターサイエンス、工学、情報システム、データエンジニアリングまたは関連分野の学士号、または同等の実務経験。
- データエンジニアリング、クラウドプラットフォームエンジニアリング、DevOps、ソフトウェアエンジニアリングまたは関連分野で少なくとも3年の実務経験。
- 本番品質のデータソリューションを提供した実績。
- データパイプラインと ETL/ELT ワークロードの設計・サポート経験。Oracle または別のエンタープライズ向けリレーショナルデータベースの経験が望ましい。
- 自動化、開発者向けツール、データエンジニアリング、PySpark 処理に活用できる高度な Python スキル。
- SQL、リレーショナルモデリング、スキーマ設計、クエリ最適化、データ照合の経験。
- 少なくとも1つの主要クラウドプラットフォームの経験。Azure または Google Cloud Platform が望ましい。
- 再利用可能なモジュール、リモートステート、環境固有の設定を含む Terraform による Infrastructure as Code の構築経験。
- Git、ブランチ戦略、プルリクエスト、コードレビュー、自動化された CI/CD ワークフローの経験。
- Databricks、Delta Lake、BigQuery、Synapse または同等技術など、クラウドデータプラットフォームまたはレイクハウスの使用経験。
- クラウドネットワーク、ID とアクセス管理、暗号化、シークレット管理、安全なサービス間統合に関する知識。
- 監視、ログ記録、アラート、運用ダッシュボード、データ品質管理を実装した経験。
- 優れたトラブルシューティング、分析、コミュニケーション、部門横断的な協働能力。
- 歓迎:Oracle データベース、ETL ジョブ、ストアドプロシージャ、データウェアハウスをクラウドサービスへ移行した経験。
- 歓迎:Databricks Workflows、Unity Catalog、Delta Lake、MLflow、Asset Bundles の実務経験。
- 歓迎:ADLS Gen2、Key Vault、Entra ID、AKS、Azure ネットワーク、Azure DevOps または GitHub Actions などの Azure サービスに関する知識。
- 歓迎:Cloud Storage、BigQuery、Dataproc、GKE、Pub/Sub、Secret Manager、Cloud IAM、VPC ネットワークなどの Google Cloud サービスに関する知識。
- 歓迎:Apache Kafka、Apache Pulsar、Pub/Sub または同等技術を用いたストリーミングおよびイベント駆動処理の経験。
- 歓迎:Kubernetes、Azure Container Apps、GKE またはその他のコンテナ化ランタイムの経験。
- 歓迎:Datadog またはその他のオブザーバビリティプラットフォームの経験。
- 歓迎:MLflow、モデルまたは特徴量パイプライン、実験追跡、AI/ML ワークロードの本番監視の経験。
- 歓迎:HashiCorp Vault または同等のエンタープライズシークレット管理ツールの経験。
- 歓迎:規制対象、セキュリティ重視、またはエンタープライズ規模の環境での経験。
- 歓迎:本番稼働準備レビュー、インシデント管理、ポストモーテム、サービス信頼性プラクティスの経験。
- 現在または将来、GM による移民関連のスポンサーシップを必要としないこと。
福利厚生
- ハイブリッド勤務。
- クラウドデータプラットフォーム、分析、人工知能、エンタープライズモダナイゼーションに関わる業務。
- 帰属意識と専門能力開発を重視するインクルーシブな職場環境。
- 職務関連のアセスメントおよび/または雇用前スクリーニングに関する情報の提供。
- 障害のある応募者には合理的配慮の支援を提供。
