シニアデータエンジニア - マラソン・ペトロリアム、サンアントニオ、テキサス州
マラソン・ペトロリアムの業務を支える、スケーラブルな Azure データパイプラインとクラウドソリューションの設計を主導します。 データアーキテクチャの構築、ガバナンスとセキュリティの強化、他のエンジニアの育成を担います。
仕事内容
- スケーラブルなデータパイプラインとクラウドベースのデータソリューションを構築、強化、最適化する
- データエンジニアリングの取り組みに Azure Data Lake、Synapse Analytics、Azure Functions、Databricks を適用する
- 分析、製品、アーキテクチャ、ガバナンス、ビジネスの関係者と連携し、要件をスケーラブルなソリューションに変換する
- データ抽出、取り込み、変換のワークフローを設計・改善する
- 複雑で大容量のデータセット向けにデータアーキテクチャを開発する
- データセキュリティとプライバシー管理を適用しながら、高度なデータパイプラインを提供する
- オープンソース技術とクラウド技術を使用して、複雑なデータ品質・処理作業を実施する
- 重大インシデント時に専門的な技術サポートを提供する
- 信頼性の高いデータ統合を維持するため、部門横断で調整する
- 一貫性とエンジニアリング標準を促進しながら、データ処理の実践を継続的に改善する
- 複雑なデータ課題に対応し、戦略的なデータインフラ計画に貢献する
- データソリューションの品質保証とテスト活動を主導する
- 経験の浅いデータエンジニアを指導・支援する
- 技術レビューを通じて、エンジニアリング標準、再利用可能なパターン、ソリューション設計の定義を支援する
応募要件
- 情報技術または関連分野の学士号が必須
- 関連するデータエンジニアリング経験が5年以上必須
- Azure Data Factory および／または Databricks Workflows を含む、Python、SQL、Spark、オーケストレーションツールの高いスキル
- Hadoop や Spark などのビッグデータ技術および分散コンピューティングフレームワークの経験
- AWS、Azure、Google Cloud Platform にわたるクラウドデータプラットフォームと関連サービスの知識
- データガバナンスポリシー、手順、標準を策定・管理する能力
- ETLプロセス、パイプライン、取り込みフレームワークを通じたデータ統合の経験
- スケーラブルなデータモデルを設計・実装する能力
- データライフサイクル全体にわたるデータ運用の理解
- データプライバシーの実践を適用し、アクセス権と同意プロトコルを管理する能力
- データ品質のディメンション、手法、ベストプラクティスに関する深い知識
- データプライバシー規制、サイバーセキュリティの実践、データセキュリティ技術の知識
- 監視・可観測性ツールと実践に関する知識
- DevOps手法の理解
- 一般的なプログラミング能力
- メタデータ管理ソリューションの経験
- NoSQLデータベースの知識
- リアルタイムデータ処理の知識
福利厚生
- 医療、視力、歯科の補償
- 有給休暇
- 401(k)マッチング
- 有給育児休暇
- 教育費補助
- 会社が後援する年次賞与（裁量による）