
シニアデータエンジニア(ルーマニア・リモート)| Sedona Digital
Sedona Digitalの保険業界の顧客向けに、PySpark、SQL、Databricksのデータプラットフォームを構築・運用します。 データパイプライン、照合、データ品質、クラウドデータソリューションを担当します。
仕事内容
- 業務データおよびソースシステムデータの取り込みパイプラインを評価し、再構築します。
- データマッピング、データリネージ、依存関係、管理された移行と切り替えの計画を設計します。
- 詳細なデータ照合プロセスを作成し、維持します。
- PySparkによるデータ処理と階層・ロールアップ機能を改善します。
- テスト、バージョン管理、メタデータ、オブザーバビリティ、デプロイ管理を追加します。
- ビジネスおよび技術の専門家と協力し、データの網羅性を高めます。
- GCPのデータパイプラインの選択肢を評価し、実装を支援します。
- Microsoft Dynamics 365などのシステムからマッピングや参照データを直接取得する方法を検討します。
- 影響評価、テスト、照合を含め、レポート階層やフィルタリングロジックの変更を支援します。
- 自動化されたデータ品質チェック、監視、運用管理を作成し、維持します。
- チームによる一元化されたレポートおよびデータ機能の導入を支援します。
- 技術文書、意思決定記録、照合の根拠、差異の説明、引き継ぎ資料を作成します。
- エンジニアや関係者と、優先順位を付けたバックログおよび短期の反復スプリントを通じて成果を届けます。
応募要件
- データエンジニアリングまたは近接するデータ職種で5年以上の実務経験があり、本番データソリューションの構築・サポートに豊富な実務経験があること。
- PySpark、SQL、Databricksの実践的なスキルを持ち、本番品質のデータパイプラインを開発・サポートした経験があること。
- GCPのデータ技術およびパイプラインの実務経験があること。
- データパイプラインのテスト、最適化、運用支援の経験があること。
- ディメンショナルデータ、マスターデータ/参照データ、または階層データのモデリング経験が豊富であること。
- 適切な追跡可能性を確保しながら、複雑なエンティティ照合、データマッピング、ロールアップロジックを実装した経験があること。
- 自動化されたデータ品質チェックと照合プロセスを実装した実務経験があること。
- データエンジニアリングソリューションで、オブザーバビリティ、監査履歴、バージョン管理、CI/CDを導入した経験があること。
- ソースシステムデータの評価、およびデータ契約、マッピング、データリネージ、依存関係の文書化経験があること。
- 管理されたデータパイプラインまたはプラットフォームの移行を管理した経験があること。
- データの問題を調査し、値、レコード数、マッピング、階層の結果における差異を明確に説明できること。
- プラットフォームチーム、アナリスト、ビジネス担当者と直接連携し、曖昧なレポートやマッピングのニーズをテスト済みのエンジニアリングソリューションにできること。
- 優れたコミュニケーション能力があり、簡潔な技術文書、意思決定記録、差異の説明、引き継ぎ資料を作成できること。
- 自律的に業務を進め、協力的で反復的なデリバリー環境に適応できること。
- 歓迎条件:保険、ロンドン市場、再保険、仲介、流通、または保険契約レベルのデータ環境での経験。
- 歓迎条件:Microsoft Dynamics 365または同様の業務ソースシステムの統合経験。
- 歓迎条件:セマンティックモデルやレポートの依存関係を含むPower BIの経験。
- 歓迎条件:緩やかに変化するディメンション(SCD)および履歴階層の管理経験。
- 歓迎条件:複雑なマスターデータ/参照データ、エンティティ照合、階層ソリューションの支援経験。
- 歓迎条件:過去のデータやレポートの不一致を調査した経験。
- 歓迎条件:管理されたデータ移行、ソースシステムの移行、またはプラットフォーム変更の支援経験。
- 歓迎条件:分散型アジャイルチームでの経験、および英国のビジネス・技術関係者との協業経験。


