シニアデータエンジニア
CGIのコンサルティング顧客向けに、ETLパイプラインと企業データプラットフォームをテストします。SQL、Databricks、Spark、Python、Hadoop、Azure Data Factoryを使ってデータ品質を検証します。
仕事内容
- 企業データプラットフォーム、ETL/ELTパイプライン、データ連携のテスト計画、シナリオ、ケースを作成して実施します。
- ETLワークフローをエンドツーエンドでテストし、ソースシステムとターゲットシステム間の正確性、完全性、変換ロジック、照合、データ品質を確認します。
- バックエンドとデータの検証に用いる複雑なSQLクエリを作成して実行します。
- Databricks、Apache Spark、PySpark、Python、Hive、Hadoop/HDFS、Azure Data Factory (ADF)を使用して大規模データ処理をテストします。
- パイプラインとアプリケーション全体で、機能、統合、回帰、システム、データ品質の各テストを実施します。
- Control-MおよびUnix/Linux環境で、バッチ処理、スケジュール、依存関係、ワークフローを確認します。
- 不具合を記録、追跡、再テストし、開発者、データエンジニア、ビジネスアナリストなどの関係者と解決まで連携します。
- 必要に応じて、再利用可能なテストスクリプトと自動化を構築、保守します。
- スプリント計画、リファインメント、デイリースタンドアップ、レビュー、レトロスペクティブなど、アジャイル/Scrumの活動に参加します。
応募要件
- ソフトウェア品質エンジニアリングまたはテストの経験が8年以上あること。
- ETLテスト、データ検証、統合テスト、回帰テストに関する豊富な経験。
- ソースからターゲットへの検証、照合、データ品質チェックに用いる複雑なクエリを含む、高いSQL実務スキル。
- 大規模データプラットフォームおよびETL/ELTパイプラインのテスト経験。
- Databricks、Apache Spark、PySpark、Python、Azure Data Factory (ADF)の実務経験。
- Hadoop/HDFS、Hiveなど、Hadoopエコシステムのツール使用経験。
- Unix/Linux環境およびControl-Mなどのエンタープライズスケジューリングツールの使用経験。
- データ品質、変換、マッピング、ソースからターゲットへの検証に関する確かな理解。
- アジャイル/Scrumの開発環境での不具合管理およびテスト管理の経験。
- 優れた分析力、トラブルシューティング力、コミュニケーション力、協調性。
- 米国内の任意の場所からリモートで勤務できること。
- バックグラウンド調査に合格すること。
福利厚生
- 競争力のある報酬と利益分配プログラム。
- 医療、歯科、眼科の保険。
- 基本生命保険および傷害死亡・四肢切断保険。
- 会社のマッチング拠出がある401(k)プラン。
- CGI株式購入プラン。
- 柔軟な勤務形態と、年間10～20日の有給休暇（累積）。
- 年間10日の有給祝日。
- 連続80時間以上の有給病気・安全休暇。
- 連続20～70営業日の有給育児休暇。
- 年間1～7日の忌引休暇。
- 召喚期間中の有給陪審員休暇。
- 学習機会と授業料補助。
- 健康とウェルビーイングのプログラム。
- 柔軟なハイブリッド勤務モデル。
- 従業員リソースグループと地域活動。
- リーダーによるメンタリングと専門能力開発プログラム。