
ジュニア ETL・GIS データエンジニア
Peraton の連邦絶滅危惧種データ統合プログラム向けに、Databricks ETL および GIS 検証パイプラインを構築します。 クラウドレイクハウスへの取り込み、データ品質、相互運用性テストを支援します。
仕事内容
- クラウドレイクハウスのステージング環境で Databricks Delta Live Tables パイプラインを構築、デプロイします。
- 複数の信頼できる情報源から分布域データを集約し、正規化します。
- 空間データ形式と座標参照系を標準化します。
- フィールドマッピング、型変換、NULL 処理を含むソースからターゲットへの変換を作成します。
- 代表的な分類群を用いて、プロトタイプのデータ取り込みワークフローを実行します。
- 取り込み結果の完全性、正確性、一貫性、空間的整合性を評価します。
- プロトタイプの取り込み結果、欠陥、是正手順を記録します。
- 「プロトタイプ取り込み結果レポート」を作成します。
- 重大度と是正状況に基づいてデータ品質上の欠陥を追跡します。
- バージョン管理を用いて ETL コードを保守し、必要なピアレビューを記録します。
- GIS エンジニアによる空間データ検証を支援します。
- テストデータセット、パイプライン実行、データ検証を用いた相互運用性テストを支援します。
応募要件
- 次の学歴・経験条件のいずれかを満たすこと:学士号を有し、職務経験がないこと、準学士号を有し、職務経験が2年あること、または高校卒業資格もしくは同等資格を有し、職務経験が4年あること。
- 米国市民であること。
- Public Trust クリアランスを取得し、維持できること。
- すべての業務を米国内で行うこと。
- Databricks と Delta Live Tables、または同等のクラウド ETL フレームワークの実務経験があること。
- データ品質の検証、ソースからターゲットへのマッピング、データ変換の経験があること。
- データモデリング、またはスキーマ設計の文書化経験があること。
- テストまたは取り込み結果を文書化し、重大度別に欠陥を記録した経験があること。
- ETL パイプライン開発において Python または Scala を使いこなせること。
- クラウドレイクハウスでのクエリ、検証、データ変換に SQL を使いこなせること。
- 地理空間データ形式と座標参照系に精通していること。
- 歓迎:AWS GovCloud、または同等の FedRAMP 認可クラウド環境での経験。
- 歓迎:ArcGIS や QGIS などの GIS ツールに関する知識。
- 歓迎:連邦政府のデータガバナンスおよびメタデータ標準に関する経験。
- 歓迎:Databricks Associate 認定、または同等の資格。
福利厚生
- 時間外勤務手当の対象となる場合があります。
- シフト勤務手当が適用される場合があります。
- 裁量ボーナスが適用される場合があります。
関連求人
