データエンジニアリングスペシャリスト - Brasilseg - サンパウロ ハイブリッド勤務
国内有数の保険会社である Brasilseg のデータエンジニアリングスペシャリストとして、分析プラットフォームの発展を推進します。分析、人工知能、デジタルトランスフォーメーションを支える、拡張性の高い Databricks と AWS のパイプラインを構築します。
仕事内容
- 分析プラットフォームと戦略的な取り組みのために、堅牢で効率的なデータアーキテクチャを設計する。
- エンタープライズデータ向けのエンジニアリング標準、再利用可能なプラクティス、ライフサイクルの指針を定義する。
- 高い品質、ガバナンス、データリネージュ管理を備えた Bronze、Silver、Gold のデータパイプラインを構築する。
- Databricks と AWS 全体で、データの取り込み、変換、提供のワークフローを作成・改善する。
- API、リレーショナルデータベース、NoSQL プラットフォーム、エンタープライズシステムとの連携を開発・維持する。
- データエコシステムを標準化する、再利用可能なフレームワーク、自動化、エンジニアリングソリューションを構築する。
- 情報の一貫性、完全性、網羅性、コンプライアンスを守るデータ品質管理を導入する。
- パイプライン、クエリ、分散処理ワークロードのパフォーマンスを追跡し、改善する。
- 本番障害、ボトルネック、基盤プラットフォームの問題を診断し、解決する。
- データ資産のデータカタログ、ガバナンス、リネージュ、アクセス制御のプラクティスを強化する。
- データプラットフォームを強化できるテクノロジー、ツール、アーキテクチャパターンを評価する。
- 技術リソースとして複数分野のチームを支援し、効果的なデータエンジニアリングの実践を推進する。
応募要件
- コンピューターサイエンス、コンピューターエンジニアリング、情報システム、データエンジニアリング、ソフトウェアエンジニアリング、統計学、数学、または関連分野の学士号。
- ETL または ELT パイプラインの開発を含む、データエンジニアリングの実務経験。
- Databricks と AWS サービスの実務経験。
- SQL の高度なスキル。
- Python の高度なスキル。
- データレイク、データウェアハウス、Bronze、Silver、Gold のメダリオンアーキテクチャに関する実務経験。
- データパイプラインのパフォーマンス改善、監視、可観測性に関する経験。
- データガバナンスとデータ品質プラクティスに関する知識。
- Spark、PySpark、Delta Lake、Unity Catalog の経験。
- API とメッセージングプラットフォームを介したデータ接続の経験。
- 保険業界の経験があれば尚可。
- Databricks Certified Data Engineer Associate または Professional 認定があれば尚可。
- AWS Certified Data Engineer Associate または AWS Certified Solutions Architect 認定があれば尚可。
- DataOps の知識があれば尚可。
- データパイプラインへの CI/CD 実装経験があれば尚可。
- Terraform と Infrastructure as Code の知識があれば尚可。
- ストリーミングデータとイベント駆動型システム設計の経験があれば尚可。
福利厚生
- 医療保険
- 歯科保険
- 葬祭援助保険
- 交通手当
- 食事券
- 食費手当
- 追加の13か月目の食費手当
- 団体生命保険
- 私的年金制度
- 託児またはベビーシッター手当
- 利益分配および業績連動型 PLR ボーナス
- Wellhub メンバーシップ
- 誕生日有給休暇
- 500以上のコースを提供する Desenvolve ラーニングプログラム
- 心身、社会、経済面のウェルビーイングを支援する総合健康プログラム