シニアデータエンジニア、データガバナンスとデータリネージュ — CI&T、ブラジル・ハイブリッド勤務
CI&T のグローバルクライアント向けに、Azure Databricks パイプラインと Lakehouse ソリューションを開発します。 アナリティクス、BI、AI を支えるデータ能力を高めます。
仕事内容
- Azure Databricks と Azure Data Factory を使用して、スケーラブルなパイプラインを設計・最適化する
- 取り込みから変換、配信までの ETL/ELT ワークフローを構築する
- Bronze、Silver、Gold の各レイヤーにわたって Medallion アーキテクチャと Data Lakehouse ソリューションを実装する
- PySpark、Spark SQL、SQL、Python を使用してデータエンジニアリングソリューションを作成する
- Delta Lake を使用してデータの品質、一貫性、パフォーマンス、信頼性を維持する
- BI とアナリティクスのユースケース向けにデータモデルを設計・改善する
- リレーショナルデータベースや API など、さまざまなシステムのデータを接続する
- BI、データサイエンス、エンジニアリング、ビジネスの各チームと協働する
- 品質、ガバナンス、バージョン管理、CI/CD のプラクティスに従う
- 生成 AI ツールとコーディングアシスタントを活用し、開発の生産性と品質を向上させる
- クラウド、データ、人工知能に関わるグローバルなモダナイゼーションおよび変革イニシアチブを支援する
応募要件
- 本番環境でデータエンジニアとして働いた実績
- Azure Databricks の豊富な実務経験
- 大規模データ処理と最適化を含む、高度な PySpark および Apache Spark スキル
- 高度な SQL スキル
- データエンジニアリングにおける実務的な Python 経験
- Azure Data Factory を使用したパイプラインの構築・オーケストレーション経験
- ETL/ELT および Bronze、Silver、Gold の Medallion アーキテクチャに関する知識
- Delta Lake および Data Lakehouse 環境の経験
- ディメンショナルデータモデリングとリレーショナルデータモデリングに関する知識
- Git とバージョン管理ワークフローの経験(Bitbucket の経験があれば尚可)
- CI/CD、Azure Pipelines、Azure DevOps、または同等ツールに関する知識
- SQL Server や Oracle などのリレーショナルデータベースの経験
- 実践的、分析的で、ソリューション志向の姿勢
- 問題を自律的に調査し、改善案を提案する能力
- チームや業務機能を越えて効果的に協働する能力
- Kimball 手法および多次元モデリングの経験があれば尚可
- Azure Purview または同等のデータガバナンス・データカタログ経験があれば尚可
- Azure DevOps をデータパイプラインに適用した経験があれば尚可
- Streaming、Spark Structured Streaming、または Azure Event Hubs の知識があれば尚可
- Erwin または類似のデータモデリングツールの経験があれば尚可
- GitHub Copilot、Databricks Assistant、またはその他の AI 開発ツールの適用経験があれば尚可
- Azure DP-203 または Databricks 認定資格があれば尚可
福利厚生
- 医療保険・歯科保険
- 食事・食品手当
- 育児支援
- 延長育児休暇
- Wellhub(Gympass)、TotalPass、その他のジム・ウェルネス提携
- 利益分配・成果プログラム(PLR)
- 生命保険
- CI&T University 継続学習プラットフォームの利用
- 割引クラブ会員制度
- 心身の健康とウェルビーイングに関する無料オンラインリソース
- 妊娠・責任ある子育てに関する講座
- オンライン学習プラットフォームとの提携
- 語学学習プラットフォーム
- 障害のある方への支援と職場での合理的配慮
- 健康・ウェルビーイングチーム、インクルージョン専門家、アフィニティグループ
- グローバルプロジェクト、継続的な学習、イノベーション、キャリア開発
