
Commonwealth Bank es una empresa australiana de servicios financieros que abarca la banca minorista, premium, empresarial e institucional. Su oferta también incluye servicios de gestión de fondos, jubilación, seguros, inversión y corretaje de acciones. Con más de 52.000 empleados y más de 800.000 accionistas, Commonwealth Bank opera en una amplia variedad de productos y servicios financieros diseñados para ayudar a sus clientes a gestionar y hacer crecer sus finanzas.
Ingeniero/a principal de datos, Commonwealth Bank
Lidera el desarrollo de plataformas de datos escalables en AWS y Snowflake para Payments de Commonwealth Bank. Crea pipelines fiables y productos de datos, y establece estándares de ingeniería en todo el banco.
Descripción
- Define la dirección técnica de iniciativas clave de ingeniería de datos y establece la arquitectura y los estándares de varios equipos.
- Diseña y mejora pipelines escalables por lotes y en streaming con Spark, Airflow y AWS Glue.
- Desarrolla soluciones de datos nativas de la nube con servicios de AWS como S3, EMR, Glue, Lambda, Redshift y SageMaker.
- Crea productos de datos de alta calidad e impulsa patrones empresariales para plataformas de datos y mercados de datos.
- Lidera las prácticas de ingeniería para pruebas, CI/CD, infraestructura como código, observabilidad y fiabilidad en producción.
- Define enfoques para la calidad de los datos, la resiliencia, el rendimiento y la facilidad de mantenimiento de cargas de trabajo distribuidas.
- Forma a otros ingenieros, orienta las decisiones técnicas y fortalece las competencias de ingeniería de datos en los equipos.
- Colabora con Arquitectura, Producto, Seguridad y consumidores de datos para convertir necesidades complejas en soluciones de ingeniería prácticas.
Requisitos
- Experiencia sólida en ingeniería de datos y trayectoria influyendo en las prácticas de ingeniería más allá del equipo inmediato.
- Amplia experiencia con servicios de datos de AWS, especialmente S3, EMR, Glue, Lambda, Redshift y SageMaker, o con tecnologías comparables en la nube.
- Experiencia con Snowflake, plataformas de datos a gran escala, productos de datos o patrones de mercados de datos.
- Dominio de Python y PySpark.
- Experiencia en el diseño y la operación de pipelines por lotes y en streaming con Airflow, Spark y Glue.
- Experiencia con CI/CD, pruebas automatizadas e infraestructura como código.
- Experiencia con observabilidad, monitorización e ingeniería de fiabilidad para plataformas y pipelines de datos en producción.
- Dominio avanzado de SQL y sólidos conocimientos de bases de datos relacionales.
- Liderazgo técnico en arquitectura y diseño, incluida la mentoría de ingenieros y la definición de estándares entre equipos.
Beneficios
- Un entorno de trabajo accesible, inclusivo y respetuoso.
- Apoyo y adaptaciones en el lugar de trabajo para necesidades de accesibilidad.
- Oportunidades de desarrollo profesional dentro de Commonwealth Bank Group.
Empleos relacionados
No se encontraron empleos
Prueba a ajustar o borrar los filtros para encontrar más oportunidades.