11 – 50 Empleados
Patrocinador de visa para trabajadores cualificadosConsultoríaInteligencia artificialSimple Machines es una consultora australiana que trabaja en arquitectura e ingeniería de datos, ciencia de datos y desarrollo de software. Sus consultores diseñan y crean plataformas de datos distribuidas y aplicaciones de aprendizaje automático para empresas, organismos públicos y compañías tecnológicas globales. El equipo también ofrece asesoría y formación en Kafka como socio Preferred de Confluent, además de asesoría y formación en Spark y Scala mediante sus alianzas con Databricks y Lightbend. Para quienes exploran puestos en ingeniería de datos, ciencia de datos o desarrollo de software, Simple Machines ofrece un entorno de consultoría especializado y centrado en aplicar los datos a sistemas del mundo real.
Ingeniero/a principal de datos (remoto, Polonia)
Lidera la arquitectura y la entrega de plataformas de datos nativas de la nube, canalizaciones y productos de datos para Simple Machines, una consultora tecnológica global. Define la dirección técnica y colabora con clientes mientras trabajas a distancia desde Polonia.
Descripción
- Lidera la arquitectura de plataformas de datos modernas y nativas de la nube, desde el diseño hasta la entrega.
- Crea ecosistemas de datos escalables con malla de datos, productos de datos y contratos de datos.
- Define la arquitectura de ingesta, almacenamiento, procesamiento y acceso a los datos.
- Garantiza que las plataformas cumplan los estándares de seguridad, conformidad y preparación para producción.
- Entrega plataformas nativas de la nube con Databricks, Snowflake, AWS y GCP.
- Conecta los sistemas de los clientes para ofrecer acceso escalable a los datos.
- Crea y optimiza canalizaciones de datos por lotes y en tiempo real.
- Utiliza Kafka, Flink, Kinesis y Pub/Sub para transmisión de datos y mensajería.
- Coordina flujos de trabajo con Airflow, Dataflow y Glue.
- Procesa y transforma grandes conjuntos de datos con Spark y Flink.
- Trabaja con bases de datos relacionales, NoSQL y analíticas, como Postgres, BigQuery, Snowflake, Cassandra y MongoDB.
- Mejora los formatos de almacenamiento y los patrones de acceso con Parquet, Delta, ORC y Avro.
- Crea soluciones seguras y conformes, teniendo en cuenta la seguridad desde el inicio.
- Integra la gobernanza de datos sin ralentizar los flujos de trabajo de desarrollo.
- Colabora directamente con los clientes para entender sus retos y diseñar soluciones.
- Convierte los requisitos empresariales en decisiones prácticas de ingeniería.
- Asesora a los clientes como socio técnico de confianza.
- Define estándares, patrones y prácticas de ingeniería.
- Revisa diseños y código, y ofrece orientación técnica y mentoría.
- Refuerza la calidad de los datos, las pruebas, la observabilidad y las prácticas operativas.
Requisitos
- Aporta sólidos conocimientos de Python y SQL.
- Cuenta con amplia experiencia en Spark y plataformas de datos modernas como Databricks o Snowflake.
- Comprende los servicios de datos en la nube de AWS o GCP.
- Ha asumido la responsabilidad de la arquitectura de plataformas de datos a gran escala.
- Aplica sólidas habilidades de modelado de datos y toma decisiones arquitectónicas acertadas.
- Equilibra rendimiento, coste y complejidad al elegir soluciones.
- Ha creado y operado canalizaciones de datos de producción a gran escala.
- Tiene experiencia con diversas tecnologías de almacenamiento y formatos de datos.
- Utiliza herramientas de infraestructura como código, como Terraform o Pulumi.
- Ha creado canalizaciones de CI/CD con herramientas como GitHub Actions o ArgoCD.
- Ha utilizado marcos de pruebas y calidad de datos como dbt, Great Expectations o Soda.
- Tiene experiencia en consultoría o servicios profesionales.
- Puede cuestionar supuestos y orientar a los clientes hacia mejores resultados.
- Se siente a gusto asesorando a ingenieros sénior y contribuyendo a la cultura técnica.
Beneficios
- Trabaja en retos complejos con un impacto significativo.
- Crea plataformas modernas en lugar de mantener sistemas heredados.
- Colabora con ingenieros con experiencia.
- Disfruta de autonomía e influencia en su trabajo.
- Tiene oportunidades de desarrollo profesional.