Acuity
Acuity
Acuity ist ein in Atlanta ansässiges Unternehmen für Industrietechnologie, das sich auf Beleuchtungs- und Gebäudemanagementlösungen spezialisiert hat. Über Acuity Brands Lighting und Acuity Intelligent Spaces entwickeln die rund 13.000 Mitarbeitenden intelligente Beleuchtungsprodukte und Lösungen für das intelligente Raum- und Gebäudemanagement, die Kunden dabei helfen, Erlebnisse, Produktivität und Nachhaltigkeit zu verbessern. Das Unternehmen verbindet Dateninteroperabilität mit fortschrittlichen Technologieplattformen, um den sich wandelnden Anforderungen in den Bereichen Bauwesen, Beratung und Energie gerecht zu werden.

Senior Data Engineer bei Acuity — Cork, Irland (vor Ort)

Entwickeln Sie Databricks- und Azure-Lakehouse-Pipelines für Acuitys Industriegeschäft. Schaffen Sie zuverlässige Datenprodukte für Reporting, Analysen, KI und nachgelagerte Anwendungen.

Beschreibung

  • Entwickeln und optimieren Sie skalierbare ETL-/ELT-Pipelines mit Databricks, Python/PySpark, SQL, Delta Lake und Azure.
  • Integrieren Sie Daten aus Datenbanken, APIs, Dateien, SaaS-Anwendungen und Ereignisquellen über Batch- und Streaming-Workflows.
  • Entwickeln Sie wiederverwendbare Bronze-, Silber- und Gold-Datensätze mit metadaten- und konfigurationsgesteuerten Methoden.
  • Implementieren Sie inkrementelle Verarbeitung, Schema-Weiterentwicklung, Fehlerbehandlung, Wiederherstellung, Abstimmung und Audit-Kontrollen.
  • Wenden Sie Regeln zur Datenqualität, Tests, Lineage und Monitoring an, um vertrauenswürdige Datenprodukte bereitzustellen.
  • Arbeiten Sie mit Architektinnen und Architekten, Analystinnen und Analysten sowie Geschäftsteams zusammen, um Quell-Ziel-Zuordnungen, Geschäftsregeln und Abnahmekriterien festzulegen.
  • Bereiten Sie leistungsfähige Datensätze für Power BI, Unternehmensberichte, Analysen, Data Science, KI und nachgelagerte Anwendungen auf.
  • Verbessern Sie Zuverlässigkeit, Leistung und Kosten von Pipelines, SQL, Spark-Workloads, Speicher und Tabellendesigns.
  • Verwenden Sie Git und Azure DevOps zur Verwaltung von Backlogs, User Stories, Branches, Pull Requests, CI/CD, Releases und Nachverfolgbarkeit.
  • Schreiben Sie Unit-, Integrations- und Abstimmungstests und beteiligen Sie sich an Design- und Code-Reviews.
  • Überwachen Sie Produktionspipelines, bearbeiten Sie Vorfälle, untersuchen Sie Ursachen und dokumentieren Sie Betriebsabläufe.
  • Entwickeln Sie wiederverwendbare Komponenten und Engineering-Standards, begleiten Sie Kolleginnen und Kollegen und unterstützen Sie die kontinuierliche Verbesserung im gesamten DCoE-Datenteam.

Anforderungen

  • Mindestens 5–6 Jahre praktische Erfahrung im Data Engineering mit der Entwicklung produktiver Pipelines und Datenprodukte.
  • Fundierte Kenntnisse in Databricks, Azure Data Lake, Delta Lake, Python/PySpark und SQL.
  • Umfassendes Verständnis von ETL/ELT, Datenintegration, Lakehouse-Architektur und Bronze-, Silber- und Gold-Designmustern.
  • Erfahrung mit Datenqualität, Abstimmung, Schema-Verwaltung, Orchestrierung, Performance-Tuning und Produktionssupport.
  • Verständnis von Reporting und Analysen, einschließlich der Nutzung aufbereiteter Daten durch Power BI oder vergleichbare BI-Tools.
  • Praktische Erfahrung mit agiler Bereitstellung, Git, CI/CD, DevOps-Praktiken und Azure DevOps.
  • Bachelorabschluss in Informatik, Informationssystemen, Ingenieurwesen oder einem verwandten Fachgebiet oder gleichwertige praktische Erfahrung.
  • Zertifizierung für Databricks oder Microsoft Azure.
  • Erfahrung mit Lieferketten-, Fertigungs-, ERP-, Betriebs- oder Industriedaten.
  • Erfahrung mit Streaming, Unity Catalog, metadatengesteuerten Frameworks, Data Governance oder der Datenaufbereitung für KI/ML.
  • Ausgeprägte analytische Fähigkeiten und strukturiertes Problemlösungsvermögen.
  • Klare Kommunikation mit technischen und geschäftlichen Zielgruppen.
  • Teamorientierte Arbeitsweise und ausgeprägtes Verantwortungsbewusstsein.
  • Fähigkeit, Qualität, Geschwindigkeit, Wartbarkeit und betriebliche Anforderungen in Einklang zu bringen.
  • Fähigkeit, Ingenieurinnen und Ingenieure zu begleiten und Standards durch Design- und Code-Reviews sowie wiederverwendbare Engineering-Praktiken zu verbessern.

Zusatzleistungen

  • Krankenversicherungsschutz
  • Zahnversicherung
  • Sehversorgung
  • Leistungen zur betrieblichen Altersvorsorge (401(k))
  • Provisionen oder leistungsabhängige Vergütung, abhängig von der Position

Ähnliche Stellen