Acuity
Acuity
Acuity to firma z branży technologii przemysłowych z siedzibą w Atlancie, specjalizująca się w rozwiązaniach oświetleniowych i systemach zarządzania budynkami. Około 13 000 pracowników firmy, działających w ramach Acuity Brands Lighting i Acuity Intelligent Spaces, tworzy inteligentne produkty oświetleniowe oraz narzędzia do zarządzania przestrzenią, które pomagają klientom poprawiać doświadczenia, produktywność i zrównoważony rozwój. Firma łączy interoperacyjność danych z zaawansowanymi platformami technologicznymi, aby odpowiadać na zmieniające się potrzeby w budownictwie, doradztwie i sektorze energetycznym.

Starszy inżynier danych w Acuity — Cork, Irlandia (praca na miejscu)

Twórz potoki lakehouse w Databricks i Azure dla firmy Acuity z branży technologii przemysłowych. Buduj niezawodne produkty danych na potrzeby raportowania, analityki, AI i aplikacji downstream.

Opis

  • Twórz i optymalizuj skalowalne potoki ETL/ELT z użyciem Databricks, Python/PySpark, SQL, Delta Lake i Azure.
  • Pozyskuj dane z baz danych, interfejsów API, plików, aplikacji SaaS i źródeł zdarzeń w procesach wsadowych i strumieniowych.
  • Opracowuj wielokrotnego użytku zestawy danych bronze, silver i gold, stosując metody oparte na metadanych i konfiguracji.
  • Wdrażaj przetwarzanie przyrostowe, ewolucję schematów, obsługę błędów, odzyskiwanie, uzgadnianie i kontrole audytowe.
  • Stosuj reguły jakości danych, testowanie, śledzenie pochodzenia danych i monitorowanie, aby tworzyć wiarygodne produkty danych.
  • Współpracuj z architektami, analitykami i zespołami biznesowymi przy określaniu mapowań źródeł i celów, reguł biznesowych oraz kryteriów akceptacji.
  • Przygotowuj wydajne zestawy danych na potrzeby Power BI, raportowania korporacyjnego, analityki, data science, AI i aplikacji downstream.
  • Zwiększaj niezawodność i wydajność potoków, SQL, obciążeń Spark, pamięci masowej i projektów tabel, a także ograniczaj koszty.
  • Korzystaj z Git i Azure DevOps do zarządzania backlogiem, historyjkami użytkowników, gałęziami, pull requestami, CI/CD, wydaniami i śledzeniem zmian.
  • Pisz testy jednostkowe, integracyjne i uzgadniające oraz uczestnicz w przeglądach projektów i kodu.
  • Monitoruj potoki produkcyjne, obsługuj incydenty, analizuj ich przyczyny źródłowe i dokumentuj procedury operacyjne.
  • Opracowuj wielokrotnego użytku komponenty i standardy inżynierskie, wspieraj rozwój współpracowników i ciągłe doskonalenie zespołu danych DCoE.

Wymagania

  • Co najmniej 5–6 lat praktycznego doświadczenia w inżynierii danych, w tym w budowaniu produkcyjnych potoków i produktów danych.
  • Bardzo dobra znajomość Databricks, Azure Data Lake, Delta Lake, Python/PySpark i SQL.
  • Dogłębne rozumienie ETL/ELT, integracji danych, architektury lakehouse oraz wzorców projektowych bronze, silver i gold.
  • Doświadczenie w obszarze jakości danych, uzgadniania, zarządzania schematami, orkiestracji, optymalizacji wydajności i wsparcia produkcyjnego.
  • Znajomość raportowania i analityki, w tym sposobu, w jaki Power BI lub podobne narzędzia BI korzystają z przygotowanych danych.
  • Praktyczne doświadczenie w pracy z Agile, Git, CI/CD, praktykami DevOps i Azure DevOps.
  • Tytuł licencjata z informatyki, systemów informacyjnych, inżynierii lub pokrewnej dziedziny albo równoważne doświadczenie praktyczne.
  • Certyfikat Databricks lub Microsoft Azure.
  • Doświadczenie w pracy z danymi dotyczącymi łańcuchów dostaw, produkcji, systemów ERP, operacji lub przemysłu.
  • Doświadczenie w przetwarzaniu strumieniowym, Unity Catalog, ramach opartych na metadanych, zarządzaniu danymi lub przygotowywaniu danych dla AI/ML.
  • Silne zdolności analityczne i uporządkowane podejście do rozwiązywania problemów.
  • Umiejętność jasnej komunikacji z odbiorcami technicznymi i biznesowymi.
  • Umiejętność współpracy i wysokie poczucie odpowiedzialności.
  • Umiejętność godzenia jakości, szybkości, łatwości utrzymania i potrzeb operacyjnych.
  • Umiejętność wspierania rozwoju inżynierów i podnoszenia standardów przez przeglądy projektów i kodu oraz stosowanie wielokrotnego użytku praktyk inżynierskich.

Benefity

  • Opieka zdrowotna
  • Ubezpieczenie stomatologiczne
  • Plany opieki okulistycznej
  • Świadczenia w ramach planu 401(k)
  • Prowizje lub wynagrodzenie motywacyjne zależnie od stanowiska

Powiązane oferty pracy