Acuity
Acuity
Acuity — промислово-технологічна компанія з Атланти, що спеціалізується на рішеннях у сфері освітлення та управління будівлями. У підрозділах Acuity Brands Lighting і Acuity Intelligent Spaces близько 13 000 працівників розробляють інтелектуальні освітлювальні продукти та інструменти для управління просторами, допомагаючи клієнтам покращувати досвід, продуктивність і сталий розвиток. Компанія поєднує взаємодію даних із передовими технологічними платформами, щоб відповідати мінливим потребам у сферах будівництва, консалтингу та енергетики.

Провідний інженер даних в Acuity — Корк, Ірландія (робота на місці)

Створюйте конвеєри lakehouse на Databricks і Azure для бізнесу Acuity у сфері промислових технологій. Розробляйте надійні продукти даних для звітності, аналітики, ШІ та подальших застосунків.

Опис

  • Створюйте й оптимізуйте масштабовані конвеєри ETL/ELT з Databricks, Python/PySpark, SQL, Delta Lake і Azure.
  • Завантажуйте дані з баз даних, API, файлів, SaaS-застосунків і джерел подій за допомогою пакетних і потокових процесів.
  • Розробляйте повторно використовувані набори даних bronze, silver і gold із застосуванням методів на основі метаданих і конфігурацій.
  • Впроваджуйте інкрементальну обробку, еволюцію схем, обробку помилок, відновлення, звіряння й аудиторський контроль.
  • Застосовуйте правила якості даних, тестування, відстеження походження даних і моніторинг для створення надійних продуктів даних.
  • Співпрацюйте з архітекторами, аналітиками й бізнес-командами, щоб визначати зіставлення джерел і цільових систем, бізнес-правила та критерії приймання.
  • Готуйте високопродуктивні набори даних для Power BI, корпоративної звітності, аналітики, науки про дані, ШІ та подальших застосунків.
  • Покращуйте надійність і продуктивність конвеєрів, SQL, робочих навантажень Spark, сховищ і структури таблиць, знижуючи витрати.
  • Використовуйте Git і Azure DevOps для керування беклогом, історіями користувачів, гілками, запитами на злиття, CI/CD, випусками й відстежуваністю.
  • Пишіть модульні, інтеграційні тести й тести звіряння, беріть участь в архітектурних обговореннях і перевірках коду.
  • Відстежуйте виробничі конвеєри, опрацьовуйте інциденти, з’ясовуйте їхні першопричини й документуйте операційні процедури.
  • Розробляйте повторно використовувані компоненти й інженерні стандарти, наставляйте колег і сприяйте постійному вдосконаленню команди даних DCoE.

Вимоги

  • Щонайменше 5–6 років практичного досвіду в інженерії даних, зокрема створення виробничих конвеєрів і продуктів даних.
  • Глибокі знання Databricks, Azure Data Lake, Delta Lake, Python/PySpark і SQL.
  • Глибоке розуміння ETL/ELT, інтеграції даних, архітектури lakehouse і шаблонів проєктування bronze, silver і gold.
  • Досвід забезпечення якості даних, звіряння, керування схемами, оркестрації, налаштування продуктивності й підтримки виробничих систем.
  • Розуміння звітності й аналітики, зокрема того, як Power BI або подібні BI-інструменти використовують підготовлені дані.
  • Практичний досвід роботи за Agile, з Git, CI/CD, практиками DevOps і Azure DevOps.
  • Ступінь бакалавра з інформатики, інформаційних систем, інженерії або суміжної галузі чи еквівалентний практичний досвід.
  • Сертифікація Databricks або Microsoft Azure.
  • Досвід роботи з даними ланцюгів постачання, виробництва, ERP, операційної діяльності або промисловості.
  • Досвід потокової обробки, Unity Catalog, фреймворків на основі метаданих, управління даними або підготовки даних для ШІ/МО.
  • Розвинені аналітичні здібності й структурований підхід до розв’язання проблем.
  • Уміння чітко спілкуватися з технічною та бізнес-аудиторією.
  • Командний підхід і відповідальне ставлення до роботи.
  • Уміння знаходити баланс між якістю, швидкістю, зручністю супроводу й операційними потребами.
  • Уміння наставляти інженерів і підвищувати стандарти завдяки архітектурним обговоренням, перевіркам коду та повторно використовуваним інженерним практикам.

Переваги

  • Медичне страхування
  • Стоматологічне страхування
  • Плани страхування зору
  • Переваги плану 401(k)
  • Комісійна або стимулювальна винагорода залежно від посади

Схожі вакансії

Acuity

Провідний архітектор даних — Databricks і Azure

Acuity

Керуйте створенням контрольованої архітектури lakehouse на Databricks і Azure, формуючи масштабовані рішення для бізнесів Acuity у сферах промислових технологій, освітлення та інтелектуальних просторів.

Відкрити