CI&T — глобальна технологічна компанія, що спеціалізується на цифровій трансформації. Заснована у 1995 році, вона допомагає організаціям модернізувати розроблення й експлуатацію продуктів, а також взаємодію з клієнтами за допомогою цифрових продуктів і сервісів. Компанія працює над модернізацією застосунків, хмарними рішеннями, штучним інтелектом та аналітикою даних, клієнтським досвідом, дизайном продуктів, стратегічним консалтингом і занурювальними технологіями. Поєднуючи технологічну та бізнес-експертизу, CI&T підтримує організації у сферах консалтингу, охорони здоров’я та маркетингу, допомагаючи їм розвиватися й працювати ефективніше.
Провідний інженер із даних, управління даними та походження даних — CI&T, гібридний формат, Бразилія
Розробляйте конвеєри Azure Databricks і рішення Lakehouse для глобальних клієнтів CI&T. Розвивайте можливості роботи з даними для аналітики, BI та ШІ.
Опис
- Проєктувати й оптимізувати масштабовані конвеєри за допомогою Azure Databricks і Azure Data Factory
- Створювати ETL/ELT-процеси від завантаження даних до їхнього перетворення та передавання
- Впроваджувати Medallion Architecture і рішення Data Lakehouse на рівнях Bronze, Silver і Gold
- Створювати інженерні рішення для роботи з даними за допомогою PySpark, Spark SQL, SQL і Python
- Використовувати Delta Lake для забезпечення якості, узгодженості, продуктивності та надійності даних
- Проєктувати й удосконалювати моделі даних для BI та аналітики
- Підключати дані з різних систем, зокрема реляційних баз даних і API
- Співпрацювати з командами BI, Data Science, Engineering і бізнесу
- Дотримуватися практик якості, управління даними, контролю версій і CI/CD
- Застосовувати інструменти генеративного ШІ та асистенти для написання коду, щоб підвищувати продуктивність і якість розробки
- Підтримувати глобальні ініціативи з модернізації та трансформації у сферах хмарних технологій, даних і штучного інтелекту
Вимоги
- Підтверджений досвід роботи інженером із даних у продуктивних середовищах
- Глибокий практичний досвід роботи з Azure Databricks
- Високий рівень володіння PySpark і Apache Spark, зокрема обробкою та оптимізацією даних у великих масштабах
- Високий рівень володіння SQL
- Практичний досвід використання Python в інженерії даних
- Досвід створення й оркестрації конвеєрів за допомогою Azure Data Factory
- Знання ETL/ELT і Medallion Architecture з рівнями Bronze, Silver і Gold
- Досвід роботи з Delta Lake і середовищами Data Lakehouse
- Знання розмірного та реляційного моделювання даних
- Досвід роботи з Git і процесами контролю версій, бажано з Bitbucket
- Знання CI/CD, Azure Pipelines, Azure DevOps або подібних інструментів
- Досвід роботи з реляційними базами даних, такими як SQL Server або Oracle
- Практичний, аналітичний підхід, орієнтований на пошук рішень
- Здатність самостійно досліджувати проблеми та пропонувати покращення
- Ефективна співпраця між командами й бізнес-функціями
- Знання методології Kimball і досвід багатовимірного моделювання будуть перевагою
- Досвід роботи з Azure Purview або подібними рішеннями для управління даними й каталогізації буде перевагою
- Досвід застосування Azure DevOps до конвеєрів даних буде перевагою
- Знання Streaming, Spark Structured Streaming або Azure Event Hubs буде перевагою
- Досвід роботи з Erwin або подібними інструментами моделювання даних буде перевагою
- Досвід використання GitHub Copilot, Databricks Assistant або інших інструментів розробки на основі ШІ буде перевагою
- Сертифікація Azure DP-203 або Databricks буде перевагою
Переваги
- Медичне та стоматологічне страхування
- Допомога на харчування та продукти
- Допомога з витратами на догляд за дітьми
- Розширена відпустка для догляду за дитиною
- Wellhub (Gympass), TotalPass та інші партнерські програми для спорту й здоров’я
- Програма участі в прибутку та результатах (PLR)
- Страхування життя
- Доступ до платформи безперервного навчання CI&T University
- Членство в дисконтному клубі
- Безкоштовні онлайн-ресурси про фізичне й психічне здоров’я та добробут
- Курс про вагітність і відповідальне батьківство
- Партнерства з онлайн-платформами навчання
- Платформа для вивчення мов
- Підтримка та адаптація робочого місця для людей з інвалідністю
- Команда здоров’я та добробуту, фахівці з інклюзії та групи за інтересами
- Глобальні проєкти, постійне навчання, інновації та професійний розвиток