AVANTTi
AVANTTi
AVANTTi е бразилска компания за технологични услуги, която се фокусира върху подпомагането на организации да превръщат технологичните и иновационните инициативи в измерима бизнес стойност. Услугите ѝ включват подбор на IT персонал и намиране на таланти, бързо сформиране на екипи, разработване на софтуер чрез софтуерна фабрика с технологии като ABAP, Java и .NET, както и управление на портфолио и SAFe чрез методологията VMO (Value Management Office). AVANTTi подпомага цифровата трансформация и реализацията на корпоративни IT решения за организации в сектори като банково дело, производство, логистика, търговия на дребно и образование, като развива дейност в Куритиба, Сао Пауло и Рио де Жанейро.

Старши инженер по данни за Azure Databricks

Старши инженерът по данни в AVANTTi изгражда потоци от данни и ETL/ELT процеси в Azure Databricks. Подпомага мащабируеми корпоративни системи за данни за анализи и бизнес нужди.

Описание

  • Изграждайте и оптимизирайте потоци от данни с Azure Databricks, PySpark, Azure Data Factory, Python и Azure Data Lake.
  • Разработвайте и поддържайте ETL/ELT процеси за корпоративна интеграция и анализи.
  • Зареждайте, трансформирайте, валидирайте и съгласувайте данни от различни системи.
  • Профилирайте и анализирайте данни, за да откривате проблеми с качеството и да поддържате тяхната съгласуваност и надеждност.
  • Пишете и оптимизирайте сложни SQL заявки за ефективна обработка на данни.
  • Отстранявайте проблеми и подобрявайте производителността при мащабни работни натоварвания.
  • Решавайте производствени инциденти от ниво 2, засягащи потоците в Azure Data Factory, задачите в Databricks и работните процеси с данни.
  • Наблюдавайте и поддържайте производствените потоци, за да осигурите наличност, мащабируемост и оперативна ефективност.
  • Подпомагайте внедряванията и пускането на версии в среди за разработка, тестване и продукция.
  • Координирайте приоритетите между проектите, работете самостоятелно и спазвайте сроковете.

Изисквания

  • Над осем години опит в инженерството на данни.
  • Доказан опит в инженерството на данни и разработката на ETL процеси.
  • Задълбочен практически опит с Azure Databricks и Azure Data Factory (ADF).
  • Напреднали умения в разработката на ETL/ELT процеси и трансформирането на данни.
  • Напреднали умения по SQL, включително писане, оптимизиране и настройване на сложни заявки.
  • Опит с Python и PySpark.
  • Опит с Azure Data Lake и корпоративна интеграция на данни.
  • Опит в анализа, валидирането и профилирането на данни и осигуряването на качеството им.
  • Опит в поддръжката, наблюдението и отстраняването на проблеми с производствени потоци.
  • Умение за самостоятелна работа, добра организация и управление на приоритети.
  • Добри умения за устна и писмена комуникация.
  • Напреднало владеене на английски език.
  • Предимство е опитът с CI/CD потоци и DevOps практики.
  • Предимство е познаването на Git, Azure DevOps или сходни инструменти за контрол на версиите и внедряване.
  • Предимство е познаването на инструменти за облачно наблюдение, регистриране на събития и наблюдаемост.

Придобивки

  • Трудово правоотношение по договор CLT.
  • Изцяло дистанционна работа.

Свързани работни места

Hitss Brasil

Cloud архитект на средно ниво – Kubernetes и OpenShift

Hitss Brasil

Поддръжка на облачните и контейнерните среди на Hitss Brasil с фокус върху Kubernetes и Red Hat OpenShift. Определяне на архитектурни стандарти за платформата и автоматизиране на конфигурацията с Ansible за надеждна работа.

Отвори