EUROPEAN DYNAMICS
EUROPEAN DYNAMICS
EUROPEAN DYNAMICS разработва софтуер за електронно управление и предоставя ИТ услуги на институции, организации и големи предприятия по целия свят. Портфолиото ѝ включва електронни граждански и бизнес регистри, системи за управление на финансови данни, платформи за обществени поръчки, облачни решения, консултантски услуги, разработване на софтуер по поръчка и аутсорсинг. Компанията инвестира и в научноизследователска и развойна дейност, насочена към нововъзникващи информационни и комуникационни технологии, и участва в международни проекти. С дейност в над 47 държави EUROPEAN DYNAMICS поставя акцент върху качеството и сигурността на своите продукти и услуги.

Старши инженер по анализ на бази данни

Изграждайте и оптимизирайте потоци от данни с dbt, PySpark и Apache Iceberg за технологични проекти в европейския публичен сектор. Хибридната позиция е базирана в Брюксел и включва работа в офиса на компанията или клиента.

Описание

  • Изграждайте надеждни и мащабируеми потоци и работни процеси за трансформация на данни.
  • Подобрявайте производителността на dbt проектите и времето за изпълнението им.
  • Създавайте и документирайте проверки за качеството на данните и контролни тестове в dbt.
  • Настройвайте автоматизирани регресионни тестове и валидиране, за да поддържате качеството и съгласуваността на резултатите от потоците.
  • Споделяйте с екипа практики за поддръжка и развитие на dbt проекти.
  • Превръщайте бизнес изисквания и аналитични документи в оперативни потоци за трансформация на данни.
  • Работете съвместно на място с екипа за разработка и IT екипа на голям клиент.

Изисквания

  • Университетска степен по компютърни науки, информационни технологии, системно инженерство или сродна област и най-малко 12 години релевантен IT опит.
  • Практически опит с dbt, за предпочитане dbt Core, при проектиране, поддръжка, тестване, документиране и разширяване на продукционни проекти за аналитични трансформации.
  • Опит в аналитичното инженерство и съвременното моделиране на данни, включително слоести архитектури, повторно използваеми макроси, контроли за качество на данните и CI/CD.
  • Опит с писане на PySpark трансформации за обработка на големи обеми данни; оптимизацията на Spark задачи е предимство.
  • Практически опит с Apache Iceberg, включително развитие на партиции и схеми, управление на моментни снимки и функцията time travel.
  • Опит с инструменти за оркестриране и планиране на задачи, например Dagster.
  • Добро познаване на SAS ETL и наследени кодови бази; мигрирането на SAS работни процеси към dbt е значително предимство.
  • Отлични умения по SQL, включително сложни трансформации, оптимизация на производителността и инкрементална обработка.
  • Добро разбиране на изпълнението на Apache Spark, партиционирането, оптимизацията на файловото оформление и настройването на производителността.
  • Добро познаване на валидирането, съгласуването и тестването на данни при миграция на наследени системи към dbt и PySpark.
  • Познания за контрол на версиите и съвместна разработка, включително Git, преглед на код, управление на издания и автоматизирани канали за внедряване.
  • Отлично владеене на английски език.

Придобивки

  • Конкурентно възнаграждение според квалификацията и опита.
  • Възможност за избор между работа по договор и пакет за възнаграждение с пълни придобивки.
  • Поверителен процес на кандидатстване.
  • Международна, многоезична и мултикултурна работна среда.
  • Равни възможности за заетост.

Свързани работни места

EUROPEAN DYNAMICS

Старши инженер по анализ на бази данни

EUROPEAN DYNAMICS

Изграждайте мащабируеми потоци за данни с dbt, PySpark и Iceberg. Подпомагайте европейски институции чрез инженеринг на аналитични данни, тестване и миграция от наследени SAS системи.

Отвори