Sigma Software Group
Sigma Software Group
Sigma Software Group е мултинационална технологична консултантска компания, основана през 2002 г. Нейните екипи предоставят разработка на софтуер, графичен дизайн, тестване и техническа поддръжка на клиенти в сектори, сред които автомобилна индустрия, здравеопазване, телекомуникации, авиация, банково дело, игрална индустрия, недвижими имоти и реклама. Компанията наема IT специалисти за работа по сложни инженерни проекти и подкрепя професионалното развитие чрез менторство и непрекъснато обучение. Възможностите за дистанционна работа са част от нейния работен модел, а проектите обслужват организации като AstraZeneca, Scania и SAS.

Старши инженер по данни – миграция към Databricks

Мигриране на корпоративна аналитика за търговия на дребно от BigQuery към Databricks Lakehouse чрез изграждане на мащабируеми PySpark потоци, medallion архитектура и управлявани облачни платформи за данни.

Описание

  • Помагайте за мигрирането на мащабна аналитична платформа от BigQuery към Databricks.
  • Проектирайте и изграждайте мащабируеми Lakehouse архитектури с Databricks и Delta Lake.
  • Оценявайте съществуващите ETL и ELT натоварвания и определяйте подходи за миграция.
  • Изграждайте и оптимизирайте потоци за големи обеми данни за търговия на дребно и аналитични данни.
  • Прилагайте стратегии за инкрементална обработка и мащабируеми рамки за трансформация.
  • Разработвайте и поддържайте решения за обработка на данни със Spark чрез PySpark.
  • Проектирайте и поддържайте слоевете Bronze, Silver и Gold на medallion архитектурата.
  • Прилагайте практики за управление и защита на данните чрез Unity Catalog.
  • Работете с екипите по Data Science, анализи, продукти и инженеринг за клиенти.
  • Участвайте в дискусии за архитектурата и проектирането на технически решения.
  • Създавайте компоненти за платформата за данни за многократна употреба и инженерни стандарти.
  • Преглеждайте код и подобрявайте надеждността и поддържаемостта на платформата.
  • Отстранявайте проблеми и оптимизирайте сложни SQL и Spark натоварвания.
  • Подкрепяйте внедряванията в продукционна среда и модернизацията на платформата.

Изисквания

  • Имате поне пет години професионален опит като инженер по данни.
  • Притежавате силни умения по Python и напреднали познания по SQL.
  • Имате практически търговски опит с Databricks.
  • Познавате добре Apache Spark, особено PySpark.
  • Имате опит в проектирането и изграждането на съвременни облачни платформи за данни.
  • Имате опит в разработването на ETL и ELT потоци и решения за обработка на данни в голям мащаб.
  • Имате практически опит с Delta Lake.
  • Имате опит със Spark Declarative Pipelines.
  • Имате опит с наблюдение на клъстери, анализ на показатели и оптимизиране на производителността.
  • Разбирате архитектурите за разпределена обработка на данни.
  • Разбирате концепциите за хранилища на данни и размерното моделиране.
  • Имате опит с Airflow или сходен инструмент за оркестрация.
  • Имате опит с оптимизирането на сложни аналитични SQL натоварвания.
  • Имате опит с прилагането на CI/CD практики в платформи за инженеринг на данни.
  • Умеете да отстранявате проблеми и да оптимизирате производителността.
  • Работите ефективно с международни екипи от различни функции.
  • Владеете английски език на ниво Upper-Intermediate или по-високо.

Придобивки

  • За служителите е достъпна дистанционна работа.
  • Възможности за непрекъснато обучение.
  • Възможности за развитие заедно с технологиите.
  • Смислен принос чрез инженерна работа.
  • Работа по сложни международни проекти.

Свързани работни места

Intetics

Старши архитект на данни (с френски език)

Intetics

Изграждайте мащабируема архитектура на данни и SQL Server платформи за Intetics. Ролята обхваща управление на данни, REST интеграции и тестване при внедряване.

Отвори
Sedona Digital

Старши инженер по данни – дистанционна работа от Румъния | Sedona Digital

Sedona Digital

Изграждайте и поддържайте платформи за данни с PySpark, SQL и Databricks за клиенти на Sedona Digital от застрахователния сектор. Работете по потоци от данни, съгласуване, качество на данните и облачни решения за данни.

Отвори
Intetics

ML инженер по данни, дистанционна работа от Румъния

Intetics

Изграждайте инфраструктура за данни в реално време, графови модели и времеви редове за спортните постижения. Подпомагайте оценяването на машинното обучение и AI системи за клиент на Intetics в САЩ.

Отвори
AllCloud

Инженер по данни с иврит

AllCloud

Изграждайте AWS lakehouse платформи, потоци от данни и AI решения за клиентите на AllCloud в областта на облачните консултации. Проектирайте мащабируеми архитектури и помагайте на клиентите да модернизират системите си за данни.

Отвори
Globaldev Group

Отдалечен инженер по бекенд и данни – Украйна

Globaldev Group

Създавайте мащабируеми конвейери за данни, модели и бекенд инфраструктура за развиващи се продукти за данни. Работете с dbt, Snowflake, Databricks, платформи за оркестрация и GenAI инструменти за инженерна работа.

Отвори