Valtech е глобална дигитална агенция, която помага на организациите да подобряват клиентското изживяване и да развиват своя дигитален бизнес. Работата ѝ обединява технологии, маркетинг, данни и изкуствен интелект в подкрепа на търговски инициативи, дигитална трансформация на предприятията и по-добри маркетингови резултати. С екипи и офиси по целия свят Valtech си партнира с компании в разработването на дигитални стратегии, иновации в изживяването и практическото използване на данни за изграждане на по-ефективно дигитално бъдеще.
Старши инженер по данни от разстояние в Северна Македония във Valtech
Присъединете се към Valtech като старши инженер по данни и изграждайте облачни платформи за данни, които поддържат анализи, изкуствен интелект, генеративен AI и продукти за данни. Ролята е насочена към мащабируеми конвейери, lakehouse архитектура, управление на данните и надеждно предоставяне на данни.
Описание
- Изграждайте и оптимизирайте облачни платформи за данни за анализи, изкуствен интелект и продукти за данни
- Разработвайте надеждни пакетни, поточни и почти реалновременни конвейери с инструменти като Spark и Delta Lake
- Създавайте работни процеси за приемане, трансформиране и куриране на структурирани и неструктурирани данни
- Прилагайте lakehouse архитектури и medallion слоеве с Databricks или Fabric
- Предоставяйте курирани набори от данни за анализи, машинно обучение, каузално моделиране и оптимизация
- Разработвайте потоци от данни за GenAI, включващи LLM, RAG, векторно търсене и агенти
- Проектирайте мащабируеми логически и физически модели на данни
- Оркестрирайте работни процеси с Airflow, dbt, Databricks Workflows, Azure Data Factory или сравними инструменти
- Прилагайте практики за управление на данните, проследимост, качество, контрол на достъпа и сигурност
- Изграждайте мониторинг за актуалността на данните, надеждността на конвейерите и изпълнението на SLA
- Поддържайте слоеве за предоставяне на данни, като API, входове за характеристики и аналитични крайни точки
- Оптимизирайте конвейерите и инфраструктурата за производителност, мащабируемост и ефективност на разходите
- Изяснявайте и усъвършенствайте бизнес изискванията със заинтересованите страни
- Работете с учени по данни, ML инженери, анализатори, платформени екипи и бизнес заинтересовани страни
- Подпомагайте приемането на продукти за данни и развивайте практиките в екосистемата на данните и AI
Изисквания
- Опит на старши ниво в областта на инженерството на данни
- Практически опит с Apache Spark и Delta Lake
- Силни умения за програмиране с Python и SQL
- Доказан опит в изграждането на пакетни и поточни конвейери за данни
- Опит с внедряването на готови за продукция платформи за данни
- Добри познания по моделиране на данни, качество на данните и принципи за управление на данните
- Практически опит с услугите за данни на AWS и Databricks Lakehouse или с услугите и инструментите на Microsoft Azure/Fabric
- Задълбочена експертиза в поне една платформа AWS или Azure/Fabric
- Опит с lakehouse архитектури и разпределени системи за данни
- Силно разбиране на мащабируемостта, надеждността и производителността на конвейерите
- Силни умения за решаване на проблеми и съвместен подход към междуфункционалната работа
- Познаването на Snowflake или GCP е предимство, но не е задължително
- Опитът в Agile или консултантска среда е предимство
- Допълнително предимство е опитът с AWS и Azure/Fabric, GenAI и AI системи за данни, CI/CD за конвейери за данни, Terraform или CloudFormation, Kafka, оптимизация на Spark, напреднали анализи, ML натоварвания, продукти за данни или аналитични платформи в голям мащаб
- Не е посочено изискване за образование
Придобивки
- Частно здравно осигуряване
- Обучения и сертификации чрез образователна програма
- Програма за благосъстояние
- Безплатни кафе, напитки и закуски на работното място
- Фирмени вечери
- Фирмени активности като ски пътувания, картинг, лазерен таг, дегустации на вино, пикници и кулинарни класове
- Конкурентно възнаграждение
- 24 дни отпуск
- Ежегодни събития за целия екип
- Предизвикателни проекти
- Приобщаваща култура с подкрепа за професионално развитие
- Култура на открита обратна връзка
- Разумни адаптации по време на интервюта