Optiveum е компания за подбор на персонал и консултантски услуги, фокусирана върху услугите в областта на човешките ресурси и ИТ, с над 20 години опит в тези сфери. Компанията свързва професионалисти с проектни и постоянни възможности за работа от разстояние и на място, като работи с клиенти в Полша и на международни пазари. Дейностите ѝ по подбор обхващат ИТ, финанси, счетоводство, производство, логистика и маркетинг, като подпомагат организациите в търсенето на таланти и кандидатите, които търсят следващата си професионална възможност.
Старши инженер по данни за Databricks – дистанционен договор в Полша
Създавайте мащабируеми конвейери за данни и решения за обработка на данни в Databricks с Python за технологичните клиенти на Optiveum. Работете с AWS, Azure и Google Cloud Platform върху сложни набори от данни и облачни архитектури.
Описание
- Създаване на решения за обработка на големи и разнообразни набори от данни в Databricks
- Разработване и подобряване на конвейери за данни на Python с помощта на cloud-native технологии
- Партниране с архитекти на решения за установяване и поддържане на стандарти за инженеринг на данни
- Поддържане на целостта, сигурността и мащабируемостта на данните в облачни среди
- Проектиране на мащабируеми архитектури за сложни натоварвания с данни в AWS, Azure и Google Cloud Platform
- Прилагане на съвременни рамки за данни, програмни практики и принципи на DevOps
Изисквания
- Доказан търговски опит в инженеринг на данни с практически опит в Databricks
- Напреднали умения по Python за автоматизация и трансформация на данни
- Търговски опит с поне една основна облачна платформа: AWS, Azure или Google Cloud Platform
- Ефективни умения за писмена и устна комуникация
- Напреднало владеене на английски и полски език
- Отлични познания по SQL, включително оптимизация на заявки и моделиране на данни
- Работни познания по практиките на DevOps, CI/CD конвейерите и инструментите Infrastructure as Code, като Terraform или Bicep
- Опит с технологии за поточно предаване в реално време, включително Kafka или Spark Streaming
- Познания за облачни платформи за съхранение, като Data Lake, Snowflake или Synapse
- Практически опит с PySpark за разпределена обработка на данни
- Релевантни професионални сертификати, като Databricks Certified Data Engineer Associate или сертификати за облачни данни