
Applaudo е nearshore компания за разработка на софтуер, насочена към подпомагане на организациите да модернизират технологиите си и да развиват дигиталната трансформация. Основана през 2013 г., компанията съчетава експертиза в софтуерното инженерство и консултирането в областите на иновациите и дизайна на потребителското изживяване, разработката и поддръжката на приложения, осигуряването на качеството, облачните решения, изкуствения интелект, киберсигурността, решенията за данни и модернизацията на приложения. Applaudo обслужва клиенти в сектори като спорт, медии и развлечения, търговия на дребно, бързооборотни потребителски стоки и финансови услуги, като подкрепя проекти за подобряване на дигитални продукти, инфраструктура и предоставяне на IT услуги. Със седалище в Остин, Тексас, и офис в Сан Салвадор, Applaudo обединява екип от 501 до 1 000 служители, които обслужват компании в сферата на технологиите и дигиталните услуги.
Старши инженер по данни за Azure Databricks
Изграждайте потоци от данни с Azure Databricks и Python за бизнес решенията на Applaudo, задвижвани от изкуствен интелект. Свързвайте бизнес данните с мащабируеми и надеждни центрове и хранилища за данни.
Описание
- Изграждайте и поддържайте готови за продукционна среда потоци от данни с Azure Databricks и Python.
- Създавайте мащабируеми трансформации с PySpark или Spark SQL.
- Приемайте и обработвайте данни от API, релационни бази данни, облачно съхранение и SFTP.
- Свързвайте платформи за управление на заявки, CRM, маркетинг, търговия на дребно и други корпоративни платформи с централизиран център за данни.
- Разработвайте и поддържайте структури на хранилища за данни, многомерни модели и витрини за данни.
- Пишете, оптимизирайте и поддържайте SQL трансформации.
- Добавяйте проверки за качество и съгласуваност на данните.
- Изграждайте и поддържайте изходящи потоци от данни за системи на трети страни.
- Проучвайте несъответствия в данните и отстранявайте проблеми с потоците.
- Документирайте потоците, логиката на трансформациите, зависимостите и техническите процеси.
- Работете с колеги и заинтересовани страни за уточняване на изискванията и идентифициране на рискове.
- Съобщавайте своевременно за напредъка, пречките и възможните забавяния и предлагайте стъпки за спазване на сроковете.
Изисквания
- Най-малко пет години професионален опит в инженерството на данни.
- Сериозен практически опит с Azure Databricks.
- Отлични умения по Python за обработка и трансформиране на данни и разработване на потоци.
- Солиден опит с Apache Spark, включително PySpark и/или Spark SQL.
- Отлични умения по SQL, включително сложни трансформации, валидиране на данни и оптимизиране на производителността на заявки.
- Добри познания за хранилища за данни и многомерно моделиране, включително факти, измерения и витрини за данни.
- Опит с интегриране на данни от REST API, релационни бази данни, облачно съхранение и SFTP.
- Практически опит с услугите за данни на Microsoft Azure за приемане, съхранение, обработка и интеграция.
- Опит с внедряване на проверки за качество на данните и валидиране на съгласуваността между изходните системи и целевите модели на данни.
- Умение за диагностициране на откази в потоците, проучване на несъответствия в данните и прилагане на надеждни решения.
- Силни аналитични и организационни умения и способност за решаване на проблеми.
- Умение за самостоятелна работа, поемане на отговорност и спазване на инженерни практики и стандарти за документация.
- Добри комуникационни умения по английски и способност за работа с екип, базиран в САЩ.
- Опитът с мигриране на SQL работни натоварвания към Azure Databricks е предимство.
Придобивки
- Възможност за дистанционна работа.
- Възможности за бързо учене и работа със силни екипи.
- Съвременни работни практики.
- Принос към мащабна трансформация, базирана на изкуствен интелект.
Свързани работни места
Няма намерени обяви за работа
Опитайте да промените или изчистите филтрите, за да намерите повече възможности.