
Applaudo е nearshore компания за разработка на софтуер, насочена към подпомагане на организациите да модернизират технологиите си и да развиват дигиталната трансформация. Основана през 2013 г., компанията съчетава експертиза в софтуерното инженерство и консултирането в областите на иновациите и дизайна на потребителското изживяване, разработката и поддръжката на приложения, осигуряването на качеството, облачните решения, изкуствения интелект, киберсигурността, решенията за данни и модернизацията на приложения. Applaudo обслужва клиенти в сектори като спорт, медии и развлечения, търговия на дребно, бързооборотни потребителски стоки и финансови услуги, като подкрепя проекти за подобряване на дигитални продукти, инфраструктура и предоставяне на IT услуги. Със седалище в Остин, Тексас, и офис в Сан Салвадор, Applaudo обединява екип от 501 до 1 000 служители, които обслужват компании в сферата на технологиите и дигиталните услуги.
Старши инженер по данни за Azure Databricks
Изграждане на потоци от данни с Azure Databricks и Python за корпоративните решения на Applaudo, базирани на изкуствен интелект. Свързване на корпоративни източници с надеждни хранилища и централизирано хранилище за данни.
Описание
- Изгражда и поддържа продукционни потоци от данни с Azure Databricks и Python.
- Създава мащабируеми трансформации на данни с PySpark или Spark SQL.
- Извлича и обработва данни от API, релационни бази данни, облачни хранилища и SFTP.
- Обединява данни от платформи за управление на заявки, CRM, маркетинг, търговия на дребно и други корпоративни платформи в централизирано хранилище за данни.
- Разработва и поддържа структури на хранилища за данни, многомерни модели и витрини за данни.
- Пише, оптимизира и поддържа SQL трансформации.
- Добавя проверки за качество и съгласуваност на данните.
- Създава и поддържа изходящи потоци от данни за системи на трети страни.
- Проучва несъответствия в данните и отстранява проблеми с потоците от данни.
- Документира потоците от данни, логиката на трансформациите, зависимостите и техническите процеси.
- Работи с колеги и заинтересовани страни за изясняване на нуждите, открояване на рискове и предоставяне на надеждни решения за данни.
- Съобщава своевременно за напредъка, пречките и възможните забавяния и предлага следващи стъпки.
Изисквания
- Най-малко пет години професионален опит в инженерството на данни.
- Задълбочен практически опит с Azure Databricks.
- Напреднали умения по Python за обработка и трансформация на данни и разработване на потоци от данни.
- Солидни познания по Apache Spark, включително PySpark и/или Spark SQL.
- Напреднали познания по SQL, включително сложни трансформации, валидиране на данни и оптимизиране на производителността на заявки.
- Солидни познания за хранилища на данни и многомерно моделиране, включително факти, измерения и витрини за данни.
- Опит със свързване на REST API, релационни бази данни, облачни хранилища и SFTP.
- Практически опит с услугите за данни на Microsoft Azure.
- Опит с добавяне на проверки за качество на данните и валидиране на съгласуваността между изходните системи и целевите модели.
- Умение за диагностициране на неизправности в потоците от данни и проучване на несъответствия в данните.
- Способност за самостоятелна работа, поемане на отговорност и спазване на инженерни и документационни практики.
- Добри комуникационни умения по английски език.
- Способност за ефективно сътрудничество с екип, базиран в САЩ.
- Опитът с миграция на SQL натоварвания към Azure Databricks е предимство.
Придобивки
- Дистанционна работа.
- Възможност за бързо учене и поемане на отговорност.
- Работа с опитни екипи.
- Инвестиции в съвременни начини на работа.
- Участие в мащабна трансформация, базирана на изкуствен интелект.
Свързани работни места
Няма намерени обяви за работа
Опитайте да промените или изчистите филтрите, за да намерите повече възможности.