Truelogic Software — компания по разработке программного обеспечения в формате nearshore, предоставляющая услуги гибкого усиления команд и индивидуальной заказной разработки на аутсорсе. Инженерные команды компании работают в Латинской Америке и сотрудничают со стартапами и компаниями из списка Fortune 500 в сферах SaaS, B2B и корпоративных решений. Компания делает акцент на тесном сотрудничестве, оперативной реализации проектов и согласовании работы с часовыми поясами клиентов, поддерживая распределённые проекты более чем в 25 странах. Ориентированная на удалённую работу модель Truelogic Software объединяет инженеров с опытом в различных отраслях и направлениях разработки программного обеспечения.
Ведущий инженер данных в цифровом маркетинге (удалённо, Мексика)
Создавайте и поддерживайте ETL-конвейеры на PySpark и Databricks для компании, занимающейся моделированием цифровых медиа в маркетинге. Повышайте производительность и масштабируемость преобразования данных и снижайте затраты на облачные ресурсы.
Описание
- Создавайте и поддерживайте масштабируемые ETL-конвейеры для обработки больших объёмов данных
- Используйте PySpark и Databricks для выполнения сложных преобразований данных и рабочих процессов
- Оптимизируйте конвейеры по производительности, масштабируемости и затратам на облачные ресурсы
- Взаимодействуйте с инженерными и бизнес-командами, чтобы превращать требования в надёжные решения для работы с данными
- Устраняйте сложные проблемы обработки и предотвращайте узкие места в конвейерах
- Применяйте лучшие практики обеспечения качества данных, управления данными и производительности систем
Требования
- Имеете 5–7 лет практического опыта создания промышленных решений в области инженерии данных
- Уверенно владеете PySpark
- Имеете обширный практический опыт работы с Databricks
- Продвинуто владеете Databricks AutoLoader
- Продвинуто знаете Python
- Понимаете лучшие практики, настройку производительности и оптимизацию затрат на вычислительные ресурсы
- Глубоко понимаете сквозные ETL-процессы
- Умеете выполнять сложные преобразования данных
- Имеете опыт оптимизации конвейеров данных
- Обладаете исключительными навыками решения проблем
- Умеете ясно объяснять технические концепции технической и бизнес-аудитории
- Находитесь в Латинской Америке
Преимущества
- Работа из любой точки удалённо
- Конкурентная оплата в долларах США
- Оплачиваемый отпуск
- Автономность в работе
- Инновационные проекты с высоким влиянием на бизнес ведущих американских компаний
- Участие в совместных мероприятиях
- Поддержка баланса между работой и личной жизнью
- Сотрудничество с разнообразной международной сетью специалистов из более чем 25 стран
- Работа бок о бок с опытными старшими специалистами