Truelogic Software — компания по разработке программного обеспечения в формате nearshore, предоставляющая услуги гибкого усиления команд и индивидуальной заказной разработки на аутсорсе. Инженерные команды компании работают в Латинской Америке и сотрудничают со стартапами и компаниями из списка Fortune 500 в сферах SaaS, B2B и корпоративных решений. Компания делает акцент на тесном сотрудничестве, оперативной реализации проектов и согласовании работы с часовыми поясами клиентов, поддерживая распределённые проекты более чем в 25 странах. Ориентированная на удалённую работу модель Truelogic Software объединяет инженеров с опытом в различных отраслях и направлениях разработки программного обеспечения.
Старший инженер данных, цифровой маркетинг — удалённо из Бразилии
Создавайте масштабируемые конвейеры данных на PySpark и Databricks для компании, работающей с моделированием медиамикса. Совершенствуйте преобразование данных и производительность конвейеров, одновременно оптимизируя расходы на облако.
Описание
- Создавайте и поддерживайте масштабируемые ETL-конвейеры для обработки больших объёмов данных.
- Используйте PySpark и Databricks для сложных преобразований данных и рабочих процессов.
- Оптимизируйте конвейеры по скорости, масштабируемости и эффективности затрат на облако.
- Взаимодействуйте с инженерными и бизнес-командами, чтобы превращать требования в надёжные решения для работы с данными.
- Выявляйте и предотвращайте сложные проблемы обработки данных и узкие места конвейеров.
- Применяйте лучшие практики обеспечения качества данных, управления данными и производительности систем.
Требования
- Имеете 5–7 лет практического опыта в инженерии данных и внедрении готовых к эксплуатации решений.
- Уверенно владеете PySpark.
- Имеете обширный практический опыт работы с Databricks.
- Продвинуто владеете Databricks AutoLoader.
- Продвинуто владеете Python.
- Знаете лучшие практики инженерии данных, методы настройки производительности и оптимизации вычислительных затрат.
- Понимаете весь цикл ETL-процессов.
- Имеете опыт сложных преобразований данных и оптимизации конвейеров.
- Умеете эффективно решать проблемы.
- Умеете ясно объяснять технические концепции технической и бизнес-аудитории.
- В настоящее время находитесь в Латинской Америке.
Преимущества
- Работайте удалённо из любого места, разрешённого условиями этой должности.
- Получайте конкурентную оплату в долларах США.
- Пользуйтесь оплачиваемым отпуском.
- Работайте самостоятельно.
- Участвуйте в инновационных проектах с высоким влиянием на ведущие американские компании.
- Участвуйте в мероприятиях, поддерживающих благополучие и баланс между работой и личной жизнью.
- Сотрудничайте с разнообразной глобальной сетью специалистов из более чем 25 стран.
- Работайте вместе с опытными старшими специалистами.