Bitful е технологична консултантска компания, която работи с организации в областта на телекомуникациите, държавното управление, отбраната, логистиката и здравеопазването. Услугите ѝ включват облачна инфраструктура, консултации за анализ на данни, както и проектиране и разработване на софтуер по поръчка. Компанията описва подхода си като ориентиран към хората, с акцент върху разширяването на достъпа до технологии и създаването на възможности в общности с ограничен достъп до тях. Bitful също споделя печалбата си и отделя част от нея за програми за технологично менторство.
Старши инженер по данни, Databricks
Изграждайте lakehouse потоци и набори от данни в Databricks за отчетност, машинно обучение и анализи. Подкрепяйте екипи във финансите, продажбите, веригата на доставки и маркетинга.
Описание
- Създавайте и поддържайте потоци и набори от данни, които осигуряват отчетност, визуализация, машинно обучение и информирани решения в различни бизнес направления.
- Разработвайте мащабируеми потоци и многократно използваеми набори от данни в lakehouse среда на Databricks.
- Приемайте, проверявайте, почиствайте и преобразувайте структурирани и неструктурирани данни с Python, PySpark и SQL.
- Създавайте модели на данни и набори от данни за отчетност в Tableau и инструменти като Spotfire.
- Свързвайте съществуващи хранилища за данни и системи за отчетност със съвременни облачни аналитични платформи.
- Подобрявайте надеждността на потоците, качеството на данните и скоростта на обработка.
- Въвеждайте автоматизирано тестване, мониторинг, документация и практики за CI/CD.
- Работете с анализатори, архитекти, разработчици и бизнес заинтересовани страни за създаване на полезни решения с данни.
- Ръководете техническата работа, преглеждайте код и наставлявайте други инженери по данни.
Изисквания
- Най-малко седем години опит в инженерството на данни, включително изграждане и поддръжка на потоци за продукционна среда.
- Отлични умения със SQL и солидни познания по моделиране на данни, проектиране на бази данни и хранилища за данни.
- Практически опит с Databricks, Apache Spark и облачни платформи за данни.
- Отлично владеене на Python и PySpark.
- Опит в изграждането на ETL/ELT потоци и свързването на данни от множество изходни системи.
- Опит в подготовката на надеждни набори от данни за Tableau или подобни инструменти за бизнес анализи.
- Познаване на контрол на версиите, автоматизирано тестване и CI/CD.
- Умение за диагностициране на сложни проблеми с данните и подобряване на производителността на потоците.
- Ясна комуникация и опит в работата с технически екипи и бизнес заинтересовани страни.
- Опит със Spotfire, Oracle, Informatica, R или виртуализация на данни се счита за предимство.
- Сертификация от Databricks се счита за предимство.