Derevo е компания за анализ на данни и дигитална трансформация, която помага на организациите да превръщат данните в бизнес информация. Дейността ѝ обхваща целия аналитичен цикъл — от създаването и интегрирането на данни до анализа и споделянето им, както и усилия за изграждане на култура, основана на данни. Компанията прилага изкуствен интелект и машинно обучение в аналитични решения за различни отрасли и използва nearshore модел на работа с глобални екипи, като обслужва особено клиенти в Съединените щати и Канада. С повече от десетилетие опит Derevo работи с доставчици на технологии, за да подкрепя организациите в промени, водени от данни. Екипите ѝ работят в областта на консултирането, логистиката и маркетинга, а компанията наема служители в цялата си организация.
Старши инженер по данни, Microsoft Fabric
Изграждайте архитектури с Microsoft Fabric, lakehouse решения и канали за данни за решенията на Derevo в областта на данните и изкуствения интелект. Превръщайте големи обеми данни в прозрения, които подпомагат бизнес решенията.
Описание
- Изграждане и внедряване на качествени съвременни архитектури за данни
- Разработване на аналитични решения с технологии за Big Data
- Проектиране, поддръжка и оптимизиране на системи за паралелна обработка
- Прилагане на най-добри практики за съхранение и управление на хранилища за данни, езера от данни и lakehouse решения
- Събиране, обработка, почистване и оркестриране на големи обеми данни
- Интегриране и трансформиране на данни от множество структурирани и полуструктурирани източници
- Определяне на технически стратегии, съобразени с бизнес целите
- Включване в проекта и неговите спринтове и изпълнение на задачи по разработката
- Установяване на изискванията и определяне на обхвата
- Участие в планирането на спринтове, инженерни сесии, семинари и срещи с вътрешни екипи и клиенти
- Класифициране и оценяване на задачи чрез гъвкави методологии
- Ежедневно проследяване на напредъка на спринта
- Спазване на сроковете за доставка и управление на рисковете чрез своевременно съобщаване на забавяния
Изисквания
- Напреднало владеене на английски език
- Отлично владеене на T-SQL и Spark SQL, включително DDL, DML, подзаявки, CTE, множество съединения, агрегирания, прозоречни функции, съхранени процедури, оптимизация на индекси, статистики и планове за изпълнение
- Отлични умения с Python (PySpark), включително обектно-ориентирано програмиране, структури от данни, управляващ поток, приемане на данни, DataFrames, UDF, времеви прозорци, разделяне на дялове, PEP 8 и модулност
- Опит с JSON и REST API за оркестриране на канали за данни, CI/CD внедрявания, динамично параметризиране и управление на артефакти
- Познания за Microsoft Fabric, Lakehouse, OneLake, Delta Lake и Delta таблици, съвместими с ACID
- Познания за разделяне на дялове, OPTIMIZE, Z-ORDER и пътуване във времето
- Познания за хранилища за данни (Synapse Analytics), предоставени и serverless SQL клъстери, схеми „звезда“ и „снежинка“, транзакционен T-SQL, изолация и автоматично мащабиране
- Опит с CI/CD и управление на жизнения цикъл чрез Azure DevOps или GitHub Actions
- Познания за модулно тестване на набори от данни, валидиране на схеми и автоматизирано внедряване на артефакти
- Познания за Monitor Hub и Activator, табла с показатели, проактивни известия и автоматизирани runbook процедури
- Познания за Eventstreams и Eventhouse за приемане на събития в реално време, прозорци за обработка и инкрементални агрегирания
- Познания за сигурност и управление на данните, роли и разрешения, сигурност на ниво редове и колони, динамично маскиране на данни и одитиране
- Общи познания за Azure Data Factory са предимство
- Добри комуникационни умения, екипна работа в Squad, инициативност, сътрудничество, непрекъснато учене, отговорност, организираност, консултиране в областта на данните, управление на изискванията, стратегия, съобразена с клиентите, и умения за презентации пред клиенти
Придобивки
- Законово установени и допълнителни придобивки
- Възможности за развитие на експертиза в различни области и технологии
- Развитие в различни дисциплини и нови предизвикателства
- Среда, която осигурява пространство, доверие и свобода за създаване
- Необходимо обучение
- Работа по водещи технологични проекти за мултинационални клиенти
- Гъвкава дистанционна работа
- Необходимото оборудване за работа
- Инструменти за вътрешна комуникация