SMA Solar разрабатывает и производит технологии для фотоэлектрических систем, предназначенные для генерации возобновляемой энергии и современной энергетической инфраструктуры. Деятельность компании охватывает солнечные продукты и энергетические решения, способствующие более устойчивому снабжению электроэнергией. Объединяя более 3 000 сотрудников в 20 странах, компания сочетает экспертизу в области энергетики, производства и логистики и создаёт возможности для специалистов, заинтересованных в развитии технологий чистой энергетики.
Ведущий администратор и инженер по разработке Big Data — SMA Solar, работа на месте в Бангалоре
Администрирование кластеров Hadoop, Kafka и Druid для технологических операций SMA Solar в сфере возобновляемой энергетики. Автоматизация потоков данных и оптимизация защищённой локальной инфраструктуры.
Описание
- Поддерживать стабильную, защищённую и эффективную локальную инфраструктуру Big Data
- Администрировать и оптимизировать кластеры Hadoop, Kafka и Druid
- Проактивно отслеживать состояние и производительность систем
- Внедрять и поддерживать решения для мониторинга и оповещений, включая Cloudera Manager и Splunk
- Управлять ролевым доступом, шифрованием и средствами контроля соответствия требованиям
- Создавать ETL-процессы, передавать данные и разрабатывать аналитические конвейеры с использованием SQL, NiFi, Python или Spark
- Взаимодействовать с межфункциональными командами по вопросам архитектуры, обновлений и оценки технологий
- Повышать масштабируемость, надёжность и производительность инфраструктуры данных
- Поддерживать автоматизацию, оптимизацию платформы и принятие стратегических архитектурных решений
Требования
- Не менее 8 лет практического опыта администрирования локальных кластеров Hadoop, Kafka и Druid
- Подтверждённый опыт работы в корпоративной среде с HDFS, Hive, Spark, Hue и NiFi
- Продвинутые навыки работы с SQL, включая настройку запросов и оптимизацию производительности
- Глубокие знания администрирования Linux и понимание методов обслуживания кластеров
- Опыт автоматизации операций с помощью Ansible, Python, Bash или аналогичных инструментов написания сценариев
- Предпочтительно наличие степени бакалавра или магистра в области компьютерных наук, инженерии или смежной дисциплины
- Предпочтителен опыт разработки ETL-конвейеров и подключения различных источников данных
- Предпочтительно знакомство с облачными платформами Big Data, особенно Azure
- Предпочтительны знания в области аварийного восстановления, проектирования отказоустойчивых систем и разработки эксплуатационной документации
- Предпочтительны отличные навыки коммуникации на английском языке и эффективное взаимодействие в гибких межфункциональных командах
Преимущества
- Гибкий график работы
- Возможность удалённой работы
- Возможности работы на условиях неполного рабочего дня
- Поддержка баланса между работой и личной жизнью
- Равные возможности и инклюзивная рабочая среда
- Возможности профессионального развития
- Программы управления талантами