НаправлениеПлатформа данных
Формат работыДистанционный
КомандаData Lake
Дата публикации24.11.2023
Нажимайте смело — отклик произойдет только на следующем шаге

DevOps Engineer в команду Data Lake

Перед командой Data Lake стоит задача развития и поддержки основного компонента современной аналитической платформы данных. Платформа дает возможность быстрой, параллельной и независимой разработки решений прикладных бизнес-задач.
Ищем в команду DevOps-инженера, для разработки, развития и сопровождения сервисов Data Lake, смежных сервисов и внутренних процессов.
Наш текущий основной стек: Linux, Docker, Kubernetes, ELK, Zabbix, Prometheus, Grafana, PostgreSQL, Nginx, Gitlab CI/CD, Hadoop (HIVE, HDFS, HBASE, YARN, Ranger), Airflow, Rundeck, Jira, Confluence.
Обязанности
  • обеспечивать работоспособность платформы Data Lake;
  • поддерживать и настраивать мониторинг различных систем и инфраструктуры;
  • анализировать и оптимизировать производительность различных компонент Data Lake;
  • поддерживать в актуальном состоянии имеющуюся инфраструктуру;
  • управлять обновлениями, настройками, устранять выявленные уязвимости;
  • настраивать и поддерживать процессы и инструменты интеграции Data Lake с системами-источниками и потребителями данных;
  • развивать, улучшать процессы CI/CD;
  • восстанавливать сервисы Data Lake после сбоев, обрабатывать инциденты;
  • документировать разрабатываемые процессы и обучать коллег работе с ними;
  • развивать архитектуру системы и внедрять новые технологические решения и сервисы.
Требования
  • опыт администрирования Unix-подобных ОС;
  • понимание сетевых технологий и основных протоколов.
  • опыт работы с продуктами экосистемы Hadoop (HDFS, YARN, HIVE, HBASE, Ranger, Spark);
  • знания и опыт построения CI/CD-процессов;
  • базовое знание скриптовых языков: bash, python;
  • опыт работы с системой управления конфигурацией;
  • понимание принципов работы систем мониторинга;
  • опыт разработки сервисов для автоматизаций рутинной работы;
  • понимание базовых принципов информационной безопасности;
  • опыт работы с контейнерными технологиями и оркестрацией.
Условия
  • возможность работать удаленно или в комфортном офисе на м. «Технопарк» с собственным спортзалом и кафе;
  • социальный пакет, включающий ДМС, страхование выезжающих за рубеж и не только;
  • обмен опытом и знаниями внутри виртуального комьюнити;
  • внешнее и внутреннее обучение, участие в профессиональных конференциях и митапах;
  • доплата до оклада за 14 дней в году по больничному листу;
  • доплата к отпуску в январе и мае;
  • 3 оплачиваемых отгула в год;
  • скидки от компаний-партнеров и специальные предложения по банковским продуктам.