DevOps инженер в платформу потоковой обработки данных
ГородМосква
НаправлениеИнформационные технологии
КомандаStreaming Data Platform
Дата публикации18.08.2022
Нажимайте смело — отклик произойдет только на следующем шаге

DevOps инженер в платформу потоковой обработки данных

Наша команда Streaming Data Platform развивает сервисы потоковой обработки данных. Основная цель команды – построение прикладной платформы по сбору событий из систем-источников в режиме реального времени и публикации этих событий в удобном для потребителей виде. Наличие потоков данных из разных систем-источников в единой платформе и инструментов по их обработке в real-time позволит компании своевременно и адекватно реагировать на события, порождаемые как внутри компании, так и за ее пределами.
Наша платформенная операционная модель подразумевает, что мы не просто разрабатываем сервисы потоковой обработки данных «под ключ», а создаем инструменты для продуктовых команд для независимой разработки таких сервисов.
Наш стек: Apache Kafka (message broker, schema registry, AKHQ, connect, mirror maker 2), Kafka Streams, Kubernetes+Helm, PostgreSQL, NoSQL СУБД, Gitlab CI, Ansible, Artifactory, Zabbix/Prometheus, ELK, Grafana.
В связи с развитием команды мы ищем DevOps инженера, который будет вместе с командой создавать с нуля и развивать инфраструктуру и сервисы для платформы потоковой обработки данных.
В этой роли ты будешь:
  • участвовать в проектировании архитектуры платформы;
  • разрабатывать и улучшать CI/CD платформы, которым будут пользоваться десятки разных команд;
  • внедрять практики Security Development Lifecycle в процессы разработки (secrets management, RBAC, vulnarability checks и т.д.);
  • обеспечивать надежность работы сервисов в Prod-среде (тестирование high availability, автоматизация процессов disaster recovery, performance tests, оптимизация производительности);
  • разрабатывать механизмы гибкого мониторинга, позволяющие как платформенной команде настраивать сбор ключевых метрик и алертов по ним, так и пользователям самостоятельно доставлять алерты по интересующим событиям в предпочитаемые каналы;
  • совместно с командой принимать участие в демократизации разработки потоковой обработки данных, что позволит пользователям создавать и гибко управлять стримами данных без использования Java;
  • помогать в решении проблем, багов и кейсов от пользователей платформы.
Эта вакансия для тебя, если ты:
  • знаешь rpm-based дистрибутивы Linux (RHEL, CentOS) на уровне troubleshooting & performance optimization;
  • имеешь базовое представление по устройству и подходам к мониторингу JVM/JDK (GC, heap);
  • демонстрируешь уверенные знания Kubernetes, Docker, Helm;
  • имеешь опыт работы с Gitlab или другим подобным инструментом в части организации CI/CD пайплайнов, знания в области автоматизации и мониторинга;
  • имеешь или желаешь развивать экспертизу по работе с Kafka Message Broker.
Будет преимуществом:
  • опыт работы на проектах по инжинирингу данных, включая одно или несколько направлений: стриминг, брокер сообщений Kafka, оркестрация пайплайнов и DAG’и, ETL, DWH, OLAP, и т.д.;
  • опыт администрирования и эксплуатации SQL/NoSQL СУБД (развертывание и настройка, организация disaster recovery, CI/CD, мониторинг, оптимизация узких мест, оптимизация тяжелых запросов);
  • опыт участия в аналогичной роли на проектах с использованием систем распределенных вычислений.
Мы предлагаем:
  • интересный и увлекательный проект с нуля, полное отсутствие legacy;
  • командную работу и поддержку;
  • помощь и поддержку со стороны профильных IT-сообществ компании (в частности, DevOps Community);
  • возможность самостоятельно сформировать гибкий график с высокой долей удаленной работы;
  • просторный и современный офис в одной минуте ходьбы от метро Технопарк в случаях, когда командная работа все же предполагает физическое присутствие;
  • развиваться: у нас есть своя IT-академия, мы также оплачиваем профессиональные тренинги и образовательные курсы (в т.ч. на Сoursera), отправляем на лучшие тематические профессиональные конференции, а также проводим внутрибанковские митапы с приглашёнными экспертами;
  • помощь и поддержку в подготовке к выступлению на тематических конференциях в качестве спикера;
  • работать на корпоративном MacBook'е с root-доступом и возможностью работать через VPN;
  • получать корпоративные льготы: ДМС с первого рабочего дня, страхование выезжающих за рубеж, льготное кредитование, скидки на банковские продукты, корпоративный̆ пенсионный̆ план, а также скидки на услуги и товары от компаний-партнеров;
  • множество прочих приятных льгот, например, доплату до полной зарплаты за отпуск в январе и мае, полную доплату до оклада 14 дней больничного, спортзал в офисе, и т.д.