Data Engineer в команду CAP

Мы разрабатываем систему раннего выявления проблем у корпоративных клиентов банка, а так же систему сопровождения проблемных клиентов.

В рамках автоматизации проектов мы запускаем процесс переработки текущего решения и переноса его из CRM Siebel в новую систему, которую будем разрабатывать с нуля.

Целевая архитектура нового программного комплекса - микросервисная архитектура на Java стеке с использованием механизма выявления сигналов на платформе DataLake.
При разработке платформы используются современные технологии, DataLake, Spark, Haddop, Java, Kotlin, Kafka, Docker

В этой роли Вы будете

участвовать в процессе разработки проекта по работе с проблемными клиентами;
принимать участие в формировании требований к процессу, взаимодействовать с заказчиками;
автоматизировать сбор информации из разных систем банка для ускорения процесса работы с проблемными клиентам и их выявления.

Вам доверим

Разработка сервисов по сбору данных на платформе DataLake с использованием Python, Spark, AirFlow;
Разработка Lambda-функций на внутренней платформе.

От вас ждем

Опыт разработки DWH или в экосистеме Hadoop от 2х лет;
Опыт разработки на высокоуровневых языках от 1 года (Python, Java etc);
Продвинутый навык владения SQL, умение писать длинные многоуровневые запросы с оконными функциями, а также их оптимизации;
Знание Linux, умение работать в терминале.

Плюсом будет:
Если вы знаете особенности и различия SQL и NoSQL БД и можете написать PreparedStatement, работающий как на Postgresql, так и Oracle, перевести SQL-запрос с MSSQL на Hive;
Хорошее знание стека Apache: Spark, AirFlow, Hive, HDFS;
Опыт работы с Docker и k8s;
Опыт работы с CI/CD;
Умение работать с MQ.

Мы предлагаем

возможность работать из офиса или удаленно. Главное — договориться с
командой;
работу в структуре без строгой иерархии, где ваш руководитель — это
играющий тренер;
работу по принципам Agile;
присоединиться к DE-коммьюнити в банке, где коллеги обмениваются
опытом и помогают друг другу;
участие в регулярных митапах профессиональных сообществ;
внутреннее и внешнее обучение за счет банка;
участие в профессиональных конференциях в качестве спикера или
слушателя. Например, мы регулярно ходим на HighLoad или JPoint;
страховку со стоматологией, которая работает как в Москве, так и в регионах;
особые условия по нашим продуктам, например, ипотеке, банковским картам
или накопительным счетам и вкладам.

еще десятки льгот и бонусов для сотрудников