Data Engineer в команду бизнес DWH

Наша команда поддерживает и развивает одну из основных компонентов Аналитической Платформы Данных - BDWH (Business Data WareHouse).

Бизнес-слой DWH является единой версией правды по аналитически ценным банковским данным.

Мы отвечаем за логику загрузки данных в бизнес-слой DWH и качество данных в нем, а также предоставляем удобные инструменты для работы с Платформой.

Чем предстоит заниматься

участвовать в проекте по построению нового хранилища данных и аналитической отчетности над ним;
разрабатывать ETL-процессы и фреймворки по загрузке данных в GreenPlum и формировать витрины данных;
разрабатывать сервисы управления процессами загрузки;
исследовать и анализировать информационные потоки и данные;
участвовать в проектировании моделей данных (витрин);
заниматься поддержкой 3-й линии, разбирать инциденты и исправлять ошибки;
заниматься менторингом, обучением, выстраиванием процессов внутри команды.

Требования

знание SQL на продвинутом уровне;
опыт оптимизации запросов;
владение Python на уверенном уровне;
способность писать прозрачный читающийся код, разделять его на классы, применять паттерны;
опыт работы с любой из «классических» РСУБД в качестве разработчика;
опыт разработки/внедрения систем класса DWH, понимание концепции хранилищ данных;
опыт в разработке сложных ETL процессов, знакомство с путями автоматизации данных процессов;
опыт работы с Airflow или любым другим оркестратором;
умение быстро внедрять оптимальные решения.

Будет плюсом:

экспертиза в работе с Greenplum, понимание особенностей MPP-систем;
знание DBT;
знание технологий Big Data: Hadoop, Hive, т.п.;
интерес к работе с хранилищами и желание быть частью крутого проекта;
готовность взаимодействовать со множеством команд и воплощать Agile-подход в крупной организации;
желание развиваться сам и развивать экосистему вокруг себя.

Условия

Agile-подход на всех уровнях организации (разработка и развитие сервисов происходит в парадигме Scrum);
комфортная культура открытости и отзывчивости;
сильные профессиональные IT-сообщества;
отсутствие бюрократии и дресс-кода;
гибридный формат работы (дом/офис) или полностью удаленный формат;
возможность проходить внутреннее и внешнее обучение;
ДМС со второй недели работы со стоматологией и массажем в РФ;
страхование жизни и выезжающих за рубеж, страхование в направлении онкологии;
специальные предложения по вкладам и кредитам;
скидки от компаний-партнеров по программе Prime Zone в РФ;
доплату за 14 дней в году по больничному листу до оклада (после испытательного срока);
доплату к отпускам, оформленным в январе и мае;
3 оплачиваемых отгула в год.