Data Engineer

Ваши главные задачи:

• Участвовать в разработке отчетной системы;
• Разрабатывать и поддерживать batch ETL-процессы (Python, SQL, Airflow);
• Разрабатывать и поддерживать обработку потоков данных (Python, RabbitMQ);
• Дорабатывать и развивать хранилище данных, строить витрины данных;
• Интегрировать новые источники данных в DWH;
• Реализовывать проверки качества данных DQ;
• Внедрять новые инструменты по работе с данными в компании;
• В ходе работы выстраивать процессы коммуникации с заказчиками;

• Хорошое знание SQL - оконные функции, сложные join'ы и подзапросы, опыт оптимизации больших SQL запросов;

• Понимание принципов работы реляционных и колоночных СУБД, опыт проектирования DWH моделирование данных, разбиение по слоям;
• Хорошее знание Python (навыки работы с Pandas будут плюсом), опыт построения data pipeline’ов при помощи Airflow;
• Владение инструментами - Git, Docker, навыки работы с NoSQL СУБД;
• Знание технологий DBT, Debezium, Greenplum, Spark, Data Lake, k8s, PowerBI, Apache NiFi.

• Работу в крупнейшей финансовой группе страны с устойчивыми возможностями профессионального и карьерного роста;

• Годовой бонус и премию ко Дню Независимости;

• ДМС после прохождения испытательного срока;

• 26 календарных дней отпуска + дополнительные дни при важных жизненных событиях;

• Медицинский check-up после 1 года работы;

• Льготные условия на корпоративный паркинг;

• Открытую корпоративную культуру: спортивные турниры, занятия йогой, корпоративные мероприятия;

• Профессиональное развитие: тренинги, обучение и индивидуальный план развития;

• Участие в новых проектах группы Halyk и возможность реализовывать собственные инициативы;

• Формат работы: график 5/2, 09:00–18:00.