Разработка ядра системы Sber Process Mining. Создание масштабируемых пайплайнов, моделей данных и self-service инструментов анализа с использованием AI и BI.
что делать
Разработка ядра системы анализа процессов
Проектирование и создание моделей данных
Разработка переиспользуемых трансформаций и пайплайнов
Создание self-service инструментов обработки данных
требования
Опыт работы инженером данных от 3 лет
Уверенное владение SQL и Python
Опыт работы с Airflow, NiFi или аналогами
Работа с Big Data стеком: ClickHouse, Spark, Hive
Знание основ ООП и теории построения хранилищ данных