Data Engineer

ЛИАН2 нед назад

зарплата

от 240 до 350 тыс. руб.

формат

Удалёнка

грейд

Middle

стек

PythonSparkPySparkUnity CatalogDelta LakeTerraformDatabricksSQLCI/CDGCP

от iinaimi · кратко

Data Engineer в проект на базе Databricks. Разработка пайплайнов обработки данных, настройка доступа и автоматизация инфраструктуры через Terraform.

что делать

Проектирование и сопровождение пайплайнов обработки данных на Databricks
Профилирование и очистка наборов данных, выявление PII
Автоматизация прав доступа и инфраструктуры через Terraform
Мониторинг пайплайнов и контроль качества данных
Подготовка документации по моделям доступа и регламентам

требования

Опыт в проектировании данных от 3 лет
Практический опыт работы с Python и Spark/PySpark
Знание Unity Catalog и Delta Lake
Опыт автоматизации Databricks через Terraform
Английский язык уровня B1 и выше

что предлагают

Зарплата от 240 до 350 тыс. рублей
Оформление через ИП или самозанятость

похожие вакансии

Старший аналитик данных в команду Communications

Авито·Senior·Гибрид · Москва

вилка не указана

1 нед назад

Старший аналитик данных в команду Авито.Мессенджера. Работа в горизонтальной структуре над кросс-командными проектами, влияющими на бизнес-вертикали площадки.

Middle разработчик КХД (DWH)

Сбер·Middle·Гибрид · Москва

вилка не указана

1 нед назад

Разработчик КХД в команду медицинских и операционных данных. Проектирование ETL/ELT-процессов и витрин данных для анализа информации.

Data Engineer (Hadoop, Java)

Сбер·Middle·Офис · Москва

вилка не указана

1 нед назад

Data Engineer в команду отчетности по сберегательным продуктам. Разработка аналитических витрин на Hadoop и Spark, контроль качества данных и развитие инфраструктуры кластера.

Аналитик информационной безопасности

VKГибрид · Москва

вилка не указана

2 нед назад

Аналитик в отдел информационной безопасности VK Tech. Работа над обеспечением защиты продуктов и сервисов компании в гибридном формате в Москве.