Data Engineer

Marsвчера
зарплата
вилка не указана
формат
Гибрид · Санкт-Петербург
грейд
Middle
стек
Apache AirflowApache SparkHadoopSQLPythonScalaJavaHDFSYARN
от iinaimi · кратко

Data Engineer для разработки и оптимизации пайплайнов обработки данных. Работа с аналитической инфраструктурой и стеком Big Data.

что делать

  • Разработка пайплайнов обработки данных
  • Оптимизация приложений на Apache Spark
  • Поддержка работы СУБД
  • Работа с хранилищами данных

требования

  • Опыт разработки пайплайнов в Apache Airflow
  • Опыт оптимизации приложений на Apache Spark
  • Понимание работы СУБД и принципов построения DWH
  • Опыт работы с Hadoop
  • Уверенное владение SQL и Python/Scala/Java

что предлагают

  • Гибридный формат работы
  • Офис в Санкт-Петербурге

похожие вакансии

Технический архитектор / Системный администратор

Альфа-БанкГибкий · Москва
вилка не указана
вчера
Технический архитектор в Альфа-Банк. Проектирование архитектуры ИТ-систем, разработка схем развертывания инфраструктуры и подбор серверного оборудования.

Ведущий администратор баз данных (DBA)

Simple Group·Senior·Гибкий · Москва
от 250k ₽
2 дн назад
Ведущий DBA в Simple Group. Проектирование архитектуры MS SQL Server, обеспечение отказоустойчивости инфраструктуры и менторство команды.

Инженер по сопровождению

Сбер·Middle·Гибкий · Москва
вилка не указана
4 дн назад
Инженер по сопровождению в команду платформы цифровых активов. Поддержка микросервисных продуктов, администрирование Kubernetes и Postgres.

Инженер доступности

VK·Middle·Гибрид · Москва
вилка не указана
4 дн назад
Инженер доступности в сервисы продуктивности VK Tech. Разработка и сопровождение инфраструктуры высоконагруженных систем.