Data Engineer (Senior)
CINIMEXМосква21 июня
О вакансии
Разработка и оптимизация ETL-пайплайнов. Работа с Apache Spark, HDFS (parquet), ClickHouse, Hive и Greenplum. Разработка витрин данных, оркестрация процессов и взаимодействие с BI и DevOps
Требования
- Глубокий экспертный опыт работы с Apache Spark от 4-5 лет (оптимизация джобов, настройка памяти и shuffle-операций)
- Опыт работы с ClickHouse
- Опыт работы с Hadoop (HDFS, Hive)
- Опыт проектирования и разработки потоков данных и алгоритмов загрузки/обработки данных
- Опыт оптимизации ETL-пайплайнов и SQL-кода
- Продвинутые знания SQL
- Готовность осваивать Java для использования Spark
Источник: Telegram-канал Digital Hunt
Контакт работодателя скрыт
Зарегистрируйтесь и загрузите резюме — откроется прямой контакт по этой вакансии и персональная подборка похожих из сотен Telegram-каналов. Первые 3 дня бесплатно, без карты.
Получить контакт работодателя