Middle+ Data Engineer

О вакансии

Разработка, развертывание и поддержка data pipelines и систем управления данными на Databricks. Проектирование архитектур доступа к данным с фокусом на data contracts и автоматизацию управления доступом через Infrastructure-as-Code. Работа с классификацией данных по доменам и обнаружением персональных данных (PII)

Требования

• 3+ лет опыта в data engineering
• Опыт в software engineering приветствуется
• Сильное владение Python и фреймворками обработки данных (Spark/PySpark)
• Глубокие знания data modeling, распределенной обработки данных, SQL
• Опыт архитектуры data warehouse/lakehouse
• Практический опыт развертывания облачных платформ данных (Databricks, GCP, AWS) с Terraform
• Умение проектировать решения доступа к данным и управления ими
• Понимание бизнес-ценности data products и элементов управления
• Сильные навыки решения проблем
• Отличные коммуникационные навыки и умение строить консенсус
• Разговорный английский
• Наличие Mac для работы

Источник: Telegram-канал Вакансии IT . Рекрутер Шатило Вероника