getSummary
Written in English from the original postingVK Music is hiring a Senior Data Engineer / DWH Engineer. The role involves migrating to a target data architecture, implementing and systematizing ETL processes, optimizing data for product analytics, and documenting data and data-management processes. Required experience includes Python, SQL, Airflow, ClickHouse, and large-scale data warehouse architecture.
Job description
Стриминговый сервис, который объединил музыкальную платформу ВКонтакте и отдельное приложение VK Музыка. Миллионы пользователей слушают здесь любимые песни, а тысячи артистов находят свою аудиторию.
Задачи
Миграция в целевую архитектуру данных
Реализация и систематизация ETL-процессов согласно требованиям
Оптимизация работы с данными для продуктовой аналитики
Документирование данных и процессов по управлению данными
Требования
Профессиональные знания и навыки: Python, SQL, Airflow, ClickHouse
Опыт работы: 4+ года в разработке или data engineering
Опыт построения архитектуры DWH объёмом 100+ TB
Опыт создания ETL-процессов
Опыт миграции данных между различными БД
Будет плюсом
Опыт работы с YTsaurus.
Навыки: SQL, Python, ClickHouse, Apache Airflow
