Data Engineer (VK Музыка)

VK Музыка — крупнейший стриминговый сервис, который объединяет музыкальный раздел ВКонтакте и отдельное приложение VK Музыка.

Сервисом ежемесячно пользуются миллионы слушателей в России и СНГ. Библиотека VK Музыки постоянно обновляется и включает десятки миллионов треков, в том числе эксклюзивные релизы, доступные только на витрине сервиса. Здесь можно послушать любую радиостанцию или переключиться на любимый подкаст — о психологии, бизнесе, культуре и, конечно, музыке.

Задачи:

• поддерживать и развивать существующую модель данных: описывать новые события/таблицы, участвовать в проверке событий, проверять и улучшать качество данных;
• строить пайплайны в ETL-оркестрантах.

Требования:

• опыт работы с распределенными системами построения потоков данных: Kafka, Airflow;
• владение языком программирования Python;
• уверенные знания SQL (Clickhouse на уровне умения хорошо оптимизировать запросы);
• желателен опыт сбора информации о действиях пользователей с UI (web, mobile app).