Data Engineer в VK Музыку

Обязанности

VK Музыка стриминговый сервис, который объединил музыкальную платформу ВКонтакте и отдельное приложение VK Музыка. Миллионы пользователей слушают здесь музыку, а тысячи артистов находят свою аудиторию. Мы находимся в поиске самостоятельного специалиста по большим данным, который будет помогать нам создавать новые и развивать существующие data-продукты. Если вы любите копаться в данных и интересуетесь продуктовой частью, то вам будет у нас интересно. Задачи: проектировать, реализовывать и оптимизировать сложные ETL-процессы; работать с данными на каждом этапе их трансформации: от появления информации в конкретном источнике до принятия решений на данных; оптимизировать работу с данными для продуктовой аналитики; документировать данные и процессы по их управлению. Требования: уверенное знание Python на уровне написания бизнес-логики и SQL на уровне оптимизации запросов; опыт работы с ClickHouse в роли DE от трёх лет; умение и желание разбираться в сложных процессах преобразования данных; опыт работы с базами данных объёмом 1+ TB; опыт миграции данных между различными БД. Будет плюсом опыт работы с Hadoop, YT.