VK перевела работу с данными на собственную технологическую платформу

VK перевела работу с данными на собственную технологическую платформу. Она объединяет хранилище, поиск и контроль качества данных, управление доступами, отчётность и продуктовые эксперименты. Платформой пользуются 90% аналитиков VK, объём данных превышает 400 петабайт. Ежемесячно через систему проходит 1000 A/B-тестов.

Платформа объединяет ключевые этапы работы с данными: сотрудники могут найти нужный набор, проверить его качество и владельцев, провести анализ и использовать результаты для отчётности, экспериментов и ML-моделей. В хранилище находятся данные ВКонтакте, VK Видео, MAX и Одноклассников.

Автоматизация позволила в два раза ускорить принятие решений и сократить используемые вычислительные ресурсы на 60 тысяч CPU. Отдельный блок отвечает за продуктовые эксперименты. Система сохраняет их условия, методики расчётов и результаты, позволяя повторно использовать данные, быстрее проверять гипотезы и оценивать влияние изменений на продукты.

Платформа включает систему управленческой и операционной отчётности, которая охватывает аналитические функции VK. Единый подход к работе с данными позволяет командам использовать общие показатели и методики расчёта, а компании — понимать, на каких данных и метриках основаны продуктовые решения. Это сокращает количество ручных операций при подготовке аналитики.

Подписывайтесь на наш Telegram-канал, чтобы быть в курсе всех новостей и событий Рунета.