VK перевела аналитику данных на единую технологическую платформу

В хранилище находятся данные ВКонтакте, VK Видео, MAX и Одноклассников.

VK перевела аналитику на единую внутреннюю платформу, которая объединяет хранение и поиск данных, контроль качества, управление доступами, отчетность и продуктовые эксперименты.

Системой уже пользуются 90% аналитиков компании. В ней хранится более 400 ПБ данных ВКонтакте, VK Видео, MAX и Одноклассников, а ежемесячно проводится около 1 тыс. A/B-тестов.

Сотрудники могут через одну платформу находить нужные наборы данных, проверять их качество и владельцев, проводить анализ и использовать результаты в отчетах, экспериментах и ML-моделях.

По данным VK, автоматизация ускорила принятие решений в два раза и позволила сократить объем используемых вычислительных ресурсов на 60 тыс. CPU.

Отдельный модуль хранит параметры и результаты продуктовых экспериментов. Команды могут повторно использовать накопленные данные и быстрее проверять новые гипотезы.

Единая система отчетности также помогает сотрудникам работать с общими метриками и методиками расчета, сокращая число ручных операций при подготовке аналитики.

Компании все чаще объединяют данные и рабочие инструменты в одной инфраструктуре. В маркетинге похожий принцип используется в Vitamin.tools: через один сервис можно работать с рекламными кабинетами разных площадок, бюджетами и документами.