Яндекс выложил в опенсорс технологию, которая помогает экономить до 20% серверных мощностей

Технологию уже внедрили в рекомендательную систему Рекламы Яндекса.

Яндекс выложил в оперсорс YaFF (Yet Another Flat Format) — новый формат передачи и чтения данных, разработанный для высоконагруженных сервисов. Технология позволяет работать с данными без их предварительной распаковки, что обеспечивает экономию до 20% вычислительных мощностей.

В современных сервисах для компактной передачи данных часто используется Protobuf. Несмотря на надежность, он требует обязательной распаковки, на которую уходит до 10% мощностей системы. Существующая альтернатива FlatBuffers также позволяет читать данные без распаковки, но требует практически полной переработки программного кода. YaFF решает обе проблемы.

Ключевое преимущество YaFF заключается в возможности использовать его поверх стандартного Protobuf. Это позволяет считывать данные напрямую, не переписывая код существующих проектов. Формат будет полезен банкам, маркетплейсам, телеком-операторам и облачным провайдерам, где критически важны скорость обработки и эффективность оборудования.

Технология уже применяется в рекламной системе Яндекса. При обработке сотен тысяч запросов в секунду использование YaFF позволило снизить нагрузку на процессоры на 10–20%. Высвобожденные мощности компания использует для обработки дополнительного объема пользовательских запросов без увеличения парка серверов.

Статья подготовлена редакцией рекламной экосистемы Vitamin.tools, возвращающей до 18% с пополнений рекламных бюджетов.