Закодировать от лишнего веса: VK вложила 100 млн рублей в технологию сжатия видео
Сжатие по-новому
VK первой из российских компаний внедрила видеокодек AV1 для «VK Видео», а также для соцсетей «ВКонтакте» и ОК, рассказали Forbes в компании. Его используют такие технологические гиганты, как YouTube и Google, Netflix, Microsoft, Tencent, Amazon и Apple. Ролики в AV1 в разрешении 4К весят столько же, сколько раньше (при использовании кодека H.264) в FullHD, но они быстрее загружаются и менее требовательны к скорости интернета. Теперь в AV1 кодируются самые популярные шоу от VK, а пользователи и создатели контента также могут загружать видео в новом кодеке, говорят в VK.
AV1 — стандарт сжатия видео с открытым исходным кодом, разработанный в 2018 году, сжимает видео до трех раз лучше, чем самый распространенный на сегодня в видеоиндустрии кодек H.264 (лицензируемый стандарт, разработанный еще в 2003-м). Например, запись шоу длительностью 40 минут в 4К будет весить 2 ГБ в AV1 вместо 6-8 ГБ в H.264, благодаря этому видео будут загружаться быстрее без потери качества, рассчитывают в VK. Кроме того, AV1 позволяет запускать видео до 4K с такими же битрейтами, что и видео H.264 1080P, — 4-5 мегабит в секунду. Поэтому, иными словами, видео, кодированные в AV1, пользователи смогут смотреть в высоком разрешении даже с низкой скоростью доступа в интернет.
Переход на новый кодек также снизил нагрузку на кеширующие серверы и сети VK в среднем на 25-45% и повысил плотность хранения контента на 30%, заверяют в компании. Стоимость внедрения кодека составила 100 млн рублей, сообщил источник, близкий к VK. В компании говорят, что основные инвестиции «пошли в серверы, разработку, внедрение».
«Весомый аргумент»
Есть три основных кодека, которые пришли на замену допотопному H.264 (AVC), бывшему с нами более 20 лет, объясняет руководитель департамента расследований T.Hunter, эксперт рынка НТИ SafeNet (Сейфнет) Игорь Бедеров. «Первые два — H.265 (HEVC) и H.266 (VVC) — являются коммерческими проектами, требующими лицензионных отчислений. Это привело к тому, что жадность в очередной раз двинула прогресс и был создан кодек AV1 — свободная альтернатива HEVC, выпущенная консорциумом компаний во главе с Google, — продолжает он. — Наибольшей поддержкой индустрии сегодня пользуется именно AV1, практически все крупнейшие видеохостинги внедряют его. А по уровню сжатия AV1 превосходит платный HEVC». На практике пользователи получат более быструю загрузку и лучшее качество картинки, заключает Бедеров.
Действительно, именно этот новый формат хорош еще и тем, что он свободен от любых роялти и является полностью бесплатным открытым ПО, подтверждает основатель IT-компании Tiqum Юрий Гизатуллин, добавляя, что в условиях санкций и ухода всех софтверных гигантов из России это «очень актуально». «В связи с замедлением основного конкурента на VK выпала ответственность стать лидером видеохостинга, поэтому инвестиции в инфраструктуру более чем уместны. Нужно даже больше — работать с приложением, с интерфейсами и прочим, — размышляет эксперт. — 100 млн рублей — это немного, ведь вопрос стоял не только в разработке сервисов кодирования на этом алгоритме, но и в обеспечении совместимости других сервисов компании, а возможно, и в разработке новых механизмов стриминга и отображения».
То, что технология разработана давно и только сейчас внедрена, — нормальная практика на рынке, рассуждает Юрий Гизатуллин. «Переход на новые технологии — это всегда дорого, и если устраивают старые и нет проблем, то и нет смысла платить за новое, — продолжает он. — Поэтому, например, Facebook (входит в компанию Meta, чья деятельность признана в России экстремистской и запрещена) тестировал технологию уже в 2018 году, Netflix внедрил в 2020-м, а Twitch запустил AV1 в 2023-м для некоторой части контента. По сути, до прошлого года формат обкатывался лидерами. VK тут совсем не аутсайдер и решает вопрос по мере возникновения потребности». Технология должна была пройти этапы адаптации и оптимизации, чтобы стать массово применимой, согласен специалист отдела видеоаналитики компании «Дронсхаб» и эксперт рынка НТИ Технет Вадим Вергун.
Внедрение AV1 особенно важно для пользователей с медленным интернетом или ограниченными объемами трафика, оно делает просмотр контента удобнее и доступнее, продолжает Вадим Вергун: «Кроме того, это позволяет экономить место на серверах и снижает нагрузку на сеть, что очень важно для таких масштабных платформ, как «VK Видео». Улучшение качества видео и скорости загрузки на платформах VK, по его мнению, может стать весомым аргументом для тех, кто ищет альтернативу YouTube. «За год-два это вполне может привести к заметному увеличению аудитории, особенно если учесть, что качество и доступность видео — ключевые факторы при выборе платформы для просмотра контента», — считает Вергун.
Бенефициары замедления
VK объявляет о новом внедрении на фоне роста собственного трафика и проблем российских пользователей с доступом к крупнейшему видеохостингу в мире — YouTube. 12 августа VK сообщила, что с момента официального запуска приложения «VK Видео» в сентябре 2023 года пользователи установили его на мобильные устройства и Android TV 20 млн раз. А в конце августа компания отчиталась об общем росте видеотрафика своих ресурсов с начала года на 30% (данные есть у Forbes). При этом трафик видео с детским контентом увеличился с начала года более чем в 4,5 раза, со спортивным — в пять раз, а просмотры развлекательных шоу в высоком разрешении «выросли на порядок».
В связи с ростом «VK Видео» компания расширила сеть доставки контента: теперь более 150 CDN-узлов с кеш-серверами охватывают всю территорию России и страны СНГ, в том числе Белоруссию, Казахстан, Таджикистан и Узбекистан. CDN-сеть дает пользователям доступ к контенту из ближайшего узла с кеш-серверами независимо от местоположения, что повышает скорость загрузки на 20-30%.
По сравнению с 2023 годом пропускная способность стыков с операторами связи выросла вдвое, а производительность сети VK достигла 40 Тбит/с, рассказывала заместитель вице-президента VK по инфраструктуре и прикладным сервисам Елена Якупова. «Этого будет достаточно, даже если ежедневная аудитория сервисов VK вырастет одномоментно в два раза», — подчеркнула она.
Кроме того, рост видеотрафика VK сопровождает фактическое замедление работы YouTube в России. В конце июля российские операторы, в том числе МТС и билайн, начали предупреждать об ухудшении работы YouTube по независящим от них причинам. Проблемы с доступом к видеосервису наблюдались месяц. 8 августа в работе YouTube произошел масштабный сбой. После этого российские операторы связи отметили скачок общего объема трафика на 5-10%.
Эксперты объяснили замедление YouTube действиями Роскомнадзора, который блокирует видеосервис с помощью технических средств противодействия угрозам (ТСПУ), установленных на сетях всех российских операторов связи. Глава комитета по информполитике Госдумы Александр Хинштейн в одном из постов отмечал, что «деградация» YouTube — «вынужденный шаг, направленный не против российских пользователей, а против администрации иностранного ресурса».