3 мин на чтение

Cloudflare упростила выдачу больших файлов по частям

Cloudflare открыла Origin Range Requests для всех тарифов. Разбираемся, как CDN собирает частичный ответ из кэша и почему это полезно для видео, архивов и больших загрузок.

Cloudflare 23 октября открыла Origin Range Requests для всех тарифов. Функция меняет работу CDN с большими файлами: когда клиенту нужен небольшой фрагмент, сеть запрашивает недостающие части у исходного сервера и собирает ответ вместе с уже сохранёнными данными. Размер диапазона больше не приходится подбирать вручную. Это заметное упрощение для проектов с видео, архивами и дистрибутивами.

Почему маленький запрос может оказаться дорогим

Перемотка видео не требует заново скачивать весь ролик. Плеер обращается к определённому участку файла, а загрузчик может похожим способом продолжить передачу после обрыва. В HTTP для этого существует заголовок Range. При успешной обработке сервер возвращает ответ 206 Partial Content с указанием переданного диапазона.

Сложность появляется внутри кэша. Слишком крупные порции заставляют сеть переносить лишние данные; слишком мелкие увеличивают число обращений к исходному серверу. В прежней реализации Cloudflare этот компромисс зависел от заданного размера диапазона. Теперь согласование запросов с устройством кэша берёт на себя сама сеть.

Как CDN собирает ответ

Origin Range Requests проверяет, какие байты уже доступны, и обращается к исходному серверу за недостающими. Для пользователя это остаётся одним ответом. Если другой запрос уже загружает подходящий участок, работу можно использовать совместно, не начиная такую же передачу ещё раз.

Важная деталь: «скачать только нужное» не означает полного совпадения объёма на каждом участке маршрута. Запросы к исходному серверу выравниваются по границам кэша размером 1 МиБ. Ради одного килобайта сеть может получить целый такой блок, но клиенту отдаст запрошенный килобайт. Это предсказуемая избыточность вместо произвольного ручного размера.

Части должны относиться к одной версии файла. Для этого проверяются согласованность размера и идентификатора ETag. Если условие If-Range больше не соответствует ресурсу, корректным результатом становится полный ответ, а не смесь старых и новых фрагментов.

Что показало внедрение

На нагрузках хранилища R2 Cloudflare зафиксировала сокращение p99 времени до первого байта примерно вдвое. Отдельное улучшение объединения данных из кэша и вышестоящего узла уменьшило межуровневый трафик R2 и похожих нагрузок приблизительно на 6% за неделю.

Эти цифры характеризуют конкретную инфраструктуру и характер запросов. Их нельзя автоматически переносить на любой сайт. Для небольших страниц, которые скачиваются целиком, основная польза этой функции может вообще не проявиться: её предмет — частичный доступ к крупным объектам.

Условия Cache Rule позволяют выделить нужные запросы по пути, имени хоста и другим признакам.

Что проверить при включении

Настройка находится в Cache Rules. Правило выбирает подходящие запросы, а Origin Range Requests включается для этого набора. Практический старт — отдельный путь с большими файлами: так проще сопоставить поведение загрузки с изменением настройки.

Исходный сервер должен корректно поддерживать диапазоны. Если он игнорирует Range и возвращает весь объект, Cloudflare может обработать ответ, но сначала придётся скачать полный файл. Частичный запрос также не обходит предельный размер кэшируемого объекта и не делает любой ответ пригодным для кэширования. С Cache Reserve функция не поддерживается.

После включения полезно проверить перемотку, возобновление загрузки и ответ на недоступный диапазон, а затем сравнить трафик исходного сервера и задержку первых байтов. Так изменение оценивается по реальному сценарию проекта, а не по чужому проценту ускорения.

АвторAnthony Fubon

Anthony Fubon — российский музыкант, DJ, музыкальный продюсер, организатор мероприятий и специалист по цифровым продуктам. В музыке он использовал несколько имён, в частности Fubon, TheFubon и yagelProject. Его собственная биография описывает путь от рок-музыки и российской psytrance-сцены к электронной музыке разных направлений и созданию собственной цифровой экосистемы.