{ "index": 311, "slug": "editorial-2019-05-mechanism-http-caching", "title": "HTTP-кэш: почему правильный TTL не спасает ответ", "excerpt": "Кэш проверяет не только срок свежести. Разбираем cache key, Vary, ETag и границы браузера, proxy и CDN на воспроизводимом сценарии.", "contentHtml": "

После релиза пользователь открывает знакомый адрес и видит старый JavaScript или HTML не на том языке. В ответе есть Cache-Control: max-age=60, поэтому команда ждёт обновления через минуту. Но один клиент получает новый файл, другой — старый, а CDN продолжает отвечать из своей записи. Цена ошибки — неверное состояние страницы, лишняя нагрузка на origin и попытки очищать кэш вслепую.

\n

Причина часто не в числе 60. Кэш сначала решает, подходит ли сохранённый ответ этому запросу, и только потом проверяет его свежесть. Если ключ варианта неполон, свежий ответ всё равно будет неправильным. Если ключ верен, но ответ устарел, помогает валидатор вроде ETag. Эти две задачи нельзя заменять одним большим TTL.

\n

Модель: ключ, свежесть и проверка

\n

В HTTP cache key как минимум включает метод и target URI запроса. Для обычных GET-кэшей на практике главным компонентом остаётся URI. Но origin может выбирать представление по заголовкам запроса, например по Accept-Language или Accept-Encoding. Тогда ответ должен сообщить об этом через Vary: кэш сравнивает названные поля текущего запроса с полями запроса, который породил сохранённый ответ.

\n

Управляемый CDN может добавить к ключу собственные признаки: cookies, географию, эксперимент или правило из панели. Это не отменяет HTTP-контракт. Заголовок, снятый на origin, не доказывает поведение публичного адреса: proxy или CDN может выбрать другую запись, изменить свежесть или отправить запрос дальше. Название настройки вроде «cache key» тоже не доказывает, какие поля реально участвуют в выборе.

\n

max-age задаёт срок, после которого ответ считают несвежим. Это не срок жизни записи и не команда удалить её. Несвежая запись может быть повторно проверена у origin. При совпавшем валидаторе origin для GET или HEAD обычно возвращает 304 Not Modified без нового тела; при изменении представления — 200 с новым телом и новым валидатором.

\n

Что именно делают директивы

\n

ETag сравнивает сохранённое представление с текущим. Он не очищает запись и сам по себе не делает её свежей. no-cache в ответе тоже не означает «не хранить»: перед повторным использованием кэш должен обратиться к origin для успешной проверки. no-store запрещает кэшу намеренно хранить ответ и использовать его для другого запроса, но не является полноценной защитой от скомпрометированного посредника.

\n

private запрещает хранение ответа в shared cache, но разрешает private cache пользователя при остальных условиях. Это подходит для персонализированного ответа, если его всё равно допустимо хранить в браузере. Для личного HTML часто безопаснее выбрать no-store. Для shared cache отдельный s-maxage задаёт максимальный возраст и переопределяет max-age для общего кэша; после истечения срок всё равно требует корректного правила повторной проверки.

\n

Из этого следует порядок решения: сначала совпадение URI, метода и варианта; затем допустимость повторного использования; затем свежесть; затем, если нужно, условный запрос к origin. Нельзя выводить причину по одному заголовку. Age полезен как признак того, что ответ был сгенерирован или проверен не для этого запроса, но отсутствие Age не доказывает обращение к origin.

\n

Учебный пример: язык меняет ответ

\n

Ниже приведён учебный сценарий для контролируемого домена. Он меняет только Accept-Language, сохраняет заголовки и тело отдельно и не выдаёт результат за измерение production. Подставьте URL тестового origin и не используйте в команде настоящие cookies или токены.

\n
# Origin должен вернуть разные представления для двух языков.\ncurl -sS -D /tmp/catalog-ru.headers -o /tmp/catalog-ru.html -H 'Accept-Language: ru' https://origin.example.test/catalog\ncurl -sS -D /tmp/catalog-en.headers -o /tmp/catalog-en.html -H 'Accept-Language: en' https://origin.example.test/catalog\n\n# Сначала сравниваем контракт, затем тела.\ngrep -Ei '^(cache-control|vary|etag|age|date):' /tmp/catalog-ru.headers\ngrep -Ei '^(cache-control|vary|etag|age|date):' /tmp/catalog-en.headers\nsha256sum /tmp/catalog-ru.html /tmp/catalog-en.html\n\n# Валидатор берём из ответа того же варианта.\ncurl -sS -D - -o /dev/null -H 'Accept-Language: ru' -H 'If-None-Match: "catalog-ru-v18"' https://origin.example.test/catalog
\n

Если origin действительно выбирает HTML по языку, для общего HTTP-кэша ожидается Vary: Accept-Language. Отдельное vendor-specific правило cache key может быть нужно CDN, но оно не заменяет заголовок для других посредников. Если origin отдал одинаковые тела, сначала исправьте выбор представления у источника: проверка CDN только замаскирует проблему.

\n

Значение ETag в команде условное. В рабочем запуске его нужно скопировать из предыдущего ответа для русского варианта, сохранив кавычки. Нельзя использовать русский валидатор для английского. Если представление не менялось и запрос дошёл до origin, ожидаем 304; при изменении тела ожидаем новый 200. Статус нужно зафиксировать на вашем стенде, а не обещать заранее.

\n

Симптомы и действия

\n
Диагностика HTTP-кэша по наблюдаемому симптому
СимптомГипотезаПроверкаДействие
После релиза старый JavaScriptПостоянный URL и длинный TTLСравнить URL из нового HTML и digest файлаДобавить fingerprint или изменить контракт свежести
Английский запрос получает русский HTMLНет Vary или CDN не учитывает вариантСделать два запроса, сравнить тела и заголовки на origin и public URLСогласовать выбор представления, Vary и cache key
После TTL всегда приходит полный ответНет валидатора или условный запрос не доходит до originПовторить запрос с прежним ETag и проверить маршрутНастроить устойчивый валидатор и проверить каждый слой
Публичный ответ отличается от originProxy или CDN меняет ключ, TTL или заголовкиСнять одинаковые поля и digest через обе точкиСверить конфигурацию посредника с HTTP-контрактом
Данные одного пользователя видит другойПерсональный ответ попал в shared cacheПроверить две тестовые сессии, Authorization, cookies и директивыВыбрать private, no-store или разделить публичную и личную части
CDN обслуживает запись дольше браузераИспользуется s-maxage, отличный от max-ageСравнить Age, Cache-Control и vendor headersЗафиксировать отдельную политику shared cache и критерий purge
\n

Иллюстрация ключа и свежести

\n
\"Схема
Кэш сначала выбирает подходящее представление по ключу, затем проверяет свежесть. Только после этого для несвежего ответа начинается повторная проверка через валидатор.
\n

Порядок проверки

\n
  1. Выберите один тестовый URL и опишите, какой ответ считается публичным, а какой персональным. Для HTML, asset и API правила могут различаться.
  2. Запишите метод и все входы, которые могут менять тело: query, язык, кодирование, cookie, авторизацию, эксперимент или географию. Отдельно отметьте, какие из них реально входят в cache key.
  3. Снимите ответ origin и публичный ответ одним методом. Сохраните статус, digest тела, Cache-Control, ETag, Vary, Age и Date, если поля есть.
  4. Проверьте два варианта, меняя только один вход. Если тела различаются, найдите правило, которое разделяет их; если одинаковы, не добавляйте Vary по предположению.
  5. Сопоставьте max-age и, если он используется, s-maxage. Не называйте истечение TTL удалением записи: оно может привести к условному запросу, а не к загрузке нового тела.
  6. Повторите запрос после истечения срока с валидатором именно того варианта. Зафиксируйте 304, новый 200 или иной фактический ответ и объясните его по заголовкам.
  7. Сравните origin, reverse proxy, CDN и браузер, если эти границы доступны. Для браузера отдельно исключите service worker и историю навигации. Не очищайте кэш до первого снимка.
  8. Проверьте отрицательный путь: персональный ответ, неизвестный язык, изменение asset и запрос без валидатора. Для каждого заранее запишите безопасный ожидаемый результат.
\n

Ограничения

\n

HTTP задаёт правила кэша, но не описывает конфигурацию каждого CDN. Посредник может иметь отдельный cache key, TTL, stale policy и операцию purge. Браузер может показать данные из service worker или навигационной истории, а не из обычного HTTP-кэша. Поэтому один ответ curl не описывает весь путь пользователя.

\n

Vary не заменяет проверку персонализации. Если тело зависит от cookie, эксперимента или пользователя, попытка перечислить все поля дробит кэш и может оставить риск утечки. Для личного HTML безопаснее начать с private или no-store, а публичную локализацию ограничить известным списком вариантов.

\n

Учебный домен, хэш файла и значение ETag не являются результатами измерения. Стандарт не гарантирует конкретный hit ratio, ускорение или поведение vendor-specific purge. В диагностике нельзя публиковать токены, cookies, персональные query-параметры и внутренние адреса.

\n

Критерий готовности

\n

Проверку можно считать завершённой, когда для выбранного URL записаны входы, допустимая давность, владелец правила cache key, ожидаемые директивы, валидатор и граница, на которой каждый пункт проверяется. Два запроса с разными входами не смешивают тела. После истечения срока неизменённое представление даёт подтверждённую условную проверку, а изменённое — новый ответ. Новый asset получает новый URL. Персональный ответ не попадает в shared cache.

\n

Если это нельзя показать заголовками, телом и снимками на доступных границах, контракт ещё не доказан. Исправление начинается с уровня, где появилось расхождение: origin, proxy, CDN или браузер. Очистка кэша может убрать симптом, но не доказывает, что ключ и срок теперь согласованы.

\n

Проверяемые источники

" }