Коды ответа сервера: что значат 200, 301, 302, 404, 410, 500 и 503 и как они влияют на SEO

Что такое код ответа сервера простыми словами

Код ответа сервера — это служебная отметка, которую сервер ставит на каждый ответ. Сравнить её можно с отметкой почтальона на конверте: «вручено», «адресат переехал, вот новый адрес», «по этому адресу никто не живёт», «почта закрыта на переучёт». Человек обычно этой отметки не видит, он видит страницу. Робот читает её первой и по ней решает, что делать с адресом.

Формально коды описаны в стандарте HTTP RFC 9110. Он делит их на пять классов.

У страницы есть один ответ, а вид страницы и код могут не совпадать. Красивая страница «Ой, ничего не нашлось» способна отдавать 200, а обычная с виду страница может отвечать роботу кодом 403, если её блокирует защита хостинга. Поэтому код всегда проверяют отдельно.

Какие коды ответа сервера важны для SEO: справочная таблица

Для SEO важны двенадцать кодов: 200, 301, 302, 304, 307, 308, 404, 410, 429, 500, 502 и 503. Таблица ниже собирает их в одном месте. Значения кодов взяты из RFC 9110, данные про Яндекс из его справочника по кодам, данные про Google из документации.

Про ошибку 502 у нас есть отдельная инструкция: ошибка 502 на сайте. Как выглядят настройки редиректов в Apache, nginx и конструкторах, мы показали в статье про 301 редирект.

Как проверить код ответа сервера

Код ответа сервера проверяют четырьмя способами: в инструментах браузера, в Яндекс Вебмастере, командой в терминале и краулером для всего сайта. Для одной страницы хватит браузера, для всего сайта без краулера не обойтись.

1. Браузер. Откройте страницу, нажмите F12, перейдите на вкладку «Сеть» (Network) и обновите страницу. В столбце «Статус» у первой строки будет код.
2. Яндекс Вебмастер. Используйте инструмент «Проверка ответа сервера». Яндекс предупреждает, что у инструмента другой IP-адрес, поэтому ответ может отличаться от реального ответа роботу.
3. «Проверка страницы» в разделе «Индексирование» показывает код, контент глазами робота и статус в поиске.
4. Терминал. Команда покажет заголовки и все переходы:

bash curl -I -L https://example.ru/stranica/

5. Краулер. Программа обходит сайт как робот и выгружает коды всех адресов таблицей. Подойдёт любой SEO-краулер, например Screaming Frog или его аналоги.
6. Отчёты поиска. В статистике обхода Вебмастера видно последний код страниц и когда он менялся, список можно выгрузить в XLS или CSV. Если сайт ведёт Google Search Console, там есть аналогичные отчёты.

Как устроены отчёты Вебмастера и какие из них смотреть регулярно, мы описали в статье диагностика сайта в Яндекс Вебмастере.

Как коды ответа влияют на индексацию в Яндексе и Google

Яндекс и Google читают коды похоже, но в деталях расходятся: например, Яндекс отдельно рекомендует 410 для навсегда удалённых страниц, а Google обрабатывает все 4XX, кроме 429, одинаково. По справке Яндекса при 200 робот обходит страницу, при 3XX идёт на цель редиректа, а страница с 4XX или 5XX в поиске не участвует.

С кодом 429 у Яндекса есть нюанс. Справка по индексированию предлагает его как вариант, если страница сломалась и вы хотите её сохранить в поиске на время ремонта, при этом предупреждает, что долгий 429 снижает скорость обхода. Заголовок Retry-After, который подсказывает, когда повторить запрос, Яндекс для этого кода не учитывает.

Вернуться в поиск страница может после того, как робот снова получит 200. По справке она исчезает из списка исключённых при успешном ответе, а появиться в поиске может в течение двух недель. Для ускорения используют «Переобход страниц».

Если страницы с вашего сайта внезапно уходят из поиска и вы не понимаете почему, начните с проверки кодов. Такая проверка показывает причину быстрее других.

Что такое мягкая 404 и почему она вредит

Мягкая 404 — это страница, которая показывает посетителю «не найдено» или пустой шаблон, но отвечает кодом 200. В документации Google такие случаи называются soft 404: страница с кодом 2XX выглядит как ошибка или пустая, и Search Console отмечает её отдельно. У Яндекса отдельного термина в справочнике нет, но в справке об индексировании есть близкий случай: страницы с разным содержанием могут быть признаны дублями, если робот когда-то получил с них одинаковую заглушку.

Чем это плохо:

• робот тратит обход на адреса, которых на деле нет;
• одинаковые пустые страницы превращаются в группу дублей;
• реальные ошибки сложнее заметить в отчётах.

Частые источники мягких 404 такие: фильтр каталога без товаров, удалённый товар с шаблоном карточки, CMS, которая на любой адрес показывает главную, и JavaScript-приложение, отвечающее 200 на всё подряд. Проверка простая: введите в браузере заведомо несуществующий адрес, например /proverka-404-abc/, и посмотрите код. Если там 200, настройте сервер или CMS. Как оформить саму страницу ошибки, рассказано в статье страница 404.

Какие ошибки с редиректами встречаются чаще всего

Самая частая ошибка с редиректами — цепочка, когда адрес A ведёт на B, B на C, а C на D вместо одного прямого перехода. Такие цепочки появляются после нескольких переездов сайта или настроек в разных местах: на хостинге, в плагине и в CMS. Для Google предел по умолчанию 10 переходов, но проблема начинается задолго до него: каждый лишний шаг замедляет посетителя и тратит обход.

Постоянный и временный редирект легко перепутать. Постоянный говорит: старый адрес больше не нужен, запомните новый. Временный говорит: новый адрес только на время. Google рекомендует ставить постоянный только там, где вы уверены, что откатывать его не будете. Заодно есть различие в браузерах: при 301 и 302 метод запроса POST может измениться на GET, а 307 и 308 метод сохраняют. Это важно для форм и API, для обычных страниц разницы нет.

Что отдавать при удалении страницы: 404, 410 или 301

При удалении страницы выбор кода зависит от того, есть ли замена: если есть близкая по смыслу страница, ставят 301, если замены нет, отдают 404 или 410. Яндекс просит обеспечить код 410, если ресурс удалён навсегда, а для перемещённых настроить 301.

Важная деталь: страницу, которую хотите убрать через код или noindex, не закрывайте в robots.txt. Иначе, как предупреждает справка Яндекса, робот не увидит ваши указания. Если на удалённую страницу есть внешние ссылки, 301 на близкий материал сохранит посетителей. Поиск таких адресов разобран в статье битые ссылки на сайте.

Как отдавать 503 на время работ

Код 503 отдают на время технических работ, чтобы сообщить роботу, что сервер недоступен временно. Яндекс в справке рекомендует этот код, чтобы избежать исключения страниц при кратковременной недоступности. По стандарту сервер может добавить заголовок Retry-After с подсказкой, когда повторить запрос.

Порядок действий такой:

1. Выберите время с наименьшей посещаемостью.
2. Настройте сервер на 503 для всех адресов и покажите людям понятную страницу с контактами.
3. Закройте все источники рекламы, ведущие на сайт, или поставьте их на паузу: клики во время работ стоят денег.
4. Сделайте работы как можно быстрее.
5. Снимите заглушку и проверьте код главной и трёх важных страниц.
6. Через несколько дней посмотрите статистику обхода и страницы в поиске.

Заглушка с кодом 200 вместо 503 опасна. Робот получит одинаковую страницу на всех адресах, а при следующем обновлении базы часть страниц может оказаться дублями.

Сколько стоят ошибки в кодах: условный расчёт

Ошибка в кодах обходится в заявки, которые не пришли, и считать потери лучше в них. Пример условный, цифры выбраны для наглядности. Сайт интернет-магазина переехал, 40 страниц категорий приносили по 25 переходов из поиска в месяц, конверсия сайта в заказ 2%, средняя маржа с заказа 2 000 ₽. Редиректы забыли, и старые адреса начали отдавать 404.

Вторая цифра, на которую стоит посмотреть, связана с цепочками. Если 1 000 старых адресов ведут на финальную страницу через три перехода, робот делает 3 000 запросов вместо 1 000. Для маленького сайта это терпимо, для магазина с десятками тысяч товаров ощутимо, потому что робот тратит обход на редиректы.

Расчёт показывает простую мысль: проверка редиректов занимает часы, а упущенные заказы копятся месяцами. Поэтому при любом переезде таблицу «старый адрес → новый адрес → код» делают заранее.

Как проверить коды на всём сайте: пошагово

Проверка кодов ответа сервера на всём сайте занимает от часа до дня, и удобнее всего проводить её по списку. Для небольшого сайта хватит краулера и Вебмастера.

1. Просканируйте сайт краулером и выгрузите все адреса с кодами.
2. Отфильтруйте всё, что отличается от 200. Разделите на редиректы, 4XX и 5XX.
3. Найдите страницы с 5XX и проверьте их вручную. Если ошибка повторяется, откройте логи и обратитесь к хостингу.
4. Для каждого 404 определите, откуда на него ведёт ссылка, и поправьте её или поставьте редирект.
5. Найдите цепочки и замените их прямыми переходами.
6. Проверьте заведомо несуществующий адрес: он должен отдавать 404.
7. Проверьте варианты главной: с www и без, http и https, со слэшем и без. Все должны вести на один адрес.
8. Откройте в Вебмастере статистику обхода и исключённые страницы и сравните с данными краулера.
9. Отправьте на переобход исправленные важные страницы.
10. Настройте уведомления об изменении кода ответа важных страниц, чтобы следующий сбой не прошёл незаметно.

Мифы и ошибки про коды ответа

Самый частый миф про коды ответа сервера: любая ошибка 404 вредит сайту. Код 404 — нормальный ответ на адрес, которого нет. Яндекс пишет, что если страница никогда не существовала, ошибку можно игнорировать. Проблема появляется, когда на 404 ведут ваши собственные ссылки или реклама.

«Все 404 надо перенаправить на главную». Посетитель, искавший конкретный товар, окажется на главной и уйдёт. Для робота такие редиректы выглядят бессмысленно. Перенаправляйте только на близкую страницу.

«410 удаляет страницу быстрее 404». Google обрабатывает все 4XX, кроме 429, одинаково. Яндекс в справке об удалении называет сроки для 404, 403 и 410 вместе. Выбирайте 410 ради ясности, чудес ждать не стоит.

«Исключённые страницы портят позиции». Яндекс сообщает, что их количество не должно влиять на положение сайта.

«5XX можно использовать, чтобы спрятать ненужные страницы». Яндекс советует этого не делать: робот считает такие коды сбоем, и обход может замедлиться.

«Сайт недоступен пару часов, позиции рухнут». Короткая недоступность сама по себе редко рушит позиции. В том же блоге представитель Яндекса объяснял, что напрямую она не должна ухудшать их, но если выпадут страницы, позиции по их запросам могут снизиться. Гарантий поисковик не даёт.

«Код 200 значит, что страница в индексе». Google прямо пишет, что индексация не гарантирована. Страница с 200 всё ещё может быть дублем или закрытой.

Если хотите проверить коды на своём сайте и не копаться в отчётах, оставьте заявку. Мы пройдём сайт и покажем, какие ошибки мешают ему в поиске.