Главное зеркало сайта: www, https и почему Яндекс видит два сайта вместо одного

Что такое зеркала сайта

Зеркала — это разные адреса, по которым открывается одно и то же содержимое. Самые частые:

Для человека это один сайт. Для робота — нет. В справке Вебмастера о переезде на адрес с www прямо написано: робот воспринимает такие адреса как разные сайты, они могут участвовать в поиске отдельно и конкурировать между собой. Это продолжается, пока робот не обнаружит одинаковый контент и не объединит адреса в группу.

В новой версии справки Яндекс почти не использует слово «зеркало» и говорит о главном и неглавных адресах сайта. Суть та же: главный адрес отображается в результатах поиска и участвует в ранжировании, неглавные — нет.

Технические и контентные зеркала

• Технические — отличаются только протоколом или префиксом www. Яндекс группирует их автоматически.
• Контентные — разные домены с одинаковым сайтом, например site.ru и site.com. С 2019 года Яндекс перестал автоматически склеивать такие домены без явного указания владельца. Нужен 301-редирект.

Почему Яндекс видит два сайта вместо одного

Ситуации, которые мы регулярно находим на аудитах:

1. Сайт открывается и с www, и без, без редиректа. Робот индексирует оба варианта, и часть страниц в поиске показывается с www, часть без.
2. Перешли на https, но http остался доступен. Внешние ссылки ведут на http, внутренние — на https, показатели делятся.
3. Купили второй домен «на всякий случай» и привязали к тому же сайту. Два домена с одинаковым контентом. Если редиректа нет, они могут конкурировать.
4. Тестовая копия сайта на поддомене или техническом адресе открыта для индексации. Например, копия на адресе платформы или dev.site.ru. Робот находит её и считает отдельным сайтом.
5. Редирект стоит только с главной страницы. Внутренние страницы по-прежнему открываются по двум адресам.

Последствия: страницы скачут в выдаче между адресами, ссылки и показатели делятся между версиями, в Вебмастере статистика по «не тому» адресу, а владелец не понимает, почему позиции нестабильны. Это близкий родственник проблемы дублей — о ней подробно в статье дубли страниц на сайте.

Как узнать главное зеркало сайта

Способ 1. Через Вебмастер, если сайт уже добавлен. Откройте список «Мои сайты». По справке, если адреса сгруппированы, главным считается первый адрес — тот, что открывает группу. Если сайт не сгруппирован ни с чем, он сам и есть главный адрес.

Способ 2. Добавить адрес в Вебмастер. Если адрес, который вы добавляете, неглавный, Вебмастер покажет уведомление и предложит добавить главный.

Способ 3. Проверить ответы сервера. В Проверке ответа сервера введите по очереди все четыре варианта адреса: с www и без, http и https. Правильная картина — три из них отдают 301 на четвёртый, а четвёртый отвечает 200 OK.

Способ 4. Посмотреть выдачу. Наберите в Яндексе site:site.ru и site:www.site.ru. Если страницы показываются по обоим адресам, группировка ещё не завершилась или редиректы не настроены.

Если сайт ещё не добавлен в Вебмастер, начните с этого: без него вы не увидите ни группировку, ни инструмент переезда. Как добавить сайт и подтвердить права, мы разбирали в статье как добавить сайт в Яндекс Вебмастер.

Если вы проверили все четыре адреса и увидели что-то кроме трёх 301 и одного 200, проще разобраться вместе — ошибки здесь стоят позиций.

Как настроить главное зеркало: пошагово

1. Выберите главный адрес. Сейчас почти всегда https. С www или без — для Яндекса разницы нет. Если сайт давно в поиске, оставьте тот вариант, который уже главный: менять без причины не нужно.
2. Установите SSL-сертификат, если его нет. Проверьте его в Проверке ответа сервера: по справке о переходе на HTTPS, если сертификат с ошибкой, там появится сообщение.
3. Настройте постраничный 301-редирект со всех неглавных вариантов на главный. Постраничный — значит http://site.ru/uslugi/ ведёт на https://site.ru/uslugi/, а не на главную.
4. Замените внутренние ссылки на главный адрес: меню, тексты, sitemap.xml, ссылку на sitemap в robots.txt, канонические адреса.
5. Добавьте главный адрес в Вебмастер и подтвердите права. Неглавные можно тоже добавить, чтобы видеть их статус.
6. Если нужно ускорить — сообщите о переезде через инструмент «Переезд сайта» (см. следующий раздел).
7. Проверьте всё снова через неделю: ответы сервера, выдачу, уведомления в Вебмастере.

Как это сделать на популярных платформах

• Тильда. В настройках сайта: SEO → «Редиректы для WWW, HTTPS», там включается редирект с HTTP на HTTPS и редирект с www на основной домен. Путь описан в ответах Тильды. Редирект на https можно включить только после того, как для подключённого домена выпущен сертификат. Как правильно привязать домен, — в статье подключить домен к Тильде.
• WordPress и другие CMS на своём хостинге. Обычно через настройки сервера или файл .htaccess, у многих хостингов есть галочка «перенаправлять на https» в панели.
• Самописный сайт. На уровне веб-сервера. Попросите разработчика показать проверку всех четырёх вариантов адреса.

Директива Host в robots.txt для этого больше не нужна. В блоге Вебмастера в 2018 году объявили, что 301-редирект полностью заменил Host, и директиву можно удалить. Если она у вас осталась, она ни на что не влияет.

Как сменить главное зеркало: переезд на https или www

Смена главного адреса — это переезд. По справке Вебмастера процесс такой:

1. Добавить в Вебмастер оба адреса — старый и новый — и подтвердить права.
2. Убедиться, что содержимое совпадает, оба адреса доступны роботу, robots.txt разрешает индексирование и одинаков на обоих.
3. Установить редирект со страниц старого адреса на аналогичные страницы нового. С главной — на главную, с внутренних — на аналогичные внутренние.
4. В Вебмастере открыть «Индексирование» → «Переезд сайта» для старого адреса. Для перехода на https включить опцию «Добавить HTTPS», для перехода на www — «Добавить WWW» (или отключить её для переезда на адрес без www). Сохранить.

Смена главного адреса, по справке, происходит в течение нескольких недель. Чтобы узнать, когда она завершилась, подпишитесь на уведомления Вебмастера.

Важная оговорка из той же справки: объединение адресов позволяет передать новому адресу некоторые показатели, например внешние ссылки, но не гарантирует сохранение количества страниц в поиске, позиций и посещаемости. Поэтому переезжать без причины не стоит.

Если в Вебмастере вместо «Переезд сайта» видите «Разгруппировка адресов» — значит, выбранный адрес сейчас неглавный. Сначала нужно работать с главным.

Для переезда на другой домен или с изменением структуры адресов требования строже — подробный разбор в статье переезд сайта без потери позиций.

Что ломается при ошибках с зеркалами

Последний случай редкий, но неприятный. По справке Яндекса, если главным считается чужой адрес, сначала проверьте, нет ли на него редиректа. Если нет — добавьте свой сайт, подтвердите права и разгруппируйте адреса.

Условный пример: во что обходится расклеенное зеркало

Условный пример. Сайт услуг доступен по site.ru и www.site.ru без редиректа. Внешние ссылки — из каталогов, соцсетей, от партнёров — указывают на оба варианта примерно поровну. Часть страниц Яндекс показывает с www, часть без, а при обновлениях базы страница то появляется по одному адресу, то по другому.

Допустим, в стабильном состоянии сайт получал бы 2 000 визитов в месяц из поиска, а из-за скачков теряет 15% — 300 визитов. При конверсии 2% и доле заказов из заявок 30% это 6 заявок и примерно 2 заказа в месяц. Настройка редиректа занимает час.

Что ещё проверить после настройки зеркала

Редиректы на сервере — половина работы. Вторая половина — места, где старый адрес продолжает жить и тянет трафик через лишний переход.

1. Яндекс Метрика. Счётчик должен стоять на главном адресе, а в настройках счётчика — правильный адрес сайта. Иначе отчёты и цели будут путаться.
2. Реклама в Директе. Ссылки в объявлениях лучше сразу вести на главный адрес. Каждый лишний редирект — это задержка загрузки, а при некоторых настройках сервера при редиректе теряются UTM-метки.
3. Карточка в Яндекс Бизнесе и 2ГИС. Ссылка на сайт — с главным адресом.
4. Соцсети, мессенджеры, подписи в почте, QR-коды на визитках и листовках. Старые адреса там живут годами.
5. Внешние ссылки, которые вы контролируете: каталоги, партнёры, площадки отзывов. Попросите обновить хотя бы самые важные.
6. Ссылки внутри сайта, вставленные вручную в тексты статей и описания. Их легко пропустить: меню обновили, а в старой статье осталась ссылка на http://www..

Наблюдение из практики: после перехода на https чаще всего забывают про картинки и скрипты, подключённые по старому протоколу. Браузер тогда показывает предупреждение о небезопасном содержимом, хотя сертификат в порядке. Справка Вебмастера отдельно предупреждает: HTTP-ссылки на внутренние страницы и файлы на HTTPS-сайте приводят к тому, что браузеры и роботы перестают считать сайт безопасным.

Чек-лист проверки зеркал

1. Все четыре варианта адреса проверены в Проверке ответа сервера.
2. Три варианта отдают 301 на главный, главный отвечает 200.
3. Редирект постраничный, не только с главной.
4. Нет цепочек из нескольких редиректов.
5. SSL-сертификат действует и без ошибок.
6. Внутренние ссылки, sitemap.xml и canonical указывают на главный адрес.
7. Дополнительные домены ведут 301 на основной.
8. Тестовые копии сайта закрыты от индексации или паролем.
9. В Вебмастере добавлен и подтверждён главный адрес.
10. Подписка на уведомления Вебмастера включена.

Если хочется, чтобы мы проверили адреса, редиректы и группировку вашего сайта и сказали, нужно ли что-то менять, оставьте контакты.