Главное зеркало сайта
3 355 просмотровГлавное зеркало сайта или основной домен сайта следует указывать поисковым системам для того, чтобы они точно знали какой из доменов считать основным, а какой зеркалом.
Указание главного зеркала сайта является одним из пунктов по технической оптимизации сайта. Это действие можно сделать тремя способами:
- Настройкой файла robots.txt
- Настройкой файла .htaccess
- Настройкой соответствующих разделов в инструментах для вебмастеров поисковых систем Яндекса и Google.
Уточняю один момент. В данном посте мы рассмотрим самый распространенный случай по определению главного зеркала сайта – с WWW или без WWW.
Другие ситуации, которые возникают, например, при переезде сайта на другой домен мы опустим.
Честно говоря, современный аналитический уровень возможностей поисковых систем, на мой взгляд, может легко обеспечить решение этой задачи.
Но все ведущие специалисты по продвижению все-таки настоятельно рекомендуют проводить такую настройку.
Причем настаивают выполнять все три вышеперечисленных пункта, несмотря на то, что пункт с robots.txt носит рекомендательный характер для поисковых систем.
Настройка robots.txt
Файл robots.txt представляет собой текстовый файл с набором определенных директив. Расположен этот файл в главной директории сайта. Редактируется простейшими редакторами типа «Блокнот».
Очень хорошо и подробно описано применение этого файла и его команд в справочном разделе сервиса Яндекс Вебмастер. Также можно расширить свой кругозор в этом вопросе на сайте robotstxt.org.ua.
В этой публикации нам следует указать поисковым системам главное зеркало сайта. Делается это при помощи директивы Host следующим образом:
Host: inetmkt.ru
Обращаю Ваше внимание, что эту директиву используют только для поискового робота Яндекс. Фрагмент выглядит примерно таким образом:
User-agent: Yandex
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
……………
Disallow: /tag
Disallow: /feedback
Host: inetmkt.ru
Проверить корректность заполнения файла robots.txt можно в том же Яндекс Вебмастере. В разделе «Настройка индексирования» есть подраздел, который так и называется «Анализ robots.txt».
Отмена директивы Host в Яндексе
Поисковая система Яндекс объявила, что с марта 2018 года директива Host в файле robots.txt больше поддерживаться не будет.
Для указания главного зеркала рекомендовано использования 301 редиректа в файле .htaccess и инструкций в инструментах Вебмастеров Яндекса.
Хорошо это или плохо? Скорее хорошо. Ведь Google и ранее не учитывал эту директиву. Теперь правила указания основного зеркала сайта становятся более унифицированными.
Настройка файла .htaccess
Определение главного зеркала сайта в файле .htaccess осуществляется путем настройки 301 Редиректа.
Как это делается можно прочитать в этой статье. Здесь даны примеры настройки для блогов на CMS WordPress.
Файл .htaccess, как и robots.txt, также является текстовым файлом и располагается в главной директории сайта. В этом случае все его директивы должны выполняться для всего сайта. Если же такие файлы встречаются в других директориях сайта, то его команды будут действовать только в этой директории и в подчиненных ей поддиректориях.
Настройка главного зеркала сайта в инструментах вебмастеров.
Для настройки главного зеркала сайта в инструментах для вебмастеров Яндекса и Google следует иметь аккаунт в этих поисковых системах.
Также для этого следует подтвердить права на сайт. Как это делается, надеюсь, Вы уже знаете.
Заостряю Ваше внимание на одном нюансе. В инструментах вебмастеров Google следует подтверждать права как на домен с www, так и без www.
Это делается довольно просто, путем размещения небольшого файла в основной директории или указания специальных тегов.
Настройка зеркала в Яндексе
Указание главного зеркала в Яндексе происходит в разделе «Настройка индексирования». В подразделе «Главное зеркало» дается три варианта, которые следует указать. По умолчанию система выбирает – «На усмотрение робота».
Таким образом производилась настройка в старой версии Вебмастера. В новом Вебмастере Яндекса этот параметр настраивается несколько по другому. Думаю, что главное зеркало Яндекс определяет при регистрации сайта в этом сервисе. Вы ведь явно указываете протокол и URL основного домена с www или без него.
При необходимости главное зеркало можно перенастроить в разделе «Индексирование» — подразделе «Переезд сайта».
Настройка зеркала в Google
В инструментах для вебмастеров Google возможность настройки находится сразу при входе в раздел «Настройки сайта». Но еще раз повторюсь, что подтвердить права на домен придется дважды. Для домена с www и без www.
Вот такие нехитрые, но необходимые действия следует проделать, чтобы у поисковых систем не осталось вопросов о Главном Зеркале Вашего сайта или сайтов Ваших клиентов.
Здравствуйте, в панели Вебмастера Яндекс у меня стоит на усмотрение робота нужно ли мне, что менять? Также Установить протокол https у меня ничего не прописано, что вы скажете
Приветствую Вас, Валерий.
Если коротко. то поставьте, тот вариант домена, который Вы выбрали как главное зеркало.
С протоколом https, в принципе, можно не заморачиваться, оставить как есть.
Спасибо Юрий так и сделал. Еще вот вопрос не знаете, что это за ссылка у меня https:// moikomputer .ru
Забыл спросить нужно ли чего делать с robots.txt и с .htaccess
или если все настроено в гугл и яндекс веб мастер эти файлы не трогать?
Валерий, не надо пока использовать https. пусть будет http.
В robots.txt можно добавить — у Вас так и есть. А c htaccess по желанию. Я с ним это проделал, затем при обновлении эти настройки пропали, но ПС, видимо, поняли какое у меня главное зеркало.
В этом вопросе при работе с внешними ссылками важно указывать именно главный домен.
меня волнует эта ссылка https:// moikomputer .ru через Rds бар когда индекс индекс Я стр: Да вот на это нажимаю вот, что появляется Ваш сайт заблокирован или еще не активировался
Ваш сайт заблокирован или еще не активировался
https:/ /moikomputer. ru
у всех переход на главную идет посмотрите у меня
наконец-то я понял, что Вы имеете ввиду.
Трудно сказать откуда взялся этот протокол.
Посмотрите настройки в Яндекс.Вебмастере.
Если там сайт заблокирован, то свяжитесь с поддержкой Яндекса и задайте им вопрос.
Если же так все хорошо, то вопрос все равно можно задать.
Может RDS что-то не так понял?
Я такое впервые встречаю…
С Яндексом все нормально страницы сайта в поиске участвуют я думал, может причина подключения с протоколом https . Мне в тех поддержке хостинга предлагали включить.
Похоже, что так и есть. Значит RDS это каким-то образом подхватил.
Задайте вопрос хостерам тогда.
Здравствуйте. Как не крутил но выбора главного зеркала на Google так и не появилось. Googl пишет только домены корневого уровня. ??????
Зарегистрируйтесь под двумя аккаунтами:
с www
без www
А затем пропишите «ГЛАВНОЕ Зеркало».
Я сделал так.
Извините но я так и сделал но ничего не произошло появился еще один сайт только с www. Последовательность регистрации с www или без имеет значение?
Я неправильно выразился в прошлом комментарии. Я делал так:
1. Зарегистрировался в инструментах вебмастеров Гугла.
2. Зарегистрировал сайт с двумя доменами — c www и без.
3. Подтвердил права на оба домена.
4. прописал в обоих сайтах в разделе «Настройки сайта — основной домен» домен без www.
Вы прописывайте какой Вам нужно. Думаю, что этого достаточно.
Понятно, что последовательность не имеет значения. поскольку в обоих случаях Вы прописали одно и то же доменное имя.
Желаю Вам успехов.
Спасибо за помощь, но к сажалению данный метод уже не работает. В настройках обоих сайтов надпись «Основной домен Только домены корневого уровня», добовлял второй сайт больше суток назад первый 1,5 мес. назад. Домен 3-го уровня
Спасибо за понимание и отзывчивость.
Игорь, действительно в настройках кое-что поменялось.
Для подтверждения прав на домен с www и без достаточно одного файла. Но так даже несколько проще. Дальше все как и ранее.
Настройка сайта — и указываете основной домен.
Только что проверил на этом блоге.
Раньше в Гугле для этого блога не было настроено «Главное зеркало».
теперь с Вашей помощью я его настроил — не поленился.
Спасибо за очень понятный материал! Трижды перечитывала информацию о зеркалах в помощи яндекса, но появлялось еще больше вопросов. А у вас поняла все с ходу 🙂
Рад, что эта информация была Вам полезна.
здравствуйте
подскажите не происходит с клейка с www и без, показываются разные варианты сайта, и разная ссылочная масса. Что сделать
Сделайте 301 редирект на вариант без WWW. В интернете много информации о том, как это следует сделать.
Юрий, благодарю за статью. Очень хороший материал, давно подписан на обновления вашего блога!
Очень хорошо, что информавция оказалась полезна для Вас. Спасибо за высокую оценку материала.