И от семантики мы плавно переходим к технической оптимизации. Первый шаг в рамках этого этапа - определение и настройка главного зеркала сайта.

Почему это важно?

Причин несколько. Во-первых, зеркала сайта - это дубли, от которых нам нужно избавиться, объяснив поисковой системе, что индексировать нужно только одно из них. Вторая причина заключается в том, что ссылки, проставляемые на сайт, как правило разношерстны - кто-то написал Url с WWW, а другой человек указал адрес без него. В итоге ссылочная масса размазывается между этими двумя вариантами. Описанные в данном материале действия призваны полностью решить подобные проблемы.

Как узнать главное зеркало сайта?

Если сайт уже не новый, то первым делом нам нужно определить, какое из зеркал (с WWW или без) было проиндексировано. Способ довольно прост - переходим на Яндекса https://webmaster.yandex.ru/addurl.xml и, прописав Url нашего сайта, получим следующее:

В случае, если введенный вами адрес и является главным зеркалом, то результат проверки будет иметь вид «Сайт www.site.ru уже проиндексирован».

Ну или второй способ определения основного зеркала, справедливый как для Яндекс, так и для - просто ввести в поиск адрес сайта и посмотреть вариант, который будет выведен на первой строчке.

Что если основное зеркало сайта в Яндекс не совпадает с Google?

Лучше оставить тот вариант, который прижился в Яндексе, подогнав Google под него же. По моим наблюдениям Яндекс куда дольше и значительно болезненнее переживает смену главного зеркала, нежели Google. Как «подогнать» - будет описано ниже.

Главное зеркало сайта: с WWW или без

Практической разницы нет - выбирайте то, что вам больше нравится. Мне сугубо из олдскульных привычек импонирует вариант с WWW, но я не могу не признать, что без WWW адрес сайта короче и внимание акцентируется сразу на его названии, а не на приставке-анахронизме (World Wide Web) из времен зари глобальной сети, когда она была обязательной.

Как указать главное зеркало сайта?

В целом этот процесс состоит из трех этапов. Первым делом нужно прописать директиву host в конце нашего файла следующим образом:

User-agent: *
...
Host: www.site.ru
Sitemap: http://www.site.ru/sitemap.xml

В первую очередь это необходимо для Яндекса, так как для Google данная директива ничего не значит. Далее мы переходим ко второму этапу, который для каждой поисковой системы свой и заключается в настройке кабинетом веб-мастеров.

Настройка главного зеркала в Яндекс

Далее - «Настройка индексирования» - «Главное зеркало», где мы и выбираем вариант, которому отдаем предпочтение.

Настройка главного зеркала в Google

Дважды добавляем сайт в панель вебмастера Google - то есть адреса с WWW и без, как будто это два разных сайта. Затем для каждого из них в настройках выбираем нужный вариант и сохраняем.

Как склеить зеркала сайта?

Последним этапом станет прописывание серверных в файле htaccess, которые окончательно положат конец неуместному зеркалу, переадресовав все его страницы на нужный вариант.

Options +FollowSymLinks
RewriteEngine On

RewriteEngine off

RewriteCond %{HTTP_HOST} ^www.site.ru$
RewriteRule (.*) http://site.ru/$1

Данный пример справедлив для случая, когда главное зеркало - без WWW. Для обратной ситуации просто поменяйте «www.site.ru» и «site.ru» местами. Участок «FilesMatch» запрещает переадресацию файла robots.txt неосновного зеркала - это необходимо для того, чтобы была директива хост, при обращении поисковой системы к неглавному алиасу, указывала на главное.

Вот, вроде, и всё. Этот небольшой, но важный этап окончен. Вопросы?

Главное зеркало сайта – практически 100% версия ресурса, расположена по иному адресу. Контент на ней может повторяться на 80% и более.

Поисковые системы имеют свои алгоритмы индексации. Адрес сайта с приставкой www и без неё может восприниматься, как индивидуальные ресурсы. Главное зеркало сайта, что это такое? Это тот же сайт, но по другому адресу.

Иногда ресурсы переезжают на другой домен, оставляют весь контент без изменений, но владелец забывает о редиректе. Если не подойти к делу рационально, то ТИЦ и PR слетят для каждой версии или разделятся.

Так происходит из-за того, что поисковики не понимают, где главная версия, а где копия сайта. Важно объяснить системам, что такое главное зеркало сайта. Посмотрим, как сделать работу правильно и быстро.

Как определить главное зеркало сайта без ошибок?

Введите в адресную строку браузера адрес сайта с префиксом www. Не исчезли символы и вы не попали на тот же сайт по адресу сайт.ру?

Проверяем адрес сайт.ру тем же методом. После перехода адрес сайта не изменился, не добавились символы www? Значит зеркало не настроено совсем.

Это плохо, потому как поисковики расценивают ресурс, как автономные ресурсы и все параметры разделяются между ними. Как настроить главное зеркало сайта, рассмотрим далее.

Настройка главного зеркала сайта

Как приоритетную версию ресурса выбирайте сайт без дополнения www. Как только интернет начал развиваться такие адреса считались популярными, сейчас всё идёт к упрощению.

Настраиваем зеркало в Google Search Console и Яндекс.Вебмастер

В корневой директории сайта главная и второстепенная версии прописываются файлами. Htaccess – приоритетный файл, вся информация, которая здесь значится, воспринимается, как главная. Чтобы вы не написали в robots.txt, он останется второстепенным.

В файле htaccess прописываете условие, что при попадании на адрес www, пользователь незаметно переходит на сайт без приставки в адресе. Как это смотрится в коде, смотрите в сети, это зависит от типа CMS, с которой работаете.

Но, есть один нюанс: htaccess не даёт гарантии, что сайт и зеркало будут восприниматься поисковыми системами одинаково. Дополнительно проделываете следующие мероприятия:

1. В панели вебмастера Яндекс находите опцию «Настройка индексации», выбираете «Главное зеркало».
2. Указываете один из вариантов:

• Сайт с приставкой www;
• Веб-сайт без приставки www в адресе;
• На усмотрение поисковых систем.

Определение главного зеркала сайта должно указывать на адрес ресурса без приставки www, как уже сказано выше. Главное зеркало сайта в новом вебмастере указывается точно так же, как и в стандартной версии. Разница между ними только в дизайне и количестве функций.

С Гуглом всё проще:

1. Нужно зайти в Google Search Console, выбрать «Сообщения».
2. Находите раздел «Выберете приоритетную версию» — указывайте нужный тип зеркала, который будет главным.

Директива для Яндекса

Яндекс – специфический поисковик. Ему мало указания в htaccess, панели вебмастера для 100% результата. Дополнительно зайдите в robots.txt, и в корне директории с ресурсом, пропишите директиву, которая будет отправлять Яндекс на главную версию веб-сайта (Host).

Прописывается следующее:

• Юзер адепт (User-agent), указываете Яндекс;
• Дисселов (Disallow), прописываете /wp-admin;
• Хост (Host) адрес своего сайта без приставки www.

Обратите внимание, что в Disallow, указываются все разделы, куда роботы от поисковой системы не должны заходить админка, cgi-bin и другие элементы, которые считаете нужным.

Выше приведён пример, где не индексируется панель администратора вордпресс. После проделанной работы поисковик правильно понимает, где главное зеркало сайта.

Создаем зеркало сайта с HTTPS, SLL

С появлением HTTPS Гугл повышает в позициях сайты, имеющие этот протокол. Считается, что подобные ресурсы безопасны. Идеально если протокол создаётся сразу при разработке сайта.

Если нет, то после перехода на безопасный протокол необходимо поставить редирект с нынешнего зеркала на основное с приставкой HTTPS. Как узнать главное зеркало сайта онлайн уже рассматривалось выше.

Когда изначально сайт с http:, но без приставки www был основной версией, а такой же сайт с приставкой – дополнительной версией, то после изменений версия https: станет основным вариантом, а перечисленные пойдут, как дополнительные зеркала.

Причина перехода сайта на новый домен с приставкой в адресе s – повышенный уровень безопасности данных после получения сертификата SSL. Информация при попадании на сайт будет шифроваться, что снижает риск её попадания в третьи руки.

Проверить главное зеркало сайта стоит с сертификатом или без него можно способами, перечисленными выше.

Мониторим страницы, попавшие в индекс

Финальная проверка проделанной работы – мониторинг проиндексированных страниц. Проверяются показатели посещаемости и количество страниц в поисковиках не раньше, чем через 14 дней.

Адекватный результат увидите через месяц. Проделанная работа привела к ожидаемому результату? Если нет, то ищите ошибку. Код должен быть идеальным, лишняя точка может сделать файлы.htaccess и роботс бесполезными.

Когда только начинаешь заниматься сайтами, то не задумываешься, что, например, www..ru — разные адреса. Эти доменные имена являются зеркалами. На каждом из них могут отображаться разные сайты.

Какие сайты Яндекс считает зеркалами?

Яндекс считает зеркалами сайты, которые содержат одинаковый контент на страницах, находящихся на одинаковых адресах. Например, www..ru/yandex-webmaster/. У меня стоят , поэтому все зеркала ведут на один адрес.

Какие адреса могут являться зеркалами:

• с префиксом www и без него - www.primer.ru и primer.com;
• по протоколам HTTP и HTTPS - http://primer.com и https://primer.com;
• находится в разных доменных зонах - primer.com и primer.ru;
• настроен серверный 301 редирект с одного адреса на другой - primer.com перенаправляет на primer.ru.

Что такое главное зеркало?

Главное зеркало - это доменное имя сайта, по которому он индексируется в поисковике и показывается в результатах поиска, если доступен по нескольким доменам. Можно настроить в сервисе Яндекс Вебмастера.

Как указать главное зеркало в Яндекс Вебмастер?

Если изначально не было выбрано главное зеркало сайта, то робот выберет его самостоятельно в соответствии со своим алгоритмом.

Чтобы указать главное зеркало поисковику необходимо настроить переезд в Яндекс Вебмастере .

Зайдите в раздел «Индексирование» в пункт «Переезд сайта». Выберите новый домен, который будет главным зеркалом. Если в списке нет нужного адреса, то следует .

Если не планируете менять домен, а просто хотите сменить протокол или префикс, то для этого есть два пункта:

• добавить https;
• добавить www.

Чтобы выбрать главное зеркало нужно пройти несколько этапов:

1. Добавить сайт в Яндекс Вебмастер;
2. Отметить галочкой нужный пункт;
3. Сделать 301-редирект со старого домена на соответствующие страницы нового.

Раньше это делалось довольно сложно и долго. На данный момент все проходит очень быстро и, обычно, без проблем.

И да, советую переходить на HTTPS , т.к. Google дает таким адресам чуть больше преимуществ за повышенную безопасность передачи данных по этому протоколу.

Если вы планируете сделать главным адрес с протоколом HTTPS (или с префиксом www), то добавляйте адрес именно с этим протоколом (префиксом), например, https://сайт.

Есть другой вариант перехода на главное зеркало — просто сделать 301-редирект. Но если сначала сделать настройки в Яндекс Вебмастере, то переезд пройдет быстрее. Яндекс пишет, что смена занимает от одной до трех недель. После этого сайт начинает участвовать в поиске под именем нового главного зеркала.

Индексируются ли зеркала?

Яндекс склеивает все домены и показывает в поиске только главное зеркало. Страницы неглавного зеркала будут в поиске до тех пора, пока страницы главного зеркала их не вытеснят. Вытесненные страницы будут исключены из поиска, но могут храниться в базе Яндекса.

Как проверить, является ли сайт чьим-нибудь зеркалом?

Проверить является ли сайт зеркалом, можно добавив его в Яндекс.Вебмастер.

1. Если сайт признан неглавным зеркалом, он будет автоматически добавлен вместе со своим главным зеркалом.
2. Если сайты не являются зеркалами, они будут отображаться в сервисе независимо друг от друга.

При необходимости зеркало может быть отклеено.

Учитываются ли характеристики неглавных зеркал на главном?

Да, учитываются. Например, это полезно, если интернет-ресурс переезжает на новый домен. Если старый домен станет неглавным зеркалом нового, это поможет сайту сохранить позиции в поиске.

Склеятся ли адреса, если настроить перенаправление со всех страниц одного сайта на главную страницу другого?

Да, робот склеит такие сайты, но использовать этот способ не рекомендуется. Вместо него лучше настроить перенаправление на соответствующие друг другу страницы.

Как расклеиваются зеркала?

Если сайты перестают являться зеркалами друг друга и отдают разное содержимое, в течение нескольких недель они расклеиваются роботом.

Вы можете сообщить роботу о необходимости расклейки сайтов с помощью специального инструмента в сервисе Яндекс.Вебмастер.

После того, как адреса расклеятся, они будут отображаться как отдельные, не связанные между собой ресурсы.

Всем привет! Сегодня подробный пост о том, как мне удалось сменить главное зеркало у блога и при этом не потерять позиции, трафик, доход от контекстной рекламы.

Долгое время меня мучил один вопрос — как избавиться от дурацкого , который тащился за мной более трех лет. Наверное возраст домена был главной причиной того, почему я не решался переклеить домен ранее.

Так сложилось, что с первых дней существования блога Яндекс начал индексировать блог именно с www, на тот момент мною было принято решение не препятствовать этому и смириться.

Позднее я себя не раз утешал, мол какая разница, главное что страницы находятся в поиске и приводят посетителей. Занимался продвижением, . И чем больше времени проходило, тем больше у меня чесались руки сменить основное зеркало. В конце концов мое терпение лопнуло и ни смотря ни на что я все же решился. Сегодня я поделюсь своим опытом и расскажу как это было.

Правильный порядок действий при склейке зеркал

На протяжении всего времени я вел заметки , которые постоянно носил с собой и записывал все значимые события в хронологическом порядке. Итак, начало сентября, я ставлю перед собой цель сменить главное зеркало домена и убрать www из адреса.

6.09.2013 Обращаюсь в службу поддержки Яндекс.Вебмастер с письмом, в котором описываю ситуацию и прошу дать советы. Я задал вопросы о том как правильно переклеить домен и чтобы при этом страницы не выпали из индекса. Так как мой блог , то посчитал не лишним обратиться в его поддержку и поинтересовался как отразится смена главного зеркала на присутствие в каталоге. Вскоре получил ответ:

«В данном случае Вам необходимо сменить главное зеркало с помощью директивы Host, дождаться завершения процесса переклейки, затем адрес в Каталоге изменится автоматически. ТИЦ также будет перенесен на адрес нового главного зеркала и восстановлен по этому адресу после ближайшего к переклейке пересчета тИЦ.»

9.09.2013 Получил ответ от Платона Щукина на первое письмо:

«Редирект для смены главного зеркала использовать не стоит. В настоящее время указанные Вами сайты объединены в группу зеркал, в которой главным зеркалом является домен с www согласно текущим указаниям. В поисковой системе Яндекс индексируются и участвуют в поиске только страницы главного зеркала..сайт, то для начала его нужно снять. Оставить редирект в существующем виде и указать в качестве главного зеркала домен без www не получится, так как тогда заданные Вами указания на главное зеркало будут противоречить друг другу. Если просто поменять направление редиректа, то это в конечном итоге приведет к смене главного зеркала, но в этом случае следует понимать, что робот не будет индексировать страницы текущего главного зеркала, а будет переходить по редиректу. В свою очередь, цель редиректа также не будет индексироваться, поскольку является неглавным зеркалом, которое в поиске не участвует.

Поэтому, если Вы хотите, чтобы до переклейки зеркал Ваш сайт мог индексироваться по адресу текущего главного зеркала, установленный редирект следует снять. Для смены главного зеркала лучше использовать директиву Host в файлах robots.txt всех зеркал, а также выбрать нужный домен в соответствующем разделе Яндекс.Вебмастера. Этого будет вполне достаточно, при этом Вы избежите проблем с индексированием сайта из-за перенаправления на неглавное зеркало.

Таким образом, самый оптимальный способ избавиться от префикса www — убрать редирект, сменить главное зеркало с помощью директивы Host и в Яндекс.Вебмастере, а затем, когда главное зеркало изменится, вернуть редирект при необходимости. Что касается Яндекс.Каталога и Яндекс.Метрики, то данные в них обновятся автоматически, заново ничего добавлять не придется. Обратите внимание, процесс склейки зеркал происходит автоматически и может занимать несколько недель, ускорить его, к сожалению, нельзя.»

С 20 марта 2018 года Яндекс официально прекратил поддержку директивы Host. Её можно удалить из robots.txt, а если оставить, то робот её просто игнорирует.

Очень подробный ответ, за что огромное спасибо поддержке Яндекса! Буквально сразу же приступил вносить изменения:

• Сменил главное зеркало в панели Яндекс.Вебмастер, указав адрес без www;
• Изменил директиву Host для Яндекса;
• Изменил основной домен в панели для веб-мастеров Google;
• Убрал редирект из файла.htaccess;
• Добавил новые в панели вебмастеров Гугла и Яндекса;
• Исправил ссылки в основном меню и в сайдбаре, чтобы поисковые боты как можно раньше заметили изменения.

Скриншот из панели Яндекс.Вебмастер. В разделе Настройка индексирования есть пункт Главное зеркало — здесь нужно указать предпочтительный домен:

Скриншот из панели инструментов для веб-мастеров Гугла. Настройки сайта скрываются под шестеренкой. Здесь необходимо указать основной домен:

Процесс запущен! Попутно записал для истории основные показатели блога:

• ТИЦ 130 (последний апдейт 02.07.13)
• PR 2 (последний апдейт 04.02.13)
• Проиндексированных страниц в Google (по данным RDS Bar) — 187
• Проиндексированных страниц в Яндексе — 241

10.09.2013 Вчера я несомненно проверял ответ сервера обоих зеркал и он содержал код 200, как посоветовал сделать Платон Щукин. Но сегодня утром, придя на работу, решил вновь проверить что все в порядке и был удивлен. Видимо на домашнем компьютере ответ сервера был , а сейчас выдает 301 код при обращении к старому адресу с www. Как оказалось, у WordPress заложен собственный редирект, учитывающий настройки адреса сайта в админке.

Нужно было срочно найти решение как отключить это перенаправление. На помощь пришел один из зарубежных форумов, на котором было найдено решение, путем добавления в файл wp-config.php следующих строк:

1 2	define ("WP_HOME" , "http://" . $_SERVER [ "HTTP_HOST" ] ) ; define ("WP_SITEURL" , "http://" . $_SERVER [ "HTTP_HOST" ] ) ;

define("WP_HOME", "http://" . $_SERVER["HTTP_HOST"]); define("WP_SITEURL", "http://" . $_SERVER["HTTP_HOST"]);

Дополню пару слов зачем нужно убирать редирект. Причина в том, что Яндекс должен иметь доступ к обоим зеркалам. Если с одного зеркала стоит перенаправление на другое, то как в таком случае робот зеркальщик определить что сайты идентичны друг другу? Вот-вот…

Это основная , в результате которой в процессе переклейки сайт полностью выпадает из индекса и продолжительное время не участвует в поиске. А цель редиректа он не индексирует по причине того, что в выдаче отечественного поисковика может находиться только главное зеркало, а переклейка еще не произошла. Замкнутый круг.

Поэтому чтобы избежать подобной участи запомните: никогда не ставьте редирект на новое зеркало и снимите существующий до полной склейки/переклейки зеркал в Яндексе, о чем будете уведомлены сообщением!

Далее приступил править все свои ссылки на главную страницу, встречающиеся в записях и комментариях. Сначала было дело решил все сделать вручную, но понял что не справиться с таким объемом. Рискнул и воспользовался SQL запросом к базе данных:

1 2	UPDATE wp_comments SET comment_author_url = REPLACE ( comment_author_url, "www.сайт" , "сайт" )

UPDATE wp_comments SET comment_author_url = REPLACE(comment_author_url, "www..ru")

13.09.2013 Апдейт Яндекс выдачи. Никаких подвижек по зеркалам не наблюдается. В Гугле тоже тишина, хотя много раз перечитывал на форумах, что он реагирует на изменения практически мгновенно и буквально на следующий день можно обнаружить в поиске новые адреса. Продолжаю томительное ожидание.

19.09.2013 Очередной — все без изменений. Убеждаюсь в том что правильно сделал, убрав редирект. Иначе страницы давно бы уже выпали из поиска, а вместе с ними бы и трафик серьезно просел и доход скатился до нуля.

20.09.2013 В Google Webmasters Tools начала появляться информация о внутренних и внешних ссылках по новому домену, ранее данные были недоступны.

26.09.2013 И снова апдейт выдачи. В индексе Яндекса несколько дублирующихся страниц с www и без. Этот же день принес АП ТИЦ, который прибавил десятку, стало 140. В Яндекс Каталоге домен переклеился на новый основной — наконец-то начались подвижки.

27.09.2013 Сервис xseo.. Вечером того же дня другой сервис cy-pr.com также подтвердил склейку.

1.10.2013 Яндекс сделал отличный подарок на мой день рождения в виде апдейта поисковой базы, а также сменил главное зеркало , ура! Ровно в 8 утра пришло письмо от Яндекс.Вебмастера, точнее писем было два:

1. Изменилось главное зеркало. В письме было сообщено о том, что www..ru и поэтому в списке сайтов он был автоматически заменен.
2. Права на сайт успешно подтверждены. Здесь все просто, раз сменилось главное зеркало, то изменился и адрес сайта. А так как файл подтверждения уже находился на сервере, то никаких дополнительных действий с моей стороны не потребовалось.

2.10.2013 Google не спешит менять основной домен, его инструмент в панели вебмастеров похоже не столь эффективен или он меня недолюбливает… Впрочем, у нас эти чувства взаимны. Ставлю , а в файле wp-config.php удаляю ранее добавленные строчки. По Яндексу зеркала переклеились, поэтому уже не страшно за индексацию, а Гугл нормально относится к 301 редиректу.

7.10.2013 Да неужели? Xseo.in показывает склейку по Гуглу. Хотя в его выдаче примерно 50/50 страниц в www и без него, многие страницы продублированы. Судя по графикам сканирования Googlebot активно шерстит блог. По серверным логам видно, что сначала робот загружает страницу по старому адресу, получая 301 ответ, а затем подхватывает цель редиректа с кодом 200.

Посещаемость блога упала на 50%, вот и приехали, случилось то, чего так сильно опасался. Хотя она и снижалась с первых дней моего эксперимента, но происходило это плавно, а в этот день наблюдал резкий спад. Надеясь на лучшее, продолжаю ожидать и следить за процессом, говорят, время лечит.

9.10.2013 Правду говорят люди, время действительно творит чудеса! В этот день произошло очередное обновление поисковой базы Яндекса. Все возвращается на круги своя, наблюдаю рост трафика примерно на 30%. Как ни странно, но спустя месяц Гугл по-прежнему не может разродиться и окончательно сменить основной домен. Не ожидал от него такого.

12.10.2013 Хм… , однако! Спустя месяц впервые публикую новую запись (до этого ничего не публиковал в ожидании склейки) и о чудо! К вечеру из выдачи Гугла пропали все страницы, содержащие префикс.

Ну вот, я наконец-то собрался и полностью изложил свою историю со всеми подробностями. На сегодняшний день могу с уверенностью сказать, что смена главного зеркала проведена успешно, результатом я очень доволен. Надеюсь мой опыт поможет многим из Вас! 🙂

Главное зеркало – основная версия сайта. Зеркалом именуют полную или практически полную копию сайта, размещённую по другому интернет-адресу. Она повторяет контент на 80% и выше. Для поисковых роботов, наличие приставки www перед адресом делает сайт совершенно другим, то есть www.названиесайта.ru и названиесайта.ru – понимаются, как физически отличающиеся адреса.

Яндекс и Google индексируют сайты по-разному: первый может считать главным сайтом www.сайт.ru, а второй – сайт.ru. Или наоборот. Именно поэтому важно «тыкнуть их носом» в главный и зеркальный сайты.

Почему важно чтобы сайт имел главное зеркало?

Обычно зеркало сайта возникает из-за www-префикса.. Но случаются и переезды на другой домен с оставлением того же контента сайта, но без настройки редиректа.

Но если не сделать это по-умному, то ТИЦ и PageRank только снизятся для каждого сайта, разделившись, из-за непонимания поисковиками, что должно считаться главным зеркалом, а что – второстепенным. Поэтому, чтобы не навредить себе, вебмастер должен дать понять роботам Яндекс и Google – какая версия сайта является главным зеркалом.

Также перестанет работать часть ссылок и поведенческие факторы. Если по ссылкам переходят на сайт.ru и проводят там долго времени - это сигнал поисковой системе о качестве сайта. При этом переход по ссылке на www.сайт.ru - никакого влияния на сайт.ru не окажет.

Как проверить и определить, указано ли главное зеркало.

Проверка правильности настройки зеркала проста – в адресной строке используемого браузера вводится адрес сайта.

Возьмём адрес www.сайт.ru, как и в прошлых примерах. Если после ввода адреса и символы www не исчезли, перенаправив пользователя на сайт.ru, то далее следует проверка сайт.ru тем же способом.

Если после перехода адрес снова не изменился – то есть к нему не добавились символы www, – то значит, что зеркало не настроено. Получается, что оба указанных адреса индексируются поисковыми системами как самостоятельные сайты.

Виртуальный хостинг сайтов для популярных CMS:

И это плохо, поскольку все показатели распыляются на 2 сайта. Как поправить ситуацию – рассмотрим ниже.

Какую версию выбрать основной – с www или без?

Большинство сайтов сейчас отображаются без приставки www, поскольку она являла собой некую отличительную черту адреса на заре становления Internet как глобальной сети. Тогда буквы www считались прогрессивным префиксом, который отождествлялся с Интернетом как жутко интересной новинкой.

По мере того, как он плотнее входил к нашу жизнь, сайтостроители задали тенденцию к упрощению. В том числе это коснулось и самих адресов. Поэтому, выбирая основное зеркало сегодня, следует задавать адрес без www, который стал уже анахронизмом, пережитком времени.

Главное зеркало в инструментах Яндекс Вебмастер и Google Search Console.

Значения главного и второстепенного зеркала задаются с помощью файлов.htaccess и robots.txt, которые должны быть помещены в корневую директорию домена. В первом необходимо прописать условие – если пользователь заходит на www.сайт.ru, то он перенаправляется на сайт.ru. Какой вид это имеет в коде – можно найти в интернете для каждого конкретного случая (в зависимости от того, какая CMS используется).

Поскольку файл.htaccess не гарантирует абсолютно одинакового понимания роботами от Яндекс и Google какая версия является главным зеркалом, то в инструментарии web-мастера нужно проделать нижеследующую работу.

Для Яндекса:

1. Зайти в инструменты вебмастера, пункт «Настройка индексирования» – «Главное зеркало».
2. Указать в нём один из трёх имеющихся вариантов: «на усмотрение робота», «www.сайт.ru» или «сайт.ru» (вместо «сайт.ru» следует подставлять нужный адрес сайта). В этом случае выбор должен быть остановлен на «сайт.ru».

Для Гугла:

1. Зайти в Google Search Console, в раздел – «Сообщения».
2. В пункте «Выберите предпочтительную версию» – указать желаемую версию сайта.

Директива host в robots.txt для Яндекса

Для Яндекса указание в.htaccess и инструментах вебмастера не гарантирует стопроцентный результат. Поэтому следует в файле robots.txt в корне директории с сайтом прописывать директиву, отправляющую Яндекс на нужный сайт – Host. В файле прописывается следующее:

User-agent: Yandex
Disallow: /wp-admin
Host: сайт.ru

В сроке «Disallow:» указывается всё, что, по мнению вебмастера, не должен делать и куда не должен заглядывать робот от Яндекса – cgi-bin, админка и т.п. В приведенном примере от индексации закрыта администраторская часть wordpress.

После этого, Яндекс правильно определяет основное зеркало сайта.

Как сделать главное зеркало с SLL и HTTPS

После перевода сайта на протокол HTTPS, Google начинает https-сайты повышать в позициях выдачи, т.к. считает их сайтами с повышенной безопасностью. Поэтому, кроме перехода на безопасный протокол шифрования, после такого шага необходимо выполнить редирект зеркала на основное, содержащее HTTPS.

Если до этого сайт http://сайт.ru был основным, а http://www.сайт.ru – вспомогательным, то теперь основным станет https://сайт.ru, а два указанные – вспомогательными зеркалами. Причиной переезда сайта на новый адрес, с буковкой «s» является установка на сайт сертификатов SSL, повышающих безопасность (данные, которые передаются на сайт шифруются).

Мониторинг проиндексированных страниц сайта.

Роботам требуется определённое время, чтобы «прочитать» изменения, произошедшие на сайте. А потому проверяются показатели посещаемости и количество страниц в индексе спустя 2-4 недели.

Это делается, чтобы удостовериться, что выполненные ранее действия привели к желаемому результату. Если что-то не получилось – необходимо проверить – возможно, где-то закралась ошибка. Даже лишняя запятая, закравшаяся в код, может сделать файлы robots.txt и.htaccess бесполезными для поисковых систем.