Перемещение на другой домен, переход с http на https, наличие www-префикса — все это представляет собой случаи, при которых сайт получает идентичную копию. Поисковые системы считают такие ресурсы зеркалами и объединяют их в единую группу. В процессе слияния поисковики сами определяют основной сайт, который будет иметь более высокий рейтинг, независимо от предпочтений владельца и усилий по оптимизации.
В этом материале мы подробно рассмотрим, что такое зеркало сайта, зачем оно необходимо и как управлять этой ситуацией: определить наличие зеркала и указать основной сайт.
- Определение зеркала сайта
- Почему важно иметь зеркало сайта
- Облегчить переход на новый домен
- Обеспечение бесперебойного функционирования веб-сайта
- Избегать потери пользователей при ошибочном вводе домена
- Не позволяйте конкурентам переманивать ваших клиентов
- Обход фильтров и блокировок
- Альтернативный адрес
- Тестовая версия сайта
- Передача возраста новому сайту путем подклейки старого домена
- Скрытие ссылочного профиля от конкурентов
- Накрутка параметров сайта перед продажей
- Подключение домена с качественной ссылочной массой к продвигаемому сайту
- Методы обнаружения зеркал сайта и определения основного
- Как объединить дублирующие сайты
- Выбор основного ресурса
- Конфигурация основного зеркала
- Настройка в Яндекс
- Настройка для Google
- Зачем вообще искать зеркала?
- Какие бывают виды зеркал
- Какое из зеркал сайта выбрать для продвижения?
- Настройка редиректа через изменения в файле htaccess
- Как настраивать редиректы при смене домена
- Настройка перенаправления на серверах Nginx
- Как подтвердить работоспособность зеркала сайта?
Определение зеркала сайта
Простыми словами, зеркало сайта — это его идентичная копия с полностью или частично дублирующимся содержимым, имеющая другой URL-адрес, или, иначе говоря, алиас. Контент включает не только текст, но и дизайн, ссылки, HTML-код и CSS-стили. Например, при переходе на защищенный протокол передачи данных https, сайт может одновременно стать доступным по двум адресам:
- http://site.ru
- https://site.ru
Такое дублирование ресурса создаёт конкуренцию в поисковых результатах и затрудняет продвижение. Если владелец не указал основное зеркало, поисковые системы определят его автоматически. В результате остальные дубли будут объединены в одну группу, и в выдаче появится только один ресурс.
При наличии нескольких дубликатов ресурса, вес ссылок может быть распределён между ними. Поисковые системы проиндексируют часть страниц основного сайта и часть страниц его дубликата.
Почему важно иметь зеркало сайта
Зеркало может быть создано как автоматически поисковыми системами, так и самостоятельно владельцем для различных целей. Ниже рассмотрены некоторые причины, по которым могут осознанно создавать веб-ресурсы с дублирующимся содержимым.
Облегчить переход на новый домен
Временами компании вынуждены менять свое название, будь то из-за расширения бизнеса или смены направления деятельности. Важно также обновить название сайта, чтобы избежать путаницы среди клиентов.
Для минимизации потерь трафика и сохранения авторитетности сайта при смене домена, часто используют зеркала. Эта процедура включает создание копии сайта на новом домене, настройку переадресации с предыдущего адреса на новый, и определение нового сайта как главного зеркала. Таким образом, когда пользователь вводит старый адрес сайта в адресной строке браузера, он автоматически перенаправляется на новый домен.
Обеспечение бесперебойного функционирования веб-сайта
Для поддержания непрерывной доступности своих ресурсов, крупные веб-платформы могут использовать зеркала. Этот метод заключается в распределении копий сайта на нескольких серверах, каждый из которых обладает уникальным адресом. Если основной сервер станет недоступен из-за перегрузки или атаки, сайт может выйти из строя. Но наличие зеркал позволяет бизнесу сохранять трафик, так как пользователи перенаправляются на резервные копии автоматически.
Данный метод применяется для уменьшения нагрузки на основной сайт, что также способствует ускорению его загрузки. В случае высокого трафика на главном ресурсе, часть посетителей перенаправляется на зеркальную версию сайта. Такой подход помогает сохранить стабильную работу сайта, особенно в моменты, когда наблюдается массовая регистрация пользователей или активные действия, такие как покупки нового товара или доступ к свежему курсу.
Избегать потери пользователей при ошибочном вводе домена
При вводе доменного имени пользователи могут допускать ошибки, например, из-за сложностей с транслитерацией или простых опечаток. Это может привести к утрате потенциальных клиентов для бизнеса.
Во избежание подобных ситуаций, разумно создать зеркальные версии сайта с доменами, сходными по написанию. К примеру, если основной адрес ресурса samokaty.ru, полезно зарегистрировать зеркала с доменами вроде samokati.ru и samocaty.ru.
Для определения наиболее распространенных ошибок в написании домена можно использовать аналитические инструменты, такие как Яндекс.Wordstat. Этот сервис позволяет ввести название вашего сайта и получить перечень наиболее популярных запросов, среди которых могут быть и схожие с вашим доменным именем.
Не позволяйте конкурентам переманивать ваших клиентов
Если конкуренты регистрируют домен с аналогичным названием, это может привести к потере возможных клиентов. Разработка зеркала сайта на другом домене может быть одним из способов предотвращения такой проблемы. Например, если основной сайт имеет адрес mebel-msk.ru, создание зеркала на домене msk-mebel.ru может помочь сохранить клиентский поток и обезопасить его от утраты в пользу конкурентов.
Обход фильтров и блокировок
Создание зеркального сайта может оказаться полезным для вывода ресурса из-под фильтров поисковых систем в ряде случаев. Применение метода, схожего с переездом на новый домен, может стать результативным способом восстановления позиций сайта в поисковой выдаче. Для этого владельцу нужно перенести контент на новый сайт с другим доменом, настроить переадресацию с предыдущего домена на новый и тем самым вернуть ресурс в поисковые результаты.
Альтернативный адрес
В случае блокировки или недоступности одного из адресов, пользователи смогут перейти на резервный сайт для доступа к контенту. Этот подход используется крупными ресурсами, которым необходимо обеспечить постоянный и надежный доступ к информации для своих пользователей. Они поддерживают несколько резервных копий на различных серверах и осуществляют переадресацию пользователей на резервные сайты при возникновении проблем с основным.
Тестовая версия сайта
Для совершенствования функционала, проверки гипотез и осуществления прочих технических работ создаются копии ресурсов. Этот метод в основном применяют крупные площадки, которым не по силам допускать ошибки на основном сайте. Если тестовые версии ресурсов не защитить от индексации, они могут превратиться в зеркала, что недопустимо.
Передача возраста новому сайту путем подклейки старого домена
Метод уже устарел, но раньше был популярен. Старый домен присоединяли к новому, что облегчало продвижение молодого сайта в поисковых системах. В настоящее время возраст таким способом передать не получится.
Скрытие ссылочного профиля от конкурентов
Чтобы избежать того, что конкуренты смогут проанализировать ссылки, ведущие на продвигаемый сайт, создается зеркальный сайт на отдельном домене. Это зеркало присоединяют к основному сайту.
Ссылки располагаются на данном зеркале. Ссылочный вес передается основному сайту, но при анализе доноров основного сайта эти ссылки не будут видны, и конкуренты не смогут разместить свои ссылки на этих же ресурсах.
Накрутка параметров сайта перед продажей
Этот метод применялся в эпоху тИЦ. К домену с нулевым тИЦ присоединялся старый домен с высоким значением тИЦ. Спустя некоторое время новый домен приобретал тИЦ неглавного зеркала. Затем домен продавался за хорошую цену, и от него отделялся старый домен. тИЦ исчезал.
На сегодняшний день тИЦ у сайтов больше не отображается. Вместо него Яндекс ввел показатель ИКС, который через процедуру склеивания зеркал передать невозможно.
Подключение домена с качественной ссылочной массой к продвигаемому сайту
Этот метод помогает ускорить продвижение в Google. Вы находите сайт с похожей тематикой и хорошей ссылочной массой. Затем настраиваете редирект с его домена на ваш проект. Вес ссылок, которые ведут на приобретенный сайт, переходит на ваш ресурс.
Существует возможность приобретения трафика. К примеру, у вас имеется определённый сервис. Вы можете приобрести конкурирующий сервис с аналогичными функциями и настроить на нём редирект на ваш проект. Таким образом, пользователи конкурирующего сервиса перейдут к вам.
Методы обнаружения зеркал сайта и определения основного
Чтобы выявить зеркала сайта и определить основной ресурс, можно применить следующие способы:
- Анализ поисковых результатов. Введите уникальную фразу или запрос, связанный с вашим сайтом, в поисковую систему и изучите полученные результаты. Если в выдаче присутствуют страницы как основного сайта, так и его зеркала, это может свидетельствовать о наличии нескольких версий сайта. В случае если в выдаче отображается только один вариант сайта, вероятно, поисковая система уже объединила зеркала и определила основной.
- Применение вебмастерских инструментов. Зарегистрируйте ваш сайт в сервисах для вебмастеров, таких как Яндекс.Вебмастер или Google Search Console. При регистрации, если ваш сайт является зеркалом, вебмастер уведомит вас об этом, и адрес сайта автоматически изменится на основной зеркальный адрес.
- Анализ с помощью Яндекс.Wordstat. Используйте инструмент Яндекс.Wordstat для проверки частотности запросов, связанных с вашим сайтом. Если в результатах вы заметите различные варианты написания домена, это может свидетельствовать о существовании зеркал.
- Контроль индексации. Постоянно мониторьте индексацию вашего сайта и его зеркальных версий в поисковых системах. Следите за количеством проиндексированных страниц для каждой версии сайта и проводите сравнение результатов.
Важно помнить, что при обнаружении дублирующих сайтов следует объединить их и назначить одно из них основным, чтобы избежать проблем с индексацией и ранжированием в поисковых системах.
Как объединить дублирующие сайты
Для объединения дублирующих сайтов и определения основного ресурса необходимо выполнить следующие действия.
Выбор основного ресурса
Если сайт еще не проиндексирован поисковыми системами, можно выбрать любой из дублирующих сайтов для назначения основным.
Если сайт уже был проиндексирован, рекомендуется назначить основным тот домен, который получает больше всего трафика. Это особенно важно, если все зеркала равноценны.
Если один из ресурсов изначально предполагался как основной, важно снова установить его в качестве основного, даже если трафик уже направлен на другой сайт.
Конфигурация основного зеркала
Чтобы перенаправить пользователей с вторичных зеркал на главный сайт, необходимо настроить 301-й редирект на основное зеркало. Для этого можно воспользоваться файлом .htaccess, следуя соответствующей инструкции.
Если вы не хотите настраивать редирект самостоятельно, можно воспользоваться услугами хостинг-провайдеров или регистраторов доменов, например, RU-CENTER, которые предлагают услугу «Перенаправление домена».
После выполнения этих действий зеркала сайта будут объединены, и при попадании на вторичные зеркала, пользователи будут автоматически перенаправлены на основное, что позволит собрать весь трафик на одном домене и улучшить позиции в поисковых системах.
Настройка в Яндекс
Чтобы уведомить Яндекс о том, какое зеркало считать основным, выполните следующие шаги в Яндекс.Вебмастере:
- Вход в Яндекс.Вебмастер. Авторизуйтесь в своем аккаунте на платформе Яндекс.Вебмастер.
- Добавление домена. Нажмите «Добавить сайт» и укажите основной зеркальный адрес, который вы желаете установить главным.
- Подтверждение владения. Подтвердите права на управление сайтом, следуя предложенным инструкциям. Для этого можно использовать метатег на главной странице, загрузить HTML-файл в корень сайта или добавить TXT-запись в DNS.
- Настройки переноса сайта. После успешного подтверждения прав зайдите на вкладку «Индексирование» и выберите «Переезд сайта».
- Определение главного зеркала. Из предложенного списка зеркальных адресов выберите тот, который хотите сделать основным, и сохраните изменения.
Когда вы выполните следующие инструкции, Яндекс будет знать, какое зеркало нужно считать главным, что позволит ему правильно индексировать и ранжировать ваш сайт в результатах поиска.
Настройка для Google
Чтобы Google понимал, какое зеркало является основным, выполните эти шаги в Google Search Console:
- Авторизуйтесь в своем аккаунте Google и перейдите в Google Search Console.
- Добавьте новый адрес зеркала. Нажмите на кнопку «Добавить свой сайт» и укажите основной адрес зеркала, который вы хотите установить как главный.
- Проверка прав: Подтвердите свои права на управление доменом, выбрав один из предложенных вариантов верификации, таких как HTML-тег, код отслеживания Google Analytics или любой другой доступный метод. После выполнения подтверждения, дождитесь, пока Google обработает и утвердит ваши права.
- Конфигурация изменения адреса: Зайдите в раздел «Настройки» и откройте вкладку «Изменение адреса».
- Определение главного зеркала: В указанной вкладке выберите необходимое основное зеркало из предложенного списка и нажмите кнопку «Проверить и обновить данные».
Когда вы завершите эти шаги, Google будет знать, какое зеркало считать основным, что позволяет правильно индексировать и ранжировать ваш сайт в поисковой выдаче.
Зачем вообще искать зеркала?
Есть несколько причин для идентификации зеркал:
- Зеркальные ресурсы могут свидетельствовать о наличии конкуренции. Это особенно важно, если вы работаете в новой нише. Верхние позиции в выдаче могут не выглядеть внушительно. Тем не менее молодой домен может быть связан с более старым зеркальным ресурсом, обладающим значительным ссылочным весом.
- При приобретении ресурса с хорошим поисковым трафиком необходимо выяснить все о его зеркалах. Обязательно требуйте права на них.
- Чтобы понять схему ссылок, по которым конкуренты продвигают свои проекты, важно исследовать обратные ссылки на каждую версию их сайтов.
- Если вы пользуетесь услугами SEO-специалиста, необходимо убедиться, что он работает именно с вашим доменом.
Какие бывают виды зеркал
Не все похожие ресурсы можно назвать зеркалами. О наличии зеркала можно говорить, если совпадает более 90% контента. Наличие схожего домена, поддомена или домена с префиксом обозначает другой ресурс, но не зеркало.
Примеры зеркал чаще всего включают ресурсы с различными протоколами передачи данных. Поскольку http считается устаревшим и небезопасным, использовать рекомендуется адреса с https. При посещении сайта с http пользователь увидит предупреждение о проблемах безопасности.
Протокол https обязателен для всех сайтов, которые собирают персональные данные. Если на сайте есть хотя бы одна форма для ввода номера телефона, владельцу нужно получить SSL-сертификат, чтобы обеспечить безопасное подключение.
Часто можно встретить зеркала сайтов с префиксом www. В прошлом этот префикс был обязателен, чтобы указывать на размещение ресурса в интернете. В наше время лучше его не использовать, так как адрес становится короче и проще для запоминания. Тем не менее, многие все еще привыкли вводить URL-адреса с www, поэтому важно учитывать редиректы.
Иногда у сайтов на домене ru имеются зеркала в доменной зоне рф. Обычно такие дубликаты создаются самими владельцами. Принципиальной разницы между этими доменами нет, поэтому выбор зависит от предпочтений владельца и пользователей.
Какое из зеркал сайта выбрать для продвижения?
Когда речь идет о SEO, нет большой разницы, использовать ли https или http, а также добавлять префикс www к домену или нет. Однако протокол https стал необходимостью для интернет-магазинов и коммерческих сайтов, тогда как домены без www короче и удобнее в обращении. Поэтому, если есть возможность выбора, предпочтительнее выбрать https без www, и тогда основной зеркальный адрес будет выглядеть примерно так: https://mysite.ru.
Если сайт уже проиндексирован поисковыми системами, важно выяснить, каким образом Яндекс и Гугл определили его зеркала. Важно учитывать, на какой регион ориентирован сайт. Если речь идет о странах СНГ или Европы, таких как Украина или Грузия, проверку следует проводить в Гугле. Если же цель – продвижение в России, то необходимо обратиться к Яндексу.
Проверить индексацию можно очень просто с помощью таких запросов:
- Яндекс: url:www.examplesite.ru* url:examplesite.ru*
Вводим каждый запрос по очереди в поиск и анализируем результаты системы. В Yandex сайт обычно индексируется или с www, или без этого префикса. Если сайт уже проиндексирован с www, актуальное зеркало будет в формате www.examplesite.ru.
В индексе поисковика Google могут присутствовать копии сайта как с www, так и без него, поэтому необходимо проверять выдачу для каждого зеркала по отдельности. Сначала вводим запрос: «site:examplesite.ru -www.examplesite.ru». Затем: «site:www.examplesite.ru».
Если поисковые системы Яндекс и Google выбрали разные зеркала, нужно провести анализ и определить, какое из них использовать.
Приоритетом должна быть та система, где находится ваша целевая аудитория. Чаще это именно Яндекс. Для Google нужно настроить редирект на зеркало, выбранное Яндексом.
Проанализируйте, откуда поступает больше трафика. Если в Google вы получаете 1000 переходов ежедневно, а в Яндексе лишь 100, тогда главным источником стоит признать Google.
Настройка редиректа через изменения в файле htaccess
Если необходимо настроить перенаправление пользователей, обычно редактируют системный файл под названием «.htaccess». Этот файл отвечает за конфигурацию самого популярного веб-сервера Apache. Чтобы получить доступ к «.htaccess», необходимо подключиться к веб-серверу через FTP. Для этого удобно использовать любой FTP-клиент, например, широко известную FileZilla.
Данные для входа по FTP предоставляются администрацией выбранного хостинга. При подключении пользователь не увидит «.htaccess» сразу. Это связано с тем, что данный файл является важным, и поэтому он скрыт для защиты от случайного повреждения. Чтобы его увидеть, необходимо открыть вкладку «Сервер» и включить отображение скрытых системных файлов:
После этого в корневом каталоге появится «.htaccess». Его нужно скачать на свой компьютер и создать резервную копию.
Затем открывают «.htaccess» в любом текстовом редакторе. Можно использовать стандартный «Блокнот» в Windows или лучше Notepad.
Внутрь файла вставляют следующий короткий код:
RewriteEngine On
RewriteCond %{HTTP_HOST} ^www.mysite.ru
RewriteRule (.*) https://mysite.ru/$1 [R=301,L]
Исходя из кода, можно заключить, что:
- в первом пункте активируется редирект – ON;
- во втором пункте после символа «^» указан адрес основного зеркала, на который перенаправляют пользователя;
- в третьем пункте указано направление перенаправления через 301 редирект.
После добавления необходимого кода, файл закрывают, сохраняют изменения и загружают обновленный «.htaccess» на сайт с помощью FileZilla.
Как настраивать редиректы при смене домена
Если решено поменять домен у уже существующего и популярного сайта, то лучше не отказываться от старого домена, а использовать его как зеркало. При этом переводы трафика и позиций будут минимальными, что поможет сохранить высокий уровень сайта. Для достижения наилучшего результата рекомендуется воспользоваться постраничным 301-м редиректом. В этом случае оптимизатор изменяет файл «.htaccess», чтобы обеспечить переадресацию с отдельных страниц зеркала на новый домен.
Для сайта-визитки или другого ресурса с небольшим количеством страниц это не сложно реализовать. Однако, если веб-страниц много, это может стать проблемой. Даже если уделить достаточно времени и настроить редирект для каждой страницы, как описано выше, это может перегрузить сервер запросами и замедлить функционирование сайта.
Чтобы предотвратить такие проблемы, в файл «.htaccess» добавляют следующий программный код:
Options +FollowSymLinks
Запуск модуля переписывания.
<FilesMatch «robots.txt$»>
Отключение модуля переписывания.
</FilesMatch>
RewriteCond %{HTTP_HOST} ^www.mysite\.ru
RewriteRule ^(.*)$ https://my-new-site.ru/$1 [R=301,L]
RewriteCond %{HTTP_HOST} ^www.mysite\.ru
RewriteRule ^(.*)$ https://my-new-site.ru/$1 [R=301,L]
Этот пример кода перенаправляет пользователей с любых страниц www.mysite.ru на соответствующие страницы нового сайта my-new-site.ru.
На старом сайте, который теперь функционирует как зеркало, необходимо добавить Host в файл robots.txt, указав данные о новом домене.
Настройка перенаправления на серверах Nginx
Несмотря на то что Apache является одним из самых популярных типов веб-серверов, иногда хостинг-провайдеры могут использовать альтернативу под названием Nginx. Для настройки редиректа на данном сервере также нужно найти конфигурационный файл, но его название будет не «.htaccess», а «nginx.conf».
После подключения к серверу Nginx через FTP и скачивания указанного файла, необходимо внести в него следующий код для включения 301 редиректа с www на адрес без этого префикса:
server {
server_name www.mysite.ru;
rewrite ^/(.*)$ https://mysite.ru/$1 permanent;
}
Для генерации нужного кода, который вставляется в «nginx.conf», можно использовать специальные конвертеры, такие как winginx.
Процесс настройки выглядит следующим образом:
- сначала создают код редиректа для соответствующих страниц веб-сайта на серверах Apache с помощью этого сервиса или аналогичного;
- на следующем этапе, код вставляется в конвертер Nginx;
- затем, полученный код интегрируют в файл «nginx.conf».
Как подтвердить работоспособность зеркала сайта?
Теперь давайте рассмотрим, как можно проверить корректность работы зеркала вашего сайта.
Проверить функциональность зеркала можно самостоятельно, введя его адрес в адресную строку браузера. Если происходит перенаправление с вторичного домена на основной – зеркало настроено правильно. Ещё один способ – ввести URL вашего сайта в поисковую строку Яндекса или Google и посмотреть, как отображается адрес: с «www» или без него.
Чтобы проверить зеркала сайта, можно воспользоваться специальным сервисом xseo.in. Введите адрес вашего сайта и получите информацию о зеркалах в Яндексе и Google. Также, у разработчика известного RDS бара для браузеров, есть платная услуга, позволяющая узнать о зеркалах сайта.