Склейка доменов, тИЦ и PR, страниц и анкоров. Определение. Методы борьбы

Довольно часто на блогах и форумах можно встретить посты в стиле «Яндекс склеил домены! Что делать!?» или «Перенесли сайт на другой хостинг. Как сохранить посетителей?«, и т.п.
Рассмотрю несколько вариантов склейки:

Довольно распространенная проблема для новичков. Выражается в том, что для поисковых систем домен с приставкой www и без нее считаются разными доменами. Вплоть до того, что могут иметь различные показатели тИЦ и PR и иметь разное количество страниц в индексе. т.е. происходит своеобразное размывание веса внутри одного сайта.

Определяется проверкой показателей тИЦ и PR домена с www и без, а так же определением страниц, находящихся в индексе поисковой системы.

Решается довольно просто:

1. В файле robots.txt в директиве Host указываем основной вид домена. Пример:

User-agent: *
Host: www.administrating.ru

2. Указать в ссылках sitemap.xml основной домен

3. В панели Google «Инструменты для веб-мастеров» — Конфигурация сайта — Настройки указать основной домен:

4. В .htaccess сделать 301 редирект на основной домен. Например, возможен такой вариант кода перенаправления:

Options +FollowSymLinks
RewriteEngine on
RewriteBase /

RewriteCond %{HTTP_HOST} !^www.(.*)$ [NC]
RewriteRule ^(.*)$ http://www.%{HTTP_HOST}/$1 [R=301,L]

Правда, на счет необходимости 301 редиректа есть некоторые уточнения:

301 редирект не сможет в полной мере заменить полноценную склейку зеркал. Мало того, после установки редиректа Яндекс вообще никогда не склеит зеркала, а всегда будет считать их разными сайтами, один из которых пересылает пользователя на другой. Дело в том, что для склейки зеркал Яндекс должен иметь возможность проиндексировать оба зеркала, чтобы убедиться, что эти сайты полностью идентичны. Сайт с редиректом не может быть идентичным сайту без редиректа.
Рекомендуется ставить 301 редирект для Гугла и пользователей, но лишь после того, как зеркала будут склеены Яндексом (это официальная рекомендация Платона Щукина).
Если преждевременно поставить 301 редирект, то все естественные ссылки, поставленные на домен с 301 редиректом, не будут учитываться Яндексом.
© http://forum.searchengines.ru

5. Ждать посещения роботом-склейщиком, обновления индексной базы.

Отдельно отмечу такой вариант исусственной склейки, как парковка, т.е. назначение нескольких доменов одному сайту. Обычно это делается при регистрации одного доменного имени в нескольких зонах.

В случае парковки на один сайт нескольких доменных имен, они тоже являются зеркалами и для правильной склейки (faq суппорта Яндекса) рекомендуется использовать абсолютные ссылки для внутренней навигации.
© http://forum.searchengines.ru

Жила-была конторка в полуподвальном помещении. имела страничку, сверстанную в Word на домене .com.ru. Но однажды владелец конторки получил кредит, и она стала называться холдингом. Холдингу тут же понадобился сайт с блэкджеком и шлюхами интернет-магазином. Но вот-беда: Старый адрес уже отпечатан на тоннах визиток, да и посещаемость у него из поисковых систем какая-никакая, а сформировалась. Денег же на новые визитки и переписывание контента как всегда нет, а посетителей из Яндекса терять не хочется.

В таком случае старый домен подклеивают к новому:

1. У обоих сайтов в параметре Host в robots.txt указывают новый домен. В параметре sitemap указывайте sitemap.xml нового сайта.

2. Дождаться робота-зеркальщика и обновления поисковой базы. Теперь при попытке добавления доменного имени старого сайта должно появляться сообщение о том, что он является зеркалом другого сайта, и URL нового сайта.

3. Настроить 301 редирект со старого сайта. Например, так:

RewriteEngine on
RewriteCond %{HTTP_HOST} ^host.ru
RewriteRule ^(.*)$ http://mainhost.ru/$1 [R=permanent,L]

тИЦ и PR со временем должны перетечь на новый сайт.

В случаях I и II помимо склеивания сайтов в поисковой базе происходит склеивание показателей тИЦ и Page Rank. Нередко этот эффект может использоваться как владельцами старого домена для продажи ссылок на уже ставшем ненужным сайте, так и посторонними вебмастерами, искуственно накачивающими показатели своих сайтов с целью дальнейшего платного размещения ссылок.
На самом деле проблема не такая серьезная, как может показаться. Склеенные домены и их тИЦ и PR определяются довольно просто.

Определение склеенного Google Page Rank:

- Ввести в поиск info:URL подозрительного сайта. В результатах будет информация об основном сайте.
- Ввести URL подозрительного сайта в поиск Google. В кэше будет настоящий домен, имеющий реальный PR
- Еще один вариант проверки кэша:

http://google.com/search?q=cache:http://design.ru

- Воспользоваться сервисами проверки PR, анализирующими склеивание. Например, http://digpagerank.com или http://xseo.in/fakepr.php

Примечание: Как «склеенный» PR может определяться и у доменов, с которых снято делегирование, а так же у паркованных у регистратора или хостера доменов. Для примера, проверьте домены с аукциона освобождающихся доменов nic.ru

Определение склеенного тИЦ Яндекса:

- Открыть URL вида:

http://search.yaca.yandex.ru/yca/cy/ch/design.ru

где design.ru — проверяемый сайт. В сообщении будет указан основной домен, (не)размещенный в каталоге Яндекса.

- Открыть URL вида:

http://bar-navig.yandex.ru/u?ver=2&show=31&url=http://design.ru/

где design.ru — проверяемый сайт. В параметре url domain= будет указан основной домен.
Как вариант — воспользоваться панелью ЯндексБар.

- Поискать в Яндексе URL подозрительного сайта. В результатах поиска будет информация об основном сайте.

- Воспользоваться сервисами проверки тИЦ, анализирующими склеивание. Например, http://voif.ru

В случае необходимости массовой проверки сайтов для размещения ссылок можно воспользоваться как специализированными программами, так и сторонними сервисами. Например PromoPulse. Доверять проверку рекламных площадок самим биржам я бы не стал.

Борьба с подклеивальщиками

Вопрос противодействия подклеивания чужих сайтов к своим доменам считаю открытым. Несколько помочь в этом вопросе может сервис поиска зеркал сайтов — http://tcy.in, основанный на анализе результатов парсинга Яндекс-Тулбар.

Если обнаружен склеенный сайт — обязательно проверьте, нет ли на наго ссылок с вашего сайта. Если есть — обязательно уберите. Кроме легальных методов получения ссылки (покупка, комментирование, гостевой пост) есть альтернативные: Взлом сайта, эксплуатация XSS уязвимости, использование редиректа. Так же есть риск подцепить нежелательную ссылку при установке какого-либо шаблона или модуля CMS.

Ну и, конечно, об инциденте обязательно стоит пожаловаться в администрацию поисковых систем и хостеру вражеского сайта. Следует только учитывать, что подклеивание домена носит инерционный характер: Злоумышленник может убрать все коды, а показатели тИЦ и PR будут сохранятся как минимум до следующего апа.

В рунете ходит выражение «Склеивание контента». На самом деле это никакое не склеивание, а самое настоящее удаление страницы из индекса. А теперь, немного подробнее.

Для повышения качества поиска поисковые системы стараются не учитывать так называемый «дублированный контент». т.е., для страниц с одинаковым содержимым происходит склеивание в результатах выдачи. Как правило, первоисточником считается страница с большей авторитетности по мнению ПС. Вообще, проблема дублированного контента заслуживает отдельной темы.

Склеенными могут быть как отдельные страницы, так и сайты в целом.

В качестве противодействия склеиванию при массовом копировании статей (Например, пресс-релизов или новостей) рекомендуется оставлять ссылку на первоисточник. В таком случае вероятность избежать санкции как донору, так и реципиенту достаточно высока.

Что делать, если уже сайт безнадежно склеен? — Оптимальные варианты, это полностью переписанные статьи (так называемый «глубокий рерайт»), либо синонимизация, уникализация. Так же необходимо добавить новый уникальный контент.

В месте с тем, не уникальный контент отнюдь не означает пессимизацию со стороны поисковиков. Попробуйте поискать какую-либо цитату с Баша, и вы поймете о чем я.

Подробно проблему склейки контента в этой статье рассматривать не буду, так как она гораздо обширнее, чем может показаться, и затрагивает вопросы дублированного контента, защиту контента от копирования, авторитетность ресурса для поисковых систем, структуру популярных шаблонов CMS, и т.п.

т.к. количество ссылок — это основной критерий для поисковых систем при ранжировании в выдаче, то основное занятие Оптимизаторов — получение этих самых ссылок. В большинстве случаев одинаковые ссылки размещаются автоматически во множестве мест. На этой почве и существует теория о склеивании ссылок с одинаковыми анкорами, т.е. одним и тем же текстом основания ссылки.

Теория обрастает разными подробностями. Например:
- Одинаковые анкоры влияют на рост тИЦ, но для ссылочного ранжирования бесполезны.
- Сквозняки только ухудшают позиции сайта под ссылкой.

Для борьбы со склейкой анкоров используются различные методы:
- Программы и сервисы прогона по каталогам предлагают ввести несколько вариантов текста ссылки, которые при размещении используются равномерно.
- На основе синонимайзеров созданы так называемые Генераторы анкоров.

Лично мое мнение заключается в том, что за одинаковые анкоры под фильтр попасть можно. Но лишь в случаях:
- Быстрого роста ссылочной массы. т.е., прогона по каталогам, сервисам социальных закладок, и т.п.
- Преимущественного размещения ссылок на плохих сайтах, уже находящихся под фильтром — гостевых книгах, форумах, линкопомойных каталогах, и т.п.
т.е., этот фактор учитывается, но лишь как отягчающий, а не первопричинный.

Что реально оказывает влияние на ссылку, так это качество ссылающейся площадки в целом, и околоссылочный текст в частности.