Боремся с дублями на сайте.

Привет друзья! Сегодня мы на конкретном примере разберем откуда же берется столько дублей на наших сайтах, и как вообще с ними бороться. Сайт для эксперимента я нашел достаточно быстро. Если подумать, на каких сайтах обычно очень много дублированного контента ? Конечно на блогах и всевозможных варезниках. Вот и последний мы и возьмем в качестве примера.

Как проверить сайт на дубли ?

В строку «Я ищу» – нужно вбить название страницы, (например Title), который хотим проверить на дубли. А в строчку «на сайте» – вписываем название сайта. И далее просто нажимаем кнопку «Найти».

После этих манипуляций, яндекс выдаст нам все страницы, в которых есть точное совпадение строки «я ищу».

Как видно из картинки выше, яндекс обнаружил аж 57 похожих страниц. Из низ абсолютно одинаковых около 5. Это Очень много. Если владелец этого ресурса не предпримет никаких действий. Его убьет фильтр АГС.

Теперь мы посмотрим, сколько вообще проиндексированных страниц на сайте. Для этого в строке поиска напишем так.

Теперь, как мы видим, яндекс знает о 807 страницах этого сайта. И кстати, с каждым днем эта цифра уменьшается, видимо страницы потихоньку выпадают из индекса.

Как избавиться от дублей на сайте ?

Есть несколько вариантов:

Первый это правильно настроить файл Robots.txt. С помощью него можно отсеять 100% ненужных страниц. Это могут быть страницы тегов, меток, категорий, профили пользователей, страницы регистрации и тому подобных. У каждого движка их предостаточно.

Установите необходимые плагины. Для WordPress порекомендую – All in Seo pack. Для Joomla 1.5 – ARTIO JoomSEF. Отличные плагины, очень сильно облегчают жизнь сайтам.