Дубли редко появляются по чьей-то вине: их создаёт движок, параметры и настройки сервера. Разбираем, какими они бывают, как найти каждый вид и чем закрывать, чтобы не потерять работающие страницы.
Коротко
- Большую часть дублей создаёт сам движок.
- Полные и частичные дубли ищут разными способами.
- Канонический адрес решает больше половины случаев.
- Перед закрытием проверяют, не приносит ли дубль трафик.
Какие бывают дубли
| Вид | Пример |
|---|---|
| Адресные | Со слешем и без, с www и без, с параметрами |
| Протокольные | Одна страница доступна по двум протоколам |
| Страницы сортировок и фильтров | Один список в разном порядке |
| Пагинация | Страницы одного списка |
| Частичные | Разные адреса, почти одинаковый текст |
| Смысловые | Две страницы под один и тот же запрос |
Первые четыре вида технические и закрываются настройками, последние два требуют решений о структуре. Их часто смешивают в одном отчёте, хотя чинятся они по-разному: одно — задача разработчику, другое — переделка страниц. Про смысловые — в статье про каннибализацию запросов.
Чем они мешают
Поиск выбирает сам
И не всегда тот адрес, который нужен вам.
Сигналы делятся
Ссылки и поведение распределяются по копиям.
Тратится обход
Робот ходит по одинаковому.
Отчёты дробятся
Трафик страницы выглядит меньше, чем есть.
Первый пункт даёт самые заметные последствия. В выдаче может оказаться адрес с параметрами сортировки или страница печати — человек попадает на неё и видит не то, что ожидал. Про краулинговый бюджет — в статье про краулинговый бюджет.
Как найти
| Вид дублей | Как искать |
|---|---|
| Адресные | Открыть страницу во всех вариантах адреса вручную |
| С параметрами | Выгрузка из панели, сортировка по шаблону адреса |
| Частичные | Группировка по заголовку и описанию |
| Смысловые | Отчёт по запросам: какие страницы по ним показываются |
| Все сразу | Сравнить число страниц сайта и число в индексе |
Третья строка — самый практичный приём для больших сайтов. Если у десяти страниц одинаковый заголовок, это почти всегда дубли или почти-дубли: одинаковый title обычно означает одинаковое содержимое. Сортировка по заголовку находит их быстрее любого специального инструмента.
Чем закрывать
Канонический адрес
Основной способ для копий одной страницы.
Постоянная переадресация
Для адресных и протокольных дублей.
Запрет индексирования
Для служебных страниц, которые нужны людям.
Объединение страниц
Для смысловых дублей.
Уборка ссылок на дубли внутри сайта
Чтобы робот их не находил.
Последний пункт делают реже всего, а без него остальное работает наполовину. Пока переключатель сортировки или вида формирует ссылку на адрес с параметрами, робот будет приходить туда снова. Про уборку — в статье про мусорные страницы в индексе.
Чего делать не стоит
Опасно
- Закрывать дубли, не проверив их трафик
- Ставить канонический адрес на неподходящую страницу
- Закрывать пагинацию целиком
- Менять всё одним изменением
Безопасно
- Сначала посмотреть отчёты по каждой группе
- Проверять канонический адрес на образце
- Закрывать группами и наблюдать
- Фиксировать, что и когда изменили
Первая строка слева — единственная ошибка в этом списке, которая ведёт к потере трафика. Страница с параметрами иногда оказывается в поиске и приносит визиты; закрыв её без проверки, вы теряете их вместе с дублем. Пять минут в отчёте по страницам решают вопрос.
Частые вопросы
Какие бывают дубли страниц?
Адресные (со слешем и без, с www и без, с параметрами), протокольные, страницы сортировок и фильтров, пагинация, частичные и смысловые — две страницы под один запрос.
Чем дубли мешают?
Поиск сам выбирает, какой адрес показывать, сигналы делятся между копиями, тратится обход и дробятся отчёты. Хуже всего, когда в выдаче оказывается адрес с параметрами.
Как быстро найти дубли?
Сравнить число страниц сайта с числом в индексе, выгрузить адреса и сгруппировать по шаблону, а частичные дубли искать сортировкой по одинаковому заголовку.
Чем закрывать дубли?
Каноническим адресом для копий, постоянной переадресацией для адресных и протокольных, запретом индексирования для служебных и объединением для смысловых. И обязательно убрать ссылки на дубли внутри сайта.
Читайте также
Продвинем сайт в поиске
Соберём семантику, доведём структуру и текст до уровня топа и будем вести проект до заявок.
Обсудить SEO-продвижение
