Дублированный контент
Одинаковое или очень похожее содержимое по нескольким URL. Google выбирает канонический URL; часть дублирования нормальна и не нарушает политик, но делит сигналы и тратит сканирование.
Проверил Александр Яровенко · Обновлено: 2026-10-08
Дублированный контент — одинаковое или очень похожее содержимое, доступное по нескольким URL, на одном сайте или на нескольких. Google группирует такие страницы, выбирает одну как канонический URL и показывает её в результатах. Google пишет, что некоторый дублированный контент нормален и не нарушает его политики против спама. Реальные издержки тише: путаница для людей, разделённые сигналы и затруднённый учёт, а также время сканирования, потраченное на копии.
Что это и где граница
Дубли возникают из обычной механики сайта. Google перечисляет пять причин: региональные варианты с практически одинаковым содержимым на одном языке, варианты для устройств, например отдельные URL для мобильных и компьютеров, варианты протокола, например HTTP и HTTPS, функции сайта, такие как сортировка и фильтрация, и случайные варианты, например демо-копия, оставленная открытой для роботов. Языковые версии считаются дублями, только если основное содержимое на одном языке: если переведены лишь шапка и подвал, страницы всё равно считаются дублями.
Чем отличается от похожих понятий
| Понятие | Что это | Связь с дублированным контентом |
|---|---|---|
| Дублированный контент | одно содержимое по нескольким URL | сама ситуация |
| Canonical-тег | элемент ссылки с предпочтительным URL | сигнал для выбора среди дублей |
| Редирект 301 | постоянный перенос на другой URL | сильный сигнал, что цель — канонический URL |
| Каннибализация ключевых слов | несколько разных страниц борются за один запрос | разные страницы, а не копии |
| URL-параметры | строки запроса, добавленные к URL | частый источник дублей |
Почему это важно
Причины называет сам Google. Человек может не понять, какая страница верная, а когда содержимое лежит по нескольким URL, труднее видеть, как оно работает. Сигналы с других сайтов, например ссылки, тоже делятся между версиями, пока их не объединили на одном предпочтительном URL. И Googlebot может тратить время сканирования на копии вместо новых или обновлённых страниц: канонический URL сканируется чаще всего, а дубли — реже. Google описывает это как причины указать canonical, а не как наказание.
Как найти и обработать
- Посмотрите отчёт «Индексирование страниц». Статусы вроде «Вариант страницы с тегом canonical», «Страница является копией. Канонический вариант не выбран пользователем» и «Страница является копией. Канонические версии страницы, выбранные Google и пользователем, не совпадают» показывают, как Google сгруппировал ваши URL. Первый обычно не требует действий.
- Проверьте URL. Инструмент проверки URL показывает и объявленный вами canonical, и тот, что выбрал Google.
- Найдите причину. Проверьте параметры сортировки и фильтров, HTTP и HTTPS, www и без www, косую черту в конце, сессионные и трекинговые параметры и тестовые копии.
- Выберите предпочтительный URL и укажите его. Используйте постоянный редирект, когда убираете дубль, ссылку rel="canonical", когда оба URL должны оставаться доступными, и включайте в sitemap только канонические URL.
- Ссылайтесь на canonical. Последовательно ссылайтесь внутри сайта на URL, который считаете каноническим.
Практический пример
| URL | Обработка |
|---|---|
| https://example.com/dresses/ | канонический, с самореферентным rel="canonical" |
| https://example.com/dresses/?sort=price | остаётся доступным для пользователей, rel="canonical" ведёт на чистый URL |
| http://example.com/dresses/ | постоянный редирект на HTTPS |
Google всё равно может выбрать не тот canonical, что вы указали, потому что объявленное предпочтение — подсказка, а не правило.
Частые ошибки
- Закрывать дубли в robots.txt: Google советует не использовать его для канонизации, потому что закрытые там URL всё равно могут индексироваться без содержимого.
- Выбирать canonical через noindex: Google не рекомендует этого внутри одного сайта, так как страница полностью исчезает из Поиска.
- Использовать для этого инструмент удаления: он скрывает все версии URL.
- Давать противоречивые сигналы: не указывайте один URL в sitemap, а другой в rel="canonical" для одной страницы.
- Использовать относительные canonical-URL: Google их поддерживает, но рекомендует абсолютные.
Как проверить результат
После изменения проверьте затронутый URL и убедитесь, что выбранный Google canonical совпадает с вашим. Следите, чтобы в отчёте «Индексирование страниц» статусы дублей по объединённым URL сокращались, и сравнивайте равные периоды кликов и показов для предпочтительного URL с теми же фильтрами. Дайте время на повторное сканирование: дубли сканируются реже.
Ещё вопросы
Приводит ли дублированный контент к санкциям?
Google пишет, что некоторый дублированный контент на сайте нормален и не нарушает политик против спама. Цена — разделённые сигналы, путаница и потраченное сканирование.
Нужен ли тег canonical?
Строго говоря, нет. Google пишет, что ни один из способов не обязателен и что без предпочтения он выберет версию, которую считает лучшей. Указывать полезно, когда важно, какой URL показывается.
Переведённая страница — дубль?
Нет, если основное содержимое на другом языке. Для языковых версий используйте hreflang и учитывайте, что аннотации canonical с hreflang не используются для канонизации.
Следующий практический шаг
Откройте отчёт «Индексирование страниц», отфильтруйте статусы дублей и выберите три самых важных URL. Проверьте их и запишите, какой canonical вам нужен. См. также статью о теге canonical.
Связанные понятия
- Canonical-тег — сигнал предпочтительного URL.
- Редирект 301 — окончательно убрать дубль.
- URL-параметры — частый источник копий.
- Hreflang — разметка языковых и региональных версий.
- Краулинговый бюджет — время сканирования, потраченное на копии.