Дубли URL: www, слеш и параметры — как проверить

Чтобы разобраться с дублями URL, соберите несколько адресов одной страницы и проверьте, куда каждый приводит и какое содержимое показывает. Похожее написание ещё не означает дубль: параметр может менять услугу, язык или состав каталога. Сначала определяют смысл адресов, затем выбирают основной вариант и согласуют редиректы, canonical, карту сайта и внутренние ссылки. Массовое удаление параметров до этого разбора способно сломать полезные страницы.

Этот материал посвящён вариантам адреса одного документа: протоколу, имени хоста, завершающему слешу и параметрам. Планирование самостоятельных поисковых подборок разобрано отдельно в статье о страницах фильтров каталога. Здесь задача другая: посетители и поисковая система не должны получать противоречащие друг другу указания о том, где находится выбранная страница.

Сначала определите, какой документ сравниваете

Выберите одну реальную страницу, например описание услуги. Запишите её назначение, заголовок и основное действие посетителя. Затем соберите встречающиеся варианты из внутренних ссылок, карты сайта и доступных отчётов. Не генерируйте тысячи случайных комбинаций. Для первого разбора полезнее небольшой набор адресов с понятным происхождением: так видно, какой компонент сайта продолжает создавать лишний вариант.

Сохраняйте исходный адрес полностью. После автоматического перехода браузер может показывать уже другой URL, и первый шаг цепочки потеряется. Для каждого варианта нужны исходный запрос, промежуточные переходы и конечный документ. Если доступен только снимок страницы после загрузки, этого недостаточно, чтобы утверждать, что настроен постоянный переход или что переходов вообще не было.

Проверьте не только внешний вид. Сравните текст, выбранный язык, основной товар или услугу и действие кнопки. Две одинаковые обложки не делают документы эквивалентными, если один адрес открывает иной филиал или вариант услуги. Наоборот, разные метки аналитики могут не менять содержание. Решение принимают по роли параметра и фактическому результату, а не по длине строки адреса.

Составьте карту решений для разных видов вариантов

Перед настройкой зафиксируйте, какие различия относятся к представлению того же документа, а какие имеют самостоятельный смысл. Если команда не знает назначения параметра, оставьте решение открытым и найдите его владельца в коде или интеграции. Не присваивайте неизвестному параметру статус мусора. Такая осторожность особенно важна для ссылок из писем, рекламных кампаний и личных кабинетов.

Таблица не назначает один правильный формат всем сайтам. Она задаёт вопросы для проверки конкретного приложения. Например, решение о завершающем слеше должно совпадать с тем, какие ссылки генерируют маршруты. Нельзя считать проблему закрытой, если сервер исправляет каждый переход, а меню продолжает отправлять посетителя на исправляемый вариант.

Согласуйте сигналы вместо одного тега

В документации Google Search Central редирект и rel="canonical" описаны как сильные сигналы выбора канонического адреса, а включение в sitemap — как более слабый. Это не обещание мгновенного выбора нужного URL. Практический вывод для аудита: проверьте, не указывают ли разные механизмы на разные адреса. Один новый тег не устраняет противоречие в карте сайта или постоянных внутренних ссылках.

Для выбранной основной страницы запишите ожидаемый конечный адрес, canonical и строку в sitemap. Затем откройте страницу через каждый входной вариант. Если один адрес переходит на второй, а второй объявляет каноническим третий, объясните эту схему до публикации исправления. Она может возникнуть из-за старой настройки в приложении и новой настройки на уровне сервера, которые никто не проверил вместе.

Google также не рекомендует использовать robots.txt для решения канонизации. Запрет обхода и выбор представительного URL решают разные задачи. Поэтому не закрывайте варианты механически, надеясь этим объяснить основной адрес. Если предполагается менять доступность обхода, вынесите это в отдельное решение с проверкой того, какие сведения сможет получить поисковая система. Не объединяйте несколько разных настроек одной кнопкой «убрать дубли».

Найдите место, которое порождает неверные ссылки

Внешний переход на старый адрес может сохраняться долго, но внутренние ссылки компания обычно способна исправить. Проверьте меню, карточки, хлебные крошки, переключатели языка, страницы статей и ссылки в сгенерированных документах. Отдельно проверьте абсолютные адреса, которые формируются из настройки основного домена. Исправление одного шаблона не гарантирует изменение другого источника.

Начните с места, где нашли вариант. Если неправильный URL присутствует в карточках товаров, посмотрите, как строятся ссылки именно этой карточки. Не заменяйте все строки по общему совпадению имени домена без проверки контекста. В тексте может быть учебный пример, ссылка на отдельный сервис или адрес, который не относится к публичному сайту. Список затронутых источников должен быть конечным и объяснимым.

После правки повторно выгрузите ссылки выбранного раздела. Так вы проверите не только вход через старый адрес, но и способность сайта перестать распространять его. Если инструмент показывает лишь конечные страницы после переходов, сохраните отдельно исходные ссылки. Иначе постоянное исправление маршрута сервером скроет незавершённую работу над генератором ссылок.

Проверяйте сочетания правил

Правило протокола и правило хоста по отдельности могут работать, а вместе создавать лишнюю цепочку. Для учебного домена example.test составьте небольшой набор: HTTP с www, HTTP без www, HTTPS с www и HTTPS без www. Добавьте согласованные варианты пути. Это вымышленные адреса для описания метода; реальные проверки выполняют на своей тестовой среде и разрешённых публичных страницах.

Для каждого входа сохраните последовательность ответов и конечный результат. Проверьте, что путь не потерян и вложенная страница не заменена главной. Сравните полезные параметры до и после перехода. Если у правила есть исключения, включите их в тот же набор. Проверка только главной страницы не показывает, что происходит с карточкой товара или ссылкой на выбранную услугу.

Не включайте в автоматический обход реальные ссылки подтверждения действий, выхода, оплаты или отмены заказа. Технический аудит публичных документов не требует запуска пользовательских операций. Для таких маршрутов нужен отдельный безопасный сценарий. Даже если ссылка внешне похожа на обычный параметр URL, её назначение определяет способ проверки.

Что передать разработчику

В задаче достаточно конкретного примера, карты ожидаемых адресов, источника неправильной ссылки и условий приёмки. Формулировка «исправить canonical» слишком узкая, если проблема одновременно затрагивает переходы, sitemap и меню. Укажите, какие варианты должны оставаться доступными и по какой причине. Не обещайте общий результат для всех параметров, если разобрана только одна группа.

Попросите сохранить способ возврата предыдущих правил и список изменённых мест. Сначала проверьте исправление на копии, затем согласуйте публикацию. Если сайт обслуживается несколькими компонентами, заранее назначьте владельца итоговой цепочки. Иначе каждая команда подтвердит свою настройку отдельно, а посетитель получит их несовместимое сочетание.

Приёмка включает и отрицательные случаи: значимый параметр не потерян, язык не поменялся, нужная страница не отправлена на главную, посторонний раздел не затронут. Для учебного набора ожидаемый результат должен быть записан до запуска. Проверка без заранее выбранного результата часто заканчивается выводом «так тоже открывается», который ничего не говорит о корректности адресов.

Как наблюдать результат после публикации

Сохраните дату изменения и проверенные примеры. В доступных поисковых отчётах смотрите выбор канонической страницы и состояние соответствующих URL, понимая, что отчёт не обязан обновиться сразу. Не обещайте рост позиций от одного исправления адреса. Задача этой работы — устранить конкретные противоречия и сделать маршруты понятными, а влияние на поиск оценивают по последующим данным.

Если поисковая система продолжает выбирать иной адрес, вернитесь к содержимому и источникам ссылок. Возможно, сравниваемые страницы различаются сильнее, чем предполагалось, либо другой шаблон продолжает передавать противоречащий сигнал. Не запускайте повторную массовую замену без нового наблюдения. Полезный итог аудита — небольшая карта правил с проверенными входами, которую можно повторить после будущего обновления сайта.