Проверьте содержание до правила
Составьте пары адресов с одним изменённым параметром. Смотрите не только заголовок, но и ассортимент, цену, язык, страницу пагинации и другие значимые данные. Если параметр меняет предложение, нельзя считать его мусором без отдельного решения.
Clean-param относится к Яндексу и не заменяет общую стратегию canonical для других систем. Она также не является защитой закрытых данных и не равна Disallow.
Учебный пример ref и color
На вымышленном сайте ref обозначает только источник перехода, а color действительно меняет подборку. Для области /catalog/ рассматривается правило Clean-param: ref /catalog/ . Это пример, а не готовый robots.txt любого магазина.
После исключения ref значимый color должен сохраняться. Если реальный ref включает персональную скидку или другой контент, условия примера уже не выполняются.
| Учебный URL | Сравниваемый адрес | Решение примера |
|---|---|---|
| /catalog/?color=red&ref=a | /catalog/?color=red&ref=b | ref не меняет подборку |
| /catalog/?color=red | /catalog/?color=blue | color меняет подборку |
| /other/?ref=a | Вне /catalog/ | Проверить область отдельно |
Сверьте синтаксис и автоматические исключения
В директиве имена нескольких параметров разделяются &, затем при необходимости задаётся префикс пути. Применение к каталогу не следует автоматически переносить на другой раздел. Группы роботов и другие правила robots.txt проверяют в совокупности.
Справка Яндекса перечисляет отслеживающие параметры, которые система может исключать автоматически. Прежде чем добавлять ручные правила для UTM, посмотрите фактическое состояние и причину исключения в инструментах.
Как принять изменение
Сохраните файл до и после, список пар URL и результат проверки для значимых и незначимых параметров. Убедитесь, что фильтры продолжают работать для посетителей и полезные страницы доступны.
Затем наблюдайте обход и обработку адресов в Яндексе. Корректное правило не гарантирует дату удаления копий или рост позиций. Для Google нужно отдельное согласованное решение, а не предположение о поддержке Clean-param.
Продолжить: Проверить параметры каталога; Программа видимости: состав и условия