Индексация
Как отсечь параметры сессии из обхода

Если каждая сессия меняет адрес вида /catalog?sid=..., робот видит множество URL с одним и тем же содержимым. Сначала уберите причину в ссылках сайта, затем подскажите поисковикам, какой адрес считать основным.
Отделите служебный параметр от полезного
Выберите несколько URL из журнала обхода: с разными значениями sid и без него. Сравните основной текст, товары и доступность. Если контент одинаков, это технические варианты одной страницы; если параметр меняет реальное предложение, удалять его без анализа нельзя. Проверьте, попадают ли адреса с sid во внутренние ссылки, sitemap и canonical.
Google советует по возможности не помещать идентификаторы сессии в URL и использовать cookie. Яндекс предлагает Clean-param для параметров, которые не меняют содержимое страницы. Эти рекомендации относятся к техническому sid, а не к фильтру, который создаёт полезную подборку товаров.
Исправьте источник дублирующих адресов
Передайте сессию через cookie, уберите sid из внутренних ссылок и sitemap. Если уже есть внешние ссылки на старые варианты, обеспечьте понятный маршрут к чистому URL; для Яндекса проверьте Clean-param: sid на подходящем пути, для Google — правила обхода ненужных вариантов и канонический URL. Не закрывайте базовую страницу вместе с параметром.
После выкладки сравните выборку из трёх адресов и новые записи журнала. Успех — робот получает чистые ссылки, полезная страница доступна, а число новых sid-вариантов перестало расти. Старые URL могут ещё некоторое время появляться в отчётах; это не повод снова возвращать параметр.
Первоисточники
FAQ
Частые вопросы
Можно ли убрать любой параметр URL?
Нет. Удаляйте только тот, который не меняет полезный контент.
Поддерживает ли Google Clean-param?
Нет, это директива Яндекса; для Google нужны другие сигналы и исправление ссылок.
Что важнее правила robots.txt?
Сначала перестать генерировать внутренние ссылки с новым sid.
Проверьте себя
Вопрос 1 из 2. Результат увидите только вы.
Обсуждение
Какие URL с идентификатором сессии появились в вашем журнале и отличается ли их содержимое от чистого адреса?
Войдите, чтобы оставить комментарий. Читать обсуждение могут все. Комментарии проходят автоматическую и редакционную проверку.