Для качественного управления индексаций сайта нужно учитывать много моментов.
Один из них – контроль за загрузкой параметрических страниц. Для этого поисковики предлагают использовать в robots.txt директиву Clean Param.
При настройке проектов мы используем эти рекомендации и на практике видим большую пользу от этого.
Однако, не всегда очень просто и быстро выявить все параметры, которые генерит движок сайта. Для этого мы разработали простенький бесплатный, но очень полезный инструмент, выявляющий все параметры в страницах сайта.
Вы выгружаете из Яндекс.Вебмастера в файл .csv загруженные поисковиком страницы и загружаете этот файл в нас скрипт. Несколько минут обработки и получите готовые директивы Clean Param для вашего проекта.
Удачи Вам в продвижении!
