Глоссарий
robots.txt
Файл с рекомендациями для роботов: что можно обходить, что лучше не тратить краулинг.
robots.txt — это не «запрет индексации навсегда», а управление обходом. Закрыли URL в robots — робот может не увидеть даже noindex на странице.
Типичная ошибка: закрыть нужные каталоги, CSS/JS, или весь сайт после переноса.
Служебные параметры и корзину часто ограничивают. Коммерческие разделы — почти никогда.
Если термин всплыл в отчёте подрядчика или в аудите — могу разобрать на вашем сайте: что это значит именно для вашей ниши и что делать дальше.