24
Ноя
Что нужно знать при составлении Robots.txt
в Статьи
Комментарии
В первую очередь стоит отметить, что файл Robots.txt представляет собой четкую инструкцию для поисковых систем, какие именно команды стоит им выполнять. Кроме того, именно в этом текстовом документе указывается, что конкретно индексировать, а что индексировать не стоит.