Promodo CMS

Работа с файлом robots.txt

При индексации содержимого страниц сайта поисковые роботы заносят полученную информацию в свои базы данных (индексная база поисковой системы, или же просто «индекс»).

Файл robots.txt используется для частичного управления индексированием сайта поисковыми роботами. Этот файл состоит из набора инструкций для поисковых машин, при помощи которых можно задать файлы, страницы или каталоги сайта, которые не должны индексироваться.

Файл robots.txt может использоваться для указания расположения файла и может показать, что именно нужно, в первую очередь, проиндексировать поисковому роботу.

Компонент «Работа с файлом robots.txt» предназначен для того, чтобы облегчить редактирование файла robots.txt, поэтому предоставлена возможность его редактирования прямо из панели администратора.

Как работать с компонентом можно ознакомиться на странице «Работа с файлом robots.txt».


Почитать еще о Promodo CMS

Promodo CMS

Самая новая версия Promodo CMS доступна для скачивания

Скачать Promodo CMS