(24 голоса, среднее 4.83 из 5)

Что такое robots.txt?

Правильный robots.txt

Файл robots.txt - один из самых важных файлов в техническом обеспечении вашего сайта, и от него будет зависеть дальнейшая судьба вашего сайта в мире, где рулят поисковые машины.

Что такое robots.txt? - это технический файл, который размещен в корневой папке вашего сайта. Его предназначение: - описание исключений для поисковых роботов, т.е. указание какие страницы, файлы не индексировать.

Теги:

Подробнее... Комментарии (41)

Создание robots.txt

Вопросы, которые мы разберем в данной статье:

Что это такое файл robots txt? Как создать правильный robots.txt? Какие правила использовать? Что именно прописывать в файл robots txt? Как правильно запретить индексацию определенного каталога, раздела сайта?

88x31	Код
	<a href="http://rabotaisam.ru/" target="_blank"><img src="http://rabotaisam.ru/modules/mod_ourbutton/images/foto1.png" alt="Работай Сам - мир Joomla! - компоненты, модули, плагины, seo, уроки, секреты HTML и CSS" title="rabotaisam.ru" width="88" height="31" /> </a>
88x31	Код
	<a href="http://rabotaisam.ru/" target="_blank"><img src="http://rabotaisam.ru/modules/mod_ourbutton/images/foto2.png" alt="Работай Сам - мир Joomla! - компоненты, модули, плагины, seo, уроки, секреты HTML и CSS" title="rabotaisam.ru" width="88" height="31" /> </a>

Работай Сам - компоненты, модули, плагины, seo, уроки Joomla

Что такое robots.txt?

Правильный robots.txt

Создание robots.txt