Только за сегодняшнее утро шесть человек спросили, как создать файл Robots.txt.
Спрашивали? Отвечаем.
Прежде чем перейду к ответу, хочу еще раз обратить Ваше внимание на новую рубрику: Ответы (видео). Уверен, что очень скоро здесь будет очень много маленьких полезных видео уроков. Задавайте вопросы на странице «Вопросы и Ответы» и следите за новыми статьями и видео ответами.
Что такое файл Robots.txt и как его создать?
Сегодня я решил не записывать для Вас ответ, а воспользоваться уже готовым уроком от Михаила Шакина. Если помните я уже писал о Shakine в статье «Три лучших блога о SEO».
Файл Robots.txt создается в корневой папке сайта и служит информационным указателем для Поисковой системы Яндекс, показывая какие страницы индексировать, а какие исключить из индекса.
Поисковой системе Google данный файл не нужен. Ей достаточно найти на сайте sitemap.xml. Как создается «сайтмап» Вы видели в моих бесплатных уроках по созданию и настройке сайта. Пример такой страницы на сайте Тринити: http://trynyty.ru/sitemap.xml
Как создать файл Robots.txt вы узнаете из видео урока.
Как разместить файл в корневую папку, Вы должны уже знать, так как мы говорили о подобном в уроке: Как добавить свой сайт в Яндекс.вебмастер.
Для тех, же кто все равно не поймет, как правильно создать файл, дам совет:
найдите уважаемого вами SEO-шника работающего на ВордПрессе, посмотрите его файл Роботс, скопируйте к себе с изменением урла (адреса) на свой.
Владимир Беляев
P.S. Прошу реттвиты и соц.сети для этой статьи.
11 Responses to Что такое файл Robots.txt и как его создать (видео)