Как правильно составить Robots.txt новичку? Отличное решение для WordPress и других движков.

Здравствуйте уважаемые читатели zarden.ru!

Давно обещал и вот выполняю то, что обещал :-) Сегодня речь пойдет о том, как грамотно создать файл Robots.txt, который необходим каждому блогу или сайту для правильной индексации его поисковиками. Вернее пошаговая инструкция будет не о том, как его создавать, а о том, как готовый файл просто вставить в корневой каталог. Существует огромное количество инструкций для его создания, я же предлагаю просто скопировать приведённый ниже текст самого файла, заменив yourdomain.ru, на домен своего сайта.


Для начала вам нужно будет скачать, совершенно бесплатно, плагин KB Robots.txt, его ссылка находится здесь.

Установка этого плагина, я надеюсь, у вас не вызовет каких-либо осложнений. Как вариант вы можете установить плагин KB Robots.txt, зайдя Панель управления \Плагины\Добавить плагин и в окошке поиска вписать KB Robots.txt.

Теперь, когда плагин установлен и активирован, нужно зайти в Панель управления\Настройки\ KB Robots.txt и над окошком sumbit вставить текст файла, который приведен ниже.

  • User-agent: YandexDisallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /wp-trackback
    Disallow: /wp-feed
    Disallow: /wp-comments
    Disallow: */trackback
    Disallow: */feed
    Disallow: */comments
    Host: www.yourdomain.ru

    User-agent: *
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /wp-trackback
    Disallow: /wp-feed
    Disallow: /wp-comments
    Disallow: */trackback
    Disallow: */feed
    Disallow: */comments

    Sitemap: http://yourdomain.ru/sitemap.xml

Где, повторюсь, yourdomain.ru нужно заменить на домен вашего сайта.

Теперь осталось сохранить и все, ваш файл KB Robots.txt создан и установлен.

Если же ваш сайт не на движке WordPress. Тогда текст файла нужно сохранить с форматом .txt и сохранить его в корневой директории.

Ну а так вроде бы все, удачи. Если что не понятно – пишите в комментариях.

Всегда может возникнуть непонимание того или иного момента, не стесняйтесь и задавайте любые вопросы по данной теме. Пишите их в комментариях, а я обязательно, на них отвечу. Если вы не хотите пропустить новые материалы этого сайта, подпишитесь на рассылку новостей по e-mail. Это можно сделать здесь. Отписаться от рассылки вы всегда сможете кликнув мышкой на предлагаемую ссылку. До встречи, друзья.

Поделиться в соц. сетях

Опубликовать в Google Buzz
Опубликовать в Google Plus
Опубликовать в LiveJournal
Опубликовать в Мой Мир
Опубликовать в Одноклассники

 

  1. На Ucoz сайте так не получается как можно сделать помогите?

  2. Это инструкция для сайтов на WordPress/ Лучше зарабатывать на wordpress. По вашему вопросу seolib.ru/script/robots/

Оставить комментарий


Примечание - Вы можете использовать эти HTML tags and attributes:
<a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>

Это не спам.