Alex LM — да, теперь и у меня блог! :)» Blog Archive » robots.txt для vBulletin (индексация форума vBulletin)

robots.txt для vBulletin (индексация форума vBulletin)

Движки, Форумы Добавить комментарий

У каждого движка своя специфика, так и у форумов на движке vBulletin есть своя структура.
Как известно, нехорошо когда поисковый бот, бродит где попало… Ломится к Вам в админку, пытается скачать вложения, прочитать приватные сообщения :)
Собственно для этого и существует robots.txt, в котором можно прописать рекомендации для поисковиков.
В общем, ниже вариант robots.txt для vBulletin, кому надобно юзайте… ;)
Пример robots.txt:
User-agent: *
Disallow: /index.php (да, да это для Яндекса ;) )
Disallow: /attachment.php
Disallow: /editpost.php
Disallow: /misc.php
Disallow: /moderator.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /online.php
Disallow: /postings.php
Disallow: /private.php
Disallow: /printthread.php
Disallow: /report.php
Disallow: /search.php
Disallow: /sendtofriend.php
Disallow: /threadrate.php Disallow: /usercp.php
Disallow: /images/
Disallow: /go.php
Disallow: /cgi-bin/ Host: ВАШ-ДОМЕН (или www.ВАШ-ДОМЕН)
Sitemap: http://ВАШ-ДОМЕН/sitemap_index.xml.gz (Гуглу можно скормить карту Вашего форума… не только можно, но и нужно! Если у Вас она есть конечно… :) )


P.S — не забывайте убрать код в скобочках и сами скобочки.
.. http://www.yandex.ru/cgi-bin/test-robots (можно потестить, видит ли Ваш robots.txt Яндекс)



Комментировать

You must be logged in to оставить комментарий.



Dedicated Servers Themes and Free Wordpress Themes