[Вопрос] Создал robots.txt для своего форума, проверьте пожалуйста!

[dhonchik]

Здрасте всем, стоит булка 3.8.6, создал робот тхт вот такой)

PHP код:

User-agent:    *
Disallow:    /forum/clientscript/
Disallow:    /forum/cpstyles/
Disallow:    /forum/customavatars/
Disallow:    /forum/customgroupicons/
Disallow:    /forum/customprofilepics/
Disallow:    /forum/images/
Disallow:    /forum/includes/
Disallow:    /forum/signaturepics/
Disallow:    /forum/clear.gif
Disallow:    /forum/ajax.php
Disallow:    /forum/album.php
Disallow:    /forum/announcement.php
Disallow:    /forum/attachment.php
Disallow:    /forum/calendar.php
Disallow:    /forum/converse.php
Disallow:    /forum/cron.php
Disallow:    /forum/editpost.php
Disallow:    /forum/external.php
Disallow:    /forum/faq.php
Disallow:    /forum/global.php
Disallow:    /forum/group.php
Disallow:    /forum/group_inlinemod.php
Disallow:    /forum/groupsubscription.php
Disallow:    /forum/infraction.php
Disallow:    /forum/inlinemod.php
Disallow:    /forum/joinrequests.php
Disallow:    /forum/login.php
Disallow:    /forum/member.php
Disallow:    /forum/member_inlinemod.php
Disallow:    /forum/memberlist.php
Disallow:    /forum/menuimg.php
Disallow:    /forum/moderation.php
Disallow:    /forum/moderator.php
Disallow:    /forum/newattachment.php
Disallow:    /forum/newreply.php
Disallow:    /forum/newthread.php
Disallow:    /forum/online.php
Disallow:    /forum/payment_gateway.php
Disallow:    /forum/payments.php
Disallow:    /forum/picture_inlinemod.php
Disallow:    /forum/picturecomment.php
Disallow:    /forum/poll.php
Disallow:    /forum/posthistory.php
Disallow:    /forum/postings.php
Disallow:    /forum/private.php
Disallow:    /forum/profile.php
Disallow:    /forum/register.php
Disallow:    /forum/report.php
Disallow:    /forum/reputation.php
Disallow:    /forum/search.php
Disallow:    /forum/sendmessage.php
Disallow:    /forum/showgroups.php
Disallow:    /forum/subscription.php
Disallow:    /forum/threadrate.php
Disallow:    /forum/usercp.php
Disallow:    /forum/usernote.php
Disallow:    /forum/visitormessage.php

Host:        pescups.ru

Sitemap:        http://pescups.ru/forum/sitemap_index.xml.gz 


Вот что выдаёт яшка при добавлении



А вот это гугл



Всё ли правильно?)

[old]

с vbsupport скопипастите, в чем проблема то?
http://vbsupport.org/robots.txt

[dhonchik]

old, спс) забрал его)

[dhonchik]

нет, там немного не то что мне нужно, я составлял сам и исключил какие по моему мнению нужно)

мне главное знать, мне яшка и гугл при добавлении судя по скринам ошибок не выдали?) у вас также?)

[old]

у вас там нет ошибок, только вот зачем закрывать это

Disallow:****/forum/includes/

и т.п папки, includes и его содержимое не индексируется, и не просматривается, даже если указать полный путь к файлу - например "includes/adminfunctions.php"

[dhonchik]

и т.п папки, includes и его содержимое не индексируется, и не просматривается, даже если указать полный путь к файлу - например "includes/adminfunctions.php"

По не опытности) но меня одно радует что составил правильно, да, может лишки закрыл, но не страшно) главное что всё самое нужное открыто)

[dhonchik]

Да и админку и модерку нельзя сувать как я понял туда, на этом можно погореть, если я правильно понял и не запихал в робота)

[Sampler]

Да и админку и модерку нельзя сувать как я понял туда, на этом можно погореть, если я правильно понял и не запихал в робота)

почему нельзя? Можно.
Если админка защищена, то можно спокойно вписать в роботс, и не о чём не беспокоиться.

[old]

тогда смысл их переименовывать?

[dhonchik]

Не мужики, я щитаю что админку и модерку лучше нигде не палить никак))

[Sampler]

тогда смысл их переименовывать?

переименовка админки и модерки не такая надёжная защита, нежели дополнительный пароль на них.

[old]

речь не о дополнительном паролирование админки/модерки, а о том, что смысл тогда их переименовывать, можно ведь поставить basic auth и все, не так ли?