Стандартный файл robots.txt для ТвойWeb.
Выложите пожалуйста скрин, кто использует.
1. AdmninsCluba - 24 Ноября, 2008 - 10:57:12 - перейти к сообщению
2. Axel Breitung - 24 Ноября, 2008 - 11:38:40 - перейти к сообщению
AdmninsCluba, такой подойдет? http://tvoyweb.ru/robots.txt
3. AdmninsCluba - 24 Ноября, 2008 - 12:08:09 - перейти к сообщению
Axel Breitung пишет:
такой подойдет?
Вполне, правда у меня, форум лежит в корне. Пойду ковырять. Выложу свою версию, если будут расхождения.
Спасибо
4. Axel Breitung - 24 Ноября, 2008 - 13:28:38 - перейти к сообщению
User-agent: *
Disallow: /cgi-bin/
Disallow: /im/
Disallow: /postings.php
Disallow: /profile.php
Disallow: /messenger.php
Disallow: /loginout.php
Disallow: /post.php
Disallow: /printpage.php
Disallow: /search.php
Disallow: /tools.php
Disallow: /cgi-bin/
Disallow: /im/
Disallow: /postings.php
Disallow: /profile.php
Disallow: /messenger.php
Disallow: /loginout.php
Disallow: /post.php
Disallow: /printpage.php
Disallow: /search.php
Disallow: /tools.php
5. AdmninsCluba - 24 Ноября, 2008 - 14:18:42 - перейти к сообщению
Закрываем:
Disallow: /im/
Disallow: /anna/
Disallow: /admin/
Disallow: /post.php
Disallow: /cgi-bin/
Disallow: /tools.php
Disallow: /search.php
Disallow: /profile.php
Disallow: /postings.php
Disallow: /register.php
Disallow: /loginout.php
Disallow: /postings.php
Disallow: /printpage.php
Disallow: /messenger.php
Disallow: /rss_lastposts.php
Disallow: /listattachedfiles.php
Файлы, которые не нужно закрывать.
/forums.php/
/topic.php/
ИХМО
Disallow: /im/
Disallow: /anna/
Disallow: /admin/
Disallow: /post.php
Disallow: /cgi-bin/
Disallow: /tools.php
Disallow: /search.php
Disallow: /profile.php
Disallow: /postings.php
Disallow: /register.php
Disallow: /loginout.php
Disallow: /postings.php
Disallow: /printpage.php
Disallow: /messenger.php
Disallow: /rss_lastposts.php
Disallow: /listattachedfiles.php
Файлы, которые не нужно закрывать.
/forums.php/
/topic.php/
ИХМО
6. Axel Breitung - 24 Ноября, 2008 - 14:38:12 - перейти к сообщению
AdmninsCluba пишет:
Disallow: /anna/
Это только для этого форума... Ну конечно если и у вас не тпапочки с таким названием