ТвойWeb :: Версия для печати :: Стандартный файл robots.txt

1. AdmninsCluba - 24 Ноября, 2008 - 10:57:12 - перейти к сообщению

Стандартный файл robots.txt для ТвойWeb.

Выложите пожалуйста скрин, кто использует. Закатив глазки

2. Axel Breitung - 24 Ноября, 2008 - 11:38:40 - перейти к сообщению

AdmninsCluba, такой подойдет? http://tvoyweb.ru/robots.txt
Подмигивание

3. AdmninsCluba - 24 Ноября, 2008 - 12:08:09 - перейти к сообщению

Axel Breitung пишет:

такой подойдет?

Вполне, правда у меня, форум лежит в корне. Пойду ковырять. Выложу свою версию, если будут расхождения.
Спасибо А?!

4. Axel Breitung - 24 Ноября, 2008 - 13:28:38 - перейти к сообщению

User-agent: *
Disallow: /cgi-bin/
Disallow: /im/
Disallow: /postings.php
Disallow: /profile.php
Disallow: /messenger.php
Disallow: /loginout.php
Disallow: /post.php
Disallow: /printpage.php
Disallow: /search.php
Disallow: /tools.php

5. AdmninsCluba - 24 Ноября, 2008 - 14:18:42 - перейти к сообщению

Закрываем:

Disallow: /im/
Disallow: /anna/
Disallow: /admin/
Disallow: /post.php
Disallow: /cgi-bin/
Disallow: /tools.php
Disallow: /search.php
Disallow: /profile.php
Disallow: /postings.php
Disallow: /register.php
Disallow: /loginout.php
Disallow: /postings.php
Disallow: /printpage.php
Disallow: /messenger.php
Disallow: /rss_lastposts.php
Disallow: /listattachedfiles.php

Файлы, которые не нужно закрывать.

/forums.php/
/topic.php/

ИХМО

6. Axel Breitung - 24 Ноября, 2008 - 14:38:12 - перейти к сообщению

AdmninsCluba пишет:

Disallow: /anna/

Это только для этого форума... Ну конечно если и у вас не тпапочки с таким названием Радость