Неуклонно падает кол-во страниц в поиске

[Удален]

1 сентября 2010, 12:27

#11

Страниц в поиске 1217

Загружено роботом 5943

Исключено роботом 2702

хм...

129

xpycteamset

1 сентября 2010, 12:54

#12

Disallow: /viewtopic.php?p=*

Disallow: /viewtopic.php?f=*&t=*&start=0$

Disallow: /viewforum.php?f=*&start=0$

Disallow: /viewtopic.php?f=*&t=*&view=next

Disallow: /viewtopic.php?f=*&t=*&view=previous

вот этим все сказано ☝

читаем

[Удален]

1 сентября 2010, 17:01

#13

Может вообще удалить роботс.тхт ?

Или он смертельно необходим форуму, что скажете?:)

129

xpycteamset

2 сентября 2010, 07:43

#14

User-Agent: *
Disallow:
Host: имя домена

сделай вот такой робот и непарся...