Дайте совет по ROBOTS

http://help.yandex.ru/webmaster/?id=996567#1041216

strefapl добавил 10.06.2010 в 13:30

Спасибо, а для данных ссылок вы можете написать указание роботу?

как-то так:

Clean-param: t&p&sid /viewtopic.php

У Вас так только по этим линкам или по всем?

Что за кривой форум такой, не могли же разработчики так сделать.

Еще есть

viewtopic.php?f=4&t=5

viewtopic.php?f=4&p=22

Залил в роботс, проверил яндекс.анализатором, разрешено.

7 раз проверь 1 раз отрежь:)

Шутки с роботом не допускаются

По идеет все вроде ок

Тогда яндекс не будет видеть не-первые страницы тем, имхо. Если p - это страница, а t - топик. По моему самый правильный вариант, это физически удалить все дубли.

Ну во роботс:

User-agent: *

Disallow: /faq.php

Disallow: /mcp.php

Disallow: /memberlist.php

Disallow: /posting.php

Disallow: /report.php

Disallow: /search.php

Disallow: /style.php

Disallow: /ucp.php

Disallow: /viewtopic.php?p=*

Disallow: /viewtopic.php?f=*&t=*&start=0$

Disallow: /viewtopic.php?f=*&start=0$

Disallow: /viewtopic.php?f=*&t=*&view=next

Disallow: /viewtopic.php?f=*&t=*&view=previous

Sitemap: http://vasya.com/sitemap.php



User-agent: Yandex

Disallow: /faq.php

Disallow: /mcp.php

Disallow: /memberlist.php

Disallow: /posting.php

Disallow: /report.php

Disallow: /search.php

Disallow: /style.php

Disallow: /ucp.php

Disallow: /viewtopic.php$

Disallow: /viewtopic.php?p=*

Disallow: /viewtopic.php?f=*&t=*&start=0$

Disallow: /viewtopic.php?f=*&start=0$

Disallow: /viewtopic.php?f=*&t=*&view=next

Disallow: /viewtopic.php?f=*&t=*&view=previous

Disallow: /viewtopic.php?f=*&t=*&start=*&view=viewpoll

Disallow: /viewtopic.php?*&view=viewpoll

Host: vasya.com

Sitemap: http://vasya.com/sitemap.php

Clean-param: sid /index.php

Clean-param: sid /viewforum.php

Clean-param: sid /viewtopic.php

Clean-param: r /index.php

Clean-param: r /viewforum.php

Clean-param: r /viewtopic.php

Clean-param: t&p&sid /viewtopic.php

strefapl добавил 10.06.2010 в 13:51

Так физически удалить-то можно, суть в том, чтобы дальше нормально индексировал.

После апа вообще по пять дублей на каждую страницу.

SID в основном.

Короче, составил руками роботс, тупо, но все равно, зацените.

User-agent: *

Disallow: /faq.php

Disallow: /mcp.php

Disallow: /memberlist.php

Disallow: /posting.php

Disallow: /report.php

Disallow: /search.php

Disallow: /style.php

Disallow: /ucp.php

Disallow: /viewtopic.php?p=*

Disallow: /viewtopic.php?f=*&t=*&start=0$

Disallow: /viewtopic.php?f=*&start=0$

Disallow: /viewtopic.php?f=*&t=*&view=next

Disallow: /viewtopic.php?f=*&t=*&view=previous

Sitemap: http://forum/sitemap.php

User-agent: Yandex

Disallow: /faq.php

Disallow: /mcp.php

Disallow: /memberlist.php

Disallow: /posting.php

Disallow: /report.php

Disallow: /search.php

Disallow: /style.php

Disallow: /ucp.php

Disallow: /viewtopic.php$

Disallow: /viewtopic.php?p=*

Disallow: /viewtopic.php?f=*&t=*&start=0$

Disallow: /viewtopic.php?f=*&start=0$

Disallow: /viewtopic.php?f=*&t=*&view=next

Disallow: /viewtopic.php?f=*&t=*&view=previous

Disallow: /viewtopic.php?f=*&t=*&start=*&view=viewpoll

Disallow: /viewtopic.php?*&view=viewpoll

Disallow: /viewtopic.php?f=*&t=*&p=sid

Disallow: /viewtopic.php?f=*&t=*&p=*&sid

Disallow: /viewtopic.php?f=*&t=*&sid

Disallow: /viewtopic.php?f=*&p=*&sid

Disallow: /viewtopic.php?f=*&t=*&p=&sid

Disallow: /viewtopic.php?f=*&t=*&p

Disallow: /viewtopic.php?f=*&p

Disallow:

Clean-param: f&t&p&sid /viewtopic.php

Clean-param: sid /viewtopic.php

Clean-param: sid /index.php

Clean-param: sid /viewforum.php

Clean-param: r /index.php

Clean-param: r /viewforum.php

Clean-param: r /viewtopic.php

Host: forum

Sitemap: http://forum/sitemap.php

Disallow: /*sid

Disallow: /*sid=* или так, вроде.

Можно использовать clean-param.

http://help.yandex.ru/webmaster/?id=996567#996572 - тут пожалуй всё есть.