Лезут дубли в WP не получается закрыть

12
Yvan
На сайте с 15.04.2010
Offline
55
945

Лезут дубли, в основном в урлах - урл сайта/урл страницы/feed/

Сейчас делаю методом тыка, пробою разные варианты:

Disallow: */feed/, Disallow: /feed/ почему-то не работает, вылезло также /comments/feed/. На Disallow: */? тоже нет реакции, лезут ?feed=rss2 и /?replytocom=... Disallow: /page/* - тоже не работает:(

Направьте на правильное решение! Можно за вебмани....

Wazzuuuuup
Z6
На сайте с 27.06.2011
Offline
77
#1

Попробуйте

Disallow: /*feed

Disallow: /*?

Проверяйте сразу в инструментах для вебмастеров, подставляете адрес проблемной страницы и сразу видите произошла ли блокировка.

Yvan
На сайте с 15.04.2010
Offline
55
#2
zz6666:
Попробуйте
Disallow: /*feed
Disallow: /*?

Проверяйте сразу в инструментах для вебмастеров, подставляете адрес проблемной страницы и сразу видите произошла ли блокировка.

Спасибо, проверяю например страницы с урл сайта/урл страницы/feed/ выдаёт - "Заблокировано по строке 20: Disallow: */feed/
Распознается в качестве каталога; у некоторых файлов могут быть другие ограничения"
.

Получается всё правильно, но в вебмастерс такие страницы лезут как ошибки сканирования хотя

Disallow: */feed/ прописан давно. :(

Z6
На сайте с 27.06.2011
Offline
77
#3

Я по поводу ошибок сканирования писала Платонам, мне ответили, что такие страницы со временем сами выпадут, либо, если я хочу ускорить их выпадение, следует воспользоваться формой удаления url

Yvan
На сайте с 15.04.2010
Offline
55
#4
zz6666:
Я по поводу ошибок сканирования писала Платонам, мне ответили, что такие страницы со временем сами выпадут, либо, если я хочу ускорить их выпадение, следует воспользоваться формой удаления url

Ох, блин я забыл указать, я про гугл говорю). Но спасибо за наводку с проверкой страниц, помогает вроде...

A
На сайте с 17.08.2010
Offline
100
#5
Yvan:
Спасибо, проверяю например страницы с урл сайта/урл страницы/feed/ выдаёт - "Заблокировано по строке 20: Disallow: */feed/
Распознается в качестве каталога; у некоторых файлов могут быть другие ограничения"
.
Получается всё правильно, но в вебмастерс такие страницы лезут как ошибки сканирования хотя
Disallow: */feed/ прописан давно. :(

Запрет стоит , а дубли все равно лезут

Yvan
На сайте с 15.04.2010
Offline
55
#6
alexsanris:
Запрет стоит , а дубли все равно лезут

Отлично...

Yvan добавил 27.08.2011 в 08:55

zz6666:
Попробуйте
Disallow: /*feed
Disallow: /*?

Disallow: /*? для яндекс подходит. На Disallow: /?*, Disallow: */? яндекс не реагирует... Спасибо ещё раз.

promomaniac
На сайте с 10.03.2011
Offline
160
#7

Оптимальный роботс для ВП.


User-agent: *
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /xmlrpc.php
Disallow: /wp-content/uploads
Disallow: /wp-content/themes
Disallow: /trackback/
Disallow: /tag/
Disallow: /feed/
Disallow: */*/feed/*/
Disallow: */feed
Disallow: */*/feed
Disallow: /*?*
Disallow: /?feed=
Disallow: /?s=
Sitemap: http://www.ru/sitemap.xml.gz
Sitemap: http://www..ru/sitemap.xml

User-agent: Yandex
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /xmlrpc.php
Disallow: /wp-content/uploads
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback/
Disallow: /tag/
Disallow: /feed/
Disallow: */*/feed/*/
Disallow: */feed
Disallow: */*/feed
Disallow: /?feed=
Disallow: /*?*
Disallow: /?s=
Host: www..ru
Меня смущает, что колода плохо перетасована, но лишь до тех пор, пока мне не придет хорошая карта. © Джонатан Свифт.
Yvan
На сайте с 15.04.2010
Offline
55
#8

promomaniac Спасибо, только строка Disallow: /wp-content/uploads запрещает индексацию картинок - если я правильно понимаю... И страницы открыты...

promomaniac
На сайте с 10.03.2011
Offline
160
#9

У меня проблем нет.

satellitmaker
На сайте с 04.08.2011
Offline
90
#10

а что закрывает эта строка

Disallow: /?s=
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий