про дубли

V0
На сайте с 22.10.2009
Offline
65
353

Экспериментирую. Вставил в блог WP 4 уник статьи.

Яндекс проиндексил такие тайтлы:

1 - Index of

2 - //site.ru/new/q.txt

3 - Index of /new

4 - Index of /new/img

5 - Index ofперевод

6 - site.ru/new/imageparser.php

Роботс тхт добавил такой:

User-agent: *

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: */trackback

Disallow: */*/trackback

Disallow: */*/feed/*/

Disallow: */feed

Disallow: /*?*

User-agent: Yandex

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: */trackback

Disallow: */*/trackback

Disallow: */*/feed/*/

Disallow: */feed

Disallow: /*?*

Что сделать, чтоб индексировались только странички с контентом?

Usatyi1986
На сайте с 04.06.2008
Offline
134
#1

У меня вот это ещё прописано:

Allow: /wp-content/uploads

Disallow: /feed

Disallow: /comments

Disallow: */comments

Disallow: /tag

Всё зависит от вашего ЧПУ, но наверно, если хотите только странички со статьями придется категории также закрывать

Disallow: /category

пройти через людей никого не толкнув
V0
На сайте с 22.10.2009
Offline
65
#2

comments закрыт из-за спамеров или там просто нет у Вас контента?

Usatyi1986
На сайте с 04.06.2008
Offline
134
#3

Из-за спамеров конечно, но и контент там вряд ли появится

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий