Как выкинуть 80% страниц из индекса?

12
4F
На сайте с 13.01.2008
Offline
144
1282

Доброй ночи.

Есть региональный сайт на wp, на котором в сумме страниц 30. Сайту скоро будет год, контент обновляется крайне редко (на сайте продаются товары => есть страницы товаров, основные страницы о доставке, акциях и т.п. и страницы со статьями). По всем основным запросам - и в яндексе и в гугле топ 1-2, но при этом в гугле в индексе более 200 страниц, из которых 80% имеют вид:

адрес_сайта.ru/страница/feed

При этом снипет каждой такой страницы выглядит так:

Описание веб-страницы недоступно из-за ограничений в файле robots.txt. Подробнее...

Все фиды, архивы, трэкбэки, и т.п. в роботах прописаны с момента создания сайта. От сюда вопрос - каким образом можно эти страницы из индекса выкинуть?

Заранее спасибо.

Straifer1
На сайте с 23.05.2007
Offline
164
#1
4fun.fantasy:
Доброй ночи.

Есть региональный сайт на wp, на котором в сумме страниц 30. Сайту скоро будет год, контент обновляется крайне редко (на сайте продаются товары => есть страницы товаров, основные страницы о доставке, акциях и т.п. и страницы со статьями). По всем основным запросам - и в яндексе и в гугле топ 1-2, но при этом в гугле в индексе более 200 страниц, из которых 80% имеют вид:

адрес_сайта.ru/страница/feed


При этом снипет каждой такой страницы выглядит так:



Все фиды, архивы, трэкбэки, и т.п. в роботах прописаны с момента создания сайта. От сюда вопрос - каким образом можно эти страницы из индекса выкинуть?

Заранее спасибо.

Гугл роботс только для сканирования использует, а так как в роботс вышеописанные страницы запрещены, он их не может просканировать. Выкинуть же из индекса их можно убрав запрет в роботс и разместив на этих страницах внутри head:

<meta name="robots" content="noindex,follow" /> или в частности для гугла - <meta name="googlebot" content="noindex,follow" />

S
На сайте с 26.11.2012
Offline
3
#2

Сделайте запрос на удаление каталога в ВМТ предварительно заблокировав его в роботсе.

4F
На сайте с 13.01.2008
Offline
144
#3
Straifer1:
Выкинуть же из индекса их можно убрав запрет в роботс и разместив на этих страницах внутри head:

<meta name="robots" content="noindex,follow" /> или в частности для гугла - <meta name="googlebot" content="noindex,follow" />

Увы, эти страницы не имеют head, их код выглядит так:


<?xml version="1.0" encoding="UTF-8"?><rss version="2.0"
xmlns:content="http://purl.org/rss/1.0/modules/content/"
xmlns:dc="http://purl.org/dc/elements/1.1/"
xmlns:atom="http://www.w3.org/2005/Atom"
xmlns:sy="http://purl.org/rss/1.0/modules/syndication/"
>
<channel>
<title>тут тайтл</title>
<atom:link href="http://мой_сайт.ru/название_статьи/feed/" rel="self" type="application/rss+xml" />
<link>http://мой_сайт.ru/название_статьи/</link>
<description>Тут описание страницы</description>
<lastBuildDate></lastBuildDate>
<sy:updatePeriod>hourly</sy:updatePeriod>
<sy:updateFrequency>1</sy:updateFrequency>
<generator>http://wordpress.org/?v=</generator>
</channel>
</rss>
Сделайте запрос на удаление каталога в ВМТ предварительно заблокировав его в роботсе.

В ВМТ такого не нашел, ткните пальцем плиз. Вижу только аналог (файл прикрепил).

jpg mavik.jpg
B3
На сайте с 19.03.2009
Offline
40
#4
4fun.fantasy:

В ВМТ такого не нашел, ткните пальцем плиз. Вижу только аналог (файл прикрепил).

Именно то, что на скрине Вам и нужно. Введите нужный адрес страницы или каталога для удаления с индекса, предварительно закрыв их в Robots.txt.

E
На сайте с 21.09.2009
Offline
283
#5
4fun.fantasy:
В ВМТ такого не нашел, ткните пальцем плиз. Вижу только аналог (файл прикрепил).

Сначала почитайте Когда НЕ следует использовать инструмент удаления URL

R
На сайте с 13.04.2009
Offline
159
#6

Пару лет назад дописывал в robots, страницы потихоньку выпали.

Robots.txt:


Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
4F
На сайте с 13.01.2008
Offline
144
#7
rushter:
Пару лет назад дописывал в robots, страницы потихоньку выпали.
Robots.txt:

Это всё прописано.

Trafikgon
На сайте с 24.10.2008
Offline
174
#8

Проще сделать сайт недоступным.

. (#)
4F
На сайте с 13.01.2008
Offline
144
#9
Trafikgon:
Проще сделать сайт недоступным.

Потерять позиции и все страницы ради переиндексации, которая к тому же ещё и не факт что изменит текущую ситуацию?) Это не проще, это глупее.

E
На сайте с 21.09.2009
Offline
283
#10

4fun.fantasy, Вам только так как во 2 сообщении описано. СМС вордпресс?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий