Как запретить индексировать параметр ссылки?

12
imd
На сайте с 23.05.2009
Offline
102
imd
964

В индекс попало куча страниц с ?pop=X вконце урла.

Можно как то сделать в роботсе чтоб ссылки, где есть ?pop=, не индексировались?

Dwarfik
На сайте с 11.10.2008
Offline
152
#1

Disallow: /*?pop=

Наверное так)

6 тип эннеаграммы
dma84
На сайте с 21.04.2009
Offline
168
#2
Dwarfik:
Disallow: /*?pop=
Наверное так)

Без знака "=" (хотя хз, может и без разницы)

В гугле настройки есть в панели вебмастера

imd
На сайте с 23.05.2009
Offline
102
imd
#3
dma84:

В гугле настройки есть в панели вебмастера

там я поставил запрет, но страницы все равно в индексе

Dwarfik
На сайте с 11.10.2008
Offline
152
#4
dma84:
Без знака "=" (хотя хз, может и без разницы)
В гугле настройки есть в панели вебмастера

Так и знал, что если руками наберу, то ошибусь в слове))

А вот про использование "=" ещё ни разу ничего плохого не слышал.

ruizAv
На сайте с 08.06.2004
Offline
67
#5
imd:
там я поставил запрет, но страницы все равно в индексе

может робот еще не заходил? Я именно так удалял ссылки из индекса.

Ink-developer
На сайте с 31.01.2009
Offline
138
#6

Для меня этот robots.txt, вообще загадка, оба поисковика благополучно индексируют все что в нем запрещено. Google пошел дальше проиндексировал сам файл robots.txt.

Как бороться не знаю, может сайт такой вкусный что они не могут сдержаться?

Содержание robots.txt:

User-agent: *

Disallow: /img/

Disallow: /file/

Host: sitename.ru

Все флеш из папки img индексируются и все что в папке file так же индексируется, как побороть? По моим наблюдениям на robots.txt вообще поисковики не смотрят или может где ошибка? Хотя яндекс вебмастер говорит при проверке что URL запрещен и тут же добавляет его в индекс.

Dwarfik
На сайте с 11.10.2008
Offline
152
#7

Ink-developer, у меня несколько минут истерика уже)) Возможно, это благотворное влияние пятницы и усталость, но ваша фраза меня покорила))

Для меня этот robots.txt, вообще загадка, оба поисковика благополучно индексируют все что в нем запрещено. Google пошел дальше проиндексировал сам файл robots.txt.

Не имею ввиду никакой иронии или сарказма, просто очень понравилось))

Ink-developer
На сайте с 31.01.2009
Offline
138
#8

Все пишут что не могут вогнать в индекс страницы, у меня вопрос как их выкинуть? Как выкинуть robots.txt из индекса и флеш баннеры? 😂

Alipapa
На сайте с 01.02.2008
Offline
234
#9

Добавьте в robots.txt:

Clean-param: pop
Биржа фриланса - простая и удобная (http://kwork.ru/ref/2541)
Ink-developer
На сайте с 31.01.2009
Offline
138
#10

Подскажет кто, как запретить индексацию всех страниц в папке, например http://sitename/file/ ?

robots.txt вообще работает, особенно в Google интересно учитывают ли его?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий