Robots.txt

F
На сайте с 22.09.2009
Offline
114
1784

1. Подскажите, как через роботс закрыть от индексации ссылки вида http://site.ru/2011/05/url-statii.html/1-33 т.е когда после урла статьи идет слэш и еще что-то (все что угодно)

2. Откуда такие ссылки берутся в вордпрессе?

LC
На сайте с 06.07.2014
Offline
3
#1
здесь могла быть ваша реклама... :)
F
На сайте с 22.09.2009
Offline
114
#2

спасибо, конечно. но хотелось бы увидеть более конкретный совет, непрограммисту разобраться в этом не просто... тут же не просто запретить все что заканчивается на конкретный набор симвлов

LC
На сайте с 06.07.2014
Offline
3
#3

если я правильно тебя понял, то вот:

User-agent: *

Disallow: /2011/05/url-statii.html/

Host: site.ru

---------- Добавлено 10.07.2014 в 13:34 ----------

либо попробовать так(работоспособность этого варианта я не гарантирую):

User-agent: *

Disallow: /*/*/*.html/*

Host: site.ru

VHS
На сайте с 28.09.2007
Offline
142
VHS
#4

Disallow: *.html/*

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий