Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Как сделать, чтобы робот не индексиовал раздел, но шёл дальше

12
kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#11
mat1441:
Зачем дописывать?

Я откуда знаю? Ты сам написал:

mat1441:
но так придется каждую статью разрешать.

Лёгких путей не ищем? Похвально. Короче, в школу... :D

M1
На сайте с 15.11.2007
Offline
127
mat1441
#12

Ну это я писал в первом варианте, а вот за то, что:

Allow: /*.html

kimberlit:
Не сработает... :D

Сам себя в школу отправишь? 😂

Аllow: 2012/10/статья1.html

И это будет работать, с правкой роботс и прочим гемором, но ведь будет. И без всяких /blog/

Не стесняйся, приглашай.

ДБД в ру-дорах. Как Search Console - Удобство Биржа ссылок Uniplace (beta)
kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#13
mat1441:
Сам себя в школу отправишь?

Ты по ссылке ходил хоть? Про совместное использование директив читал? Про сортировку по длине префикса? А?

mat1441:
Disallow: /blog/2012/
Allow: /*.html

Посчитай длину, отсортируй и .... в школу. :D

kimberlit:
Аllow: 2012/10/статья1.html
И это будет работать, с правкой роботс и прочим гемором, но ведь будет. Хотя, конечно лучше Аllow: /2012/10/статья1.html
И без всяких /blog/

Ппц. У него урл начинаются с /blog/. Завязывай тупить уже.

Подскажите это ошибка какая-то Все вопросы по robots.txt Продвижение сайта
M1
На сайте с 15.11.2007
Offline
127
mat1441
#14

Вот ты упертый😂

Все что я предложил - работает, ты говоришь, что ничего не будет работать. Ты бы сам правила перечитал для разнообразия. Да и проверил. Да и признал, что не прав.

kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#15
mat1441:
Вот ты упертый
Все что я предложил - работает

Аllow: /2012/10/статья1.html - не работает

Причина: адрес начинается с /blog/. Смотрим стартпост.

site,com/blog/2012/10/статья1.html

Будет работать только так: Аllow: /blog/2012/10/статья1.html

Disallow: /blog/2012/

Allow: /*.html - не работает

Причина: урл попадает под обе директивы, идёт сортировка директив по длине префикса по возрастанию, последняя будет - Disallow: /blog/2012/

Совместное использование директив.

Директивы Allow и Disallow из соответствующего User-agent блока сортируются по длине префикса URL (от меньшего к большему) и применяются последовательно. Если для данной страницы сайта подходит несколько директив, то выбирается последняя в порядке появления в сортированном списке. Таким образом порядок следования директив в файле robots.txt не влияет на использование их роботом.

http://help.yandex.ru/webmaster/?id=996567#996571

Все вопросы по robots.txt Подскажите это ошибка какая-то Все вопросы по robots.txt
M1
На сайте с 15.11.2007
Offline
127
mat1441
#16

😂

Был неправ. Собираю портфель... 🙅😂

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий