Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Allow и Disallow в роботсе - кто как?

NBSerG
На сайте с 04.09.2010
Offline
134
NBSerG
456

короче суть вопроса вот в чем.

создал сайт на джумле на старом домене.

раньше всегда пользовался схемой типа 90% запретить что нужно открыть.

но на этом сайте выскакивают по гуглу старые ссылки и мне кажется проще прописать

Allow что нужно (каталоги/страницы)

и сделать Disallow /

собственно вопрос. кто пользуется такой схемой, как успехи и есть ли раздница может какие то поисковики не сильно любят

п.с. и как тогда прописать allow главной если она /

Изготовление сайтов на Joomla (/ru/forum/726795) Такие деньги можно заработать только здесь!!! (http://goo.gl/k1oTJ) Выиграй Porsche Cayenne! (http://goo.gl/RqHaU)
[Удален]
#1

на сколько я помню, то в роботсе не допустим аллоу

точнее на него ПС не будут обращать внимание

NBSerG
На сайте с 04.09.2010
Offline
134
NBSerG
#2
seowebster:
на сколько я помню, то в роботсе не допустим аллоу

точнее на него ПС не будут обращать внимание

плохо помните

wwwwww
На сайте с 29.04.2011
Offline
195
wwwwww
#3
NBSerG:
собственно вопрос. кто пользуется такой схемой, как успехи и есть ли раздница может какие то поисковики не сильно любят
п.с. и как тогда прописать allow главной если она /

В чем вопрос?

Если проще перечислить то, что можно индексировать, тогда используйте. Если меньше строчек, описывающих что нельзя индексировать - тогда Disallow.

Здесь вопрос скорее в простоте, потому что результат одинаков.

Видишь? Свободная подпись.
NBSerG
На сайте с 04.09.2010
Offline
134
NBSerG
#4
wwwwww:
В чем вопрос?
Если проще перечислить то, что можно индексировать, тогда используйте. Если меньше строчек, описывающих что нельзя индексировать - тогда Disallow.
Здесь вопрос скорее в простоте, потому что результат одинаков.

так а как разрешить главную?

wwwwww
На сайте с 29.04.2011
Offline
195
wwwwww
#5

На самом деле этот вопрос очень интересен и давно занимает меня. Только не хватает времени.

Если обратить внимание на техническую сторону реализации общения сервера и клиента, то нужно отметить, что при обращении к серверу за главной страницей веб-сервер действует согласно правилам, то есть ищет файл "index" или "default" с заданным расширением. Это технически и является главной страницей.

По сути получается, что: 


Allow: /index.php

Allow: /page1.php

...

Disallow:/

Но вот что получится на практите, скорее всего, будет зависить от конкретной реализации бота ПС.

ROOKEE теперь и для Mail.ru запустил поиск по В Google Analytics 4
NBSerG
На сайте с 04.09.2010
Offline
134
NBSerG
#6

потерто...

S
На сайте с 28.10.2005
Offline
318
semenov
#7

> так а как разрешить главную?

Allow: /$

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий