Форум Практика оптимизации Любые вопросы от новичков по оптимизации

sitemap двадцатьпять

123 4
D
На сайте с 12.04.2004
Offline
68
drg
1236

Ghbdtn!

Если я хочу чтобы робот Я и Г индексировали ТОЛЬКО (only) страницы указаные в sitemap.xml, тогда является ли такая запись в robots.txt корректной:

:no:


User-Agent: *

Disallow: /

Sitemap: http://мой_сайт.ua/sitemap.xml

Или весь сайт улетит? :gm:

Oshparennij
На сайте с 14.01.2008
Offline
174
Oshparennij
#1

блин, можно сделать... но уже лень мутиться в коде...

Продам базу email (usa), валид 99%. Пишите в личку.
S2
На сайте с 07.01.2008
Offline
611
Str256
#2

Нет. Страницы возможно будут загружены, но не проиндексированы, так как стоит запрет на индексацию.

Не надо приписывать мне свои выводы, я имею ввиду только то, что написал. Лучшая партнёрка по футболкам/толстовкам (http://partnerka.kolorado.ru/?ref=1921540) Опрос: Проверить текст на уник - как? (/ru/forum/495885)
S
На сайте с 28.10.2005
Offline
314
semenov
#3

Весь улетит

DiAksID
На сайте с 02.08.2008
Offline
236
DiAksID
#4

а метатег с запретом в ненужные страницы вставить?

show must go on !!!...
S
На сайте с 28.10.2005
Offline
314
semenov
#5

Сколько страниц в sitemap?

D
На сайте с 12.04.2004
Offline
68
drg
#6

Ясно, спс. просто нашел подобный пример в хелпе яндекса. Все-таки если возможность запретить все страницы кроме тех что в sitemap?

drg добавил 27.10.2009 в 20:45

semenov:
Сколько страниц в sitemap?

10000 ..................

S2
На сайте с 07.01.2008
Offline
611
Str256
#7
drg:
Все-таки если возможность запретить все страницы кроме тех что в sitemap?

.htaccess Отдавайте 404 по всем ненужным урлам.

D
На сайте с 12.04.2004
Offline
68
drg
#8

А как-нибудь более рационально разве НЕльзя? :(

S
На сайте с 28.10.2005
Offline
314
semenov
#9

А в чем собственно проблема-то?

S2
На сайте с 07.01.2008
Offline
611
Str256
#10
drg:
А как-нибудь более рационально разве НЕльзя?

robots.txt нормально составить...

123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий