Форум Поисковые системы Google

вебмастер тулс и тайтл главной. 2 вопроса.

12
S
На сайте с 28.10.2005
Offline
314
semenov
#11

Как понимает это робот:

User-agent: googlebot

Allow: /index.php

Allow: /2056-Levitra/

Disallow: /

Разрешено только то, что начинается с /index.php и /2056-Levitra/

_
На сайте с 09.06.2008
Offline
158
_voland_
#12

Судя по http://www.google.com/robots.txt стоит поставить сначала Disallow а потом исключения - allow

Настраиваю напильником Joomla 1.5 (http://joomla15.ru) Если постоянно взламывают движок, достаточно сменить хостинг (http://2s4.ru/ytx) всем СРОЧНО (14 дек) обновлять или патчить joomla-сайты (/ru/forum/919351)
Willie
На сайте с 08.10.2008
Offline
200
Willie
#13

"Больное время, больные люди"...

В WMT есть инструмент, чтобы все это проверить. Пользуйтесь же!

Попробовать мобильные прокси бесплатно: clck.ru/3EKDyC
Z9
На сайте с 13.01.2009
Offline
23
zend921
#14

вот обновил немного пост:

В роботс.тхт прописано

User-agent: googlebot

Allow: /index.php

Allow: 2056-Levitra/

Disallow: /

Я читал что чтобы запретить все и разрешить что то надо именно так сделать..

В гугле вместо тайтла стоит "cPanel" уже месяца три..

И новые паги не добавляет разрешенные в роботсе таким способом.

ещё. проверяю в вебмастертулс: Просмотреть как Googlebot

http://imyadomena.com - URL, запрещенный файлом robots.txt

отчего так?.. я ж index.php allow поставил..

Может рано панику поднимаю подождать чуток..

SJ
На сайте с 02.12.2009
Offline
5
SEODJ
#15
zend921:
Мне будет долго ставить запрет на 1000 страниц руками. поэтому и сделал так.
И как я написал выше мне сказали что сделал я правильно. вот http://joomlaforum.ru/index.php/topic,62957.0.html например нашел обсуждается такая же схема как у меня. все работает у человека.

ТС, вы что именно хотите? иметь сайт с 1002 страницами, и разрешить индексацию только двух?

так сделайте сайт из двух страниц.

limpopo111
На сайте с 17.07.2009
Offline
90
limpopo111
#16

Если у вас будет это строчка Disallow: / в любом месте вверху или внизу роботса.тхт то ваш сайт не будет индексироваться

Ибо так возлюбил Бог мир, что отдал Сына Своего Единородного Иисуса Христа в жертву за грех, чтобы всякий верующий в Него, не погиб, но имел жизнь вечную.
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий