Sitemap И robots

[Удален]
451

Пока делал сайт в robots.txt Добавил Disallow: / . И вот пришло время добавлять сайт в поиск гугл. Я убираю эту строчку и добавляю на индексацию. Но видимо, что доступ к сайту всё равно запрещен, т.к. когда добавил карту сайта мне выдало 103 предупреждения, а описание таково: Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.

Робот проверил и все такое - там все чисто. Скорее всего это из-за того самого Disallow: / . Но я же его убрал?? Попадут ли ссылки в индекс с этими предупреждениями и когда гугл проверит изменения в моем роботе и примет его:mad:

сам робот выглядит теперь по стандарту:

User-agent: *

Disallow: /engine/go.php

Disallow: /engine/download.php

Disallow: /user/

Disallow: /newposts/

Disallow: /statistics.html

Disallow: /*subaction=userinfo

Disallow: /*subaction=newposts

Disallow: /*do=lastcomments

Disallow: /*do=feedback

Disallow: /*do=register

Disallow: /*do=lostpassword

Disallow: /*do=addnews

Disallow: /*do=stats

Disallow: /*do=pm

[Удален]
#1

Ппц. Неужели только у меня такое было

WebAlt
На сайте с 02.12.2007
Offline
266
#2

Нужно просто подождать пока google переиндексирует robots

[Удален]
#3
WebAlt:
Нужно просто подождать пока google переиндексирует robots

а ждать до того момента пока его робот на мой сайт зайдет??

DiAksID
На сайте с 02.08.2008
Offline
236
#4
Slogg:
а ждать до того момента пока его робот на мой сайт зайдет??

и ещё посмотреть внутрь sitemap, вполне может быть какие-нибудь из урлов подходят под запрещённые маски в robots...

show must go on !!!...
siv1987
На сайте с 02.04.2009
Offline
427
#5
Slogg:
а ждать до того момента пока его робот на мой сайт зайдет??

Ждать до тех пор пока робот зайдет на ваш сайт и решит что он достоин индексации. Чтобы поторопить робота можно прикормить его несколькими ссылками на сайт.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий