Помощь с robots.txt

Что означает ваша пустая Disallow:? То есть, зачем она?

http://robotstxt.org.ru/robotsexclusion/guide

Тут точно так же!

Разрешить всем роботам индексировать весь сайт

User-agent: *

Disallow:

Если вам ничего не нужно закрывать от индексации, то директива Disallow тут вообще не нужна (ИМХО), тем более раз уж такой конфликт вышел.

Так у меня в самом начале вообще не было Роботс,тХт, но вот в вебмастере выдало трабл, я решил насильно вписать правила для робота, но ничего не изменилось. Роботс.тхт составлен правильно, но я ндекс отказывается его индексировать. Вот и пытаюсь разобраться в чем трабл.

Pywkin, ну как вариант попробуйте так:

Я об этом уже думал. Буду пробовать, но как же общепринятые правила? Или Яндекс поменял правила и синтаксис для своего Робота?

А Allow: / разве не общепринятое правило? :) http://help.yandex.ru/webmaster/?id=996567#996571

Так обе записи являются правильными. У меня вопрос, почему ни с одной из них яндекс не хочет индексировать?

А вам так и не пришло в вашу голову, что robots.txt тут ни при чем?

Правильное написание роботстхт не гарантирует индексации. Может вы под агс, а может и нет. Закажите прогон по закладкам или в твиттере, купите пару жирных ссылок. После этого чаще всего индксация ускоряется