Такое ощущение что они поменяли алгоритм подсчета релевантности, те запросы, которые держались только на ссылках - улетели глубоко и переиндексились на другие страницы
нет об общем не надо. нужно узнать, правильно ли составлен этот роботс тхт, и если да, то где почитать об этих скриптах, я просто первый раз со скриптом в роботс.тхт столкнулся
В том то и дело что это не я писал, я вообще не знал что в роботс.тхт можно скрипты какие то размещать, нигде вообще не нашел об этом инфу, akaBlacK - спасибо огромное за ответ - вы мне очень помогли, если не трудно, скажите где можно прочитать про такие скрипты в роботс.тхт, и вообще имеют ли они смысл?
