Вот исправил http://www.portalik.biz/robots.txt теперь должно быть правильно ;)
Народ, а мне тут интересно стало: а кого-нибудь Яша банил за ссылки на морде ? 🚬
спасибо за ответ.... :)
вот как я сделал http://www.portalik.biz/robots.txt это должно быть правильным.. так ?
А кто мне подскажет как правильно для Яши прекрыть доступ на страницы поиска типа
"http://www.portalik.biz/news/news-searching-continue2-0-%F2%E0%E9%F4%F3%ED-0-2.html"
? 🚬
P/S: повторяющаяся часть в запросе это "/news/news-searching-continue2" нельзя ли её сделать через маску типа *
неа... не из-за этого, это точно.
Да вы были правы...
причина вроде найдена...