Забывать пока еще рановато :), идет мелкий траф... А ждать... хрен знает, у меня робот его часто ошивается, если честно - не смотрю за ним, что он там забирает
Купите GPS навигатор - все найдется 😂
Спорить и ругаться тут походу бесполезно. Попробовать убедить админа что Вы в той категории, где следует стоит, приводя пример, что 2.5 года все было Ок. Но и следует понимать, что это ИХ каталог, и ничем они никому не обязаны и не должны ;)
Достаточно удобно и просто. http://tech.rupay.com/ - здесь почитайте, все описано
Хм... Так может это ветаки яндекс спамит форумы и гостевые... ? 😂
О чем речь то вообще? Естественно он не получит доступ к тому, что закрыто - получит 401 статус и все, больше не сунется.
В каталог приняли быстро и без проблемм... :) А вот паучка вебальты мы забанили у себя- положил нам сервак несколько раз :( Может когдато станет повежливей - ведь огалтелое наращивание индекса это еще не самый критичный повод валить сервера :)
Насчет обрезания полного урла это понятно. В свое время была одна идея навеяная АПОРТом -
Результаты поиска я могу вывести на любой, мной поименованной, странице - причем тут стоп слова. Закройте как Вам советовали
И Вы реально думаете, что пользователи, которые хотят себе сайт этим занимаются? Генеральный, или ИТ директор будут сравнивать колво хитов/сутки? Сомневаюсь...
Сомневаюсь, что все останутся довольны подгрузкой лишних 145 кб, особенно если они сидят на диалапе. А комменты не порезать-ли в скрипте? Зафига они пользователю-то???