Маруся2011, а вы пробовали сами медленно прочитать мелкий текст белым по-черному? Думаете, что его кто-то будет читать?
Richlife, изучайте.
Спасение утопающих - дело рук самих утопающих, вам никто не сможет помочь.
Klacon, этот сайт bazazakonov.ru ?
А у вас в нем навигация в виде ссылок где? Как роботы будут обходить ваш сайт без помощи Sitemap ?
Vaan32, а вы смотрели сохраненную копию? Вы понимаете, что роботы не скачивают весь Рунет каждый день или каждый час. Вы знаете, хотя бы, какая дата на сохраненной копии?
У второго урла - "Это HTML-версия документа от 02.09.2011 [21:22:26].", там ссылка на ваш сайт есть.
Тут раздел "Поисковые системы". А вам нужен платный раздел "Продажа сайтов".
Это никак не решит проблему. Если надо закрыть, выдавайте 404. Робот медленно и постепенно обойдет все страницы и месяца через 2-3 выкинет их.
Хайзенберг, если вы дадите коллеге ваш аккаунт попользоваться и дадите ему общаться на форуме, то всякое может быть.
А если вы будете участником форума от своего имени, то одинакового IP можно не бояться.
Звездочка подразумевается и так, я бы ее убрал.
Страница /lots не запрещена в обоих случаях. Если ее надо тоже запретить, надо написать
Disallow: /lots
(без слеша на конце).
и правильно, в такой неприятной ситуации робота лучше не нагружать лишней работой.
Disallow: /lots/*
Зачем звездочка на конце?
Плохо, что вы даже не в курсе, что такое бан, а что такое АГС.
