http://www.google.com/webmasters/remove.html#exclude_pages
Получается что нужно писать все страницы чтоли?
Если их множество, как запретить группу?
Как тогда сделать запрет для других роботов?
Not Found
The requested URL /unlock/test.html was not found on this server.
возвращается 200
как сделать чтобы возращался 404 кто-то знает?
Я тоже столкнулся.
Ищу решение.
Кажись надо удалять явную 404 страницу
незнаю что такое urlconsole
я новичок в этом деле, прошу несудить строго, много чего незнаю.
я пишу в роботс.тхт строчки:
User-agent: *
Disallow: /index.php
в хтацесе пишу такое:
RewriteRule ^index.html$ index.php [L]
будет ли это работать?
Как удалить старую версию?