Блокировка или удаление страниц с помощью метатегов.
Вместо того чтобы с помощью файла robots.txt блокировать доступ сканера к ненужным страницам, можно добавить на страницу HTML метатег <META>, по которому сканер определит, что сканировать данную страницу не нужно. Этот стандарт описан на странице http://www.robotstxt.org/wc/exclusion.html#meta (на английском языке).
Чтобы запретить всем роботам индексировать страницу сайта, добавьте в раздел <HEAD> этой страницы следующий метатег:
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
Чтобы запретить индексирование страницы на вашем сайте только роботам Google и разрешить ее индексирование другим роботам, используйте следующий тег:
Блокировка или удаление страниц с помощью метатегов.
Вместо того чтобы с помощью файла robots.txt блокировать доступ сканера к ненужным страницам, можно добавить на страницу HTML метатег <META>, по которому сканер определит, что сканировать данную страницу не нужно. Этот стандарт описан на странице http://www.robotstxt.org/wc/exclusion.html#meta (на английском языке).
Чтобы запретить всем роботам индексировать страницу сайта, добавьте в раздел <HEAD> этой страницы следующий метатег:
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
Чтобы запретить индексирование страницы на вашем сайте только роботам Google и разрешить ее индексирование другим роботам, используйте следующий тег:
<META NAME="GOOGLEBOT" CONTENT="NOINDEX, NOFOLLOW">
Чтобы разрешить роботам индексировать страницу, но запретить переход по внешним ссылкам, используйте следующий тег:
<META NAME="ROBOTS" CONTENT="NOFOLLOW">
Чтобы разрешить роботам индексировать страницу, но запретить индексирование картинок на странице, используйте следующий тег:
<META NAME="ROBOTS" CONTENT="NOIMAGEINDEX">
http://www.google.com/support/webmasters/bin/answer.py?answer=61050
есть и пониже цены ;)
на том же плати.ру
у кого-нибудь есть начисления за 18/03? А то у меня нули, но такого не может быть
ximik, ТМ есть?
где $id = идентификатор страны
используйте dumper. Очень прост и быстр
Разработчик, может с маршрутюризацией что-то (или как правильно называется?)
через анонимайзер
http://anonymouse.org/cgi-bin/anon-www.cgi/http://sape.ru
все работает, все на месте: сайты и проекты
можно в цикле сделать, т.е. по одному обновлять. Как самый простой вариант, но и не самый быстрый
шо, опять? (с) "Жил, был пес"
:)