.htaccess или как не закрыть ЛП для Адвордс бота

vcarlsonn
На сайте с 08.01.2008
Offline
13
1522

всем известно, что гугля не рекомендует закрывать свои лендинги для гуглбота и если не следовать его рекомендациям это отразится на показателе качества.

мне, в силу некоторых обстоятельств, хотелось бы все же закрыть ЛП от посещения их ботами, всеми, кроме бота адвордса. Для этих целей хочу использовать следующий код для htaccess:

SetEnvIfNoCase User-Agent "^Yandex" search_bot

SetEnvIfNoCase User-Agent "^Yahoo" search_bot
SetEnvIfNoCase User-Agent "^igdeSpyder" search_bot
SetEnvIfNoCase User-Agent "^Robot" search_bot
SetEnvIfNoCase User-Agent "^Googlebot" search_bot
SetEnvIfNoCase User-Agent "^msnbot" search_bot
SetEnvIfNoCase User-Agent "^Aport" search_bot
SetEnvIfNoCase User-Agent "^Mail" search_bot
SetEnvIfNoCase User-Agent "^bot" search_bot
SetEnvIfNoCase User-Agent "^spider" search_bot
SetEnvIfNoCase User-Agent "^php" search_bot
SetEnvIfNoCase User-Agent "^Parser" search_bot

<Limit GET POST HEAD>
Order Allow,Deny
Allow from all
Deny from env=search_bot
</Limit>

теперь собственно вопрос, какие из этих строк следует подправить, чтобы не создавать преград для адвордс бота, но оставить запрет для всех остальных

и имеются ли различия между просто гуглботом и адвордсботом, тобеж не подпадет ли адвордсбот под определение:

SetEnvIfNoCase User-Agent "^Robot" search_bot

или
SetEnvIfNoCase User-Agent "^bot" search_bot

заранее благодарен за ответы!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий