6666: Не давать сторонним лицам названия закрытых папок и файлов.
6666, а зачем их палить в роботсе если они закрытые? По нормальному если это закрытые папки, то они действительно должны быть закрытыми, а не ваять вот такие костыли. Ведь даже с запретом гугл не гарантирует их не индексацию.
Фильтровать по юзер-агенту. Только что видно ботам, разве не проверяться по айпи-адресу, можно получить и из под пользователя.
Обнаружил такое при посещении сайта: через rds bar файл robots не видно, а если в google посмотреть страницы, то там пишет на некоторые что описание закрыто правилом robots.txt
Слабоват плагинчик. "Громоздкие конструкциив htaccess" не просто так пишутся. Второе и последнее, имхо, бессмысленно проверять в REQUEST_URI. Четвертый 1) не учитывает регистр 2) обходиться заменой на %20. Для сканеров может чем-то и поможет...
Да, без кнопки "CHECK" как-то не очень.)
Вообщем с учетом "union/**/select" код будет выглядеть примерно так
Не давать сторонним лицам названия закрытых папок и файлов.
6666, а зачем их палить в роботсе если они закрытые? По нормальному если это закрытые папки, то они действительно должны быть закрытыми, а не ваять вот такие костыли. Ведь даже с запретом гугл не гарантирует их не индексацию.
Учим матчасть. Как вариант - осиливаем 21 пост топика.
Ну на самом деле там говориться про older client, а так https://www.google.ru/search?client=opera&rls=ru&q=request+uri+length&sourceid=opera&ie=utf-8&oe=utf-8&channel=suggest
UNION(?:[\s]+|(?:[\s]*(/\*.*?\*/)[\s]*))SELECT
Хм... правильнее наверное было бы так
$test = preg_replace('#/\*.*?\*/#', '', $test);
UNION(?:[\s]+|(?:[\s]*(/\*.*?\*/)[\s]*))SELECT
А в чем глубокий смысл прятать роботс?
Фильтровать по юзер-агенту. Только что видно ботам, разве не проверяться по айпи-адресу, можно получить и из под пользователя.
Там еще используется мета-тег robots
Хотя да, доступ к роботсу стоит по юзер-агенту
<a\s[^>]*href=["']([\w]+:\/\/([^\/"']+)\/?.*?)["'][^>]*>(.*?)<\/a>
$1 => http://site.ru/folder
$2 => site.ru
---------- Добавлено 26.04.2013 в 01:52 ----------
II
/<a\s[^>]*href=["']([\w]+:\/\/(.+?)(\/.*?)?)["'][^>]*>(.*?)<\/a>/
$1 => http://site.ru/folder
$2 => site.ru
$3 => /folder
Слабоват плагинчик. "Громоздкие конструкциив htaccess" не просто так пишутся. Второе и последнее, имхо, бессмысленно проверять в REQUEST_URI. Четвертый 1) не учитывает регистр 2) обходиться заменой на %20. Для сканеров может чем-то и поможет...
Можно ли оставить сайт www.old-site.com без файла и без базы данных только перенаправлять через .htaccess.
Можно. Можно только один только htaccess и оставить.