страницы новые появились в индексе
заказывал у ТС услугу зделал все качественно
Два часа назад добовлял добавилось нормально, вчера не работала вобше.
на сайте с 33 беками после прогона через этот сервис стало 130
чтоб как можно больше отфильтровать поисковиков надо в .htaccess прописать
RewriteCond %{HTTP_USER_AGENT} ^ia_archiver$ [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^.*yandex*$ [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^.*google*$ [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^.*Rambler.* [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^.*Aport.* [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^.*crawler*$ [NC]
RewriteRule ^(.*).txt$ - [F,L]
правильно?
А yandex и google указывают Crawler?
Только ботам
Имено хочу через .htaccess
В обшем я понял один выход искать надежного хостера.
Я распаковуй zip архивы через cpanel в файл менеджере, но не у всех хостеров есть такое.
На сексвидеогид http://www.sexvideogid.ru/?IDP=1713&path=SP-1170 поменяеш на свой id в партнерской программе.