Покосило примерно половину страниц на одном сайте, на другом 2 стр в +
Была похожая ситуация, но на всякий случай, так сказать на верочку пропишите прокси сервер и попробуйте, если все будет ок - значит проблемы у вашего провайдера.
т.е. привести все к виду...
User-agent: *
Disallow: /*print
Disallow: /user/
Disallow: /index.php?do=register
Disallow: /index.php?do=lastcomments
Disallow: /index.php?do=stats
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Sitemap: http://your.site/sitemap.xml
Host: your.site
????
А нет универсального? т.е. под любого робота?
Файл роботс.тхт и для гугля, рабмлера, майла закроет всякого рода не нужные страницы или только для яши?
Прошу прощения сразу, зеленый я🚬
Спасибо.:)
Спасибо, я так и сделал, но не досмотрел немного не то закрыл.
Если можно, еще вопрос, какой лучше robots.txt создать для этого движка, в серче много примеров, не могу определиться.😒
А вобще такой вопрос, кто-нибудь, кроме автора, получал выплаты?🚬
То же самое. Самое обидное - выпадают странички которые приносили траф.
У меня утром отвалилось половина страниц, к обеду - вернулись и даже +, сейчас хуже чем утром. С беками и позициями такая же ерунда. Ничего не понимаю, буду ждать дальше. Может что и поменяется, пока что-то совсем не радует😒