MxWhite

Рейтинг
136
Регистрация
28.05.2010

Покосило примерно половину страниц на одном сайте, на другом 2 стр в +

Была похожая ситуация, но на всякий случай, так сказать на верочку пропишите прокси сервер и попробуйте, если все будет ок - значит проблемы у вашего провайдера.

Delarante:
User-agent: * и есть универсальный.

т.е. привести все к виду...

User-agent: *

Disallow: /*print

Disallow: /user/

Disallow: /index.php?do=register

Disallow: /index.php?do=lastcomments

Disallow: /index.php?do=stats

Disallow: /index.php?do=pm

Disallow: /index.php?do=stats

Disallow: /index.php?do=search

Disallow: /index.php?do=addnews

Disallow: /index.php?do=register

Disallow: /index.php?do=feedback

Disallow: /index.php?do=lostpassword

Disallow: /index.php?subaction=newposts

Sitemap: http://your.site/sitemap.xml

Host: your.site

????

r0naan:
Смотря что укажите в строчке "User-agent:"

А нет универсального? т.е. под любого робота?

Файл роботс.тхт и для гугля, рабмлера, майла закроет всякого рода не нужные страницы или только для яши?

Прошу прощения сразу, зеленый я🚬

Спасибо.:)

Спасибо, я так и сделал, но не досмотрел немного не то закрыл.

Если можно, еще вопрос, какой лучше robots.txt создать для этого движка, в серче много примеров, не могу определиться.😒

А вобще такой вопрос, кто-нибудь, кроме автора, получал выплаты?🚬

danmaster:
Что-то давно такого хлама не было. Вылетают странички, ждем час - на месте, пару часов - снова вылет 50%, еще пара часов - все на месте. И по кругу все сначала. Чезанафик ))

То же самое. Самое обидное - выпадают странички которые приносили траф.

У меня утром отвалилось половина страниц, к обеду - вернулись и даже +, сейчас хуже чем утром. С беками и позициями такая же ерунда. Ничего не понимаю, буду ждать дальше. Может что и поменяется, пока что-то совсем не радует😒

Всего: 445