нужна помощь

DY
На сайте с 12.02.2006
Offline
86
636

такая ситуация. У меня на сайте Линкер стоит для обмена ссылками. Не так давно на сайт вирус проник (троян, который внизу кода титульной страницы всякую фигню генерит.) Троян удалил. Через некоторое время при проверке сайта в Яше увидел несколько проиндексированных страниц с ссылками которые я не устанавливал (add link...........). Как это убрать с сайта. Полный адрес этих страниц я в robots прописал. Когда начал в ручную из Яши удалять каждую страницу поочереди-Яша пишет, что не может страницу удалить, поскольку якобы она не проиндексирована. (хотя показана в списке проиндексированный страниц сайта). А заодно еще и поддомен проиндексировался, который абсолютно не нужен. Как быть? Как правильнов данном случае robots составить, чтобы весь этот мусор с сайта убрать и поддомен убрать из индексации?

albion
На сайте с 07.10.2005
Offline
247
#1
dima yurgensen:
Как правильнов данном случае robots составить, чтобы весь этот мусор с сайта убрать и поддомен убрать из индексации?

Если данных страниц на сайте нет и сервер отдает ошибки 404 или 403, то они сами должны удалиться. Но можно немного помочь убрать:

В robots.txt прописываем

User-agent: *

Disallow: /названиефайла.html

Поддомен убрать можно так:

в robots.txt написать

User-agent: *

Disallow: /

DY
На сайте с 12.02.2006
Offline
86
#2
DY
На сайте с 12.02.2006
Offline
86
#3

кстати говоря, а что в robots написать, чтобы сам домен запретить от индексации во всех поисковиках?

Данил
На сайте с 17.01.2006
Offline
153
#4
dima yurgensen:
Документ http://www.ррррррр.ru/linker/add_lin...%F2%EE%3Cbr%3E
не может быть удален из базы Яндекса, так как он не был проиндексирован."

Так значит его нет в индексе :)

Покупаю сайты (/ru/forum/394337). Заработай себе на екро — Сапа (http://www.sape.ru/r.0d0e35f6a7.php). Для продвжиения быстро и на автомате (http://www.seowizard.ru/r.0d0e35f6a7.php)!
Данил
На сайте с 17.01.2006
Offline
153
#5
dima yurgensen:
кстати говоря, а что в robots написать, чтобы сам домен запретить от индексации во всех поисковиках?

User-agent: *

Disallow: /

DY
На сайте с 12.02.2006
Offline
86
#6

только вот странно, когда на эту "проиндекированную белеберду" в списке проиндексированных страниц нажимаешь - страница такая есть.....

DY
На сайте с 12.02.2006
Offline
86
#7

т.е. файл роботс для защиты от индексации домена и поддомена не отличаеться?

Dm
На сайте с 11.03.2002
Offline
108
Dm
#8
dima yurgensen:
т.е. файл роботс для защиты от индексации домена и поддомена не отличаеться?

Так и поддомен от домена мало чем отличается :). Разве что у них "корни" в разных папках или на разных серверах.

Я за ДСДЛ (/ru/forum/135358)
john2007
На сайте с 26.03.2007
Offline
173
#9
dima yurgensen:
т.е. файл роботс для защиты от индексации домена и поддомена не отличаеться?

И домен и поддомен должны иметь свой роботс. Указания роботса работают от корня домена или поддомена.

Совершая ошибки, мы не только учимся их не повторять, но и учимся прощать такие же ошибки другим... (с)
DY
На сайте с 12.02.2006
Offline
86
#10

john2007 Тогда, как правильно их составить?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий