Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

robots.txt

Dima$ · 2010-03-13T00:21:58.0000000Z

Здравствуйте! Укажите плиз, в каком месте я неправильно оформил робот.тхт... т.к. все страницы, которые присутсвуют в индексе у яши это те, которые находятся на первых страницах в каждой рубрике по сайту, все последующие постепенно выпали:cool:. не так давно роботса небыло, недавно воткнул, до этого большинство страниц были в индексе... супорт также указал на роботс... вот собсно он: User-agent: Yandex Disallow: /backup/ Disallow: /engine/ Disallow: /language/ Disallow: /templates/ Disallow: /uploads/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /dap-7.10.js Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=register Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /?do=lastcomments Host: http://***.info/

airqus

13 марта 2010, 19:47

#11

с виду с роботсом все в порядке, страницы не из-за него не индексятся

Opkter

23 марта 2010, 05:40

#12

У меня тоже вопрос по robots.txt. для ДЛЕ

Как запретить индексировать все урлы типа

/2010/01/18/index.php?do=search

/2010/01/21/index.php?do=search

/books/index.php?do=search

и т.д

тоесть с одинаковым окончанием

Я пологаю что просто

Disallow: /index.php?do=search

недостаточно?

Opkter добавил 23.03.2010 в 13:59

Disallow: /*index.php?do=search

Так правильно будет?

Торгую криптовалютой на Binance (https://www.binance.com/?ref=18579692) и YoBit.Net (https://yobit.io/?bonus=LvxCK). Биржи без проверок документов

Курс биткоина превысил $50 тысяч

Все что нужно знать о DDоS-атаках грамотному менеджеру

robots.txt