Хотите сказать, что можно сделать левые ссылки на сайт-конкурент и таким образом спровоцировать его бан?
ИМХО, скорее поплохеет тем сайтам, которые разместили такие ссылки у себя.
Вижу сейчас аналогичную картину при запросе "изготовление памятников". При любых других запросах листает страницы стандартно.
Видимо, глюк, потому что если в расширенном запросе указать, например, 50 страниц в выдаче, то первые 10 позиций отличаются от позиций при простом запросе.
А у Вас при каких запросах такое?
осталось 2 места
Уважаемый T.R.O.N, я читал этот FAQ, и не только этот. Точной информации, как сделать правильный robots.txt там нет, имхо. Да и важные ссылки в хелпе битые. После помещения robots.txt, который Вы посоветовали, яндекс сам, как я написал выше сказал, что сайт полностью запрещен к индексации.
Если Вы с высоты своего опыта можете "мизинцем" наваять robots.txt, это не дает Вам право называть мои посты бредятиной и разбрасываться минусами... :)
Кроме того, в яндексовском роботсе есть запреты, а я просил показать без запретов.
Помогли бы делом лучше.
Проверил со стандартом на robots.txt - Вы все валидно написали (разумеется, кроме директивы Host, которой в стандарте нет) - и разместил у себя на сайтах
Но как понимать то, что test-robots говорит при этом, что индексация сайта полностью запрещена??? 😮
Не запрещено только если оставить директиву Host. Но это же совсем не валидно. В голову пришло только запретить несуществующую папку :)
На каком бы сайте посмотреть грамотную реализацию robots.txt c директивой Host и без запретов?
Понятно, спасибо!
Значит остается только ждать... 😒
Я же сказал, что сделал, как написано в факе яндекса (вернее посмотрел его и додумал сам, как мне показалось правильным, потому что там нет example)... Не работает уже несколько месяцев, хотя сайт регулярно индексируется.
Просто нужен пример грамотно оформленного robots.txt для этого случая.
Все, мест нет, извините.
осталось одно место на морде
Не вижу никакой проблемы транслитировать, тем более Яндексу. Поэтому влияние может быть.
Но имхо в Яндексе его нет, сайт бывает на первой позиции по запросу, совпадающему по имени своего домена (даже транслитированного в русский) из-за нахождения этого зароса в контенте ссылки, идущей откуда-либо.
Вот в Гугле - немного другое дело.