Polite Moose

Polite Moose
Рейтинг
85
Регистрация
22.04.2002

Модерилки :)

еще раз даю полезную ссылку:
http://kako.yandex.ru/cgi-bin/test-robots

Уважаемый melkov, указанная форма проверки безусловно удобна, но если можно включите в её ответ комментарий по поводу главного зеркала определенного директивой host. А то, знаете ли, страшно видеть, что твои домены запрещены к индексации полностью.

То есть примерно так (для зеркал при имеющейся дерективе host)

Запрещена индексация всех URL, начинающихся с указанных префиксов:

/

Индексация сервера ****.ru:80 запрещена полностью.

Главное зеркало указано в директиве host как бла-бла-бла.ru

для того, чтоб попасть на страницу за формой, нужно ее заполнить, и зачастую правильно. чего бот, естественно сделать не могЁт...

адрес страницы "за формой" прописывается открытым текстом в теге form. Другой вопрос в том, что получит робот если попытается перейти без передачи данных. В принципе, подобный переход аналогичен передаче всех переменных с нулевым (пустым) значением.

Подавал заявку в каталог без особой надежды на добавление. Просто для галочки. Подавал в сентябре. В мае пришло сообщение, что сайт добавлен.

Теперь жалею, что не подал тогда заявку на несколько сайтов :)

melkov, спасибо, успокоили.

Яндекс явно запутался в моих доменах.

При запросе http://www.yandex.ru/cycounter?старый_домен выдается денюшка с одним значением, по запросу http://www.yandex.ru/cycounter?новый_домен - с другим.

В выдаче старый_домен, но как найденый по ссылке.

Может проще всего письмо на addurl написать, что бы раз и навсегда?

Хочу снова поднять данную тему и получить ряд разъяснений.

на странице http://www.yandex.ru/info/webmaster2.html#robots есть следующий текст:

Аргументом директивы Host является доменное имя с номером порта (80 по умолчанию), отделенным двоеточием. Если какой-либо сайт не указан в качестве аргумента для Host, для него подразумевается наличие директивы Disallow: /, т.е. полный запрет индексации (при наличии в группе хотя бы одной корректной директивы Host).

то есть, другими словами, все сайты выдающие данный robots.txt и имеющие доменное имя отличное от указанного в дерективе host: НЕ ДОЛЖНЫ ИНДЕКСИРОВАТЬСЯ ВООБЩЕ!

Соответственно по ним не должны ходить роботы (в том числе и зеркальщик), и не может быть произведена "склейка". Соответственно все ссылки ведущие на данные домены должны уходить "в пустоту".

Вопрос №1 : Происходит ли реальная склейка и что происходит с *ИЦами и пр. попадающим на внутренние страницы неосновного домена. Будут ли эти внутренние страницы прямо проассоциированы с соответствующими страницами на главном домене.

Вопрос №2 : Я купил новое доменное имя, гораздо более подходящее, чем используемое ранее, и выдаваемое как главное зеркало. Так же, есть еще 4 доменных имени по которым выдается идентичное содержимое. Понятно, что все внешние ссылки ведут на старое_доменное_имя, но я бы предпочел в выдаче видеть новое. Достаточно ли дерективы host или лучше с помощью тега base сделать все ссылки на страницах "псевдоабсолютными" и ведущими на новое_главное_зеркало?

В данный момент, Яндекс считает главным зеркалом то один, то другой домен. При попытке добавить новый_домен, следует ответ, что главным является старый_домен, но при запросе известных страниц сайта выдаются страницы вида новый_домен/страница. На прошлой неделе, в каталоге яндекса стал выдаваться (без моего участия) новый_домен, но сегодня опять старый_домен. Что мне лучше сделать, что бы не мучить себя и ваших роботов? :)

Пришла новая подписка. Слова из запроса выделены в тайтле. Снипет содержит фрагмент текста с выделеным запросом.

Уря! и СПАСИБО разработчикам!

Думаю, даже у Google есть сложности с отслеживанием количества реальных пользователей -- если отключены Advanced features, то неизвестно, используется ли тулбар после скачивания или тут же был удален.

Если я не ошибаюсь, бар обновляется автоматически. Тут-то пользователей и можно посчитать. Так что, имхо, в "конторе" есть достаточно точные цифры.

Вообще-то последние три года, совершенно точно, это ограничение действовало.

но небыло ограничения на numdoc. В данный момент, numdoc ограничен 50-ю ссылками, а выдача сотней страниц. Соответственно, нынешний предел - 5000. Раньше, при numdoc, например, 200 можно было зайти гораздо дальше :)

Всего: 1223