Год тому проекту, на который Я боты за неделю трижды приходили. На молодой сайт вроде не очень тянет ;)
Неправда Ваша. Роботы Яндекса по моим наблюдениям активны как никогда. По одному проекту за последнюю неделю приходил 3 раза, почти через день. Брал поболее 1000 страниц. На мой взгляд это небывалая активность для Яндекса. А вот апдейт почему прижимают... Наверно не к добру :)
Если парсить текст, то такую ссылку не трудно будет найти. Она ведь совершенно стандартно написана, разве что только в скрипт вставлена.
Разбейте ее на три части к примеру. Каждая часть - переменные А, B, C.
И выводите ее как document.write(A+B+C)
А если страница по этому адресу отдает 302 отклик стоит или нет?
С 8.00 до 20.00 как правило.
Анализируйте юзер агента, и ботам поисковиков отключайте добавление сессий в урлы.
Последнее время и до 1000 доходит. Уже обсуждалось на форуме.
Вообще странно. Яндекс бот берет как правило по 500 страниц, а последнее время замечено, что и более. Видимо что-то ему мешает.
Я вижу сайт Ваш на постнуке сделан? Вот тут человек как мне кажется сходными проблемами мучается. У вас все страницы проиндексированный (3372 страницы) тоже идут с SID'ом в УРЛе. Наверняка там полно дубликатов.
ИМХО это может быть поводом для уменьшения квот на индексацию сайта и индексации только отдельных разделов.
ИМХО без разницы, если речь идет о точке в конце ссылки.
А вот если этого знака припинания нет в середине ссылки, то следующее за ним слово, которое по идее будет начинаться с большой буквы будет воспринято ни как первое слово в предложении, а как имя собственое и вот это точно будет влиять на поиск.
Линкатор конечно зло, но тут скорее всего вопрос в другом. Если бы дело было в линкаторе то Яндекс скорее всего принял бы другие меры в отношении данного сайта.
Сайт сделан на каком то Nuke. Эти системы автоматом прибавляют к урлам SID насколько я помню. Теоретически Яндекс мог очень быстро замусорить свою базу одной и той же страницей (кучей одинаковых страниц) отличающихся SID'ом в УРЛе, осознать, что все эти страницы одинаковые и почистить базу.
А вообще addurl последнее время на яндексе работает из рук вон плохо :) Постоянный глюки с занесением в базу.
