Роман, думаю что проверять useragent и если это яндекс или рамблер то не редирект делать а либо ошибку 404 выдавать либо кидать на какую-нить страницу, индексация которой запрещена...
wolf, да вроде эта ошибка обрабатывается правильно...
если в рубрике например нет товара то в МЕТА тегах я запрещаю для индексации такую страницу.
если несложно то ты сам можешь зайти на сайт (ссылку есть вверху темы) и посмотреть:)
aleks, www.maxico.ru, можешь зайти и посмотреть там нет ошибок!
и дубликатом мы не плодили, в том то всё и дело!!!
а вот ссылки на которые они сослались, это от старого сайта каким-то образом осталось вот они
www.maxico.ru/index.phtml?order=11336
www.maxico.ru/index.phtml?razdel=1&tovarID=9980
www.maxico.ru/index.phtml?razdel=1&tovarID=6654
привем вот этой ссылки www.maxico.ru/index.phtml?order=11336
небыло даже на старом сайте, непонятно откуда вообще взялось такое...
да и потом старый сат год как уже был полностью удалён!!!
VIC, щас как раз и займусб удалением этих ссылок.
но меня очень всетаки интересует почему были удалены ПРАВИЛЬНЫЕ ссылки...
ostmaster, есть одно зеркало shop.maxico.ru, но рамблер его обрабатывает праивльно, видит и показывает что есть херкало.
в течении 3 - 4 недель 27 - 26 страниц, до этого где-то месяц - два было 300 - 400 страниц, а до этого порядка 3000
Kost, да это в самом начале я сделал. Для всех роботов сессии выключены!
Я уже закрыт от индексации нежелательные страницы.
Сессии дл роботов отключены
Год назад была старая версия сайта на которой возможно были такие ссылки. я точно непомно, но она была год назад.
И 3 месяца назад было 3000 документов, где-то месяц назад их стало 300 щас 26.
А рамблер показывает нас стабильно - 2000 документов или более.
а что тогда делать?:(
как убедить яндекс что мы не создаём поисковый спам?
и как сделать чтобы у нас снова было 3000 проиндексированных документов с сайта...
почему робот не ходит по сайту и сам не находит правильные ссылки?
Понимаешь такие страницы они есть, но нет таких ссылок!!
вот смотри у меня например страница товара
http://www.maxico.ru/details.php?tovarID=123
а если я напишу
http://www.maxico.ru/details.php?tovarID=123&a=5
то я просто передам скрипту ещё один параметр a, но так как он его не использует то ничего не изменится...
вот я и немогу понять где яндекс взял такие ссылки?
ну их просто нет, сайт делал я и точно на 100% знаю что там нет таких ссылок!