а как же магазины с 100000 страниц и у всех одинаковое описание товаров на странице? у всех копипаст и все в выдаче...
домен ру, почти новый ))
НЧ разные и конкурентные и нет...
текст не уник.
всем спасибо!
спасибо за ссылку, я хотел картинки в папке pics закрыть для гугла, что бы он их не индексировал
сделал так:
User-agent: Googlebot-Image
Disallow: /pics/
weboeb добавил 06.10.2011 в 20:43
так чего? правильно?
спасибо...
а правильно писать
Disallow: /folder/
Disallow: folder/
Disallow: /folder
?
murvuz, в общем, нужны только урлы, а без остального можно спокойно прожить ;-)
Спасибо !!!
weboeb добавил 21.09.2011 в 10:59
а подскажите пожалуйста... еще один маленький вопросик ;)
сайтмапа раньше не было, теперь лежит в корне и прописан в роботс.тхт, которого тоже раньше не было. Может имеет смысл разместить ссылку на сайтмап на страницах сайта где-нить внизу рядом с копирайтом, чтобы сайтмап скорее нашли? Сейчас страницы жадно глотают боты яндекса и гугла. Ластмодифед прописал вчерашнюю дату у всех, т.к. большие изменения прошли на сайте.
тут дело вот в чем... урлов несколько тысяч и содержимое всех страниц изменяются одновременно при внесении изменений в скрипт. Но сам контент не меняется, только всякие мелочи. Если lastmod использовать, то время изменения у тысяч страниц одинаковое что ли указывать?
т.е. лучше 25 ссылок с каталогов статей, чем 2000 с каталогов ссылок?
так как написали так и не работает )
а что с кавычками не то?
table SET field = replace(field, '.html\'', '.html?id=71\'')
кто-нить подскажите плииз что там за ошибка в синтаксисе?
