Disallow: /page/ в ДЛЕ

12
Фрукт
На сайте с 03.04.2007
Offline
126
#11
Disallow: /tags/
Disallow: /tags/$

Если ими не злоупотреблять, очень хорошо траф несут, тем более если сделать уникальное описание к каждому тегу и h1 воткнуть на странице

------------------- green fruct has told
Z
На сайте с 13.12.2009
Offline
452
#12
SergeyUkr:
Думаю что нету смысла закрывать навигацию, т.к вроде бы ПС понимают что это за страницы и для чего они созданы. Зато, индексацию сайта я думаю ускоряют.

ПС понимают только то, что им показывают. И если канонические урлы не прописаны, то ПС понимает, что на сайте куча страниц с одинаковыми тайтлами и метатегами и делают соответствующие выводы. А индексацию ускоряют пинги и карта сайта xml :)

---------- Добавлено 04.02.2013 в 09:16 ----------

Фрукт:
Если ими не злоупотреблять, очень хорошо траф несут, тем более если сделать уникальное описание к каждому тегу и h1 воткнуть на странице

А как в дле для страниц тегов сделать свои описания и нормальные заголовки?

Консультации, seo-аудиты - https://seo-consulting.su Профессионально и без воды
WebJunior
На сайте с 11.06.2010
Offline
155
#13
zusull:
А как в дле для страниц тегов сделать свои описания и нормальные заголовки?

http://dle-news.ru/release/1555-datalife-engine-v98-final-release.html#sel=19:1,19:67

---------- Добавлено 04.02.2013 в 08:55 ----------

Краткая суть поста – чем меньше файл robots.txt тем лучше и качественнее сайт, и это относится не только к DLE, но вообще к любому движку или сайту. Закрывая от индексации какие-то страницы (или даже разделы) вы тем самым признаете, что эти страницы некачественные.

Немного странным показался его подход. А если предположить что ПС считает качественным тот сайт на индексацию которого ушло меньше времени? Тогда именно запрещать индексацию каждой отдельной страницы через мета-тег как раз неправильно. Ведь робот узнает что страницу не нужно включать в индекс только после того как посетит её. чзнх?! :) А так-то для того и есть robots.txt - что бы экономить ресурсы краулер. И ничего постыдного в этом нет.

Мой сайт на этом хостинге - https://tuthost.ua/?from=2558 / Верстаю шаблоны (темы с отзывами: https://searchengines.guru/ru/forum/763758, https://searchengines.guru/ru/forum/600404 ).
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий