Форум Сайтостроение Веб-строительство

Автоматическое создание sitemap?

A
На сайте с 15.10.2011
Offline
61
andrewthomson
500

Как это сделать автоматически, есть ли сервисы такие? Чтобы они учитывали файл robots.txt?

Garin33
На сайте с 31.08.2009
Offline
169
Garin33
#1

Автоматически это делают модули/плагины/дополнения к вашему движку. Для всех более-менее известных cms таких вещей море.

Чтобы учитывался robots - о таком не слышал, видимо писать с нуля.

Потому что Drupal - это круто.
wwwwww
На сайте с 29.04.2011
Offline
195
wwwwww
#2
andrewthomson:
Как это сделать автоматически, есть ли сервисы такие?

Для CMS - модули или плагины делают автоматически.

Сервисов море, например тут

andrewthomson:
Чтобы они учитывали файл robots.txt?

Зачем? Все равно индексироваться будут только разрешенные страницы.

Видишь? Свободная подпись.
A
На сайте с 15.10.2011
Offline
61
andrewthomson
#3

Ясно. Т.е. если в robots.txt закрыть пути по которым не надо индексировать, то адреса попадающие под эти правила не будут индексироваться?

Garin33
На сайте с 31.08.2009
Offline
169
Garin33
#4
andrewthomson:
Ясно. Т.е. если в robots.txt закрыть пути по которым не надо индексировать, то адреса попадающие под эти правила не будут индексироваться?

Таки да! Для этого роботс и сделан. Странный вопрос однако..

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий