robots.txt или .htaccess вопрос о составлении

12
siv1987
На сайте с 02.04.2009
Offline
427
#11
msv09:

А вот роботс боюсь, точно ничего лишнего не закрою от индекса?

Закроете /*.html/

У нормальных ссылок после .html нет /

TF-Studio
На сайте с 17.08.2010
Offline
334
#12

А не проще просто баги исправить у движка?

Чтобы на такие страницы 404 отдавал.

Всё ещё лучший способ заработка для белых сайтов: GoGetLinks (https://www.gogetlinks.net/?inv=fahbn8).
M0
На сайте с 28.10.2011
Offline
103
#13
TF-Studio:
А не проще просто баги исправить у движка?
Чтобы на такие страницы 404 отдавал.

На данный момент надо избавиться от такой проблемы, а дальше конечно от этого косяка, его раньше не было, значит надо выискивать проблемы среди доработок, а это время. Чтобы не плодились в яндексе они, вот для этого и делается сейчас такая процедура

abst
На сайте с 14.01.2011
Offline
138
#14
msv09:

А вот роботс боюсь, точно ничего лишнего не закрою от индекса?

загружаете в ЯВМ роботс (http://webmaster.yandex.ru/robots.xml) и проверяете конкретные url, если закрыли что-то лишнее, там будет написано, что url заблокирован.

Облачные VPS с SSD (https://goo.gl/Z2PT6u) от 150 руб. ДЦ в МСК и СПБ. Utpime 99.9%. 100 рублей на тест в подарок!
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий