Форум Практика оптимизации Любые вопросы от новичков по оптимизации

подскажите по роботс.тхт

123
K
На сайте с 31.01.2001
Offline
737
Kost
#11
tehno-music:
чтобы помагало автоматом настраивать данный файл

В таких вещах "афтаматам" я бы не доверял.

Прежде всего, рекомендуется изучить матчасть самостоятельно.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
D
На сайте с 31.03.2007
Offline
113
dymas
#12
Ulibkin:
ну есть же такие вещи, как например, прописать правильную индексацию адреса, т.е. С 3w или без.

Если интересует только это, то напишите:

Host: sait.ru

либо

Host: www.sait.ru

B
На сайте с 31.01.2011
Offline
0
boxxik
#13

robots.txt нужен обязательно, если сайт или форум интересен, то роботы поисковиков могут так его проиндексировать, что появятся ошибки или полетит БД (уже есть опыт). Кому интересно загляните сюда: http://www.be1.ru/stat/ вводите в окно ( вверху, слева) адрес любого форума или сайт и уаля........ почти все данные о нем и robots.txt тоже.

Плачу за целевых посетителей. Screaming Frog - настройки не индексируется гланая страница.
K
На сайте с 08.03.2010
Offline
8
Kovalev
#14

dymas, придерживаюсь аналогичного мнения. Правда не монетизировал пока, может после гемор полезет?

D
На сайте с 31.03.2007
Offline
113
dymas
#15
Kovalev:
dymas, придерживаюсь аналогичного мнения. Правда не монетизировал пока, может после гемор полезет?

А это как связано вообще? :)

У меня полно сайтов вообще без роботса и абсолютно никаких проблем

K
На сайте с 08.03.2010
Offline
8
Kovalev
#16

dymas, про биржи слышал, что дубли ни есть гуд

U
На сайте с 22.11.2010
Offline
34
Ulibkin
#17
muratti:



СМS все должны угадать? :)

КМС используется своя, т.е. разработанная для этого проекта.

muratti
На сайте с 31.05.2008
Offline
238
muratti
#18
Ulibkin:
КМС используется своя, т.е. разработанная для этого проекта.

Ну так, раз своя... Закрываете в роботсе все технические и полупустые страницы, ибо в индексе они не нужны. И радуетесь жизни.

М
На сайте с 31.12.2010
Offline
2
Мужик
#19
dymas:
Первый раз слышу, что роботс.тхт вообще обязателен.
Если вы о нем ничего не знаете, то он вам, скорее всего, и не нужен

Нет, кое-что все таки надо позакрывать.

Чтоб по разным адресам не индексировало одну и ту же страницу и т.д.

Ну и это тоже:

muratti:
Ну так, раз своя... Закрываете в роботсе все технические и полупустые страницы, ибо в индексе они не нужны. И радуетесь жизни.
G
На сайте с 01.09.2010
Offline
49
glafeara
#20

Если КМС своя - это конечно хорошо))))

По моему ответы на такие вопросы типа "что такое роботс.тээкстэ" или "что указывать в роботс.тээкстэ" можно получить просто погуглив..или пояндексив.:)по крайней мере для WP или Joomla..а в случае если своя CMS,то тут вопросов побольше будет..НО,разобраться что нужно для индексации,а что нет - понять можно..

Позиции своих сайтов я снимаю здесь (http://goo.gl/1SQ1Sl)! А тут (http://goo.gl/GfReqm) я чекаю доноров. СМС рассылка (http://smstoyou.sms.ru/) по самой низкой цене.
В медийных кампаниях Google Появился плагин к TYPO3 Google: переписывание тегов title
123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий