Нужно написать robots.txt для самогонного движка

12
WebMage
На сайте с 17.08.2011
Offline
119
800

Сайт мониторинг серверов minecraft 1.5.1 , всё практически сделал но нету robots.txt , его я и думаю сделать в первую очередь сейчас..

Движок не я писал, как Вы наверное уже поняли =)

Вот могу выложить скриншот корневой папки:

Потом надо будет карту сайта делать, онлайн сервисами постоянно обновлять или просить кого кто разбирается.

Желательно чтобы поисковик видел только главную и странички с серверами.

Вот пока такая просьба, я был бы признателен за Ваши рекомендации.

дани мапов
На сайте с 06.09.2012
Offline
197
#1

Закрывайте дубли и пустые страницы, какие еще рекомендации могут быть.

Написание и доработка скриптов (PHP, MySQL, JavaScript, jQuery) (/ru/forum/811046)
WebMage
На сайте с 17.08.2011
Offline
119
#2
дани мапов:
Закрывайте дубли и пустые страницы, какие еще рекомендации могут быть.

Мне он и нужен чтобы это сделать, только какой он должен быть исходя из той архитектуры что я показал на скрине я не знаю.

Мне нужна помощь не советами а конкретным содержанием будущего robots.txt моего мониторинга.

E
На сайте с 27.03.2013
Offline
3
#3
WebMage:
Мне нужна помощь не советами а конкретным содержанием будущего robots.txt моего мониторинга.

Все конкретные рекомендации выложены на сайтах ПС.

http://help.yandex.ru/webmaster/?id=996567

Правильно Вам пишут: закрывайте дубли, не сорите малозначимыми страницами. По той иерархии, что выложена Вами на скрине невозможнос догадаться об устройстве дублей. ПС и др. видят не сами файлы php, а результат их выполнения.

ЗЫ. не забудьте закрыть дубли ещё и в .htaccess.

WebMage
На сайте с 17.08.2011
Offline
119
#4

Мне это не

eufrat:
Правильно Вам пишут: закрывайте дубли, не сорите малозначимыми страницами. По той иерархии, что выложена Вами на скрине невозможнос догадаться об устройстве дублей. ПС и др. видят не сами файлы php, а результат их выполнения.

ЗЫ. не забудьте закрыть дубли ещё и в .htaccess.

Мне это не по силам сделать одному.

На подобном сайте вот такой к примеру http://www.want2vote.com/robots.txt

А мне такой же примерно, я только добавлю hosts И путь к карте сайта когда её сделаю

Поставлю тогда вопрос по другому и конкретнее:

Как выглядел бы Ваш robots.txt на моём месте?

E
На сайте с 27.03.2013
Offline
3
#5
WebMage:
Поставлю тогда вопрос по другому и конкретнее:
Как выглядел бы Ваш robots.txt на моём месте?

Сложно представить себя на чужом месте, наверное либо изучил матчасть, либо нанял бы спеца.

Вот кстати ещё отличный для Вас совет: разместить сайт с простеньким роботс или вообще без него, и зарегиться в панелях вебмастера. Через некоторое время надо будет заходить в панели и анализировать, почему одни страницы выпадают из индекса, другие дублируются. В зависимости от этого уже будет видно, что закрывать. Для случая движка а-ля "чёрный ящик" это выход.

Diversant
На сайте с 29.03.2006
Offline
291
#6

WebMage, Вы дурак сударь - базу sql я уже скачал! потрите быстреее свой скриншот!!!

WebMage
На сайте с 17.08.2011
Offline
119
#7

Спасибо всем, помощи реальной похоже тут мне не дождаться.

IL
На сайте с 20.04.2007
Offline
418
#8
WebMage:
Мне это не по силам сделать одному.

Так обратитесь.. Вам сделают

WebMage:
Спасибо всем, помощи реальной похоже тут мне не дождаться.

Куда ещё "реальнее":

Diversant:
WebMage, Вы дурак сударь - базу sql я уже скачал! потрите быстреее свой скриншот!!!

Если нет знаний-умений.. либо приобретайте самостоятельно их.. либо услугами профессионалов пользуйтесь..

Либо пусть остаётся "как есть".. когда "косяки" полезут - при желании/возможности опять же поправлять своими силами / силами "знающих и умеющих"..

... :) Облачные серверы от RegRu - промокод 3F85-3D10-806D-7224 ( http://levik.info/regru )
kimberlit
На сайте с 13.03.2007
Offline
370
#9
WebMage:
помощи реальной похоже тут мне не дождаться

Без структуры урл или без помощи экстрасенса - не дождаться.

SeVlad
На сайте с 03.11.2008
Offline
1456
#10
WebMage:
для самогонного движка

Один я, что ли, заметил причины адекватности ТСа? ;)

WebMage:
всё практически сделал но нету robots.txt , его я и думаю сделать в первую очередь сейчас..
..
онлайн сервисами постоянно обновлять
Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Топики помощи с ⓌordPress (https://searchengines.guru/ru/forum/1032910 ) и основы безопасности сайтов ( https://searchengines.guru/ru/forum/774117 ). *** Помощь\консультации в топиках форума - БЕСПЛАТНО. Платные услуги ( https://wp.me/P3YHjQ-3 ) - с бюджетом от 150$ ***
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий