Форекс обидели (
ВСЕМ СПАСИБО! Ссылок набралось достаточно, пока не закупаю.
offtop TO: FlyAway Прикупил толковый словарь, чтобы ярче и проще выражаться KpaCaB4eГ :p .
Мне например такой "мусор" не нравится - это дело вкуса, а вообще конечно можно еще на разные IP повесить и вообще шоколадно будет.
Спасибо за совет, сегодня начну читать книги и найму репетитора.
Удачи Вам )
1. Хост пишется после юзвер агента
2. Все верно это запрет на индексацию www.dot.com
3. Автор данной ветки спрашивал как решить проблему разделения сайтов dot.com и www.dot.com - этот в донном случае лучше из индексации вообще убрать, тем более автору он там не нужен, так как продвижение идет по dot.com.
Имхо Вы очень не правы по отношению к моему посту.
ОФФ ТОП - простите
Как посмотреть кто мне про директиву хост в репу написал ??
Ответ FlyAway
Так robots надо писать для всех поисковиков и для Яндекса в том числе или Вы этого не учитываете ?
Спасибо за отзыв в репутации очень мило с Вашей стороны 🤣, отлупили мальчишку просто так.
🚬 Расскажите мне, где я там ошибку по стандартам сделал, научите уму разуму глупого мальчишку.
С Уважением.
При заходе на dot.com в роботсе пишем следующее
User-agent: *
Host: dot.com
Disallow: /dot/
При заходе на www.dot.com ставим роботс следующем
Host: www.dot.com
Disallow: /
Реализация легкая перенастройка сервера чтобы он понимал по HTTP запросу какой роботс показывать, дело 5 минут.
Вполне может если он занял сразу высокии позиции продвигался используя спам технологии, а потом на него стукнули .....
