ROBOTS.txt

http://www.robotstxt.org/wc/exclusion-admin.html - на языке оригинала.

http://www.yandex.ru/info/webmaster2.html - по-русски.

Если нету вообще файла robot.txt может ли это негативно сказаться? И может ли помочь файл в индексации, или только для закрытия определенных частей сайта поисковым системам его лучше использовать?

нет, если его нет, значит разрешена индексация всего сайта

а где можно найти пример как его написать и разместить? желательно чтобы не заумно было а наглядно ипонятно

Вам ли этого не знать, 6-ть лет работаете уже :)

Кстати, прежде чем, что-то писать не плохо было бы сначала тему почитать, хотя бы 2-й пост.

да

я то знаю, только жизнь на месте не стоит и требования даже у яндекса меняются постепенно, а новое надо отслеживать... насч

ёт того что бы читать так возьми те почитай те сами и второй топик и моё сообщение и не плохо подумать что написано и про что я спросил, может быть найдёте разницу

как я понял http://www.yandex.ru/info/webmaster2.html для вас слишком заумно и не наглядно? =)

Вам такой товарищ как fiksi не знаком кстати? Вы бы с ним сработались наверное :)

на москвича обижаться себя не уважать!!! 🙅 куда нам до умных господ то? мы же все дерёвня а вы типа господа 😆

Комплексы? :)

Автору темы и модерам: Сорри за оффтоп, больше не буду, просто такие субъекты убивают :)

1. Посмотрите понравившиеся Вам сайты/robots.txt , как один из способов.

2. Натыкался на сведения, что пара поисковиков не индексирует, если нет роботса (не помню какие) - но за достоверность не ручаюсь, так, слухи...