Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Яндекс и Рэмблер.(?)

R
На сайте с 24.12.2003
Offline
2
Rabbit
437

Прошу прощения.Может такой вопрос уже имеется, но...

Вобщем, сайт новый, щас пытаюсь проиндексироваться.

Ну так Яндекс и Рэмблер заходят (в предидущ. выходные), ищут robot.txt.

Его тогда не было,соответственно ошибка 404.(Я этот файл тока сегодня создал). И сразу же сваливают. Уже 2 недели почти, а в яндексе и рэмблере сайт так и не появился.

Почему так?

I see the light at the end, But every time I take a step it`s get dim.
А
На сайте с 14.11.2003
Offline
150
Анар
#1
Как писал Rabbit
Прошу прощения.Может такой вопрос уже имеется, но...
Вобщем, сайт новый, щас пытаюсь проиндексироваться.
Ну так Яндекс и Рэмблер заходят (в предидущ. выходные), ищут robot.txt.
Его тогда не было,соответственно ошибка 404.(Я этот файл тока сегодня создал). И сразу же сваливают. Уже 2 недели почти, а в яндексе и рэмблере сайт так и не появился.
Почему так?

А кто вам сказал, что наличие robots.txt обязательно? Если при запросе этого файла поисковым роботом сервер выдал код 404 - это нормально. Нормальным будет и код 200 (OK). Индексация произойдет в обоих случаях.

C
На сайте с 19.09.2001
Offline
120
Cherny
#2

Отсутствие файла robots.txt не должно оказывать влияние на индексацию. Проверьте коды, которые возвращают сами страницы.

С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)
R
На сайте с 24.12.2003
Offline
2
Rabbit
#3

Хм, нормальные (200)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий