Не индексируется сайт! Помогите!

12
YAGR
На сайте с 06.07.2005
Offline
236
#11
antono:
Так не будет работать, так нужно:
User-Agent: *
Disallow
Host: www.sedoy.ru

ИМХО надо двоеточие после дисалоу ставить :)

Новая RTB-сеть (https://advertur.ru/?rf=553bea1c5cd07610527382) - максимальный выкуп трафика. Успевай зарабатывать!
Evgeniy
На сайте с 22.09.2005
Offline
23
#12

это-то понятно, давно исправил...

Evgeniy
На сайте с 22.09.2005
Offline
23
#13

закрыл все страницы (13 янв), кроме главной. ссылок на неё достаточно.

кто подскажет, через сколько Яндекс ее увидит? и увидит ли?

Torio
На сайте с 25.06.2005
Offline
124
#14
antono:
Так не будет работать, так нужно:

User-Agent: *
Disallow
Host: www.sedoy.ru

Ваши аргументы? Для Яндекса Disallow вовсе не обязателен. ;)

С уважением, Виктор. Тел: (905) 610-95-80
FlyAway
На сайте с 01.06.2005
Offline
439
#15

User-Agent: Yandex

Disallow:

Host: www.sedoy.ru

вот так надо, уже обсуждалось где-то

Evgeniy, ручками удалите то, что закрыли

Сердюченко Андрей (http://www.serdyuchenko.ru/) Масонская ложа — SЕ-Team.ru (http://goo.gl/YIjV6h) :)
pauk
На сайте с 26.01.2005
Offline
543
#16
Torio:
Ваши аргументы? Для Яндекса Disallow вовсе не обязателен. ;)

Для Яндекса и Рамблера robots.txt - просто теория😎

Все индексируется, поверьте. Да это и к лучшему

Hi!
Torio
На сайте с 25.06.2005
Offline
124
#17
pauk:
Все индексируется

Не запрещенное при помощи Disallow: - поверьте. 😎 Я так новости запретил индексировать. Просто если не хотите ничего запрещать - Disallow: можно опустить. :) - речь о Яндексе.

ironic
На сайте с 09.09.2003
Offline
163
#18

У меня Я недавно вообще прикололся, больше месяца один сайт не индексировался (вернее чой-то вылетел совсем), потом я прописал:

User-Agent: *
Disallow: /cgi-bin/

User-Agent: Yandex
Disallow: /cgi-bin/
Host: www.site.ru

Через недельку в индексе появилась одна внутренняя страница без www 😂

После чего я быстренько прописал просто:

User-Agent: *
Disallow: /cgi-bin/
от греха подальше, пускай Я сам решает как ему приятнее сайт индексировать, щас уже с десяток страниц заиндексилось, хотя почему-то без главной... ну да ладно, главное что прогресс положительный 😎

Такие вот приключения наводят на мысль, что у них там какая-то конкуренция нездоровая в разных отделах программеров :) народ тут месяцами гадает почему сайт не в индексе, я вот уже не раз сталкивался с тем, что Я почему-то принимает за основное зеркало не то которое ему прописано в роботсе или доступно (некоторые сайты работают только с www, например) и в итоге ничего не индексируется!

Вот такие пироги, малята...

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий