Снова о склейке сайтов

S
На сайте с 23.01.2006
Offline
140
689

Наблюдаю ситуацию:

1. есть сайт www.site.ru

2. В выдаче он присутствует как www.site.ru

3. В robots.txt - Host: www.site.ru (притом уже чуть не полгода)

4. Внешние ссылки стоят на www.site.ru

В списке проиндексированных страниц присутствуют и www.site.ru, и www.site.ru/index.html

При этом время проиндексации у этих двух страниц (а по сути - одной) - разное! С разницей более чем в сутки...

Это нормально вообще? Если нет, то как их склеить? Через мод_реврайт 301 остается только?

Полезности: Комплексное ускорение сайтов https://www.aseo.tech | Статьи для сайтов и Дзена по 19,9 руб. https://fixpricecontent.ru
Agador
На сайте с 16.02.2005
Offline
87
#1
sPoul:
Наблюдаю ситуацию:
1. есть сайт www.site.ru
2. В выдаче он присутствует как www.site.ru
3. В robots.txt - Host: www.site.ru (притом уже чуть не полгода)
4. Внешние ссылки стоят на www.site.ru

В списке проиндексированных страниц присутствуют и www.site.ru, и www.site.ru/index.html
При этом время проиндексации у этих двух страниц (а по сути - одной) - разное! С разницей более чем в сутки...

Это нормально вообще? Если нет, то как их склеить? Через мод_реврайт 301 остается только?

А внутренние ссылки на индекс не ссылаются?

Должны стоять на "/"

Если нет, используйте реврайт.

Marshalkin.ru (http://www.marshalkin.ru) - Все будёт тип-top F5 - моя любимая кнопка!
S
На сайте с 23.01.2006
Offline
140
#2

ха... внутренние то ссылаются... ну допустим я это уберу, а тогда по оценкам через сколько времени Яша перестанет делать двойную работу и удерет дубли из базы? А заодно, подозреваю, что слегка пессимизировать страницы в выдаче ;)

cims
На сайте с 15.11.2005
Offline
60
#3

Если для вас принципиально отсутствие

sPoul:
www.site.ru/index.html

То по всей видимости можно в файле robots.txt указать следующее

Это указание для всех поисковиков>>

User-Agent: *
Disallow: /index.html
Host: www.glavnoye-zerkalo.ru

Для Yandex >>

User-Agent: Yandex
Disallow: /index.html
Host: www.glavnoye-zerkalo.ru

Подробнее о robots:

http://www.yandex.ru/info/webmaster2.html#ROBOTS

http://www.robotstxt.org/wc/norobots.html

И конечно поиск форума очень много тем.

ну и проверить как видит его Y

http://www.yandex.ru/cgi-bin/test-robots?host=www.site.ru

Agador
На сайте с 16.02.2005
Offline
87
#4
sPoul:
ха... внутренние то ссылаются... ну допустим я это уберу, а тогда по оценкам через сколько времени Яша перестанет делать двойную работу и удерет дубли из базы? А заодно, подозреваю, что слегка пессимизировать страницы в выдаче ;)

Не помню точно, но чтото около 2-4 недель (в моем случае).

S
На сайте с 23.01.2006
Offline
140
#5

cims, спасибо за совет, все это знаю чуть не наизусть и по форуму ессно поискал, но конкретных смежных тем не нашел. А теорию знаю.

К тому же host доказал свою несостоятельность для склейки еще при сращивании двух доменов сайта (ru и info).

Agador, спасибо за информацию. эх, долго, но ничего не поделаешь.

E
На сайте с 25.10.2005
Offline
29
epr
#6

301 редирект с index.html поставьте на / и все. Самый простой способ - переименовать его в .php Сложнее - mod_rewrite

Spectre
На сайте с 26.09.2005
Offline
145
#7

Вот у меня какой вопрос возник: если ссылок на /index.html нет ни на сайте, ни вне его, откуда может появиться в Индексе эта страница и как она будет влиять на ранжирования www.site.ru в результатах поиска?

То что вы еще в топе, не ваша заслуга, а наша недоработка. (С) Платон Щукин.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий