Вопрос по robots.txt

12
M5
На сайте с 12.08.2009
Offline
221
M25
#11

а карта сайта? xml и обычная.

► Рейтинг серверов — ТОП10 ◄
Links Forever
На сайте с 20.08.2006
Offline
329
#12
M25:
а карта сайта? xml и обычная.

И как быстро индексит Яндекс с карты сайта xmlной? Вот в том то и дело. А обычная это то же пагинатор от которого я пытаюсь избавиться :)

Я очень люблю вкусные рецепты (https://povar24.info) квашеной капусты (https://kvashenaya-kapusta.ru/) и салат оливье (https://salatolive.ru/).
MW
На сайте с 28.05.2010
Offline
136
#13

Disallow: /page/1

Disallow: */page/1

Disallow: */page/*

Вот что стоит у меня и все отлично индексируется. Для этого просто используйте sitemap. Обновляйте его после того как зальете пачку новостей и не будет проблем с индексом.

victim
На сайте с 12.02.2006
Offline
189
#14
_alk0g0lik_:
Ага, осталось только понять насколько товарищ Алаев разбирается в вопросах SEO.

А что, есть какие-то сомнения в моей компетентности? Давайте выясним это дело...

CheckTrust.Ru (https://checktrust.ru/) - новый сервис для проверки ТРАСТа и заСПАМленности сайтов.
Links Forever
На сайте с 20.08.2006
Offline
329
#15
victim:
А что, есть какие-то сомнения в моей компетентности? Давайте выясним это дело...

Давайте, представьте нам факты, мы обсудим.

victim
На сайте с 12.02.2006
Offline
189
#16
_alk0g0lik_:
Давайте, представьте нам факты, мы обсудим.

Я не собираюсь ничего представлять, тем более не знаю, какую тему вы имеете ввиду сейчас.

Спрашивайте, высказывайте свои сомнения и т.д., а я отвечу.

Z
На сайте с 13.12.2009
Offline
452
#17
victim:
Я не собираюсь ничего представлять, тем более не знаю, какую тему вы имеете ввиду сейчас.

Спрашивайте, высказывайте свои сомнения и т.д., а я отвечу.

обоже... может в отдельном топике?

ЗЫ

По теме. sitemap.xml вполне достаточно для индексации. Ну можете еще попинговать новые страницы, тогда точно все схавается и быстро

Консультации, seo-аудиты - https://seo-consulting.su Профессионально и без воды
H
На сайте с 02.11.2008
Offline
49
#18

Добрый день! У меня такая проблема. Фильмовый сайт и один фильм находится в разных категориях,вследствие чего получаются дубликаты постов . Что можно сделать чтобы такого не было?

www.сайт.ру/film/drama/17197-avrora.html

www.сайт.ру/film/trejler/17197-avrora.html

H
На сайте с 02.11.2008
Offline
49
#19

Неужели ни кто не сталкивался с такой проблемой?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий