Все вопросы по robots.txt

Hammer8
На сайте с 04.08.2011
Offline
175
#911
perejaslav:
User-agent: Yandex
Disallow: /

С этой строкой сайт будет закрыт от индексации Яндексом.

Полный спектр услуг по продвижению сайтов ()
S1
На сайте с 04.08.2010
Offline
56
#912

Добрый день.

Есть сайт у которого все урлы переделали на ЧПУ с подобных /galery.php?ct=1&item=104 с них в свою очередь стоит 301 редирект на ЧПУ.

С недавних пор появилась проблема в индекс яндекса и гугула стали попадать страницы главная+абракатабра типа(/index.php?ct=16&item=101 ; ?yclid=4884957076658588657 ; ?yclid=5910487251108012323 и т.д.) , которые являются по сути дублями главной страницы.

Решили закрыть таким образом через Роботс:

Disallow: /*?*

Disallow: /*?

Вопрос повлияет ли это на продвижение? Ведь основное количество внешних ссылок ссылаются на страницы такого типа /galery.php?ct=1&item=104 с которых идет 301 редирект на ЧПУ и если да то как по другому бороться с дублями главной страницы?

Заранее спасибо за ответы!

Saronit
На сайте с 15.02.2011
Offline
82
#913

Добрый день, после смены хостинга и движка сайта, ЯВМ не видит новый роботс. Все время подгружает старый, такое ощущение что он его держит в Кэше. Кто нибудь сталкивался с подобными проблемами.

Из действий, сменили хостинг, CMS, и в результате DNS.

СРА на рынке ICO и криптовалюты (https://goo.gl/sgJLN4) - Партнерская программа для вебмастеров Вступайте, смотрите, и зарабатывайте
[Удален]
#914

SMAX1, повлияет. А нужно всего то в коде прописать, чтобы на такие запросы 404 выдавалось.

Saronit:
Добрый день, после смены хостинга и движка сайта, ЯВМ не видит новый роботс.

Эээ, и в чем это выражается?)))

Saronit
На сайте с 15.02.2011
Offline
82
#915
Miha Kuzmin (KMY):
Эээ, и в чем это выражается?)))

Не видит его в панели вебмастера, подгружает старый роботс

[Удален]
#916

Ну если хост менялся, днс еще старые - дело 2-3 дней.

Saronit
На сайте с 15.02.2011
Offline
82
#917
Miha Kuzmin (KMY):
Ну если хост менялся, днс еще старые - дело 2-3 дней.

Спасибо, уже обновилась информация.

Andrei
На сайте с 22.10.2012
Offline
76
#918

Добрый вечер.

Подскажите как запретить поисковикам индексацию такого вида страниц в Robots.txt?

/complete-works/audi-a6-brendirovanie-avtoshkola-prioritet?field_auto_brand_tid=All&field_work_type_tid=All&field_city_tid=All&page=6

/complete-works/android-app:/com.pinterest?field_auto_brand_tid=All&field_work_type_tid=All&field_city_tid=All&page=6

[Удален]
#919

bendernative, для начала сами сформулируйте, чем вы недовольны в этих урлах. А потом в первый пост - /ru/forum/828288

Andrei
На сайте с 22.10.2012
Offline
76
#920

Miha Kuzmin (KMY), разве не видно что они индексируются Яндексом? Избавиться от дубликатов моя цель.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий