Запрет индексации сайта

zekana911
На сайте с 19.11.2012
Offline
80
502

Уважаемые форумчане, прошу помочь мне в такой ситуации, избавлялись от дублей и ненужних страниц на сайте, а в итоге улетел весь сайт

Вот сейчас поправили файл robots написал платонам, но всеже есть сомнения, прошу взглянуть

http://otigolki.ru/robots.txt

S6
На сайте с 06.12.2011
Offline
158
SEO
#1
zekana911:
Уважаемые форумчане, прошу помочь мне в такой ситуации, избавлялись от дублей и ненужних страниц на сайте, а в итоге улетел весь сайт
Вот сейчас поправили файл robots написал платонам, но всеже есть сомнения, прошу взглянуть
http://otigolki.ru/robots.txt

В вебмастере Яндекса есть же инструмент для проверки - почекай нужные тебе страницы, пропускает ли твой роботс их.

Аудит сайта. Консультации.
zekana911
На сайте с 19.11.2012
Offline
80
#2

Да спасибо а как же решить данную проблему если мне нужно запретить все адреса которые содержат #!prettyPhoto[iframes]

яндекс воспринимает конструкцию *#!prettyPhoto[iframes]* как запрет для всего сайта

---------- Добавлено 03.07.2014 в 08:35 ----------

Вот сайт у которого все ок с яндексом а в роботе похожие конструкции

http://magok.ru/robots.txt

[Удален]
#3

Почему бы не написать саппорту яши? Что касается роботс они всегда дают развернутый ответ.

TEXHuK
На сайте с 25.12.2006
Offline
80
#4

В конструкции:

Disallow: *#!prettyPhoto[iframes]*

вы не учли что "#" это комментарий и роботы видят эту директиву как:

Disallow: *

Соответственно вы закрыли весь сайт к индексу.

Я бы сделал так:

Disallow: *prettyPhoto

или использовал Clean-param - надо смотреть на сайт, где работает.

zekana911
На сайте с 19.11.2012
Offline
80
#5

так сайт теперь открыт, но страницы типа http://beer.otigolki.ru/podcat/529/applikacii_detskie_termokleevye#!prettyPhoto[iframes]/0/

доступны, каким образом их закрыть

Disallow: *prettyPhoto не помогает

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий