slaviktorres: но гугл красавчик же, проиндексировал страницы, в поиске выдает ссылки на страницы юзеров и пишет "Описание веб-страницы недоступно из-за ограничений в файле robots.txt.", как так???
А Вы уверенны, что это страницы в индексе? А проверить:
site:имя_домена текст_с_страницы
и ничего не найдет. Это просто ссылки на страницы. Как и описали, метатеги ноиндекс на страницы и все. Забудет про них гугл.
Feniks000, а посмотритека список из ВМТ - сканирование - ошибки сканирования и вкладка "доступ запрещен". Нет там чего? И если есть, можно урл проверить в "заблокированные урл".
easywind, нет, причем тут сезонность к позициям сайта в выдаче )
нет запросов, а ссылки увеличиваются(покупаются) и наступает пингвин сайтам :)
Metazur, популярность запросов не смотрите?
http://www.google.com/trends/explore#q=gucci%20guilty&cmpt=q
уточните, для своего региона и смотрите. Возможно, просто интерес упал к товару.
как правильно создать robots.txt
xenu проверте все ссылки сайта. Посмотрите какие страницы есть и будете примерно знать, что закрывать.
Задолбался уже отвечать но..
но гугл красавчик же, проиндексировал страницы, в поиске выдает ссылки на страницы юзеров и пишет "Описание веб-страницы недоступно из-за ограничений в файле robots.txt.", как так???
А Вы уверенны, что это страницы в индексе? А проверить:
site:имя_домена текст_с_страницы
и ничего не найдет. Это просто ссылки на страницы. Как и описали, метатеги ноиндекс на страницы и все. Забудет про них гугл.
Ещё говорят, что лучше отдавать 410 вместо 404. мы пока не тестировали.
гуглбот их одинаково отрабатывает. Была тема на гуглефоруме, но не помню какая.
Мемори, что-то я не припомню такую тему. Это не где обсуждали сайт "почему мой сайт с винраром хуже других" эта тема?
Целевой портал в гугле ВСЕГДА забьет вчистую любой продуктовый сайт.
только до того момента, пока гугл не отделит мух от котлет. В данном случае, сайт производителя от форума обсуждения.
Feniks000, а посмотритека список из ВМТ - сканирование - ошибки сканирования и вкладка "доступ запрещен". Нет там чего? И если есть, можно урл проверить в "заблокированные урл".
во вторых ПС всё равно посчитает сайт не уникальным!
"уникальность магазина" ни одна ПС не определяет :)
Или со спам-ссылками из комментов, при чем в коммерческих тематиках...
Только из-за них? :)