Вот:
User-Agent: *
Disallow: /out/
Disallow: /user/
Disallow: /cache/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /favorites/
Disallow: /backup/
Disallow: /addnews.html
Disallow: /*?*
Disallow: /*/print*
Disallow: /*print
Disallow: /2009/
Disallow: /2010/
Disallow: /2011/
Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /engine/redirect.php
Disallow: /rss.xml
Все страницы, которые в поиске гугля проиндексировались, добавляю в яндекс, там пишут эта страница запрещена к индексации, однако после сегодняшнего анализа сайта через сервис pr-cy, в поиске гугля +100 проиндексированных страниц. в яндексе всего 100 страниц в индексе в гугле 450, страницы для печати и юзеры, замечу, что в страницах для печати стоит также метатег <meta name=“robots” content=“noindex,nofollow”> но роботам гугля как-то на это наплевать.
Почему не нужная информация индексируется? У кого нибудь есть ответ?
Проанализировала все сайты которые упали после 25 числа, выяснилось, что робот гугля в индекс добавил, все что было запрещено в robots.txt, такие странице как для печати, юзеры и другой мусор. На сайте с 70 страницами новостей, в поиске более 400 страниц.
В целом это одна из причин, почему сайты были пониженны в поиске, пожалуйста проверьте у себя на сколько выросло число проиндексированных страниц.
Кто знает, как можно удалить страницы из поиска? по одной страницы, в вебмастере 350 удалять очень долго.
Кто нибудь писал в службу поддержки гугля, по поводу этой проблемы?
Подскажите, кто нибудь жаловался на сервис seroe.ru, недели не проходит как сайт опять за зеркален на этом сервисе, и что самое интересное в его поиске уже более миллиона сайтов. Что интересно, яндекс посадил этот сайт под фильтр, оставив одну страницу в индексе, гугль, часто, этому сайту отдает приоритет а не источнику с которого взят контент.
Откатов не будет судя по всему. Если-бы нужно было, уже давно откатил, осталось понять и простить, нашего кормильца.
Дело не в ссылках которые ведут на сайт. Иначе если так, системе вся сломается, скоро появятся предложения, войдите в топ заказав ссылки на конкурента. Наказать, если вы читали Метта, могут только сайт который ставит ссылки на другие сайты не по теме новости, а не сайт на который эти ссылки ведут, максимум чем они могут навредить, это не передавать ни какого веса.
Вам вероятно повезло, что вы не-разу не видели, сайты которые украли у вас контент. Тематика развлекательная, все доры обычно в ней ведут на браузерные игры или смс тесты. Создаются как я понимаю они автоматически, робот дора ходит по поиску гугля ищет сайты в топе зеркалит контент, затем весь контент перемешивает, чтобы как-то сделать его уникальным, а потом генерирует страницы. Однако уникальность их так себе, если искать полную новость на уникальность может и проскочить, если искать по части предложения, то вероятность найти дор с украденным у вас контентом велика. Эти доры тысячами создаются, каждый под отдельный ключ, в нужной пропорции, чтобы обхитрить пингвина и панду.
А вы не задумывались, что просели те страницы, контент которых больше разворовали. Ведь страницы которые просели были в топе по каким-то запросам, соответственно и воровали с них больше. В последние пол года заметила, если сайт в топе, чтобы сайт был уникальным нужно почти каждую неделю переписывать контент. Доры браузерных игр и разных смс партнерок, создавались буквально налету, беря контент с топовых сайтов в выдаче и еще плюс к этому легальный сервис seroe.ru, только перепишешь контент, через неделю в индекс заходит зеркало главной странице. Сейчас этот сервис порой показывается выше страниц, с которых он сделал слепок.
Этот вывод сделала после того, как сайт без сапы и закуных ссылок. После 25 просел на 50%, по тексту на сайте искала сайта, оказалось в интернете уже уникальный контент гуляет на Seroe.ru и других дорах, кстати почем-то эти сайты идут первыми в выдаче, а источник где-то далеко.
Кто заметил, что сайты которые попали под фильтр были скопированы сервисом seroe.ru, и при наборе заголовка, поиск гугля выдает скопированную страницу сервисом seroe.ru, а оригинальный сайт источник идет в конце? Почему этот вороватый сервис все еще в поиске и к томуже не под фильтром, ведь на нем своего контента нет, только чужие скопированные сайты !!!
Закономерности падениям нет, попадали абсолютна все сайты которые продвигались и которые нет, стали в топе также сайты которые продвигались и которые нет. В общем поменялось поколение веб мастеров, свершилась очередная революция.
Это бред какой-то википедия вся так построена, однако она в топе. Там порой в статье и 50 ссылок на другие темы.
