Один из них зеркало второго. Посмотрите файл robots.txt на этих сайтах 🚬
matr, а вы дальше будете наращивать количество ссылок или остановитесь?
Хороший плагинчик. Я на нем когда-то изучал как реализовываются некоторые вещи в Firefox. 🚬 jeka911, спасибо.
Хех 🚬 нашли кому посоветовать. У меня в подписи своя проверялка есть
У всех сейчас такая проблема. Накрылся 123sdfsdfsdfsd.ru который выполняет редирект. Ждем пока починят.
Это разные вещи :)
При проверке GC можно использовать запрос cache: и получить практически 100% точность, но таймаут приходится выкручивать до минуты, иначе через 25-30 запросов гугль банит IP. Очень медленно. А можно включить галочку быстрой проверки, тогда используются запросы info: как в yccy и некоторых других программах. Запросы идут через Google API и без проблем проверяется подряд по тысяче страниц с полусекундной задержкой.
Если вы проверяете YAP или YAL все запросы идут на go.mail.ru Таймаут 2-3 секунды позволяет проверять по 400-500 страниц за раз, потом лучше сделать паузу минут на 10-15.
Исключение составляют URL с русскими буквами, кавычками, запятыми, двоеточиями и т.д. - эти проверяются напрямую через Яндекс. Если таких кривых адресов много, тогда стоит таймаут увеличивать.
В любом случае если проверка остановилась или вы остановили ее сами, можно еще раз нажать на кнопку проверки и она продолжится с места остановки.
Скрытые блоки текста используются в разворачивающихся меню навигации и дополнительных информационных блоках чтобы не загромождать основной контент страницы и сделать ее более читаемой для людей. Если за это банить, так треть сайтов в бан уйдет. В первую очередь microsoft.ru видимо 🚬
Без знания теории, хотя бы поверхностного, нет смысла открывать топ вообще. "Смотришь в книгу..."
Никто вам и не говорил, что в топе сайты по PageRank сортируются, но отрицать влияние одного из факторов несколько недальновидно.
А вы? 🚬 PageRank один из факторов, влияющих на ранжирование документов в Google. Это уже такой баян, что читать ваши "не влияет" даже не смешно.
http://www.google.com/corporate/tech.html
Ну или Сергея Людкевича почитайте, тоже полезно
http://www.promo-techart.ru/analysis/relevants.htm
Через .htaccess по USER_AGENT лучше всего
RewriteEngine onRewriteCond %{HTTP_USER_AGENT} liveinternet [OR]RewriteCond %{HTTP_USER_AGENT} WebAlta [OR]RewriteCond %{HTTP_USER_AGENT} Yanga [OR]RewriteCond %{HTTP_USER_AGENT} Twiceler [OR]RewriteCond %{HTTP_USER_AGENT} Flexum [OR]RewriteCond %{HTTP_USER_AGENT} libwww-perlRewriteRule ^(.*)$ - [F,L]
