Viki87: Статья хорошая, но решения своего вопроса не нашел там. А задача та же - запретить через .htaccess индексацию всех файлов с расширением html. Что туда прописывать?
Антон Белов: вы мой фотоблог видели? На нём нет ни одной страницы, где больше 500 символов уникального текста...и ничего...отлично индексируется и позиции потихоньку набирает
Viki87: порой поисковики игнорируют его и индексируют, потому вариант с .htaccess более надежный
ПС его не игнорируют. У robots.txt рекомендательный характер, и для ваших задач грамотной настройки robots.txt достаточно. Если все таки решили запретить жестко индексацию - пройдите по ссылке запрет индексации. Если лень читать и разбираться - напишите задачу - мы напишем решение.
bds4962: Привет всем! Какая- то непонятная случилась история. На странице http://agentrf.ru/prodazha_dom/ написал тексты: продажа домов, продажа домов в новосибирске, продажа частных домов в новосибирске. Закупил ссылки, а толку нет. В чем проблема?
Что нужно прописать, чтобы /page/ и /page/2/ не было в выдаче.
Disallow: /*page/$
Disallow: /*page/2/$
Запретит все страницы заканчивающиеся на page/2/ и page/
Поставил эти строчки, прогнал через анализ сайта в Rookee - вылезла "техническая ошибка: одно из зеркал не работает". Еще есть варианты?
Вряд ли эта ошибка связана с запретам доступа роботам к файлам *.html. Не работает одно из зеркал. Проверьте зеркала сайта.
Итак до 20 заголовков. Запроса как такого в заголовке нет.
Поменяйте на h4 конечно
Но мне говорят, что ничего страшного в этом нет
врут
Все правильно, я так и делаю.
Статья хорошая, но решения своего вопроса не нашел там. А задача та же - запретить через .htaccess индексацию всех файлов с расширением html. Что туда прописывать?
RewriteCond %{HTTP_USER_AGENT} ^Google.* [OR]
RewriteCond %{HTTP_USER_AGENT} ^Yandex.*
RewriteRule ^.*\.html$ – [F]
вы мой фотоблог видели? На нём нет ни одной страницы, где больше 500 символов уникального текста...и ничего...отлично индексируется и позиции потихоньку набирает
Рад за вас :) Не видел, киньте ссылку.
порой поисковики игнорируют его и индексируют, потому вариант с .htaccess более надежный
ПС его не игнорируют. У robots.txt рекомендательный характер, и для ваших задач грамотной настройки robots.txt достаточно. Если все таки решили запретить жестко индексацию - пройдите по ссылке запрет индексации. Если лень читать и разбираться - напишите задачу - мы напишем решение.
Подскажите пожалуйста, как закрыть от индексации все файлы с расширением html (собственно сами новости и статические страницы)?
Есть два варианта, закрыть в robots.txt и в htaccess. Вам зачем это нужно?
видимо еще время мало прошло, с момента ваших действий
Мы же не знаем какие он именно действия выполнил и сколько, какие цели ставил и от чего отталкиваться.
Привет всем! Какая- то непонятная случилась история. На странице
http://agentrf.ru/prodazha_dom/ написал тексты: продажа домов, продажа домов в новосибирске, продажа частных домов в новосибирске. Закупил ссылки, а толку нет. В чем проблема?
Ну почему же толка нет?
В Я по Нск:
продажа частных домов в новосибирске 13-е место,
продажа в новосибирске - 27
продажа домов в новосибирске -57