Любопытно, что робот яндекса посещает страницы, но не заносит их в поиск. К примеру
37.140.141.8 - - [21/Sep/2014:13:52:23 +0400] "GET /index.php/razdel/935-novaya-statya HTTP/1.1" 200 28509 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
Вроде бы, бот побывал на свежей еще не проиндексированной странице, но не занес ее в поиск. Кто виноват и что делать?))
Вроде бы вполне "уважаемый" и приличный. Без косяков. IHC. Последняя проиндексированная статья датирована 11 сентября. С задержкой серьезной индексируется. Посмотрел логи - робот приходит каждый день. Отмечается примерно такими строчками:
95.108.129.207 - - [21/Sep/2014:04:27:22 +0400] "GET / HTTP/1.1" 200 35616 "-" "Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots mtmon1.yandex.ru)213.180.206.197 - - [21/Sep/2014:04:34:37 +0400] "GET / HTTP/1.1" 200 35615 "-" "Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots mtmon2.yandex.ru)Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
У меня быстрая индексация - просто беда! Яндекс индексирует статьи с задержкой недели в две. Не помогают ни аддурилки, ни твиттеры. Гугл - один-два дня и готово. Вот интересно, что еще попробовать? Тексты близко к рерайту, но самописные. Естественно, что уникальность по адвего на уровне 95% и выше. Количество символов примерно от 1500 без пробелов и выше. Тексты новые пишутся раз в 5-6 часов за исключением выходных дней. И что, чертдери, Яндексу еще надо?!!! Сайт вроде культурный, ни порно, ни всплывающей дури нет, ссылками не торгует и пр. Направьте, если у кого-то соображения имеются!
От Post-edit спасает такое
# 403 for flooders
RewriteCond %{REQUEST_METHOD} =POST
RewriteRule .*/edit$ - [L,F]
А вот от Post спама лекарства пока не нашел. Постоянные перегрузки на сервер, а отрубить post для всего сайта - не выход. Комменты, авторизация в админке и пр... Неужели нет выхода?
Добрый день, уважаемые форумчане. Подскажите пожалуйста, а каким образом определить после добавления кода
RewriteEngine OnRewriteBase /# 403 for floodersRewriteCond %{REQUEST_METHOD} =POSTRewriteRule .*/edit$ - [L,F]
в htaccess, что post запросы на страницы с /edit будут отрабатываться с 403? Очень нужно. Очередное нашествие ожидается с 20.00 такая проблема уже дня три-четыре. Сегодня вот пытаюсь отбиться. Код добавил, но хотелось бы проверить, не дожидаясь реальных событий... Спасибо
Дело состоит в том, что главные страницы категорий в топе благодаря текстам на этих страницах. То есть на каждой странице определенный набор ключевиков + название города или региона. Так вот, если эти страницу УЖЕ заточены под определенный регион, каким образом сориентировать их на другой город??? думаю, указания региона в ЯВМ будет явно недостаточно, а править главные страницы категорий не хочется, поскольку есть риск после переиндексации потерять позиции в старом регионе. Вот и ломаю голову, как поступить.
Возможно стоит создать одну-две категории с текстами и ссылками на основную продукцию, которые будут заточены под новый регион. А внутренними ссылками выводить покупателей на продукцию, не меняя старых страниц. Но кривобокое какое-то решение получается...
1 статья - одна внешняя ссылка. старался так.
Такое ощущение после прочитанных сообщений, что сапа - это благо и на него надо молиться как ПС, так и пользователям)... Ну, эт субъективные ощущения. Что же, вечные ссылки и статьи - в топку?
Познавательно, полезно. Стоит прислушаться. Интересно только, как это все смотрится в контексте изменений алгоритмов ПС за последние 3 месяца?
Сегодня напишу, ответят - отпишусь. Спасибо всем