Тогда бы «Статистика сканирования» в гугл вебмастере и «История индексирования» в Яндексе показывали изменения стабильности сканирования из-за ограничения хостинга к ботам ПС.
В последнее время оптимальное через метатеги закрывать индексацию, а не самым Robots.txt. Правильный robots.txt для WordPress и применение мета тега robots.
Надо сделать, чтобы на странице «?do=feedback» гости могли отсылать письма только администраторам. А то можно еще Главным редакторам слать. Пробовал отключить для Главных редакторов переписку в админке, не помогло. Наверное надо колупать feedback.php…
Вуаля: Кнопка принудительного обновления содержимого активной таблицы
2Str256: Да, когда сидел на старых машинах, то замечал такие глюки. Выхода сейчас нет, разве делайте апгрейд ПК, или на худой конец - пишите разработчикам в планы. С большими объёмами данных по любому надо SSD накопитель и 4-8 ядер CPU.
UPD: Извиняюсь, не «глюки», а торможения в виде длительной обработки операций.
Вот Вам человек все правильно написал. Я же в своем примере не 400 страниц привел, а конкретно первые страницы разделы. Вы же их двигаете? Вместе с главной это ~ 20 страниц.
1. Для тех продвигаемых 20 страниц добавьте немножко текста (200-500 збп на каждую страницу) и заголовок H1 с разбавленным ключом. Это будет как бы описание раздела без переспама ключей. А то у вас текста совсем нет, только мини-картинки. Для молодых сайтов это дорого в бан.
2. Все кроме первых страниц (страницы пагинации) закройте от индексации (лучше через метатег noidex, или в файле robots.txt.
3. Определитесь с главным зеркалом сайта с www \ без www, - там без www поисковики его больше полюбили. С ненужного варианта сделайте редирект на нужный.
4. Пропишите главное зеркало в robots.txt .
5. Убедитесь, не нарушает ли сайт правила Адсенс, а то рискуете заблочить аккаунт с таким ГС.
Судя по индексации Яндексом, сайт уже под фильтрами. Так что, если трафика немного, то лучше сразу готовьтесь пересесть на другой проект. Смысла вытягивать этот не вижу. Читайте литературу: книги, блоги, темы на серче, и в новом сайте таких грубых ошибок больше не делайте.
Гугл лояльнее относится к дескрипшену. Яндекс же обычно показывает его только в тех случаях, когда искомой фразы нет в тексте статьи (найдено по ссылке и т.д.).
Что же конкретно про ваш случай, то лучше сначала пропишите УНИКАЛЬНЫЕ человеческие дескрипшены, а не генерированный спам-лист.
Главная description:
Заставки на рабочий стол,обои,заставки,супер заставки,фото,автомобили,мотоциклы, девушки,природа,пейзажи,животные,цветы,обои xp,обманы зрения,фоторамки
Раздел Девушки description:
На сайте представлены самые красивые и популярные заставки цветы, животные, архитектура, авиамодели, собаки, зимний спорт, фоторамки и многие другие
Раздел Природа и Пейзажи description:
На сайте представлены самые красивые и популярные заставки летний спорт, девушки, мотоциклы, авиамодели, города, зимний спорт, мультфильмы и многие другие
Думаю больше вопросов по такому ГС не будет?
Цифра 600 ничего не значит. Вы запустите проверку прокси с включенной опцией «Считать закапченные прокси серверы плохими». Вот тогда узнаете, сколько реально прокси рабочих в списке. Я при 100-200 незакапченных прокси ставлю «задержку 2500-5000 мс» и «Количество потоков 30-50». Пока экспериментировал для нахождения идеальных параметров, то также были приколы, когда парсинг заходил в ступор.
В Язли другой алгоритм работ с проксями. Он возможно находит пару рабочих среди ваших 600 прокси и нагружает их по максимуму, вот и успевает собрать данные, пока не словит капчу.
Если точно определились, что будете тот запрос мордой двигать, то:
- Перепрофилируйте внутреннюю страницу на какой то смежный запрос, чтобы она зря не пропадала.
Если на сайте прыгают разные страницы по одному и тому же запросу, значит внутренняя прилинковка у вас коряво работает.
- Проследите, чтобы анкорные ссылки с важным ключом вели только на главную страницу. Быстро просмотреть какие ссылки ведут на нее можно в панели вебмастера гугла: «Траффик – внутренние ссылки» или другими методами.
«Вид – автонастройка видимости колонок – Экспортировать» и будет Вам счастье.
