Если с robots.txt все ок, то где искать причины? Я так понимаю, под фильтром запросы вылетают. У меня все на месте...
Нет нормальный сайт. Туристический. Просто большая база предложений. Контент обновляется каждый день. За 8 лет под фильтры ПС не попадал. Вылетели страницы только из гугла (773000 из 1167700), в яндексе все на месте (380000)...
Так что это все-таки Crawl-delay: 10. Какое тогда значение оптимальное для более чем миллиона страниц? Или лучше его вовсе убрать? В любом случае, когда гугл обратно загонит в индекс страницы?
#
# robots.txt 4 site.ua
User-agent: *
Crawl-delay: 10
# Directories
Disallow: /includes/
Disallow: /misc/
Disallow: /modules/
Disallow: /profiles/
Disallow: /scripts/
Disallow: /sites/
Disallow: /themes/
Disallow: /tour_map_data/
# Files
Disallow: /CHANGELOG.txt
Disallow: /cron.php
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /LICENSE.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
# Paths (clean URLs)
Disallow: /admin/
Disallow: /comment/reply/
Disallow: /contact/
Disallow: /logout/
Disallow: /node/add/
Disallow: /search/
Disallow: /user/register/
Disallow: /user/password/
Disallow: /user/login/
# Paths (no clean URLs)
Disallow: /?q=admin/
Disallow: /?q=comment/reply/
Disallow: /?q=contact/
Disallow: /?q=logout/
Disallow: /?q=node/add/
Disallow: /?q=search/
Disallow: /?q=user/password/
Disallow: /?q=user/register/
Disallow: /?q=user/login/
Disallow: /infrastructure/get_geo/
Disallow: /category/
Sitemap: http://site.ua/sites/site.ua/files/sitemap.index.xml
# Yandex
User-agent: Yandex
Host: site.ua
Да, проверял. Позиции запросов по названным странам где-то на 3-5 пунктов ниже, чем в зоне UA. Я так понимаю, в других странах увеличивается конкуренция за счет зон RU и других, где есть контент на русском языке.
Цель такая - русскоязычные пользователи в этих странах должны видеть мой сайт на хороших позициях по определенным запросам. Возможно ли это сделать, неконкурируя при этом со всем рунетом?
Вот допустим, в google.com.ua запрос "аренда квартир в Киеве" на 5-м месте. Как сделать чтобы в названных странах позиция этого запроса не ухудшилась?
Каким образом это делать для украинского сайта с контентом на русском языке?
Я имел ввиду, если ошибку сделал - исправить. Или это уже будет жирно :) А то можно, конечно, удалил - набрал по новой...
Спасибо за программу - очень полезная для сиюминутной работы. Хотелось бы еще добавить возможность редактирования уже добавленных списков...
Вопрос возник по причине того, что надо принять решение, оставлять дежурного редактора на выходных или нет... Один из аргументов такой - нерегулярная периодичность наполнения сайта негативно влияет на оперативность его индексации... 🙄
