1) Explain тормознутых запросов нужен,
2) Структуры таблицы
если к яндекс.xml запрос шлется в урле, то по позициям косяк, если в xml запросе, то тогда все ок, я такой вопрос задавал и в тех. поддержку allsubmitter, сказали ждать новой версии, то есть суть в том, что запрос должен слаться через xml а не через урл
для вас подойдет sphinx
не надо танцев с бубном, сразу все проблемы проподут
ps:
по моим критериям это не мало... а скорее даже много, не очень но много
оптимальное решение это mysql + php,
не вижу никакого смысла хранить 10-30 тыс файлов... так как организовать быстрое файловое хранилище с удобствами, какие предлагает mysql гораздо сложнее чем использовать базу,
далее сам mysql кэширует запросы, по этому если у вас там посещаемость будет до 5 тыс думаю вообще про нагрузку не стоит париться...
если нужен поиск по этому всему, то надо будет выбрать решение, но если нужен поиск и будет все на файлах, а не в базе, то будет очень много проблем, то что делается за 5 мин может уйти на реализацию день, а то и больше
по этому мое мнение mysql+php и даже на другие варианты я бы не тратил время для рассмотрения
может еще играть роль и спектр анкоров ссылок... по этому придется более обдуманно составлять анкор лист
пока вижу необоснованную на мой взгляд перетасовку в выдаче.... но надо ждать пару апов
Происходит по разному, то скачивает, то нет (чаще не скачивает...)... может из-за того что архивы у меня 30-150 мег всреднем на сайт... а в распакованном от 1.5 гига...
такова структура портала, проще продавать баннеры на одном крупном сайте, чем на 10 мелких...
Дополнение:
пробовал регить субдомены в яндекс каталоге, не помогло...
В таком случае страницы по прежнему продолжат конкурировать между собой в рамках одного домена
На самом деле я привел упрощенный пример, данные субдомены фактически самостоятельные информационные и коммерческие подразделения сайта.
Также есть раздел частных объявлений, его оптимизация пока не производилась - есть подозрения, что и он начнет конкурировать за релевантность...
долгое время (2-3 месяца язл не может загрузить ссылки с яндекс.вебмастера):
указываю сайт, язл начинает загрузку, при скачке 700кб-1мег язл виснет и выдаёт собщение не удается загрузить файл ссылок... и дальше висит... ждал с каждой новой версией, что исправят... но так и не исправлено... раньше все работало на том же компьютере с теме же настройками (глюк появился после скачивания новой версии месяца 2-3 назад)
Кто сталкивался и что делать?
-------------------------------
Изучил проблему: получилось, что очень медленно скачивается архив с яндекс вебмастера, и обрывается или язл обрывает соединение...
есть небольшие колебания, но самый сильный был ап для меня первый, а для конкурентов вчерашний, что заметил: яша в очень активном режиме переиндексит сайт по 100к страниц в сутки (в индексе больше 1 млн)