так выход один менять хостера
Т.е. делаем html карту сайта к примеру с помощью программы A1 Sitemap Generator, получены файл html делим ровно по 100 ссылок, делаем страницы с именами типа page1.html, page2.html и т.д. после эти страницы ложим в корень сайта и на главной странице сквозняком прописываем ссылки типа Раздел номер 1, Раздел номер 2. Т.е. так?
хостер у меня Мастерхост :)
megaivan добавил 10.06.2009 в 22:26
Мне кажется в этом и вся причина щас глянул лог, айпи паука sape, на хостинге лимит процессора стоит в 2,5% а лог выдает вот что:
[Wed Jun 10 18:02:15 2009] [warn] [client 217.107.36.73] Resource limit exceeded, access to mysite.ru is temporarily denied
[Wed Jun 10 18:02:15 2009] [warn] [client 217.107.36.73] CPU limit exceeded (15.1%)
Пипец, и что делать с этим .... МХ :(
карта сайта одна лежит в корне сайта sitemap.xml указано в robots.txt
Иногда хостер выдает 503 ошибку, мне кажется здесь и зарыта собака
Так я понимаю sape не индексирует сайт, только по одной причине что слабенький хостер?
карту сайта лучше сделать в виде sitemap.xml (месяц, 0.5) прописывать в robots.txt это поможет?
Движок свой, команда профи, не думаю что от этого зависит, и тем борлее не один проект на нем делали.
Так, а по DLE это как связано?
карта сайта есть и нормальная :) Но вот грешу в сторону хостинга, вроде хостера досят. иногда 503 вылетает ошибка. Т.е. я так понимаю полюбому косяк в хостинге и невозможности паучка дойти доконца, т.е. паучок ждет таймаут и останавливается на стольких страницах.
Или всетакись есть ньансы?
Ну не все. А если точно и из личного опыта?
А какие из платных программ хороши, по отслеживания обратных ссылок, и качества и т.д.?
Да так пару человек мне "свистели" что это не очень хорошо, вот и решил задать вопрос профи.
Спасибо всем за ответы.
