Создание файлов sitemap за 1-2 часа!

P
На сайте с 02.06.2006
Offline
123
377

Подскажите пожалуйста, есть ли возможность быстро создать файл sitemap сайта с 500 000 тыс страницами, при помощи какого-нибудь сервиса или программы??

Пробовал программы: GSiteCrawler и A1 Sitemap Generator - они очень медленные, на то что бы обойти весь сайт им потребуется около 24 часов.

K
На сайте с 31.01.2001
Offline
737
#1

Думаю, что при таком количестве страниц sitemap должен быть составной и генериться самим сервером, надо писать соответствующую прогу.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
FladeX
На сайте с 07.11.2008
Offline
163
#2

Если речь идет о форуме, то можете воспользоваться этим онлайн-сервисом.

Услуги посредника на бирже контента: информационные статьи 40₽/1000, «продающие» тексты 50₽/1000. Пишите в личку. Помогаю правильно переехать на https (/ru/forum/973447). Подписывайтесь на мой канал в телеграм: https://t.me/fladex (https://t.me/fladex).
[Удален]
#3

pash, а вы уверены, что у вас хостинг (сервер) выдержит 4000 запросов в минуту?

В GSiteCrawler поставьте число потоков 15 и паузу между запросами 0.

Ну а иначе- только то что сказал Kost

P
На сайте с 02.06.2006
Offline
123
#4
Kost:
Думаю, что при таком количестве страниц sitemap должен быть составной и генериться самим сервером, надо писать соответствующую прогу.

Это понятно, на данный момент пишу ТЗ на разработку такого скрипта..

FladeX:
Если речь идет о форуме, то можете воспользоваться этим онлайн-сервисом.

Нет не форум у меня.

Sveto:
pash, а вы уверены, что у вас хостинг (сервер) выдержит 4000 запросов в минуту?
В GSiteCrawler поставьте число потоков 15 и паузу между запросами 0.
Ну а иначе- только то что сказал Kost

Должен выдержать сервак вроде..

Попробую Ваш совет, спасибо.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий