Чем проверить много страниц на работоспособность

blackgold
На сайте с 09.02.2008
Offline
133
1692

В директе куча компаний и объявлений. Встал вопрос: как проверить урлы, включая из быстрых ссылок на наличие по ним страниц.

Дело в том что товары постепенно добавляются-убираются-редактируются и со временем часть урлов ведет на пустую страницу.

Как проверить - не могу сообразить... Ну выгрузил в эксель а дальше что?

RAS
На сайте с 27.11.2005
Offline
126
RAS
#1

если выгружаются в любой формат, хоть текст, а дальше скриптом пройтись, который проверит ссылки.

Администрируем сервера, впс, вдс. Ускоряем загрузку сайтов - DLE, Word Press, Joomla, Modx... Настраиваем безопасность. Ручная чистка rootkit/malware/вирусов. (/ru/forum/867860) Разработка - shell/bash/sh/python/perl.
CunninGFox
На сайте с 05.10.2007
Offline
167
#2

blackgold, Если есть список страниц, то я давненько нашел вот этот сервис. Много не проверял, но 200-500 урлов может чекнуть точно.

http://www.seolium.com/ru/seo/%D0%B8%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BC%D0%B5%D0%BD%D1%82%D1%8B/%D0%BF%D1%80%D0%BE%D0%B2%D0%B5%D1%80%D0%BA%D0%B0-http-status-code/

Комплексное продвижение сайтов: увеличение количества клиентов для Вашей компании. От 8.000 рублей. Возможна работа по договору и оплата по безналу. Пишите: seo@sergeus.ru
blackgold
На сайте с 09.02.2008
Offline
133
#3

CunninGFox, спасибо хороший сервис то что надо, только кирилицу не принимает. приходится повозиться

---------- Добавлено 19.03.2015 в 14:14 ----------

RAS:
скриптом пройтись, который проверит ссылки

спасибо, а я думал граблями

P
На сайте с 25.05.2007
Offline
103
#4

Для этих целей мне очень нравится сервис http://coolakov.ru/tools/ping/ (еще бы, я ж сам его написал :)

Но вообще для таких целей лучше использовать "Screaming Frog SEO Spider", Mode -> List. Он и стабильнее и быстрее.

coolakov.ru/tools (http://coolakov.ru/tools/): определение конкурентов (http://coolakov.ru/tools/most_promoted/), кластеризация запросов (http://coolakov.ru/tools/razbivka/) и т.д.
blackgold
На сайте с 09.02.2008
Offline
133
#5

pimandr, а если ответ 0 ? ))

P
На сайте с 25.05.2007
Offline
103
#6

blackgold, для кириллических доменов проверка не работала, потому и ноль.

Добавил обработку кириллицы в доменах, можете проверять.

blackgold
На сайте с 09.02.2008
Offline
133
#7

pimandr, царь! все работает. пошёл чистку делать.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий