Найти ссылки, который выдают 404 ошибку

yuber, по яндексу вводить запрос ссылки и получите страницы на которых она расположена

wget --spider -r -l 1 --header='User-Agent: Mozilla/5.0' \

-o wget.log http://мой_сайт

Получится файл с ошибками. Отфильтруйте (тем же grep) 404, вот вам и список.

А вы уверены что какие-то страницы на них ссылаются? Раз 404 отдаётся, значит страницы не существует по идее.

А вообще можно попробовать PageWeight для этих целей. Если сайт небольшой декстопную версию, если большой онлайн.

http://home.snafu.de/tilman/xenulink.html

В выгруженном отчёте можно просмотреть страницы, ссылающиеся на 404.

Если бы такой страницы не существовало никогда, то 404 и небыло бы. Когда-то на нее ссылались, страница убилась а ссылка осталась, вот и хотят ссылки почистить

ну если страниц нет, то они не будут выходить в отчете, их просто нет. Раз они отдают 404 или 301 то значит они где-то имеются.

---------- Добавлено 30.07.2012 в 12:45 ----------

да ,логика именно такая - хочу убрать все 404 и 301 ответы

В semonitor есть модуль анализатор сайта: http://www.semonitor.ru/site_analyzer.html

Я написал, потому что не знаю где ТС получил этот список. К примеру в ВМ - бывало, что 404 показывается даже если и все внутренние ссылки ведущие на эту страницу уже удалены давно. Помню для одного сайта вообще отключил там отображение этой ошибки после того как безрезультатно прождал несколько месяцев удаления. Мне в их саппорте тогда ответили, что 404 потому что, на эту страницу есть внешняя ссылка.

А если получил этот список сканирующей программой, то и кто ссылается тоже сразу видно, если таковые страницы есть.

так вот мой вопрос как раз в том - как найти эту внешнюю или внутреннюю ссылку?

Если внешняя ищите в архиве выгрузки ВМ.