Собрать все исходящие ссылка с сайта

L
На сайте с 01.11.2012
Offline
201
1727

Привет.

Есть сайт определенной тематики, каждый день выкладывает порядка 4х новостей.

В каждой новости фото+пару строк текста а внизу ссылка на ресурс, с которого это все взято. Чтобы авторские права не нарушать.

Таких новостей наберется за последние 5 лет около 10000.

Как и чем можно собрать все эти ссылки?

И может ли что-то помешать сбор каких-то ссылок (например ссылка как-то закрыта в ноиндекс или нофолоу или еще каким-то может кодом)?

спасибо)

Градация уровней знаний в SEO: Pre-Junior / Junior / Strong Junior / Pre-Middle / Middle / Strong MIddle / Pre-Senior / Senior / Strong Senior. Я где-то между 3-4 м уровнем. К сожалению. Хочу больше. Мог бы больше.
donc
На сайте с 16.01.2007
Offline
663
#1

именно эти ссылки или все ссылки с сайта?

Осуждаем применение нейросетей в SEO и не только ( https://webimho.ru/forum/148/ ) :) Продвижение сайтов от 25 000 в мес, прозрачно, надежно ( /ru/forum/818412 ), но не быстро, отзывы ( http://webimho.ru/topic/3225/ )
L
На сайте с 01.11.2012
Offline
201
#2

А можно и так и так?

Вообще-то можно все, других ссылок (НЕ В НОВОСТЯХ), практически нет.

donc
На сайте с 16.01.2007
Offline
663
#3

xenu тогда самое простое решение

Phobin
На сайте с 18.09.2014
Offline
89
#4

Попробуйте программу screaming frog - раздел External. Программа платная, но ходят слухи, что можно найти кряк.

Самый точный съем позиций (https://topvisor.ru/?inv=52221)
Станислав Романенко
На сайте с 05.09.2007
Offline
325
#5

limyh, попробуйте сайтрепорт.

Сайт не лезет в топ? Сделаю аудит без воды всего за 8000 рублей! Отзывы клиентов тут (https://searchengines.guru/ru/forum/939454), почта для связи: ingref@ya.ru Посмотрю, в чём проблема с вашим сайтом, за 100 рублей (https://searchengines.guru/ru/forum/comment/15662080).
L
На сайте с 01.11.2012
Offline
201
#6

А XENU если включить чекбокс (Check External Links) соберет ВСЕ исходящие ссылки с сайта? Со всех страниц-новостей?

спасибо

L
На сайте с 01.11.2012
Offline
201
#7

XENU собрал. около 90000 урлов, но 95% - это урлы самого сайта.

Около 5% - это ссылки на внешние ресурсы.

Но проблема вот в чем. Скопировать их не могу их XENU.

Выделить мышью, Ctrl+A - Не получается.

Сохранить report (который предлагает программа). Сохранил. файл.xenu

не открывается ничем. Экселем, через Открыть файл - разделители.

не хочет. абракадабру вставляет((

Fat Bear
На сайте с 01.12.2006
Offline
264
#8

limyh, в окошке программы со списком отсканированных url нажмите ctrl+t и сохраните файл в формате txt. Потом откройте excel и уже из него откройте этот текстовый файл. Он предложит открыть его с разделителями, нажимайте далее. И в результате получите таблицу с вашими url. :)

Открыть счёт в Capitalist ( https://capitalist.net/reg?from=e5707ff0c3 ). Виртуальные карты, USDT, банковские переводы, выплаты партнёрских программ.
L
На сайте с 01.11.2012
Offline
201
#9

Масол, ты посланник Бога)) Оно

Сенькью вери матч (с) Виктор Багров. Брат.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий