- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Суть проблемы. Есть сайт, примерно 300 тысяч страниц. Разделен на поддомены. Нужен скрипт или онлайн сервис который все это чудо пересканирует (обязательно с учетом всех поддоменов) и выдаст отчет о наличии проблем с указанием конкретных адресов.
Может кто сталкивался? Очень желательно чтобы это было не десктопное приложение. Идеальный вариант серверный скрипт или онлайн сервис.
Скрипт не сложный, можно за несколько часов накатать. Вот только есть пару вопросов:
P.S. Можно урл сайта в личку.
Вот такой программой пользуюсь http://home.snafu.de/tilman/xenulink.html
Суть проблемы. Есть сайт, примерно 300 тысяч страниц. Разделен на поддомены. Нужен скрипт или онлайн сервис который все это чудо пересканирует (обязательно с учетом всех поддоменов) и выдаст отчет о наличии проблем с указанием конкретных адресов.
Может кто сталкивался? Очень желательно чтобы это было не десктопное приложение. Идеальный вариант серверный скрипт или онлайн сервис.
Вот такой программой пользуюсь http://home.snafu.de/tilman/xenulink.html
У меня есть pageweight но 300 тысяч страниц он будет смотреть вечность.
---------- Добавлено 24.03.2016 в 20:43 ----------
Скрипт не сложный, можно за несколько часов накатать. Вот только есть пару вопросов:
P.S. Можно урл сайта в личку.
Добрый!
Полного списка адресов нет. Можем только список поддоменов сделать.
Нужно чтобы скрипт просканировал сайт и нашел все страницы которые возвращают код отличный от 200
netpeak spider посмотрите, бесплатно
Мне это напоминает поиск дропов на старых досках объявлений, а иначе не объяснить, так как xenulink запустил и забыл часа на 3-4 - и вот вам счастье, но когда сканировать такие обьемы нужно постоянно, тогда это наталкивает на мысли что скрипт нужен для поиска дропов.
Xenu - https://devaka.ru/articles/xenu-link-sleuth
Работает в онлайн режиме - нужен инет.
Если у вас сайт на вордпрессе, есть очень хороший плагин, который в автоматическом режиме ищет битые ссылки
https://wordpress.org/plugins/broken-link-checker/
Xenu - https://devaka.ru/articles/xenu-link-sleuth
Работает в онлайн режиме - нужен инет.
У меня есть десктопная программа. Мне нужен скрипт для сервера. Сам сайт на битриксе,
закажите написание.
слишком много страниц. типовые решения могут не справится.
вам нужен многопоточный.
но есть риск, что сервер может упасть
закажите написание.
слишком много страниц. типовые решения могут не справится.
вам нужен многопоточный.
но есть риск, что сервер может упасть
300 000 страниц - это разве много? Конечно, это могут быть только проиндексированные, а в реальности их намного больше, но Netpeak Spider спокойно справляется с такими сайтами. Xenu, Screaming Frog и Composer тоже должны справиться. Если комп не справляется - seoto.me