- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Как найти все ссылки чужого сайта, которые содержат определенные символы?
Например, требуется найти все ссылки с сайта "Эхо Москвы", которые содержат слово "programs"
вот такие https://echo.msk.ru/programs/razvorot/2165998-echo/
Скачивайте все ссылки, а потом в екселе сортируйте и смотрите как хотите.
Conent donloader в свое время таким вытягивал
интересный вопрос, а закрытые от индексации можно все ссылки чужого сайта получить?
Conent donloader в свое время таким вытягивал
выборка по словам в урле там тоже есть разве?
Скачивайте все ссылки, а потом в екселе сортируйте и смотрите как хотите.
ага, а каким макаром все ссылки скачать можно?
Откуда качать? 🤪 Если из ПС, то скрипач эксель не нужен.
А чего их искать то, если они все есть на странице:
https://echo.msk.ru/programs/
Из html кода вытастикаем все ссылки с программами:
http://pasted.co/90bc6344
Там 165 из "Нашлось 165 тыс. результатов". Ну вот, например, вроде ссылки нет а она есть. Задача не проста:(
Или так:
https://www.google.ru/search?client=opera&q=site%3Aecho.msk.ru+inurl%3Aprograms&sourceid=opera&ie=UTF-8&oe=UTF-8
Или писать парсер, который будет обходить категории, далее собирать ссылки по страницам.
Это пишется такой кролер сканер-парсер, который заходит на главную, читает все ссылки, потом заходит по каждой из них, ищет ссылки там, и так, пока ссылки не кончатся.
С языка сняли, а как иначе? Я-xml сегодня есть, а завтра хз (+лимиты), с выдачи пс ya-goo-bing тоже не удается 100% все забрать;(
Не, уже выяснили, что
Не, уже выяснили, что
Это же частный случай, в общем случае там может быть что угодно.