- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Получил заказ на программирование.
Суть такая.
Человек занимается посредническими услугами по продаже ссылок с сайтов.
Ему нужно для проверки этих ссылок програмка/скрипт.
В форме два поля :
Главная страница где нужно проверить и фраза(HTML код) которую нужно найти/проверить.
Скрипт должен найти все(!) страници данного сайта по ссылкам и проверить их на наличие этой фразы(HTML кода).
Вопрос : кто-нибудь встречал подобный скрипт/сервис в интернет ?
PS.Это, тстати, будет полезно(в усеченном варианте) и для проверки обратных ссылок при обмене.
Получил заказ на программирование.
Скрипт должен найти все(!) страници данного сайта по ссылкам и проверить их на наличие этой фразы(HTML кода).
Perl + модуль LWP-User-Agent. Собственно, с помощью этого модуля все и можно сделать, кстати, достаточно просто. Можно еще и кучу полезных наворотов наколбасить.
Спасибо Scaramush,
Вы забыли про HTML::LinkExtor :)
Я знаю как написать, да и почти закончил работу.
Мне интересно где-нибудь есть подобный онлайн сервис?
А то я что-то сразу за программирование сел, даже не поискал, может уже где-нибудь это есть.
allStars, в Вашей программе было бы неплохо еще и парсер robots.txt добавить. Ходить по ссылкам это да, но ведь часть путей может быть закрыта для поисковых роботов. И получится, что нужный фрагмент кода есть, но на недоступных страницах.
глянь тут http://www.jimworld.com/tools/keyword-analyzer/spider.cgi?lang=
там много чего есть....может что и найдешь
allStars, в Вашей программе было бы неплохо еще и парсер robots.txt добавить. Ходить по ссылкам это да, но ведь часть путей может быть закрыта для поисковых роботов. И получится, что нужный фрагмент кода есть, но на недоступных страницах.
Спасибо за дополнение, я даже об этом не подумал 🍻
Самое правильное решение - посмотреть в нужном поисковике, стоит ли ссылка куда необходимо и после этого проверить текст этой ссылки.
Другие же варианты реализуются с БАЛЬШИМ напрягом. Кроме роботс.тхт надо парсить саму нтмл-ку, т.е. всякие ноиндекс, не запихали ли это дело в скрипт, в комментарии, в тайтл и вообще, как только не поизвращались.
Newm
Конечно в чем-то вы правы.
Единственное noindex можно закрыть т.к. модуль HTML::LinkExtor берет только ссылки.
Все одно - как не верти - или раздавать всем код или проверять вручную.
Все одно - как не верти - или раздавать всем код или проверять вручную.
Вручную?
Среднее кол-во страниц на сайтах заказчика 25000.