Telegram-бот для аудита ссылок, мета-тегов и отсутствующих тайтлов на сайте

Сабж: https://telegram.me/SEOSpiderBot

Боту достаточно отправить URL или доменное имя хоста, после чего он начнет обход ресурса. В результате через некоторое время вы получите архив с двумя txt-файлами:

1. %site_domain%_url_features.txt

Файл содержит следующую информацию о каждом URL, на которые присутствуют ссылки на страницах сайта:

* URL

* Response code

* Title

* Meta tags

2. %site_domain%_page_links.txt

Этот файл содержит информацию о том, на каких конкретно страницах вашего сайта какие ссылки присутствуют. Тут же представлена информация о коде ответа веб-сервера для каждой ссылки.

Информация может быть полезна для выявления "битых" ссылок, которые имеют код ответа, отличный от 200.

Бот является некоммерческим проектом, пишется для себя и является альтернативной платным сервисам.

Если у вас будут пожелания по функционалу или вы столкнетесь с какими-либо ошибками - буду признателен за сообщения в этой теме. Фидбэки также можно отправлять через бота.