Парсинг сайтов через Telegram
В нынешнее время бывает крайне необходимо быстро собрать информацию с сайта, но возникает вопрос — как это сделать?
В этом вам поможет бот Проекта, который имеет огромнейший функционал в сфере тестирования информационной безопасности.
В нём доступно сканирования сайтов на уязвимости, поиск и сбор информации и многое другое, но сейчас мы сосредоточимся именно на сборе данных.
Запуск:
Запустить бот можно по этой ссылке, либо войдите в Telegram и найдите бот через поиск:
Запускаем бот и проходим авторизацию. После этого у нас появляется список категорий:
Давайте выберем сбор сведений и метаданных, а далее поиск по сайту:
Для примера укажу ссылку на свой сайт и посмотрим, какие данные бот соберёт:
В итоге у нас 3 файла. Первые 2 пропускаем, т.к. на моём сайте нет Email и номеров телефона, а вот социальные ссылки имеются:
Парсинг. Экстрактор ссылок:
Точно также мы можем воспользоваться экстрактором ссылок. Как нам известно, на страницах Википедии, как правило очень много различных ссылок и собирать их вручную будет тяжело. Отправим ссылку в бот и он всё сделает за нас:
Открываем файл и видим результат:
Заключение:
Вариантов использования данного бота множество. Основным его преимуществом является возможность быстро проверить свой ресурс на безопасность, при этом не тратить запредельные суммы на специалистов.