#полезное
😊 Urx (сокращение от "Extracts URLs") — это инструмент на базе Rust, который я создал для сбора URL из различных
OSINT архивов.
В результате для указанных доменов формируется обширный список URL‑адресов, который можно использовать в исследованиях, тестировании безопасности или при аналитической работе.
Основные функции Urx🟠 Получение URL‑адресов сразу из нескольких источников (Wayback Machine, Common Crawl, OTX)
🟠 Гибкая фильтрация по расширениям, шаблонам или заранее заданным пресетам (например, «no‑image» для исключения изображений)
🟠 Поддержка различных форматов вывода (plain text, JSON, CSV)
🟠 Возможность направлять результаты в консоль, файлы или другие инструменты (через stdin для пайплайнов)
🟠 Валидация и проверка URL‑адресов по статус‑кодам и паттернам, а также извлечение дополнительных ссылок из собранных страниц
Urx значительно упрощает процесс сбора и анализа URL, сочетая высокую скорость работы (Rust, асинхронная обработка) и разнообразие функций для фильтрации, сортировки и экспорта данных.
Установка:
cargo install urx
Гитхаб👉Новости 👉База вопросов