pip3 install requests
HuntingRobots is a tool developed in python3 and designed to help in the reconnaissance phase, searching for relevant non-indexed information (disallow) in the robots.txt file in a host and validating if it is possible to access it.
python3 HuntingRobots.py -u URL o IP (with http:// or https://)
python3 HuntingRobots.py -u https://www.google.com
pip3 install requests
HuntingRobots es una herramienta desarrollada en python3 y pensada para ayudar en la etapa de reconocimiento web buscando información relevante no indexada (disallow) en el archivo robots.txt de un host y validando si se posible acceder a la misma.
python3 HuntingRobots.py -u URL o IP (con http:// o https://)
python3 HuntingRobots.py -u https://www.google.com