Exemple d'un programme de récolte de données sur le web.
D'autres outils peuvent être développés sur demande.
Le programme étant un exemple, certaines fonctionnalités ont volontairement été enlevées ou limitées :
Gestion de proxy (Permet de simuler des addresses différentes à chaque requête)
Listing complet des adresses d'un site
Multi-processing limité (accélère considérablement la vitesse)
first :
python -m pip install -r requirements.txt
then :
python main.py
finally, open :
./websites to see which websites are being scanned
./findings to see program's results