Explication de la façon dont fonctionne Anubis pour compliquer la vie au bots.
Un outil qui permet de limiter les requêtes des robots IA sur vos serveurs.
Une liste des robots connus pour parcourir la totalité du web et une estimation de leurs intentions. Utilisé pour compléter son robots.txt.
The list of potential AI robots that can scrape content from your website is longer than we would like.
Intéressant comme bestiole :)