Pourquoi les anime girls continuent-elles de vérifier si je suis un robot ?

Voyez-vous constamment des pages Web apparaître avec un dessin de style chibi représentant une fille avec des oreilles de chien et une loupe sous le texte « Assurez-vous que vous n'êtes pas un robot » ? Après quelques secondes, il disparaît probablement et vous arrivez à la page Web que vous visitiez. Que se passe-t-il?

Ne vous inquiétez pas, vous n'avez pas de virus. Cela m'inquiétait également, mais il s'avère que le problème est simplement que je passe trop de temps sur la documentation Linux et d'autres projets open source qui tentent de protéger leurs sites contre la surcharge alimentée par l'IA.

Vous courez sur Anubis

Lorsque vous voyez la fille écornée avec la loupe, vous rencontrez juste un point de contrôle d'Anubis. Anubis est une couche de protection que les propriétaires de sites Web peuvent appliquer à leur domaine et qui agit comme une sorte de pare-feu contre les robots web-scraping. Il ne s'agit pas d'un malware et cela ne signifie pas qu'il y a un problème avec votre ordinateur.

Anubis a été créé par le développeur Xe Iaso début 2025 en réponse à la prolifération des web scrapers qui consomment du contenu Internet et l'intègrent dans les programmes de formation de modèles d'IA pour améliorer les chatbots comme ChatGPT et Perplexity AI. Ces robots de web-scraping conçus par Amazon, Meta et Anthropic sont agressifs et trompeurs. Ils ignorent les demandes traditionnelles demandant aux robots de rester à l’écart et utilisent des solutions de contournement pour éviter les anciennes méthodes d’identification et de blocage des robots.

La quantité folle de trafic qu’ils envoient vers les sites Web publics peut facilement alourdir les hébergeurs de sites Web, en particulier les plus petits, et peut ralentir ou arrêter complètement les sites Web. C'est pourquoi les propriétaires de sites Web se tournent vers des solutions comme Anubis pour tenir à distance ces ennuyeux robots d'exploration.

Comme le rapporte 404 Media, il est populaire auprès des projets open source qui sont pour la plupart gérés par des bénévoles et qui ne peuvent pas se permettre de supporter des charges de serveur surdimensionnées. Je passe beaucoup de temps à rechercher Linux et d'autres logiciels open source, donc je rencontre souvent Anubis.

Comment fonctionne Anubis ?

Vous pourriez penser qu’Anubis est similaire aux défis CAPTCHA dans la mesure où son objectif est simplement de confirmer que vous êtes humain. Cependant, contrairement au CAPTCHA, il n'y a pas d'énigme pour toi à résoudre avec Anubis. Le processus se déroule entièrement en coulisses, dans votre navigateur. Anubis ne vérifie pas tant si vous êtes un humain que si le navigateur que vous utilisez est celui que les humains utilisent.

Donc Anubis implique techniquement des énigmes, ce ne sont que des énigmes résolues par votre navigateur à votre place. Anubis demande à Chrome, Firefox ou tout autre navigateur que vous utilisez d'exécuter certains calculs cryptographiques et autres tests en arrière-plan à l'aide de JavaScript (au moment de la rédaction). Il s’agit de calculs pour lesquels la plupart des robots ne sont pas équipés, et s’ils l’étaient, le coût du maintien de ces robots opérationnels monterait en flèche.

Cela signifie également que si vous désactivez JavaScript dans votre navigateur, vous ne pourrez probablement pas passer un point de contrôle Anubis. JavaScript fait partie intégrante de l'expérience utilisateur sur les sites Web les plus populaires de nos jours, c'est pourquoi il est activé par défaut dans la plupart des navigateurs. Je noterai cependant que le développeur a déclaré qu'il travaillait sur des moyens de faire fonctionner Anubis même sans JavaScript, car certains vrais humains désactivent JavaScript pour des raisons de confidentialité.

Pourquoi pas un CAPTCHA classique ?

Vous vous demandez peut-être à ce stade pourquoi quelqu'un se donnerait la peine de développer un tout nouveau pare-feu pour robots si nous avons déjà des CAPTCHA. Ils sont également ennuyeux, mais ils fonctionnent, n'est-ce pas ?

Plus tellement. Les robots de web-scraping modernes ont des capacités de résolution de CAPTCHA. En fait, il s'agit d'un problème spécifique cité par le développeur dans son article de blog expliquant Anubis. CAPTCHA ne peut plus offrir beaucoup de protection aux propriétaires de sites Web. Pire encore, la course aux armements qu'elle crée signifie que vous, les humains, devez résoudre des énigmes de plus en plus difficiles rien que pour interagir avec le Web.

Au moins, Anubis ne vous fait que vous asseoir et attendre quelques secondes. Je préfère cela à l'identification des motos et des bus.

Agacé? Blâmez nos seigneurs de la technologie

Anubis n’existerait pas si les grandes entreprises technologiques agissaient avec respect. Avant que des outils comme ChatGPT n’explosent en popularité, les web scrapers et autres types de robots acceptaient généralement les demandes des propriétaires de sites Web de rester tranquilles. Ce système d’honneur est devenu une chose du passé maintenant que les données destinées à la formation en IA font l’objet d’une ruée vers l’or. Malgré les appels des propriétaires de sites, de grandes entreprises technologiques ont été détectées en train de récupérer des données de formation et de surcharger les serveurs dans le processus.

Tant que les entreprises technologiques continueront à rechercher des ensembles de données plus importants pour leur formation en IA, et aussi longtemps qu'elles le feront sans respect pour les propriétaires de sites Web, la fille écornée d'Anubis et d'autres pare-feu de robots continueront d'apparaître lorsque vous naviguez sur le Web.