Les entreprises qui développent une intelligence artificielle générative insistent toujours sur le fait qu’elles incluent des liens vers des sites web dans les réponses générées par leurs chatbots pour les utilisateurs. Cependant, le PDG de Cloudflare, Matthew Prince, a révélé à Axios que les références de trafic de recherche ne cessent de chuter. Les éditeurs font face à une menace existentielle, a-t-il déclaré, car les gens ne cliquent pas sur ces liens de chatbot et se fient de plus en plus aux résumés AI sans creuser plus en profondeur.
Évolution du trafic de recherche
Prince a déclaré à Axios qu’il y a 10 ans, Google envoyait un visiteur à un éditeur pour chaque deux pages qu’il avait explorées. Il y a six mois, le ratio était d’un visiteur pour chaque six pages, et maintenant c’est un pour chaque 18. OpenAI envoyait un visiteur à un éditeur pour chaque 250 pages explorées il y a six mois, tandis qu’Anthropic en envoyait un pour chaque 6 000 pages. De nos jours, OpenAI envoie un visiteur à un éditeur pour chaque 1 500 pages, tandis qu’Anthropic en envoie un pour chaque 60 000 pages.
Confiance croissante envers les chatbots AI
Les gens ont commencé à faire davantage confiance aux chatbots AI ces derniers mois. Le problème pour les éditeurs est qu’ils ne gagnent pas d’argent avec les publicités si les gens ne cliquent pas sur les liens menant à leurs sites web, c’est pourquoi Prince les encourage à agir pour s’assurer qu’ils sont justement rémunérés. Cloudflare travaille actuellement sur un outil pour bloquer les bots qui récupèrent du contenu pour de grands modèles de langage même si une page web a déjà une instruction “no crawl”. Plusieurs médias avaient rapporté en 2024 que les entreprises d’IA ignoraient le fichier Robots Exclusion Protocol des sites web et prenaient quand même leur contenu pour entraîner leurs technologies.
Technologie de protection contre le scraping
Cloudflare cherche des moyens de bloquer les scrapers depuis l’année dernière. Mais ce n’est qu’en mars que Cloudflare a officiellement introduit AI Labyrinth, qui utilise du contenu généré par l’IA pour “ralentir, perturber et gaspiller les ressources des crawlers AI et autres bots qui ne respectent pas les directives ‘no crawl’.” Il fonctionne en envoyant à un crawler non autorisé une série de pages générées par l’IA qui sont assez convaincantes mais n’ont pas réellement le contenu du site qu’il protège. De cette façon, le crawler perd du temps et des ressources.
Combat contre les intrusions
“Je me bats chaque jour contre le gouvernement chinois, russe, iranien, nord-coréen, probablement américain, israélien, tous ceux qui essaient de pirater les sites de nos clients”, a déclaré Prince. “Et vous me dites que je ne peux pas arrêter un nerd avec une société à Palo Alto?” Cet article est initialement apparu sur Engadget à l’adresse https://www.engadget.com/ai/cloudflare-ceo-says-people-arent-checking-ai-chatbots-source-links-120016921.html?src=rss.
