Perplexity a publié une réponse aux affirmations de CloudFlare selon lesquelles il manque de respect des robots.txt et s’engage dans la rampe furtive. Perplexity fait valoir que CloudFlare est erroné d’assistants d’IA en tant que robots Web, affirmant qu’ils ne devraient pas être soumis aux mêmes restrictions car ce sont des assistants initiés par l’utilisateur.
Perplexity AI Assistants Fetch On Demand
Selon la perplexité, son système n’en stockait pas ni n’indexe le contenu à l’avance. Au lieu de cela, il récupère les pages Web uniquement en réponse à des questions spécifiques des utilisateurs. Par exemple, lorsqu’un utilisateur demande des critiques de restaurants récentes, l’assistant récupère et résume le contenu pertinent à la demande. Cela, selon la société, contraste avec le fonctionnement des robots traditionnels, indexant systématiquement de grandes parties du Web sans égard à l’intention des utilisateurs immédiats.
Perplexity a comparé cette récupération à la demande à la récupération déclenchée par l’utilisateur de Google. Bien que ce ne soit pas une comparaison de pommes à pommes car les récupérations déclenchées par Google sont au service de la lecture du texte à haute voix ou de la vérification du site, il s’agit toujours d’un exemple de récupération déclenchée par l’utilisateur qui contourne les restrictions robots.txt.
De la même manière, Perplexity soutient que son IA fonctionne comme une extension de la demande d’un utilisateur, et non comme un robot autonome rampant sans discernement. La société déclare qu’elle ne conserve pas ou n’utilise pas le contenu récupéré pour la formation de ses modèles.
Critique l’infrastructure de Cloudflare
Perplexity a également critiqué l’infrastructure de Cloudflare pour ne pas faire de distinction entre le grattage malveillant et le trafic légitime et initié par l’utilisateur, ce qui suggère que l’approche de Cloudflare pour la gestion des bots risque de bloquer les services qui agissent de manière responsable. Perplexity fait valoir que l’incapacité d’une plate-forme à différencier les assistants d’IA utiles et les robots nocifs provoque une mauvaise classification du trafic Web légitime.
Perplexity plaide fortement pour l’affirmation selon laquelle CloudFlare bloque le trafic de bot légitime et dit que la décision de Cloudflare de bloquer son trafic était basée sur un malentendu de la façon dont sa technologie fonctionne.
Lisez la réponse de Perplexity:

Commentaires