Découvrez comment l’IA agressive d’Anthropic ébranle l’Internet : Quels sont les enjeux?

Une IA hors de contrôle : Anthropic accusé de contournement des protocoles anti-scraping

Freelancer et iFixit, des sites réputés pour leurs services en ligne, ont récemment accusé la startup IA Anthropic de contourner leurs protocoles anti-scraping et règles de sécurité, provoquant ainsi d’importantes perturbations dans leur trafic web et leurs ressources. Selon les plaignants, ClaudeBot, le modèle d’Anthropic, est considéré comme l’un des bots de scraping les plus agressifs. Il aurait frappé leurs serveurs des millions de fois dans des périodes très courtes, mettant à rude épreuve leurs infrastructures et dégradant l’expérience utilisateur. Cette situation a poussé certaines entreprises à prendre des mesures radicales et à bloquer complètement le bot d’Anthropic pour éviter ces désagréments.

Des pratiques controversées dans le domaine de l’IA

Le problème du contournement du Robots Exclusion Protocol, également connu sous le nom de fichier robots.txt, n’est pas seulement attribué à Anthropic. D’autres entreprises d’IA comme Perplexity et OpenAI sont également montrées du doigt pour leurs pratiques discutables en matière de collecte de données auprès des éditeurs de contenu. Ces firmes utilisent des crawlers web pour agréger des données sur lesquelles leurs technologies d’IA générative s’appuient. Cependant, ces pratiques ont mené à des litiges juridiques et à des accusations d’infraction aux droits d’auteur de la part des éditeurs de contenu, qui se retrouvent lésés par ces collectes non autorisées.

Pour limiter les impacts néfastes du scraping, certains sites web ont dû bloquer totalement les crawlers d’Anthropic. Cette décision a été motivée par des préoccupations concernant la performance ralentie du site, la surconsommation de ressources et, in fine, une réduction des revenus. On constate ainsi que le scraping non contrôlé n’engendre pas seulement des problèmes techniques, mais affecte aussi l’économie des plateformes numériques.

Vers une solution plus éthique : La voie des partenariats et des accords

Afin d’éviter les poursuites judiciaires et de normaliser la collecte de données, certaines entreprises d’IA comme OpenAI ont commencé à établir des partenariats avec des éditeurs et des sites web. Ces collaborations visent à prévenir le scraping non autorisé et à améliorer l’accès au contenu à travers des accords conviviaux. Par exemple, iFixit’s CEO a laissé entendre qu’il pourrait explorer la possibilité de conclure des accords de licence de contenu avec Anthropic à des fins commerciales. Ce type d’arrangement pourrait marquer un tournant vers des solutions plus durables et éthiques pour le scraping de contenu.

De son côté, Anthropic fait des efforts pour montrer sa bonne foi. La startup affirme respecter les signaux du fichier robots.txt et cherche à minimiser les perturbations en surveillant l’activité de son crawler sur les domaines concernés. Ces initiatives témoignent d’une prise de conscience des préoccupations exprimées par les propriétaires de sites web et montrent une volonté d’ajuster leurs pratiques pour les rendre plus acceptables. Toutefois, il reste à voir comment ces intentions se traduiront concrètement et si elles suffiront à apaiser les tensions actuelles.

En somme, la question du scraping non autorisé par les entreprises d’IA soulève des défis techniques, juridiques et éthiques majeurs. L’évolution vers des partenariats de contenus et des accords de licence pourrait être une solution prometteuse pour concilier les besoins des développeurs d’IA et ceux des éditeurs de contenu, tout en préservant l’intégrité et la performance des sites web.