1. La plupart des règles visant l'IA viennent d'un réglage, et non d'une règle rédigée par l'entreprise
99 sites sont ouverts aux robots d'exploration en général et demandent à un robot d'exploration IA de rester à l'écart. Sur 81 d'entre eux, la règle est un blocage standard que Cloudflare ajoute au robots.txt d'un site lorsqu'un réglage de son tableau de bord est activé. La formulation est la même partout. 17 des 99 avaient des règles qu'aucun autre site de l'échantillon ne présentait.
Parmi les sites placés derrière Cloudflare, 81 sur 809 portent ce blocage, soit environ 1 sur 10. Parmi les autres, une règle visant l'IA figure sur 13 sur 2 708, soit environ 1 sur 200.