Pour protéger ce type de données, il faut coincer les crawlers IA dans un pot de miel labyrinthique et infini qui leur apprend de la merde.

Comme précisé dans l'article, Cloudflare le propose dans son plan gratuit, sinon Anubis fait l'affaire.

Il y a une guerre dans les deux sens, les meilleurs crawlers savent détecter qu'ils sont pris au piège et s'en sortent, mais 99% restent bloqués dedans ça filtre bien quand on veut protéger des données faciles à exploiter et sauver les performances de son serveur.