robots.txt est une convention, pas une barriere. Si vous voulez bloquer vraiment, c’est au niveau serveur : regle sur l’user-agent, ou sur les plages d’adresses quand l’editeur les publie.
Attention au verrou : plusieurs agents se declarent avec un user-agent generique, et vous bloquerez des navigateurs avec.
Et verifiez d’abord que c’est bien lui. Usurper un user-agent coute zero ligne de code, et la moitie des « GPTBot » de mes logs viennent d’adresses qui n’ont rien a voir.