Robots d’IA

Cecil génère un fichier robots.txt qui autorise tous les robots. Pour bloquer les robots d’IA (ou certains d’entre eux), ajoutez vos propres règles en créant une page avec le chemin robots :

pages/robots.md

---
layout: robots
output: txt
---
User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Google-Extended
Disallow: /

Le corps de la page est ajouté aux règles par défaut (voir les pages par défaut).