Agent d’IA · agost 2026
meta-externalagent en robots.txt: qui el bloqueja
6.7% dels 15.009 webs del cens anomenen meta-externalagent al seu robots.txt, i 94.9% d’ells el bloquegen.
Webs que l’anomenen
- Sample
- n=15.009
- Coverage
- 100.0%
El rastreig de agost 2026, analitzat buscant una regla de robots.txt que anomeni aquest user-agent, sobre la mateixa mostra del 0.1% del corpus que qualsevol altra xifra d’aquest web: 15.009 webs. Abans es mesurava sobre el corpus sencer i aquesta nota ho deia; va passar a la mostra mensual quan l’eix va guanyar una sèrie, així que ara porta el mateix marge que tota la resta.
Webs que el bloquegen
- Sample
- n=15.009
- Coverage
- 100.0%
Què fa meta-externalagent realment
El porta Meta. Rastreja per entrenar els models de Meta. Bloquejar-lo no et costa trànsit: aquest rastrejador no t’envia ningú.
Què escriure al teu robots.txt
Posa la regla al seu propi grup. Un Disallow sota User-agent: * és anterior a aquests agents i uns quants no el consideren aplicable, que és també per què aquest cens no el compta.
User-agent: meta-externalagent
Disallow: /User-agent: meta-externalagent
Allow: /