Agent d’IA · agost 2026
YouBot en robots.txt: qui el bloqueja
2.5% dels 15.009 webs del cens anomenen YouBot al seu robots.txt, i 95.5% d’ells el bloquegen.
Webs que l’anomenen
- Sample
- n=15.009
- Coverage
- 100.0%
El rastreig de agost 2026, analitzat buscant una regla de robots.txt que anomeni aquest user-agent, sobre la mateixa mostra del 0.1% del corpus que qualsevol altra xifra d’aquest web: 15.009 webs. Abans es mesurava sobre el corpus sencer i aquesta nota ho deia; va passar a la mostra mensual quan l’eix va guanyar una sèrie, així que ara porta el mateix marge que tota la resta.
Webs que el bloquegen
- Sample
- n=15.009
- Coverage
- 100.0%
Què fa YouBot realment
El porta You.com. Indexa pàgines perquè You.com les pugui citar. Bloquejar-lo et treu de les respostes d’aquest producte, i amb elles de l’enllaç de tornada cap a tu.
Què escriure al teu robots.txt
Posa la regla al seu propi grup. Un Disallow sota User-agent: * és anterior a aquests agents i uns quants no el consideren aplicable, que és també per què aquest cens no el compta.
User-agent: YouBot
Disallow: /User-agent: YouBot
Allow: /