Qué es CODE Research

CODE Research es el programa de investigación de CODE Barcelona sobre cómo están construidas las webs corporativas de distintos sectores y hasta qué punto son legibles por buscadores y por agentes de inteligencia artificial. Recogemos evidencia pública, verificable y fechada, y publicamos resultados agregados.

Los primeros estudios se publicarán en esta misma página.

CODEResearchBot

Si has llegado hasta aquí desde los registros de tu servidor, es porque nuestro rastreador ha visitado tu web. Se identifica siempre con esta cadena:

CODEResearchBot/1.0 (+https://code.barcelona/research)

Qué hace

• Lee robots.txt, sitemap.xml y llms.txt.
• Descarga un número limitado de páginas públicas: por defecto, un máximo de 80 páginas y 3 niveles de profundidad por sitio.
• Espera entre peticiones para no suponer carga apreciable.
• Registra características técnicas observables: idiomas declarados, datos estructurados, etiquetas canónicas, política declarada frente a agentes de IA, presencia de buscador interno o de formularios, y similares.
• Conserva una copia de las páginas consultadas como evidencia de la observación, con su fecha y su suma de verificación.

Qué no hace

• No accede a áreas privadas ni a nada que requiera identificarse.
• No recoge datos personales, no rellena formularios y no envía nada.
• No intenta sortear cortafuegos, sistemas antibot ni las restricciones de robots.txt.
• No desactiva la verificación de certificados TLS.
• No se hace pasar por un navegador ni por el rastreador de otra empresa.

Cuando un sitio no es accesible para nosotros, lo que registramos es «no observable». Nunca lo convertimos en una puntuación baja ni en un dato negativo sobre esa empresa.

Cómo excluir tu web

Añade esto a tu robots.txt y dejaremos de rastrearte:

User-agent: CODEResearchBot
Disallow: /

También puedes escribirnos a info@code.barcelona indicando el dominio, y lo excluiremos de los estudios en curso y futuros.

Qué publicamos y qué no

• Publicamos resultados agregados del conjunto estudiado, siempre acompañados de su denominador y de su cobertura real.
• Publicamos la metodología completa: cómo se define cada indicador, qué versión del detector lo midió y en qué fecha se observó.
• Publicamos cómo se ha construido la muestra y a qué conjunto se pueden extrapolar los resultados. Si no es extrapolable, lo decimos.
• No publicamos, por defecto, la puntuación individual de ninguna empresa, ni el listado completo de participantes, ni los valores por empresa.

Cómo medimos

Cuatro principios gobiernan todo lo que publicamos:

• Lo que no hemos podido observar es «desconocido», nunca «no lo tiene». Un dato ausente no es un dato negativo.
• Un HTTP 200 no demuestra que hayamos leído una página. Comprobamos que la respuesta tiene contenido real antes de usarla como evidencia; las pantallas de verificación antibot y los errores camuflados se descartan.
• Afirmar que algo no existe exige haber mirado donde debería estar. Un negativo sin cobertura suficiente se degrada a «desconocido».
• Las metodologías se versionan y no se reescriben. Si cambian las reglas, nace una versión nueva y los resultados anteriores se conservan tal y como se publicaron.

In English

CODE Research studies how corporate websites across industries are built, and how readable they are to search engines and AI agents. If you found this page in your server logs, our crawler visited your site. It identifies itself as CODEResearchBot/1.0 (+https://code.barcelona/research).

It reads robots.txt, sitemap.xml and llms.txt, and fetches a bounded number of public pages (by default at most 80 pages, 3 levels deep), waiting between requests. It records observable technical characteristics only.

It never accesses private areas, never collects personal data, never submits forms, never bypasses firewalls, bot protection or robots.txt rules, and never disables TLS verification. When a site is not accessible to us, we record it as not observable — never as a low score.

To opt out, add the following to your robots.txt:

User-agent: CODEResearchBot
Disallow: /

Or email info@code.barcelona with your domain and we will exclude it from current and future studies.

We publish aggregate findings with explicit denominators and coverage, together with the full methodology. We do not publish individual company scores or the participant list.

Contacto

Para cualquier duda sobre esta investigación, sobre una visita concreta de nuestro rastreador o para solicitar la exclusión de un dominio: info@code.barcelona