El catálogo recoge cada bot conocido con su identificador, nombre, operador, categoría, fragmentos de User-Agent y métodos de verificación. Se construye con las listas oficiales de los operadores: OpenAI (GPTBot, OAI-SearchBot, ChatGPT-User), Google (rastreadores comunes, rastreadores especiales y peticiones iniciadas por usuarios), Bing, Perplexity (bot y usuario), Apple, Common Crawl, DuckDuckGo (DuckDuckBot y DuckAssistBot), Anthropic, las redes anunciadas de Meta (AS32934), X (AS13414) y LinkedIn (AS14413), los sufijos de DNS inverso documentados y los directorios Web Bot Auth de ChatGPT y Browserbase.
- Incluye una base de serie, así que la verificación funciona incluso antes de la primera actualización.
- Se actualiza cada 24 horas. De cada fuente se guardan la última copia buena y el último intento.
- Una descarga que dejaría una fuente con menos de la mitad de sus entradas no se usa: se conserva la última copia buena y se anota el error.
Consultarlo
El catálogo alimenta los selectores de Rastreador de Control de rastreadores IA → Configuración → Excepciones por rastreador y los filtros de todos los informes.
openwaf-cloud ctl ai catalogcurl -sS "https://dash.openwaf.dev/v1/orgs/$ORG/ai-agents/catalog" -H "Authorization: Bearer $OPENWAF_TOKEN"La respuesta trae la versión del catálogo, los bots y el estado de cada fuente; no incluye rangos de IP ni claves.
ai_agents_catalog.
Usa los identificadores del catálogo (por ejemplo gptbot, ccbot, googlebot) en las excepciones por bot y en los filtros de los informes.