Collibra lee señales de calidad de agentes en cuatro plataformas. Un panel común no es una métrica común
Collibra 2026.10, en preproducción desde el 11 de octubre, lee tasas de aprobación y consumo de tokens de agentes en Databricks, Bedrock, Gemini Enterprise y Azure AI Foundry. Compararlas cuesta más.
Escuche este artículo · 5 min
Narración completa del artículo, generada con IA.
Suponga que un agente en Amazon Bedrock supera el 92% de sus controles de calidad esta semana y uno en Databricks supera el 88%. ¿Cuál es más fiable?
No hay forma de saberlo con esas dos cifras, y esa es la pregunta útil que conviene llevar a la nueva versión de Collibra.
Collibra Platform 2026.10 llegó a los entornos comerciales de preproducción el 11 de octubre, con la producción prevista para el 8 de noviembre. Amplía lo que Collibra llama confianza operativa: señales sobre lo que realmente hacen los agentes desplegados, recogidas de la plataforma en la que se ejecuta cada uno y mostradas junto a la información de gobernanza, como evaluaciones, estado del ciclo de vida y completitud de la documentación.
Qué recoge
Dos tipos de señal. Tasas de aprobación de los monitores: Collibra registra el resultado, aprobado o no, de cada control realizado sobre un agente y calcula tasas diarias y de siete días. Consumo de tokens: recuentos de tokens de prompt y de respuesta. Todo ello aparece en una pestaña Quality para cada agente y cada versión de agente, y en un dashboard de agentes.
La función está disponible para agentes integrados mediante Databricks, AWS Bedrock, Gemini Enterprise Agent Platform y Azure AI Foundry. Hay que activarla y depende de que la plataforma de origen tenga datos de monitorización, como trazas de interacción en Databricks o métricas de invocación de CloudWatch en Bedrock. Sin esos datos, no aparece nada.
Para empresas con agentes repartidos en varias nubes, es un avance real. La mayoría de las herramientas de gobernanza han sido inventarios; esta lee comportamiento. Describimos el mercado de planos de control por encima de los proveedores a principios de mes, y la evidencia operativa es lo que distingue un plano de control de un catálogo.
La frase que importa
La documentación de Collibra incluye una advertencia que merecería estar en el propio dashboard: “Qué se recoge, y cómo se determina un resultado de aprobado o no aprobado, varía según la integración de IA.” El número de monitores asociados a un agente y la frecuencia con la que se actualizan las cifras del día también varían por plataforma.
Así que el 92% y el 88% pueden medir cosas distintas: controles distintos, jueces distintos, umbrales distintos, muestreos distintos. Uno al lado del otro en la misma pantalla, parecen comparables. No lo son, salvo que alguien los haya hecho comparables.
No es un fallo exclusivo de Collibra. Cualquier capa que agrega señales de plataformas que no controla hereda sus definiciones. Como escribimos sobre la observabilidad de agentes más allá del uptime, el valor de una métrica de calidad está en su definición, y un agregado es tan coherente como su fuente menos coherente.
Qué preguntar antes de fiarse de la comparación
Empiece por la cobertura. El dashboard de agentes incluye una brecha de cobertura de evaluación: agentes sin ningún juez LLM asignado que, según la documentación, no aportan datos de confianza operativa. Es la cifra más honesta de la pantalla. Un agente sin monitores no tiene un 100% de aprobación; no tiene evidencia.
Estandarice algunos controles. La comparabilidad surge de ejecutar la misma evaluación sobre agentes de distintas plataformas, por ejemplo un conjunto común de casos de prueba de fundamentación o de cumplimiento de políticas, no de recoger la métrica nativa de cada plataforma.
Separe lo observado de lo calculado. El AI Trust Score de Collibra combina señales. Pida ver los componentes operativos por separado de los de gobernanza, para que una buena documentación no oculte un mal comportamiento en producción.
Use los datos de tokens para los responsables, no solo para los dashboards. El consumo de tokens por versión de agente es la materia prima de los presupuestos que necesita todo agente en producción, el registro que incluimos en la ficha de cada agente.
La misma versión añade, en versión preliminar, la opción de conectar las credenciales de Gemini Enterprise de la propia organización como proveedor de modelos de Collibra Maestro, el asistente de IA de Collibra. Es una función aparte, pero apunta en la misma dirección: las herramientas de gobernanza empiezan a operar dentro del entorno de IA del cliente, no al lado. Eso hace que sus definiciones importen más, no menos.