¿Cómo saber si tu agente arregló algo o solo dejó de verse?

En resumen: cuando comparas dos medidas de tu web, cada problema sale como «sigue», «ya no se observa», «nuevo» o «no comparable». Ninguna de esas etiquetas quiere decir «arreglado». Y «no comparable» tampoco es una buena noticia: solo dice que no se puede saber. Me di cuenta midiendo mi propia web.

Cero errores, y nada que comparar

El 3 de noviembre medí uxmachine.app dos veces, con una hora y poco de diferencia. Entre una y otra subimos un cambio en cómo UXMachine maneja los avisos de cookies.

En la primera medida, UXMachine no reconoció el aviso de cookies de su propia web. El informe decía que no había podido saber si había aviso en ninguna de las diez páginas. Un poco embarazoso, la verdad. En la segunda sí lo reconoció, lo rechazó y lo dejó escrito en el informe.

El resumen de la segunda medida empezaba así: 0 reglas con errores y 1 con avisos. Si te quedas ahí, parece que la web ha mejorado. Pero la línea siguiente decía que no se podía comparar con la medida anterior en ninguna de las 17 reglas, porque había cambiado la forma de medir.

O sea, que no sé si la web está mejor o peor que una hora antes. Solo sé que las dos medidas no se hicieron igual. Si un agente me hubiera resumido aquello como «todo bien», me habría dicho algo que la medida no dice.

Por cierto, esa regla con avisos es la de contraste: son 210 avisos, y vienen de las muestras de color de nuestros casos, que copian a propósito los colores de las webs que medimos. Ahí se quedan.

Lo que quiere decir cada etiqueta

Lo explico como lo entiendo yo cuando miro una comparación:

• Sigue. Lo vimos las dos veces, en la misma página. Ojo, que no tiene por qué ser exactamente el mismo elemento.
• Ya no se observa. Lo vimos la primera vez y la segunda no, en una página que se midió las dos veces. Puede que lo arreglaras. Pero también puede que el contenido cambiara, que esa parte se vea de otra manera o que el agente la escondiera en vez de arreglarla. La medida no sabe cuál de esas cosas pasó.
• Nuevo. Aparece en la segunda medida y no estaba en la primera. Eso no demuestra que lo trajera tu cambio: a veces es contenido que cambia solo.
• No comparable. Las dos medidas no se pueden poner una al lado de la otra, y la comparación te dice por qué. Por ejemplo, porque cambiamos cómo medimos, o porque una se hizo en otro idioma.

Y luego está lo que no se pudo comprobar, que va aparte y se dice como tal. No es lo mismo que no haberlo visto.

Lo que hago ahora

1. Mido siempre por la misma dirección y en el mismo idioma.
2. A cada medida le paso la anterior, para que las compare.
3. Si sale «ya no se observa», abro la página y lo miro antes de darlo por arreglado. Si el cambio lo hizo un agente, le pregunto qué tocó exactamente.
4. Si sale «no comparable», no saco conclusiones. Leo el motivo y, si es que cambió la forma de medir, vuelvo a medir y tomo esa medida como punto de partida.
5. Al agente no le pido un resumen: le pido qué salió en cada regla y por qué.

Los datos

• Primera medida de uxmachine.app, del 3 de noviembre de 2026 a las 14:35 (hora de Madrid). Aviso de cookies: no se pudo saber si lo había.
• Segunda medida de uxmachine.app, del 3 de noviembre de 2026 a las 15:52. Aviso de cookies: rechazado una vez, y ese rechazo se mantuvo en las demás páginas.
• En cada medida, diez páginas, vistas en un ordenador (1280×800) y en un móvil (390×844).
• Comparación: no comparable en las 17 reglas, porque cambió la forma de medir.
• Cómo medimos.

← Todas las notas