Volatilidad de respuestas de IA
La volatilidad es cuánto cambia la respuesta cuando se hace el mismo prompt dos veces. Los informes de GEO que la ignoran se ajustan demasiado al ruido.
La temperatura, el enrutamiento, la recuperación y los experimentos A/B internos del proveedor provocan variaciones. Ejecuta repeticiones. Informa rangos.
Una diapositiva de una sola ejecución que dice "somos #1 en ChatGPT" es pura ficción.
Ejemplos
- El lunes la respuesta te cita. El martes, no. Un tamaño de muestra de 1 causó un incidente en Slack.
Términos relacionados
La Cuota de Modelo es la participación de tu marca en las menciones dentro de las respuestas de IA frente a un conjunto definido de competidores, sobre un conjunto definido de prompts.
El seguimiento de prompts consiste en ejecutar un conjunto fijo de preguntas reales de clientes a través de motores de IA según un horario y registrar a quién se nombró.
Las respuestas de chat en la app pueden diferir de las completaciones de API: herramientas, memoria, navegación, seguridad, anuncios.
FAQ
¿Cuántas repeticiones? +
Tres es un buen punto de partida para prompts de consumo ruidosos. Una puede ser suficiente para preguntas B2B estables y aburridas. Sé cuál tienes.
Síguelo en Reddex
Hilos de Reddit y respuestas de IA sobre tu marca en un solo lugar. Empieza con un análisis gratis.
Empezar