Persona A

Product Lead

Medir la confianza

Escenario

Aunque el engagement sigue subiendo, el/la Product Lead observa que las señales cualitativas — hilos de Discord, tickets de soporte, notas de llamadas de ventas — sugieren que los usuarios están confiando cada vez menos en el producto. Cree que la empresa está navegando a ciegas en cuanto a confianza y quiere añadir dos nuevas métricas al dashboard de la empresa para hacerlo visible.

Va a presentar la propuesta al/a la VP de Datos, quien decide qué se mide y es famoso/a por ser muy selectivo/a a la hora de añadir cosas al dashboard.

Lo que quieres

Añadir dos nuevas métricas al dashboard de la empresa — "confianza del usuario en las respuestas de la IA" (una encuesta post-tarea) y "tasa de regeneración de respuestas".

Lo que sabes

  • Analizaste las razones que dio la gente para darse de baja; la respuesta más común fue "IA de mala calidad".
  • Hiciste una encuesta a 200 personas: el 41% dijo que "verifica la respuesta de la IA en otro sitio la mayoría de las veces." Ese número era el 28% hace un año.

Consideraciones

  • Sé concreto/a sobre la implementación: cómo se calcula el proxy de confianza, quién lo lleva.
  • Encuadre de indicador adelantado: cuando el churn se mueve, ya es tarde.
  • Sugiere pilotarlo en una superficie de producto antes de llevarlo a toda la empresa.