El gemelo digital acierta el rumbo, no la respuesta exacta
YouGov comparó 1.008 réplicas hechas con IA contra las personas reales de su panel y publicó los resultados, incluido el que todavía no sabe interpretar. Con eso pide estándares de validación para toda la industria
La discusión sobre los encuestados sintéticos venía trabada en una pregunta que casi nadie podía contestar: ¿se parece cada réplica a la persona de la que salió? Comparar promedios no alcanza, porque un conjunto de gemelos puede reproducir la distribución de una muestra y equivocarse con cada individuo. YouGov hizo la prueba que pocos pueden hacer, porque tiene un panel al que puede volver a preguntar, y la publicó el 10 de noviembre con un pedido explícito: que la industria acuerde cómo se valida un gemelo digital antes de vendérselo a un cliente.
Cómo se hizo
Junto con OriginalVoices, una plataforma de simulación con IA, YouGov construyó «E-twins» de 1.008 panelistas con identidad verificada por documento oficial. Después les hizo las mismas preguntas nuevas a los gemelos y a las personas. El 69 % de los panelistas respondió en 48 horas, lo que dejó 693 pares para comparar uno a uno, según Research Live.
Lo que salió bien
- El 75 % de las veces, el panelista juzgó que la respuesta abierta de su gemelo describía sus propias opiniones.
- La confianza que el sistema asigna a cada respuesta sirve de guía: el acuerdo fue del 81 % en las respuestas de confianza alta, del 72 % en las de confianza media y del 67 % en las de confianza baja.
- Entrenar a los gemelos con las valoraciones de cada panelista sobre más de 4.000 marcas, medios y otras entidades subió del 78 % al 90 % la proporción de respuestas que quedaban a un punto o menos de la real, en una escala de cinco.
- En libros de ficción, una categoría que se dejó fuera del entrenamiento, el gemelo también quedó a un punto o menos el 90 % de las veces.
- Según la empresa, más datos de contexto redujeron la dependencia de la demografía, y no encontraron un patrón de error por edad, género, raza o educación.
El 58 %
La cifra más reveladora está en el texto de Stephan Shakespeare, director ejecutivo y cofundador de YouGov, y no en los titulares: el gemelo dio exactamente la misma calificación que su persona el 58 % de las veces. «A un punto o menos» en una escala de cinco es una tolerancia generosa: incluye pasar de «me gusta» a «me gusta mucho», que en un test de concepto o en un tracking de marca puede ser justo la diferencia que se busca medir.
La empresa reconoce que no sabe todavía si ese 58 % es poco o mucho, porque no midió cuántas veces una persona repite su propia respuesta cuando se le pregunta dos veces. Ese techo es la próxima prueba, y Shakespeare se comprometió a publicar el resultado «sea cual sea». Hasta entonces, el número sirve como recordatorio: el gemelo capta la dirección de una opinión mejor que su intensidad.
El pedido a la industria
«Desafío a todos en la industria a trabajar juntos para establecer estándares de verificación y validación de datos simulados», escribió Shakespeare. YouGov propone validar cada gemelo contra la persona real, publicar métodos y fallas y acordar estándares por caso de uso. El argumento comercial es transparente: quien tiene un panel que puede volver a consultar tiene una ventaja para validar que no tienen los proveedores que construyen gemelos con bases públicas.
Para un equipo de marketing, la lectura práctica es concreta. Antes de reemplazar una muestra por gemelos conviene pedir tres cosas: la coincidencia exacta y no solo la aproximada, los resultados en temas que no estaban en el entrenamiento y la confianza de cada respuesta. Con eso se sabe cuándo alcanza con el gemelo y cuándo hay que volver a preguntarle a la persona.