Pre-registramos una predicción a favor de nuestro producto. Los datos dijeron que no. La publicamos.

Antes de ver un solo dato, sellamos una predicción por hash criptográfico: que la capa psicométrica que añade nuestro motor es la que hace que ocho mercados respondan distinto ante el mismo dilema. Era la predicción que favorecía al producto. La registramos, junto al instrumento y el plan de análisis completo, y nos comprometimos por escrito a publicar el resultado saliera como saliera.

Salió que no. Pero el estudio salió con dos titulares, no uno — y el que confirma lo que construimos es tan fuerte como el que nos falsó. Este es el writeup al que nos comprometimos.

Qué es el estudio

El objeto no es la psicología de ocho países. Es una pregunta de validez de constructo para todo el campo de los respondentes sintéticos: cuando una población sintética difiere por país, ¿qué capa del procedimiento de generación produjo esa diferencia? Casi nadie la aísla, así que la respuesta suele ser una conjetura. Construimos los controles para dejar de conjeturar.

Lo que sí demostramos (y es lo que define un segmento)

El resultado más fuerte del estudio es también el que importa comercialmente. Fija el perfil de valores de una persona sintética en el polo opuesto y su conducta cambia en la dirección predicha, en los ocho mercados — el efecto más grande de todo el estudio. Ejemplo concreto: la conducta "al final la decisión es mía" aparece en el 76% del perfil orientado al crecimiento frente al 42% del conservador.

Esto no es un detalle técnico: es exactamente lo que promete el producto. Cambias el vector de la persona y su comportamiento cambia, de forma coherente, controlable y trazable. Ahora tenemos la evidencia pre-registrada de que el mecanismo hace lo que decimos que hace. Eso es lo que es un segmento definido: no una muestra al azar, sino un perfil que puedes fijar y defender.

El resultado completo: dos ejes con fuentes distintas

Las diferencias entre mercados también son reales (tamaños de efecto de 0,17 a 0,38, reproducibles en tres semillas de generación independientes). Pero no vienen de nuestra capa psicométrica. Una celda de control con la capa retirada muestra la misma estructura entre mercados; una versión de prompt plano sobre el mismo modelo base tampoco muestra degradación. Dos controles independientes, hechos para pillar cosas distintas, apuntan al mismo sitio.

Lo que emerge es una separación limpia entre dos ejes que la práctica tiende a confundir:

La parte que casi ninguna empresa puede publicar: nos corregimos a nosotros mismos

Nuestra primera lectura del dato sugería algo más fuerte —que la celda sin la capa psicométrica tenía más estructura entre mercados, una "inversión"—. Habría sido un resultado llamativo. No nos fiamos. Comprobamos si era un artefacto de que nuestro propio codificador fuera más ruidoso sobre una celda que sobre otra, y lo era: alrededor del 79% de la aparente inversión era ruido de medición. Así que retiramos la afirmación fuerte y nos quedamos con la firme y más pequeña: la capa no añade estructura entre mercados. Cazamos nuestro propio over-claim antes de publicar, no después.

Qué SÍ afirmamos, y qué NO

En dos columnas, porque la distinción es el producto:

Sí afirmamos

• Que fijar el perfil psicométrico produce un segmento distinto, coherente y estable dentro de un mercado — confirmado en los ocho, con las direccionales predichas cumplidas. Es el eje que gobierna la capa, y es el que vendemos.
• Que la estructura entre mercados es real y reproducible entre semillas.
• Que todo esto es auditable: pre-registro por hash, 2.600 respuestas con etiquetas y código con semillas fijas, abiertos.

No afirmamos

• Que nuestra capa psicométrica capture la cultura de cada país. No lo hace — esa es la predicción que el dato falsó. La estructura entre mercados la renderiza el modelo base; un segundo modelo, con idéntico país e idioma, no diferenció los mercados en absoluto. Las etiquetas de mercado denotan el contexto de generación, no un país.
• Que esto esté "validado". Ningún juez de esta fase es humano — la fiabilidad interina es un codificador de lenguaje independiente. La validación humana es la siguiente fase, y solo entonces aplica esa palabra. Es un resultado provisional de Fase 1, y lo decimos con la cabeza alta: decirlo claro es lo que separa un estudio auditable de una cifra auto-reportada.

Para ser exactos con lo que gobierna la capa psicométrica, porque es fácil de resumir mal: gobierna la divergencia de perfil dentro de un mercado —lo que define un segmento, confirmado 8/8— y no la estructura entre países. Son dos ejes distintos con fuentes distintas; confundirlos es justo el error que este estudio existe para corregir.

Por qué lo publicamos

El resultado tiene una cara incómoda para nosotros: la capa que añade nuestro producto no hace una de las cosas que su valor de mercado invitaría a suponer. Lo publicamos igual porque un estudio que puedes auditar —pre-registrado por hash, datos y código abiertos, resultados en contra de nuestro propio interés incluidos— vale más que una cifra de validación que nadie puede comprobar. Un escéptico puede reejecutar todo el análisis y ver que no movimos la portería. Ese es todo el objetivo.

Y la cara que no es incómoda es la que de verdad importa para quien nos compra: demostramos, con evidencia sellada, que el mecanismo que vendemos —perfiles que producen segmentos distintos y trazables— hace exactamente lo que decimos. Preferimos ser los que publican el estudio que va en contra de una parte de su propio producto, y prueban la parte que sí, que los que no pueden publicar ninguna de las dos.

Si haces investigación cualitativa, nos gustaría de verdad saber dónde esto te engañaría. Ese hueco es lo que buscamos.