Realizando un Estudio Delphi Donde el Razonamiento Sobrevive las Rondas

El panel que convergió en nada que alguien pudiera explicar.

La Ronda 3 del estudio Delphi se cierra y el facilitador envía un correo electrónico al panel: consenso alcanzado. La mediana pasó de 6.1 a 7.8 en la pregunta sobre la adopción a diez años; la desviación estándar se redujo a la mitad; el informe se escribe solo. Luego, un panelista —uno cuidadoso— responde con la pregunta que lo deshace: "Revisé mi estimación porque el resumen de la Ronda 2 decía que el grupo tenía razones sólidas para el optimismo. ¿Puedo ver esas razones? Me gustaría saber con qué estuve de acuerdo."

No hay una buena respuesta. Las rondas fueron encuestas. Entre ellas, el panel vio medianas, cuartiles y un resumen de dos párrafos del facilitador. Las razones —cualesquiera que fueran los argumentos específicos que llevaron a once expertos a revisar al alza— se escribieron en cuadros de texto libre, se comprimieron en el resumen y se perdieron. El panel convergió; sobre qué razonamiento, nadie puede decir.

Este no es un estudio roto; es una práctica estándar con herramientas estándar, y desperdicia la mejor propiedad del método. Delphi fue diseñado en torno a una idea precisa: la anonimidad y la independencia eliminan los efectos de dominio y estatus que distorsionan los paneles cara a cara, y la retroalimentación controlada permite que el juicio genuino cambie sin presión social. El software de encuestas proporciona la independencia y pierde la sustancia de la retroalimentación. Este tutorial realiza las mismas rondas manteniendo el razonamiento.

Lo que pierde el Delphi basado en encuestas entre rondas

Una ronda Delphi produce dos cosas: una distribución (donde se encuentra el panel) y un cuerpo de razonamiento (por qué). Las herramientas de encuesta están diseñadas para la primera. La segunda se aplana en campos de texto libre y luego en un resumen del facilitador, que inserta silenciosamente un editor no accountable entre los expertos y entre ellos. Los panelistas en la Ronda 2 no están respondiendo a los argumentos de sus pares; están respondiendo a una paráfrasis de ellos. Para un método cuya epistemología completa es juicio colectivo estructurado, es algo extraño perder — la historia de los métodos colectivos es en gran medida una historia de luchas sobre exactamente este paso de retroalimentación.

Configuración: la pregunta, el panel — y la decisión de anonimato

Antes que nada, una decisión que un metodólogo verificará primero: lo que realmente requiere su panel — independencia o anonimato — porque no son lo mismo, y la plataforma le ofrece uno de ellos por defecto.

1. 1Enmarca la proposición como la afirmación raíz — falsable, no abierta: "X será la práctica clínica estándar para 2032", no "¿cuál es el futuro de X?". Una raíz vaga produce posiciones no evaluables. Punto de control: la raíz puede ser argumentada a favor y en contra.

Ronda 1: posiciones independientes, luego los números

1. 1Ventana de presentación independiente. Cada panelista añade posiciones de apoyo u oposición bajo la raíz — sin ver las de los demás hasta que se envíen. Esta es la independencia que el método requiere, impuesta por el medio en lugar de por la confianza en el proceso del facilitador. Punto de control: cada panelista tiene ≥1 posición; nadie ha visto ni editado las de los demás.
2. 2Opcional: panelistas de IA, etiquetados. Sembrar posiciones adicionales de varios modelos. La procedencia está estampada en cada argumento, por lo que las posiciones de la máquina siempre son distinguibles de las de los expertos. Esto amplía el espacio de posiciones; no añade experiencia — la distinción es importante y debe estar en su informe (ver la sección del panel híbrido a continuación). Punto de control: posiciones de IA etiquetadas visiblemente.
3. 3Calificaciones de la Ronda 1. Cada panelista califica cada posición: un valor más una etiqueta, con los anclajes que definiste ("1 = implausible … 9 = casi seguro"). Este es el registro cuantitativo de la ronda. Punto de control: matriz de calificación completa; anclajes declarados una vez, utilizados de manera consistente.

Retroalimentación controlada que lleva el razonamiento

Ahora las herramientas de encuesta de pasos no pueden hacerlo. El artefacto de retroalimentación para la Ronda 2 es no un resumen que escribió el facilitador — es el árbol en sí: cada posición, en las propias palabras de su autor (o modelo), con su distribución de calificaciones adjunta. Los panelistas ven exactamente qué argumentos el grupo consideró fuertes, cuáles dividieron al panel y cuáles se hundieron — sin ninguna paráfrasis editorial en medio. El trabajo del facilitador se reduce a la logística: anunciar la ventana, señalar el árbol.

Ronda 2: interrogar, desafiar, reconciliar

La Ronda 2 es donde el Delphi clásico dice "revisar a la luz de los comentarios." Con el razonamiento visible, la revisión se vuelve activa: tres movimientos estructurados, cada uno un diálogo de cuatro turnos con el autor de la posición:

1. 1Interrogar — Cadena de preguntas y respuestas. Antes de revisar hacia una posición, entiéndela: tu pregunta, la respuesta del autor, seguimiento, respuesta — completo. Para posiciones de IA, el modelo responde automáticamente, por lo que el panel nunca se bloquea esperando a un miembro. Punto de control: las posiciones que cambiaron de opinión llevan cadenas que explican por qué.
2. 2Desafío — Cadena de revisión. Evalúa una posición como no respaldada; el autor responde; seguimiento; respuesta. N panelistas desafiando una posición = N cadenas paralelas — que es exactamente la estructura que un Delphi desea: crítica paralela e independiente, nunca un hilo de grupo para volver a entrar. Punto de control: las posiciones en disputa llevan desafíos completados.
3. 3Conciliar casi duplicados — Cadena de compromiso. Dos expertos que ocupan casi la misma posición cuentan doble una opinión en las calificaciones. Uno propone la formulación fusionada al otro, de manera oficial. Punto de control: ningún par duplicado queda sin fusionar o sin explicar.
4. 4Calificaciones de la Ronda 2. Recalifica todo bajo los mismos anclajes. Punto de control: segunda matriz completa, lista para comparación.

Paneles híbridos: añadiendo modelos sin añadir experiencia

Debido a que las posiciones escritas por IA responden a sus propias cadenas —enviadas de vuelta al modelo que las escribió— un panel híbrido humano/IA es realmente práctico: usar modelos para ampliar el espacio de posiciones de la Ronda 1, luego permitir que los expertos humanos interroguen las posiciones de la máquina en la Ronda 2 y obtengan respuestas sustantivas sin que nadie esté a cargo del lado de la máquina. Sea preciso sobre lo que esto aporta: mayor entrada, no mayor experiencia. La posición de un modelo es un patrón bien formulado, no una carrera de juicio, y la etiquetación existe para que sus números de convergencia puedan ser calculados con y sin las filas de la máquina. Cuando ampliar la entrada ayuda y cuando simplemente diluye es su propia literatura — cuando las multitudes se equivocan cubre los modos de fallo; el lado opuesto, por qué los juicios independientes se agregan tan bien cuando son genuinamente independientes, es la historia de Galton y Condorcet.

Midiendo la convergencia, informando la disidencia

La convergencia es el estrechamiento de las distribuciones de calificaciones entre rondas, y se mide comparándolas —honestamente, a mano o exportando: no hay una estadística de convergencia incorporada, no hay un W de Kendall automático, no hay una prueba de estabilidad. Exporta las dos matrices y calcula lo que tu campo espera, o informa sobre las distribuciones cualitativamente ("doce de catorce posiciones se estrecharon; dos se dividieron aún más").

Y reporta la disidencia. Una posición donde el panel disiente de manera estable a lo largo de las rondas — misma dispersión, ambos polos defendidos en cadenas completadas — es un hallazgo, posiblemente el más valioso: marca donde el juicio experto realmente se divide, con el razonamiento para ambos polos adjunto. Promediarlo es el único pecado imperdonable de Delphi. El árbol hace que la disidencia sea citada: la objeción sobreviviente, su autor (o su representante anónimo de inquilino público), y los desafíos que sobrevivió.

Limitaciones honestas

• ✗La independencia no es anonimato — declarado de manera clara y que vale la pena reiterar: los argumentos de inquilinos privados son atribuibles. Si el anonimato es metodológicamente esencial, utiliza el inquilino público de Argumentree.AI y así lo indicas en tu escrito.
• ✗No hay un gerente de ronda. No hay un botón de cerrar-Ronda-1, ni visibilidad por ronda. Las rondas son una convención de facilitación que se aplica con límites de tiempo e instrucciones; dilo así y no impliques una automatización que no existe.
• ✗No hay una estadística de convergencia incorporada. Kendall's W, pruebas de estabilidad y similares son tuyas para calcular a partir de las calificaciones exportadas.
• ✗Las calificaciones son un único valor etiquetado, no un instrumento de Likert con anclajes validados. Define tus anclajes en la etiqueta y mantenlos constantes a lo largo de las rondas.
• ✗Una cadena son cuatro vueltas, luego se completa. Una disputa experta que necesita más recibe una llamada: la cadena registra lo que ya se preguntó y respondió.

Lecciones prácticas

• ✓Escribe los anclajes antes de la Ronda 1 y pégalos en cada anuncio de ventana. La mitad de todos los datos desordenados de Delphi es deriva de anclaje.
• ✓Ventanas de tiempo generosamente distribuidas a través de zonas horarias — 72 horas por ronda funcionan para paneles internacionales; las cadenas son asíncronas por construcción.
• ✓Posiciones de Cap Round-1 por panelista (tres son suficientes). Delphi recompensa las posiciones consideradas, no el volumen.
• ✓Congela el árbol entre rondas. Anuncia que las presentaciones fuera de las ventanas serán eliminadas; la convención de ronda solo se mantiene si el facilitador la sostiene.

La respuesta que finalmente puedes enviar

Volviendo al correo electrónico del panelista cuidadoso: "¿Puedo ver las razones? Me gustaría saber con qué estuve de acuerdo." En esta versión del estudio, la respuesta es un enlace. Aquí están las catorce posiciones; aquí está la que vio colapsar su rango de calificación después de que dos cadenas de revisión no lograron afectarla; aquí está el intercambio que te conmovió a ti y a otros once. Consenso con el razonamiento adjunto — que fue la promesa del método desde el principio.