La mayoría de los cuestionarios de feedback para seminarios no son ni demasiado cortos ni demasiado largos. Miden algo distinto de lo que creen sus autores y, en tres casos, sencillamente no miden nada analizable. Esos tres errores son la razón de que al final haya cifras de las que nadie puede deducir una decisión, y de que aun así se deduzca una. Ese es el caso peor: no la decisión que falta, sino la equivocada.
Error 1: confundir satisfacción con aprendizaje
Es el mayor error de razonamiento al diseñar un cuestionario de feedback, y ya está en la primera pregunta de casi todos: “¿Cómo de satisfecho ha quedado con el seminario?”
La investigación sobre evaluación de la formación es inusualmente clara en este punto. Un metaanálisis de Sitzmann y colegas (2008) muestra que las reacciones de los participantes se relacionan solo moderadamente con el aumento inmediato de conocimiento y, con el conocimiento diferido, prácticamente nada. Blume y colegas (2010) van un paso más allá: las reacciones afectivas, es decir, si a la gente le gustó, no guardan relación con la transferencia.
En pocas palabras: un seminario puede recibir buenas notas en todo y no cambiar nada. Y un día agotador que tocó a la gente en un punto sensible puede recibir peor valoración y haber sido el más eficaz del año.
No es razón para no preguntar. La satisfacción es un criterio propio y legítimo: dice algo sobre la disposición a implicarse. Simplemente no es una medida del aprendizaje y no debe presentarse como tal.
Qué preguntar en su lugar: por la aplicabilidad y la intención. “Sé concretamente qué voy a hacer distinto en las próximas dos semanas” se acerca mucho más a lo que quieres saber que cualquier pregunta de satisfacción. Y la pregunta que casi nadie hace: “Veo obstáculos que me van a impedir ponerlo en práctica.” Te dice dónde va a fallar la transferencia antes de que falle.
Error 2: preguntas cuya respuesta no tiene dirección
Una pregunta que aparece en casi todos los cuestionarios: “La proporción entre la exposición y el trabajo propio me pareció adecuada.” Respuesta: un 2 sobre 5.
¿Y ahora qué? Sabes que no fue adecuada. No sabes si hubo demasiada teoría o demasiado poca práctica. Las dos respuestas llevan a cambios exactamente opuestos en el diseño, y la pregunta no puede distinguirlas. Lo mismo vale para “El ritmo fue el adecuado” y “La profundidad fue la correcta”.
Preguntas así necesitan una escala de dos lados, con los dos extremos nombrados y la mitad como objetivo:
| Aspecto | 1 | 2 | 3 | 4 | 5 |
|---|---|---|---|---|---|
| Exposición y trabajo propio | demasiada exposición | algo demasiada exposición | justo | algo demasiado trabajo propio | demasiado trabajo propio |
| Ritmo | demasiado lento | algo demasiado lento | justo | algo demasiado rápido | demasiado rápido |
| Profundidad | demasiado superficial | algo demasiado superficial | justo | algo demasiado detallado | demasiado detallado |
Ahora la respuesta sirve: un 2 significa “algo demasiada exposición”, y sabes qué cambiar la próxima vez. Además, la media de una escala así tiene un sentido claro: muestra hacia qué lado se inclina el grupo en conjunto.
Error 3: dos lógicas de escala en el mismo cuestionario
Aquí es donde se vuelve peligroso, y este error solo surge al resolver el error 2.
El cuestionario tiene ahora dos tipos de pregunta: preguntas de acuerdo, en las que 5 es el mejor resultado. Y preguntas de equilibrio, en las que la mitad es el mejor resultado.
Si los dos tipos tienen el mismo aspecto —cinco casillas con números debajo—, a partir de la tercera pregunta la gente marca en piloto automático y no ve el cambio. Después calculas medias de columnas en las que 5 significa una vez “muy bien” y otra “demasiado rápido”.
Así que cambia el formato, no solo el bloque. Las preguntas de equilibrio no llevan escala numérica, sino tres campos con nombre para marcar:
| Aspecto | ☐ | ☐ | ☐ |
|---|---|---|---|
| Exposición y trabajo propio | demasiada exposición | justo | demasiado trabajo propio |
| Ritmo | demasiado lento | justo | demasiado rápido |
| Profundidad técnica | demasiado superficial | justo | demasiado detallado |
| Prácticabeispiele | demasiado pocos | justo | demasiados |
Tres campos con palabras en lugar de cinco casillas con números. No hay ningún número que arrastrar desde la pregunta anterior, y no se puede malinterpretar sin haberlo leído. Pierdes el matiz entre “algo demasiado” y “demasiado”, y es un buen intercambio. Para decidir qué cambiar la próxima vez, basta con la dirección. Un resultado en el que siete de doce han marcado “demasiada exposición” es más claro que una media de 2,4 en una escala que la mitad de la sala ha leído al revés.
Dos precauciones más contra el cansancio:
- Las preguntas de equilibrio, primero. Exigen pensar más, así que van donde todavía queda atención. Las preguntas de acuerdo salen bien incluso en piloto automático, porque todas apuntan en la misma dirección.
- En una sola cara. Lo que esté al dorso no lo rellenará una parte del grupo al final del segundo día, y esa parte no es una muestra aleatoria.
La trampa de la dirección: el 1 no se explica solo
Y ahora el punto en el que los cuestionarios son especialmente vulnerables.
En España la nota más alta es la mejor: un 10 es sobresaliente. En Alemania, Austria y Suiza es justo al revés: el 1 es la mejor nota y el 5 o el 6 la peor. Y en Amazon, en las webs de reseñas de hoteles y en prácticamente cualquier aplicación, cinco estrellas son lo mejor y una lo peor. Las tres convenciones le resultan familiares a la misma gente, y no apuntan en la misma dirección.
Una escala que solo muestra “1 – 2 – 3 – 4 – 5” no es, por tanto, neutral, sino ambigua. Una parte de tu grupo la lee como nota escolar y otra como estrellas. Las respuestas caen en el mismo campo y se anulan entre sí. No es un riesgo teórico: afecta justo a quienes rellenan rápido y por rutina, es decir, a la mayoría.
Cuatro reglas que lo evitan:
- Nunca números desnudos. Cada punto de la escala lleva una etiqueta en palabras. Los números pueden ir al lado, pero nunca sostienen solos el significado.
- Mantén la dirección constante en todo el cuestionario. Lo negativo siempre a la izquierda, lo positivo siempre a la derecha. También en las páginas siguientes, aunque el espacio se quede corto.
- Di la dirección una vez al principio. Una frase encima del primer bloque: “La izquierda significa desacuerdo; la derecha, acuerdo.”
- No uses notas escolares. Ni como escala ni en el lenguaje. “¿Qué nota le pondrías al seminario?” devuelve la lógica de las notas a un cuestionario construido con estrellas.
En grupos multilingües hay un punto más: la dirección de las notas escolares no es igual en todas partes. En España, en los Países Bajos y en buena parte de Escandinavia el número más alto es el mejor; en Alemania y Austria, el más bajo. Las escalas con etiquetas también resuelven este problema; los números desnudos lo agravan.
Cuántos puntos, con o sin mitad
Cinco puntos. Cuatro es demasiado tosco; diez sugiere una precisión que nadie tiene: la diferencia entre un 7 y un 8 no significa nada comparable en dos personas distintas.
En las preguntas de equilibrio, la escala impar es imprescindible: allí la mitad es el óptimo, así que tiene que existir.
En las preguntas de acuerdo, la mitad es el punto de discusión de siempre. Permite la indecisión real, pero en las preguntas incómodas se convierte en una escapatoria. La solución práctica: escala impar y, al lado, un campo aparte: “no puedo valorarlo”. Así la escapatoria sale de la mitad, y la mitad vuelve a significar lo que debe significar.
Un cuestionario que evita estos tres errores
Después: acuerdo, cinco puntos, todos etiquetados
- Sé concretamente qué voy a hacer distinto en las próximas dos semanas.
- Lo aprendido encaja con situaciones que se dan de verdad en mi trabajo diario.
- Veo obstáculos que me van a impedir ponerlo en práctica.
- Me habría atrevido a hacer aquí una pregunta incómoda.
- Tuve suficientes oportunidades de participar.
La cuarta pregunta es una aproximación útil a cuánta seguridad se creó en la sala, y es más incómoda —y por tanto más sincera— que “La conducción fue competente”.
Primero: equilibrio, tres campos para marcar, sin números
- Proporción entre exposición y trabajo propio
- Ritmo
- Profundidad técnica
- Anteil an Beispielen aus der Práctica
Para terminar: dos preguntas abiertas
- ¿Qué ha cambiado para ti respecto a esta mañana?
- ¿Qué parte le contarías a un colega? Muestra qué ha quedado y, de paso, te da frases para la descripción de tu propio seminario.
Los campos abiertos van al final, no al principio: quien ya ha marcado casillas está dentro del cuestionario y escribe con más facilidad.
Cuándo rellenarlo
En la sala, no por correo después. Con un correo posterior responden sobre todo los entusiastas y los enfadados: falta el término medio, y es justo ahí donde está lo aprovechable.
Planifica cinco minutos, como un bloque con su propia duración en el programa. No “si nos sobra tiempo”: un bloque que tiene una duración se desplaza; un resto se elimina. Por qué ese es el truco más eficaz para cerrar el día está en Ronda de feedback en un taller.
Anónimo, y sincero sobre hasta dónde llega eso. Dos límites que conviene decir en voz alta en lugar de pasarlos por alto.
Primero: en grupos pequeños, el anonimato es una afirmación. Con seis personas se reconoce la letra, las expresiones y quién ha escrito sobre qué.
Segundo: los cuestionarios casi siempre siguen su camino. En la formación de empresa, quien te ha contratado los analiza personalmente; ese es el caso normal, no la excepción. Prometer que se quedan contigo sería, en la mayoría de los casos, sencillamente falso.
Así que di lo que de verdad ocurre: “Estos cuestionarios van a desarrollo de personas, sin nombres. Lo que queráis decirme a mí personalmente, decídmelo en la pausa.” Es sincero, no cuesta nada y, de paso, crea el segundo canal, que es el que trae el feedback más útil. Por qué esto no es un detalle menor, sino el núcleo de un conflicto estructural, está en Cuando el feedback del formador se convierte en boletín de notas.
¿Y la pregunta de recomendación?
Muchos cuestionarios incluyen en su lugar la única pregunta del NPS en una escala del 0 al 10. Por qué en grupos de seminario de menos de veinte personas eso no es un indicador, sino ruido, está en ¿Sirve el NPS en un seminario?.
En resumen
- La satisfacción no mide el aprendizaje: pregunta por la intención y por los obstáculos
- “Estuvo equilibrado” no es una pregunta útil: usa una escala de dos lados con los extremos nombrados
- Nunca des el mismo aspecto a dos lógicas de escala: las preguntas de equilibrio, como tres campos con nombre y sin números
- Nunca números desnudos: según dónde haya estudiado cada cual, el 1 es la mejor nota o la peor
- Cinco puntos, todos etiquetados, dirección constante, y todo en una sola cara
- Dos preguntas abiertas justo al final, rellenadas en la sala
