La pregunta que más oigo de los socios que realizan encuestas a gran escala es alguna versión de: ¿por qué nuestras preguntas sí o no siguen produciendo resultados borrosos? La respuesta rara vez es el tema mismo.
Las preguntas dichotómicas piden una de las dos respuestas. Aparecen en las encuestas como sí o no, verdaderas o falsas, o de acuerdo o en desacuerdo. Cuando se combinan con una breve instrucción se vuelven más claras y más fiables para todos los involucrados.
Las personas utilizan estas preguntas porque producen datos que son fáciles de contar y comparar entre miles de respuestas.Una encuesta nacional de salud en un país podría preguntar si una persona recibió una vacuna en el último año.Los investigadores de mercado en otro podrían preguntar si un producto cumple con las expectativas.
La instrucción que viaja con la pregunta es tan importante como la pregunta misma. Define términos, establece marcos de tiempo o explica qué ignorar. Sin ella, dos encuestados pueden interpretar las mismas palabras de manera diferente y todavía ambos responden sí.
Considere primero una versión básica.Un departamento de transporte de la ciudad quiere conocer los patrones de uso. La pregunta es: ¿Has utilizado el servicio de autobús en el último mes? Una instrucción acompañante añade: Cuenta sólo los vuelos pagados en las rutas regulares. No incluya los autobuses escolares o los autobuses cargados. La instrucción elimina la ambigüedad antes de que alguien responda.
Otro ejemplo proviene de los formularios de comentarios de los clientes utilizados por los minoristas en varias regiones. ¿Planea volver a comprar con nosotros en los próximos seis meses? La instrucción aclara: Basar su respuesta en sus intenciones actuales, no en hábitos pasados o en lo que cree que la empresa quiere oír.
La formulación de la pareja sigue una secuencia corta que los diseñadores experimentados repiten cada vez. En primer lugar, nombra el hecho o opinión requerido. En segundo lugar, convierte ese hecho en una pregunta que realmente ofrece solo dos respuestas. En tercer lugar, escribe la instrucción que elimina los puntos más comunes de confusión. En cuarto lugar, prueba la formulación con un puñado de personas que coinciden con la audiencia final. En quinto lugar, ajuste cualquier cosa que todavía produzca interpretaciones variadas.
El paso de prueba a menudo revela pequeños problemas.Una firma de encuestas europea encontró que los encuestados en diferentes idiomas trataron la palabra de manera diferente recientemente. La instrucción se actualizó para especificar el número exacto de semanas.
Los hábitos regionales forman la forma en que se plantea la misma pregunta. Los equipos en Australia a menudo incluyen una breve definición de términos clave porque la población se dispersa a través de zonas horarias y industrias. Los equipos en partes de Asia a veces añaden una instrucción sobre el contexto cultural para que el acuerdo educado no oculte un verdadero no. Los equipos en América del Norte a menudo acortan la instrucción para evitar que los encuestados móviles pasen por ella. Ninguno de estos enfoques se requiere en todas partes, pero cada uno refleja lo que los encuestados locales necesitan responder de forma rápida y precisa.
El personal administrativo que gestiona la colección diaria merece el crédito por notar cuando las respuestas se agrupan de forma extraña.
Las buenas instrucciones también protegen contra los prejuicios no intencionados. Una pregunta que comienza ¿Has dejado de visitar el centro de la ciudad debido a preocupaciones de seguridad ya asume una razón. La versión revisada pregunta dos artículos separados: ¿Has visitado el centro de la ciudad en los últimos tres meses? Si la respuesta es no, una instrucción de seguimiento puede preguntar por la razón principal sin forzarlo a la primera respuesta.
Las estadísticas de las plataformas de encuestas muestran que los artículos dichotómicos bien instruidos reciben tasas de finalización más altas que los artículos que quedan abiertos a la interpretación.Los encuestados terminan más rápido y sienten que las preguntas respetan su tiempo.Los analistas reciben columnas de datos más limpias que requieren menos limpieza más tarde.
Photo by Brett Jordan on Unsplash
Un paso práctico que un equipo puede tomar este mes es sacar las cinco preguntas dicotómicas más utilizadas de su último proyecto, agregar o refinar la instrucción acompañante para cada una, y ejecutarlas a través de cinco personas fuera de la organización.