Ranking

Cuando todo recibe 4 o 5 estrellas, nada es realmente importante. Las preguntas de ranking obligan a los encuestados a elegir, y ahí es donde surgen las verdaderas prioridades.

Las escalas de valoración miden la intensidad. El ranking mide la prioridad. Si necesitas concesiones (trade-offs), las valoraciones no te las darán. La gente tiende a agrupar sus valoraciones en la parte superior y terminas con diez elementos puntuados con 4.2 sobre 5. El ranking les hace elegir, y elegir es donde los datos se vuelven honestos.

Cuándo usarlo

Usa preguntas de ranking cuando necesites saber qué va primero, no solo qué es bueno:

• Priorizar funciones - “¿Qué mejoras son más importantes para ti?”
• Probar mensajes - “¿Qué propuesta de valor resuena mejor?”
• Informar hojas de ruta - “Clasifica estos problemas según su impacto en tu trabajo”
• Comparar ideas - “¿Qué conceptos prefieres?”
• Asignar recursos - “¿Dónde deberíamos invertir a continuación?”
• Segmentar audiencias - Diferentes grupos clasifican de manera diferente, y esa diferencia es el insight clave

Métodos de Ranking

Cuatro métodos. Cada uno funciona para un tamaño de lista y contexto diferente. El sistema elige uno basado en tu cantidad de opciones, o tú lo eliges manualmente.

Arrastrar y Soltar (Ordenar)

Los encuestados arrastran los elementos a su orden preferido. Simple, familiar, rápido.

Úsalo para 5 elementos o menos. Más allá de eso, la gente coloca cuidadosamente los 2 o 3 primeros, y luego arrastra el resto a lugares aleatorios solo para terminar. La mitad de una lista larga de arrastrar y soltar es ruido, no señal.

Comparación por Pares

Dos elementos a la vez. Elige el mejor. Repite.

Esto refleja cómo las personas deciden las cosas naturalmente. Comparar dos opciones es rápido y se siente sin esfuerzo. Detrás de escena, cada opción obtiene una tasa de victoria basada en la frecuencia con la que fue elegida, produciendo un ranking completo a partir de elecciones binarias simples.

Eliges entre comparación por pares “completa” (se muestran todos los pares posibles) o “parcial” (cada encuestado ve una muestra). Con 10 opciones hay 45 pares; con 20 hay 190. La comparación parcial distribuye el trabajo entre los encuestados para que nadie vote en todas las combinaciones.

Úsalo para 6-15 opciones. Puede sentirse repetitivo si muestras demasiadas comparaciones a una sola persona; mantén el número de pares por encuestado razonable.

MaxDiff (Escala de Mejor-Peor)

Los encuestados ven pequeños subconjuntos (3-5 opciones a la vez) y eligen la más y la menos importante de cada conjunto. Después de varias rondas con diferentes combinaciones, los votos se puntúan en un ranking completo.

Cada pantalla te da dos puntos de datos (una señal de “mejor” y una de “peor”), por lo que MaxDiff extrae el doble de información por pantalla en comparación con la comparación por pares. Maneja listas largas porque los encuestados nunca ven el conjunto completo a la vez.

Las puntuaciones brutas se basan en las selecciones de mejor y peor, luego se normalizan para su comparación.

Úsalo para más de 8 opciones. El punto ideal es de 10 a 30 elementos con 3 a 5 mostrados por pantalla.

El truco: los encuestados deben estar familiarizados con todas las opciones. Elegir lo mejor solo requiere reconocer una opción fuerte. Elegir lo peor requiere entenderlas todas. Si el conocimiento varía, los encuestados adivinan, y las suposiciones se convierten en ruido.

Asignación de Presupuesto

Dales a los encuestados un fondo fijo de puntos y deja que lo distribuyan. También conocido como suma constante.

Este es el único método que captura la magnitud. La comparación por pares y MaxDiff te dicen que los encuestados prefieren A sobre B. La asignación de presupuesto te dice que gastarían 40 puntos en A y 5 en B: les importa A ocho veces más.

La desventaja: la gente tiende a volcar la mayoría de los puntos en un elemento y dispersar el resto sin pensarlo mucho. No sobreinterpretes las pequeñas diferencias entre elementos de baja puntuación. Mantén la lista por debajo de 8 opciones; dividir 100 puntos entre 15 elementos es más aritmética que investigación.

¿Qué método debería elegir?

Método	Mejor para	Opciones	Esfuerzo del encuestado
Arrastrar y Soltar	Ranking rápido de listas cortas	2-5	Bajo
Pares (Pairwise)	Listas medianas, apto para móviles	6-15	Bajo por voto
MaxDiff	Listas largas, proyectos de estudio	8-30+	Moderado
Presupuesto	Cuando la magnitud importa	3-8	Más alto

Reglas simples: menos de 6 elementos, usa arrastrar y soltar. Entre 6 y 15, usa comparación por pares. Por encima de eso, usa MaxDiff, a menos que necesites saber cuánto más importa una opción que otra, en cuyo caso usa presupuesto con una lista corta.

Opciones de Configuración

• Algoritmo - Déjalo en auto a menos que tengas una razón para anularlo. El sistema elige el método que se ajusta al tamaño de tu lista y minimiza la fatiga del encuestado.
• Modo (Pares) - full muestra cada par posible a cada encuestado. partial toma una muestra de un subconjunto y distribuye la cobertura entre los encuestados. El valor predeterminado es partial, que es lo que quieres para la mayoría de las encuestas.
• Elementos por pantalla (MaxDiff) - Cuántas opciones aparecen en cada subconjunto, 3-10. El valor predeterminado es min(5, tamaño de lista). Los valores más bajos son más fáciles para los encuestados; los valores más altos extraen más datos por pantalla.
• Vistas objetivo por elemento (MaxDiff, Pares parcial) - Cuántas veces aparece cada opción en todas las pantallas, 1-10. El valor predeterminado es 3. El sistema reduce esto a 2 automáticamente si la encuesta resultante excediera las 20 pantallas.

Interpretación de Resultados

Recopilar rankings es la mitad del trabajo. Leerlos correctamente es la otra mitad.

Todos los métodos producen diferentes puntuaciones brutas: tasas de victoria, diferencias mejor-peor, totales de puntos, orden de posición. Para hacer que los resultados sean comparables independientemente del método, normalizamos todo a una escala de 0-100. Un elemento con una puntuación de 85 significa lo mismo ya sea que provenga de comparación por pares, MaxDiff o asignación de presupuesto. Esto te permite cambiar métodos entre encuestas o comparar resultados entre diferentes preguntas de ranking sin recalibrar cómo lees los números.

• Las pequeñas brechas entre los elementos de rango medio suelen ser ruido estadístico. Las grandes brechas en la parte superior o inferior son donde deben centrarse las decisiones.
• Las puntuaciones son relativas, no absolutas. Una puntuación de 85 significa que esa opción se clasificó alto en comparación con las otras en tu lista. No significa que el 85% de la gente la quiera. Cambia la lista y las puntuaciones cambiarán.
• Los resultados de presupuesto muestran magnitud, los otros no. La comparación por pares y MaxDiff te dicen el orden. El presupuesto te dice cuánto más importa un elemento que otro. Una brecha de 10 puntos entre dos elementos en la asignación de presupuesto es significativa. La misma brecha en puntuaciones normalizadas de pares puede no serlo.
• Segmenta antes de concluir. Los rankings generales a menudo ocultan la historia real. Tus usuarios avanzados y usuarios ocasionales pueden clasificar la misma lista en orden opuesto. Desglosa los resultados por segmento de audiencia antes de tomar decisiones.

Mejores Prácticas

Escribe Opciones Comparables

Todos los elementos deben ser del mismo tipo de cosa. Mezclar funciones con correcciones de errores y objetivos comerciales te da un ranking con el que nadie puede actuar. “Búsqueda más rápida” y “Mejor incorporación” son comparables. “Búsqueda más rápida” y “Arreglar error de inicio de sesión” no lo son.

Mantén las Listas Enfocadas

Cada opción que agregas cuesta atención del encuestado y añade ruido a los resultados. Incluye solo elementos sobre los que realmente actuarías. Si una opción queda en último lugar y aun así no la eliminarías, déjala fuera.

Cuidado con el Sesgo de Posición

En arrastrar y soltar, los elementos en la parte superior tienden a quedarse allí. Aleatoriza el orden inicial para que la posición no se convierta en una variable oculta en tus datos.

Adapta el Método al Dispositivo

La comparación por pares y MaxDiff funcionan bien en teléfonos. Arrastrar y soltar es más difícil en pantallas pequeñas; arrastrar en el móvil es incómodo. La asignación de presupuesto requiere una concentración que un encuestado con el teléfono en el autobús no te dará.