Cómo la hoja de cálculo del arcoíris ayudó a evaluar la nueva herramienta de selección de cursos basada en visualizaciones de Harvard.

En noviembre pasado ayudé a moderar doce pruebas de usabilidad para evaluar Curricle, una plataforma de selección de cursos basada en visualizaciones para la Universidad de Harvard. La aplicación web todavía estaba en versión beta y el equipo de producto quería saber si los estudiantes entendían cómo usar la herramienta y si la encontraban divertida. Al final, descubrimos que, si bien Curricle tenía mucho potencial, la plataforma aún necesitaba muchas mejoras de usabilidad. Pero no quiero hablar de los resultados. En cambio, hablemos del proceso, específicamente, hablemos de cómo analizamos los resultados de las pruebas.

Nuestro equipo de investigación estaba completamente separado del equipo de diseño de Curricle. De hecho, la mayoría de los investigadores de mi equipo no habían oído hablar de Curricle hasta que nos encargaron evaluar su usabilidad. Informar los hallazgos a un equipo de diseño externo presenta varios desafíos, pero uno importante es ilustrar adecuadamente los resultados. Otro desafío es trabajar con una fecha límite externa. Por esas dos razones principales, abogué por el uso de la hoja de cálculo arcoíris para este proyecto.

La sábana no era algo que nuestro equipo hubiera usado antes. Unas semanas después de nuestras pruebas de usabilidad, el asesor principal de investigación del equipo publicó un artículo de Smashing Magazine en Slack, donde Tomer Sharon describió el uso de la hoja de cálculo del arco iris. Casi al mismo tiempo, pasé varias horas escribiendo y organizando notas adhesivas para crear un gran diagrama de afinidad que contenía datos cualitativos sobre el uso de las aplicaciones móviles de Harvard. No me malinterpretes. Todavía disfruto usando diagramas de afinidad y tienen su lugar. Pero me di cuenta de que para nuestros propósitos la hoja de cálculo del arco iris proporcionaba una solución más rápida y concisa. y una alternativa más atractiva visualmente.

La hoja arcoíris consiste en un documento de hoja de cálculo donde los investigadores pueden registrar los patrones de comportamiento presentados por los participantes de la investigación. Cada vez que un participante muestra un nuevo comportamiento digno de mención, el investigador escribe la observación en la columna más a la izquierda de la hoja del arco iris. Hacia la derecha de las observaciones, a cada participante se le asigna un color y una etiqueta (utilizamos las etiquetas sugeridas P1 a P12, que representan a los participantes 1 a 12). Si un participante realiza un comportamiento (u observación) registrado, la celda del participante se completa con el color asignado al participante.

Ejemplo de hoja de cálculo Rainbow en uso.

Hay varias formas de utilizar la hoja. Sharon sugiere utilizar la hoja de cálculo durante las pruebas de usabilidad. Sin embargo, optamos por tomar notas durante las pruebas de usabilidad y luego usar la hoja de cálculo para encontrar patrones en nuestras observaciones. El resultado final es el mismo: una visualización colorida de patrones de comportamiento.

Puedes trabajar rápidamente

Sharon proporciona una plantilla bastante completa y descriptiva. La parte más difícil de utilizar la sábana fue empezar. Una vez que nos sentimos cómodos con el método, pudimos analizar y resumir los hallazgos rápidamente.

Tienes un marco flexible

Como mencioné, puedes usar la hoja de cálculo durante las sesiones de usabilidad o después, dependiendo de las necesidades de tu equipo. Además, puede personalizar la hoja de cálculo para representar mejor sus resultados. En la plantilla original, Sharon sugiere anotar todas las observaciones una tras otra. Sin embargo, nuestro estudio se centró en cuatro áreas muy diferentes de la plataforma Curricle. Por lo tanto, decidimos dividir las observaciones en cinco secciones diferentes: una sección de Observaciones generales y cuatro áreas de plataforma diferentes (llamadas Modos de aprendizaje, Comparaciones de palabras clave, Red de instructores y Bandeja y plan).