Manual Explotación de la Red Vial
& Sistemas Inteligentes de Transporte
Guía para profesionales!

Se encuentra usted aquí

Medición de la Performance Humana

La evaluación global de los productos y servicios de los  ITS es una actividad importante, ya que el rendimiento del usuario dependerá de la capacidad de uso de los ITS. Un beneficio del mejoramiento de la facilidad y eficacia de la  tecnología ITS es el incremento de la satisfacción del usuario. Esto puede proporcionar ventajas comerciales, sobre todo cuando los usuarios tienen opciones de elegir los productos o servicios. Si el uso de los productos es deficiente, como una interfaz de usuario pobre o inadecuada o una señalización dinámica y engañosa, se pueden tener consecuencias para la seguridad en el entorno de la carretera. Una Buena usabilidad ayudará a gestionar y predecir el comportamiento de los usuarios y así como también ayudará a aumentar el rendimiento de la red de carreteras. Por todas estas razones, el rendimiento de los ITS en términos de su facilidad de uso debe ser  medido. (Ver Evaluación de Proyectos)

Medición de la Utilidad

La medición de la usabilidad requiere la evaluación de la eficacia, la eficiencia y la satisfacción con la que los usuarios representativos realizan  tareas en entornos representativos. Esto requiere que se tomen decisiones sobre los siguientes puntos clave:

  • Qué entorno (contexto de uso) es relevante
  • Qué métricas (medidas) serán tomadas
  • Qué herramientas se necesitan - como cuestionario, simulador de conducción
  • Qué método se utilizará para realizar las mediciones

Pasos en la medición de los resultados:

  • Definir los ITS a ensayar (puede ser un sistema en uso o un prototipo/piloto)
  • Decidir qué tipo de usuario será considerado (por primera vez/ ocasional  o  usuario frecuente)
  • Definir otros aspectos del contexto típico de uso (Ver Contexto de Uso de ITS)
  • Decidir sobre las funciones particulares que van a  ser evaluados y el contexto para su evaluación
  • Decidir sobre los objetivos de usabilidad a ser probados y su importancia relativa
  • Preparar un plan para medir un conjunto de métricas (que evalúan los objetivos de usabilidad)
  • Realizar las pruebas de usuario
  • Analizar los datos de las pruebas para obtener e interpretar las métricas
  • Registrar los resultados y sacar conclusiones

El proceso de medición del desempeño humano cuando el conductor está interactuando con los ITS (sobre todo si se utilizan dispositivos de información y comunicación) puede producir beneficios de seguridad, aunque hay desafíos con la forma de medición del desempeño humano en este contexto.

La seguridad de los Conductores en ITS

La distracción del conductor (no se centra en la carretera y la tarea de conducir) es un tema importante para la seguridad vial. Los productos ITS, tales como los dispositivos de información y comunicación, puede ayudar en gran medida al conductor (por ejemplo, mediante la indicación de rutas adecuadas), pero su también pueden ser una fuente adicional de distracción. La distracción puede hacer que los conductores sean menos conscientes de otros usuarios de la carretera (como peatones y trabajadores de la carretera) y menos observador de los límites de velocidad y semáforos. (Ver Seguridad Vial)

La medición de la capacidad de conducción al interactuar con los ITS requiere un equipo especializado y mucha experiencia. Las mediciones realizadas en laboratorios y simuladores de conducción pueden no ser representativas de la conducta real de conducción. Esto se debe a que en contextos reales de conducción los conductores pueden elegir el momento de interactuar (o no) con dispositivos, y pueden modificar su estilo de conducción para compensar, en cierta medida, otras demandas en su atención. Las mediciones en carretera tienen que ser diseñadas para ser discretas y representativas. Las pruebas de campo operativas (FOTs) pueden ser diseñadas y utilizadas para investigar tanto los sistemas maduros como los innovadores. FOTs pueden involucrar a los conductores profesionales y ordinarios de acuerdo con el foco de la investigación. Un estudio de conducción "naturalista" pretende grabar discretamente el comportamiento del conductor. El análisis del registro se utiliza para identificar los eventos relacionados con la seguridad, aunque la interpretación de los resultados puede ser problemática y controvertida.

El peso de la evidencia científica señala a la distracción como un problema importante de seguridad. Muchos gobiernos y operadores de carreteras han tratado de restringir el uso de los ITS para conductores durante la conducción. Existen diferentes enfoques nacionales y locales que van desde las directrices y consejos,  a la prohibición de actividades o funciones (tales como mensajes de texto o el uso del teléfono) específicas. 

Decidir Sobre Objetivos y métricas

Los objetivos de usabilidad para un  producto o servicio de los ITS, deben expresarse en términos de facilidad de uso del atributo (tales como fácil de aprender y eficiente de usar, fácil de recordar, pocos errores, de su agrado). La decisión sobre la importancia relativa de estos objetivos depende de los ITS y de su contexto, pero ayuda a enfocar las evaluaciones futuras sobre los aspectos más importantes.

No todas las mediciones de rendimiento tienen que ser cuantitativa, pero algunos ejemplos sencillos de las métricas de rendimiento que podrían ser de interés para los operadores de las carreteras son:

  • El tiempo empleado por un agente de la sala de control para colocar un cierre de la carretera en una señal de mensaje
  • El número de automóviles que circulan por los peajes automatizados
  • La relación entre las interacciones exitosas y no exitosas realizadas por los usuarios de una máquina de billete de autobús
  • El porcentaje de conductores visto usando un teléfono móvil
  • El número de  características ITS que un usuario puede recordar durante una encuesta  después de una prueba
  • La frecuencia de uso de los manuales y/o el sistema de ayuda, y el tiempo medio de uso por parte de un operario de mantenimiento

También es importante recoger datos cualitativos. Esto puede ayudar a explicar las razones detrás de una forma de comportamiento particular, y puede descubrir los procesos y creencias del usuario de como funciona el ITS (que puede ser correcta o incorrecta).

La búsqueda de objetivos  estratégicos como la "seguridad" es un contexto muy amplio, por este motivo, los ITS  han de considerarse en el contexto más amplio de transporte. (Ver Seguridad Vial)

Realizar Pruebas de Rendimiento

Las pruebas de rendimiento puede ser complejas. Consulte a profesionales de factores humanos cuando sea necesario:

  • Siempre realizar pruebas piloto para asegurarse de que las herramientas y las técnicas para el trabajo de recopilación de datos  funcionan como se espera (Ver Dirección, Realimentación y Monitoreo)
  • Si es posible,  las pruebas pueden grabarse en vídeo para  que los datos pueden ser analizados a partir de la grabación.

Análisis de Datos y Conclusiones

La Simple estadística descriptiva (como valor medio) puede ser suficiente para caracterizar la métrica de rendimiento en particular - pero:

  • Para un análisis más complejo, se debe considerar  la medida en que la muestra de usuarios analizados representa a toda la población de usuarios
  • Si la métrica va a ser comparada contra un punto de referencia, se debe estimar alguna indicación de error de medición o de confianza.
  • Los resultados de las métricas individuales, así como los datos cualitativos, deben ser considerados como un todo cuando se decide si se han cumplido los objetivos de usabilidad
  • El análisis de datos puede ser complejo así que consulte a los profesionales de los factores humanos en caso necesario

 

Referencia

US DOT website on driver distraction: http://www.distraction.gov/

Bevan, N. and Macleod, M. (1994). Usability measurement in context. Behaviour and Information Technology 13 132-145

Wilson, J. and Corlett, N. (2005). Evaluation of Human Work. CRC Press. ISBN 0-415-26757-9

Sanders, M. and McCormick, E. (1993) Human Factors in Engineering and Design. McGraw-Hill, Inc. ISBN 0-07-054901-X

FOTnet project: http://fot-net.eu/

TeleFOT project: http://cordis.europa.eu/docs/projects/cnect/7/224067/080/deliverables/001-telefot.pdf