Manual Explotación de la Red Vial
& Sistemas Inteligentes de Transporte
Guía para profesionales!
La evaluación ITS debe estar bien pensada y ajustada si su objetivo es que esta sea útil. La metodología debe tener en cuenta: los objetivos del proyecto ITS, las necesidades del usuario y las expectativas de los interesados. Se debe hacer uso de medidas cuantificables y cualitativas que responden a las necesidades de los tomadores de decisiones.
A nivel 'visión general', la evaluación debe identificar tanto los impactos que se planificaron como los impactos no buscados - estableciendo cualitativamente la naturaleza de los cambios que se han producido y sus posibles causas. En un nivel más detallado, la evaluación debería cuantificar los cambios después de implementado el proyecto, evaluar la magnitud de esos cambios y el nivel de confianza en ellos - e identificar los mecanismos que conducen a cambios significativos. (Ver Reglas y Técnicas)
Se necesita un enfoque sistemático para la etapa de monitoreo del ciclo de evaluación para asegurar que los diferentes tipos de impacto (beneficios, desventajas, y costos) sean identificados y medidos. El desarrollo de un "Plan de Evaluación" es clave para ello. Se trata de un documento técnico - independiente a un "Plan de Gestión de la Evaluación", que cubre los recursos, el tiempo, la coordinación con otras actividades, y la gestión de datos (Ver Métodos de Evaluación)
El plan de evaluación debe estar redactado y acordado antes de que el proyecto sea implementado, por lo que los datos necesarios para medir la situación antes de la implementación se pueden definir y recolectar por adelantado. El marco de tiempo disponible para la recogida de datos "antes" , también pueden influir en el tiempo de recolección de algunos de los datos posteriores "después" necesarios a los efectos comparativos..
Datos útiles de entrada que pueden provenir de los planes de evaluación utilizados en otros estudios u otras directrices - u otras guías- en la determinación de los elementos que necesitan ser abordados.(Ver Métodos de Evaluación)
Un plan de evaluación debe estar bien especificado:
Centrarse en la identificación de los objetivos de los objetivos de política que lun proyecto ITS pretende abordar y evaluar la medida en que estecontribuye a alcanzar dichos objetivos.
Definir el "caso base" o "antes" de la implementación ITS - para permitir comparaciones con la situación "después" de la implementación.
Definir el área a ser cubierta por la evaluación. Un mapa es útil.
Definir el momento y la duración de la evaluación - tanto antes como después de la implementación. Asegurar que el momento en que se realiza minimiza los efectos externos (como los efectos estacionales). Asegurar que la duración de la evaluación sea suficiente para que todos los impactos sean identificados, no sólo los efectos iniciales a medida que los usuarios se están adaptando a la implementación del ITS.
La lista de los impactos esperados, utilizando la información de otros proyectos, las investigaciones preliminares y la evaluación del proyecto. En algunos casos puede ser posible enumerar los impactos esperados en términos cuantitativos - pero si no hay evidencia de los impactos de proyectos anteriores, será necesaria una descripción cualitativa de los impactos esperados. Los kits de herramientas de evaluación y las bases de datos de resultados de la evaluación son fuentes útiles. (Ver Mejora de la Performance)
Preparar una tabla que enumere los objetivos, los indicadores para evaluarlos y las fuentes de datos para los indicadores. (Ver Métodos de Evaluación)
Definir los métodos de evaluación que se utilizarán. Considerar el uso de más de un enfoque para proporcionar una visión más "redondeada" de los impactos y para confirmar las conclusiones. (Ver Métodos de Evaluación) En el caso de una evaluación compleja, dibujar un 'diagrama de flujo' que muestre cómo todas las diferentes fuentes de información encajan entre sí para informar los objetivos de la evaluación.
Tener en cuenta los principios de diseño experimental que se utilizarán. Por ejemplo comparar el rendimiento de un paquete de medidas ITS con un "control" que sea lo más parecido posible, pero no tenga un elemento ITS. Es deseable hacer comparaciones utilizando más de una ubicación para tomar en cuenta otras variables.
Asegúrese de que el diseño capturará los efectos secundarios no deseados las medidas ITS, así como los impactos esperados. Revisar los resultados de otros estudios para mejorar el diseño.
Definir los detalles de los datos que se obtendrán - antes y después de la implementación - para informar cada uno de los indicadores. Incluir, para cada indicador, información sobre el tamaño de las muestras, la certeza estadística, los plazos y los sitios de ubicación.
Examinar la manera en la que factores externos pueden influir en la evaluación y planificar la evaluación de forma de excluirlos. Por ejemplo, los cambios en la red de transporte de una zona vecina podrían tener efectos de reacción en cadena en la zona en la que los ITS han de ser implementados. Los grandes cambios de escala, tales como el crecimiento en la propiedad del vehículos o una desaceleración de la economía influirán en la demanda de transporte y podrían 'confundir' la evaluación.
Enumerar los criterios de rendimiento que pueden utilizarse para valorar el monitoreo y la evaluación. Estos pueden ser incluidos en el contrato de suministro del servicio de monitoreo y evaluación.