Manual Explotación de la Red Vial
& Sistemas Inteligentes de Transporte
Guía para profesionales!

Se encuentra usted aquí

Reglas y Técnicas

MÉTODOS DE EVALUACIÓN EN LAS DIFERENTES ETAPAS

Durante el ciclo de vida de cualquier implementación ITS o un ensayo de campo - el método de evaluación más adecuado variará:

  • listas de chequeo - para el concepto de desarrollo y prototipos
  • simulación y modelado - para prototipos
  • tests de laboratorio o fuera de las carreteras - pruebas para prototipos y pruebas piloto
  • ensayos de campo - para pruebas piloto y demostraciones a gran escala
  • monitoreo del impacto - para demostraciones a gran escala e implementaciones a escala real 

Listas de chequeo

La lista de verificación RESPONSE 2  - desarrolló para la evaluación de prototipos de sistemas Avanzados de Asistencia al Conductor - es un ejemplo de una lista de control para el desarrollo de conceptos y prototipos (http://www.acea.be/images/uploads/files/20090831_Code_of_Practice_ADAS.pdf).

Simulación y modelación

 La simulación y el modelado son relevantes para la evaluación de proyectos. (Ver Valuación de Proyectos) 

pruebas de campo

El FESTA handbook proporciona información sobre la planificación y la organización de Pruebas de Campo de Explotación (o pruebas) de los sistemas de asistencia al conductor. Muchos de los principios se aplican igualmente a otros ITS

guías de Evaluación

Guía naconal

Las guías sobre los métodos de evaluación  ITS se han producido en varios países y están disponibles en Inglés:

Guías de los organismos de  préstamos

El Banco Mundial proporciona orientación sobre los métodos de monitoreo y evaluación con  datos identificadores de la utilidad de cada técnica, ventajas y desventajas, costos, las habilidades y el tiempo necesario - y fuentes de información adicional. Ver World Bank Report on Monitoring and Evaluation

El Banco Mundial también proporciona un recurso de orientación sobre cómo diseñar evaluaciones influyentes. Ver Influential Evaluations

técnicas de evaluación

Se usan muchas técnicas en la evaluación de una red vial. Varias de ellas también son adecuadas en la etapa de evaluación en la planificación de inversiones ITS. (Ver Valuación de Proyectos) Hay una amplia variedad de enfoques:

Presentimiento / sentido común

¿para qúe se utiliza?

 Los ITS a menudo son desarrollados simplemente porque ellos son obvios.

¿cómo funciona?

Donde haya una gran cantidad de evidencia consistente  que demuestre  que un tipo particular de inversión es beneficiosa, y haga que tenga sentido seguir adelante y ponerlo en práctica, en lugar de encarar estudios adicionales. El análisis multicriterio se puede utilizar para comprobar el resultado del instinto o ayudar a explicar el "sentido común" para los tomadores de decisiones.

¿cuándo debería ser utilizado?

Si un cruce de carreteras está muy congestionado, es posible deducir que las señales de tránsito que mejorarán el flujo sin llevar a cabo un ejercicio de modelado grande del tránsit. Otras implementaciones proporcionarán previsibilidad en los costos. El caso de estudio del Banco Mundial sobre ITS implementado en un Autobus de Dublin Bus es un ejemplo de que es razonable confiar en el sentido común. Se informó de los beneficios percibidos, pero no se han cuantificado, ya que no se consideró necesario hacerlo  (http://www.robat.scl.net/content/ITS-Toolkit/case-studies/dublin-ireland.html).

¿dónde se obtiene?

La mejor fuente estará  en los sistemas que hayan demostrado ofrecer constantemente una buena relación calidad precio.  Los proyectos y kits de herramientas del Departamento de Transporte de los Estados Unidos (US DOT) y el europeo 2Decide proporcionan bases de datos en línea de costos ITS, beneficios y lecciones aprendidas a partir de proyectos ITS.

¿cuales son sus limitaciones?

A menudo será necesaria una evaluación para sistemas muy costosos, aunque sólo sea un "Análisis de Factores Críticos'. Los nuevos proyectos ITS siempre deben ser evaluados porque no habrá evidencia para demostrar su relación calidad-precio. Los ITS que tengan diferente impacto en diferentes circunstancias también deberían ser evaluados en los diferentes contextos.

Métodos cualitativos

¿PARA QÚE SE UtilizAN?

Los métodos cualitativos elevan los estándares y ofrecen la posibilidad de realizar análisis comparativos en la planificación y en  la evaluación de las inversiones ITS.

¿CÓMO FUNCIONAN?

Los métodos incluyen grupos focales (también conocidos como discusiones de grupo), paneles de usuarios, paneles de ciudadanos y círculos de calidad. Estos involucran discusiones estructuradas entre las partes interesadas que son arbitradas por un moderador independiente.

¿CUÁNDO DEBERÍAN SER UtilizADOS?

Estos métodos proporcionan una fuente de información para la planificación de las inversiones y la revisión de impactos e implicaciones de una manera que se tengan en cuenta los puntos de vista de todas las partes interesadas.

¿DÓNDE SE obtienen?

Consultores de transporte, empresas de investigación social y compañías de estudio de mercados.

¿CÚALES SON sus LIMITACIONES?

Se  necesita tener cuidado para asegurar la representación adecuada de todas las partes interesadas y que los miembros de los grupos focales y paneles sean capaces de contribuir en igualdad de condiciones. Estas técnicas se complementan con  investigaciones cuantitativas y no son un sustituto de las mismas.

Encuestas de viajes

¿PARA QÚE SE UtilizAN?

Estas proporcionan información estadística sobre los recorridos de usuarios de las carreteras y de los viajeros y acerca de los patrones de circulación.

¿CÓMO FUNCIONAN?

Los métodos incluyen

  • conteos de tránsito
  • cuestionarios de encuestas
  • diarios de viaje
  • encuestas automatizadas de placas de licencias

¿CUÁNDO DEBERÍAN SER UtilizADaS?

Las encuestas de viajes proporcionan una entrada a los modelos de tránsito y son una fuente de datos de viaje para la planificación de servicios ITS y analizan los cambios en respuesta a esos servicios.

¿DÓNDE SE obtienen?

Consultores de transporte, empresas de investigación social y compañías de estudio de mercados.

¿CÚALES SON suS LIMITACIONES?

 Un diseño de encuestas pobres, técnicas de trabajo de campo débiles y bajas tasas de respuesta pueden afectar la precisión estadística y la fiabilidad de cualquier encuesta y hacer que los resultados sean engañosos. Los controles de calidad y la consistencia de los métodos de muestreo son especialmente importantes para los "antes" y "después" de las encuestas.

Modelación de costos generalizados

¿PARA QÚE SE Utiliza?

Esta es la base para la mayoría de los análisis costo - beneficio. Evalúa lo que la gente va a hacer en respuesta a los ITS.

¿CÓMO FUNCIONA?

Este es un método muy básico que observa los "costos" de los viajes antes y después de la implementación del ITS y predice cambios en el comportamiento de la gente en base a las respuestas a anteriores cambios en los costos.

¿CUÁNDO DEBERÍA SER UtilizADa?

Para hacer estimaciones aproximadas de la respuesta a ITS en aquellos casos donde su aplicación obedece al sentido común pero necesita un poco de ayuda cuantitativa adicional. Esto estará en el corazón de cualquier modelo de tránsito.

¿DÓNDE SE obtiene?

Economistas propios o consultores de transporte.

¿CÚALES SON suS LIMITACIONES?

El costo generalizado es un concepto simple relativamente limitado en lo que el mismo describe. Los modelos de costo generalizado sólo miden los costos que se pueden calcular en términos monetarios (por ejemplo, los valores monetarios estándar de tiempo ). Los valores monetarios no están disponibles para algunas de las políticas que los ITS pueden ofrecer; varios de los objetivos de la política que los ITS proponen, mostrarán  un aumento en el costo generalizado del viaje, en lugar de una disminución. Por ejemplo, el objetivo de los ITS será a menudo cambiar la variación de los tiempos de viaje en lugar de reducir el tiempo total de viaje u ofrecer otros objetivos de política tales como la reducción de emisiones.

Modelos de utilidad

¿PARA QÚE SE UtilizAN?

Los modelos de utilidad buscan simplificar la presentación de lo que las personas se benefician como consecuencia de un cambio. Están estrechamente relacionados con los modelos de costos generalizados, pero están mejor diseñados para reflejar el comportamiento del usuario.

¿CÓMO FUNCIONAN?

El análisis estadístico se utiliza para medir la "utilidad" o "el bien" que distintas personas reciben a partir de un cambio.

¿CUÁNDO DEBERÍAN SER UtilizADOS?

Cuando el comportamiento del usuario es importante para el resultado que el ITS se propone alcanzar, por ejemplo cuando el objetivo de un proyecto ITS es fomentar que la gente cambie el modo de viaje del coche particular al transporte público.

¿DÓNDE SE obtienen?

Consultores de transporte especializados y departamentos universitarios de estadística o economía. Este no es un trabajo para aficionados.

¿CÚALES SON suS LIMITACIONES?

Un buen modelo de utilidad es una herramienta muy poderosa. La forma del modelo es fundamentalmente simple pero puede tormarse compleja. Las dudas sobre la verosimilitud de estos modelos se deben a que muchos utilizan datos de preferencia declarada para obtener valores pero en su lugar se pueden utilizar datos históricos.

Encuestas de satisfacción del usuario

¿PARA QÚE SE UtilizAN?

Miden si los usuarios perciben un impacto que los beneficie.

¿CÓMO FUNCIONAN?

Encuestas previas y posteriores miden la percepción de los factores que el ITS tiene como objetivo abordar.

¿CUÁNDO DEBERÍAN SER UtilizADaS?

Cuando los proyectos ITS pretenden mejorar el confort del usuario o las instalaciones comunitarias.

¿DÓNDE SE obtienen?

Compañías de investigación de mercado, empresas de investigación social y consultores de transporte,

¿CÚALES SON suS LIMITACIONES?

Muchas encuestas utilizan 'escalas Likert' para preguntar si las cosas son, por ejemplo:

Mucho peor / Un poco peor / Más o menos igual / Un poco mejor / mucho mejor
 
El valor de esto es limitado. Likert advirtió que la escala refleja actitudes, no mediciones absolutas. Las encuestas pueden presentar valores irrealmente optimistas. No es fácil diseñar encuestas de satisfacción que produzcan resultados valiosos. Probablemente sería mejor utilizar estas encuestas en combinación con otros métodos, tales como las medidas de los cambios de comportamiento asociados con el impacto del proyecto.

valuación condicionada / preferencia declarada / análisis conjunto

¿PARA QÚE SE UtilizAn?

Esto mide cómo va a cambiar el comportamiento en respuesta a los ITS. El beneficio de la "preferencia declarada 'es que esta no utiliza comportamientos anteriores como guía. Otros modelos de transporte son de "preferencias reveladas ', utilizando las respuestas frente a anteriores cambios para obtener los valores de las respuestas a los futuros cambios.

¿CÓMO FUNCIONAN?

Proporcionan una evaluación rigurosa del valor de la utilidad de diferentes elementos de un producto o servicio, basada en el intercambio con el encuestado durante una entrevista altamente estructurada.

¿CUÁNDO DEBERÍAN SER UtilizADOS?

En caso de un ITS nuevo o cuando es nueva la política de transporte a la que los ITS da soporte.

¿DÓNDE SE OBTIENEN?

Consultores de transporte y algunas compañías de estudio de mercados.

¿CÚALES SON sus LIMITACIONES?

Los riesgos son que los encuestados no van a tomar las mismas decisiones en la práctica que las que declararon en la entrevista. El encuestado puede no ver los obstáculos para utilizar nuevos ITS. La investigación no puede describir las desventajas de un nuevo producto, sólo sus ventajas. Algunos de los encuestados pueden no ser capaces de predecir lo que ellos van a hacer; por ejemplo en respuesta a algunos desarrollos de las tecnologías de la información y las comunicaciones algunas personas han instalado sus hogares lejos del trabajo, pero ¿habrían previsto esto en una encuesta?. La preocupación es que el análisis conjunto derivará en respuestas incorrectas mientras que la naturaleza de las respuestas (un valor o  número) será preciso, conduciendo a decisiones de inversión equivocadas.

Evaluación interna de ITS / evaluación del impacto de ITS 

¿PARA QÚE SE UtilizA?

Se puede utilizar para medir los cambios en factores tales como el tránsito y los tiempos de viaje.

¿CÓMO FUNCIONA?

Los ITS generan, recolectan y transmiten datos. Estos datos pueden mostrar el cambio de los resultados esperados a lo largo del tiempo. La línea base de los datos "previos" es necesaria para su comparación con los datos internos obtenidos después de la implementación.

¿CUÁNDO DEBERÍA SER UtilizADa?

Se deben utilizar en todos los casos dónde sea técnicamente factible.

¿DÓNDE SE obtiene?

Diseñar la medición de los resultados dentro del ITS.

¿CÚALES SON sus LIMITACIONES?

El ITS sólo medirá los resultados cuantitativos. Los cambios en factores tales como la confianza de los usuarios no pueden ser medidos, aunque pueden estar implícitos. La clientela del transporte público por lo general no puede ser medida por los ITS a menos que la aplicación sea un sistema de billetaje o de cobro electrónico.

 

Referencia

McFadden, D. 2000. Disaggregate behavioural travel demands RUM side: a 30-year retrospective. Dept of Economics, University of California, Berkley (http://eml.berkeley.edu/wp/mcfadden0300.pdf).

Ben-Akiva M and S R Lerman. 1997. Discrete Choice Analysis: Theory and Applications to Travel Demand. MIT Press, Cambridge.

Fischhoff B, B Goitein and Z Shapira. 1982. The Expected Utility of Expected Utility Approaches. In Feather N T (ed) Expectations and Actions: Expectary – Value Models in Psychology. Hillsdale, New Jersey.

Likert R. (1932). A Technique for the Measurement of Attitudes. Archives of Psychology, Vol 22 no 140.

Ampt E, J Swanson and A D Pearman. 1999. Stated Preference: too much deference. In Ortuzuar J de D (Ed) Stated Preference Modelling Techniques. PTRC.

Nelson P S and J G Towriss. 1999. The Monetary Valuation of the Environmental Impacts of Road Transport: a Stated Preference Approach. European Transport Conference, PTRC.

Carson R T 1999. Contingent Valuation: a User’s Guide. Department of Economics, University of California.