La decisión entre las consideraciones puramente técnicas y los costes de los proyectos se ha realizado tradicionalmente por medio del Análisis Coste-Beneficio. Desde las últimas décadas del s. XX, la conservación del medio ambiente se ha configurado como una variable que ha ido ganando importancia en la planificación y construcción de las infraestructuras de transporte, lo que contribuyó decisivamente en la formalización de un modelo de toma de decisiones basado en el uso de múltiples criterios de análisis, el Análisis Multicriterio. Si bien algunos de estos efectos se incluyen en ocasiones dentro del Análisis Coste-Beneficio o figuran dentro del Análisis Multicriterio, se carece de una sistemática de análisis. Aparte ya de la consideración de criterios no mesurables…
Por ello, se están tratando de aplicar técnicas novedosas para resolver problemas de planificación. Las más importantes que se han implementado son: análisis de clúster, árboles de clasificación y de decisión, análisis de escenarios futuros (simulación), metodología DELPHI, Sistemas Expertos (Redes Bayesianas y Redes Neuronales Artificiales) y Sistemas de Información Geográfica.
En este post voy a hablar de una de las técnicas que utilicé en mi Tesina: la metodología DELPHI. Sin embargo, no pretendo explicar absolutamente todo sobre esta técnica sino aproximar el concepto y comentar cómo lo apliqué a la Tesina.
De todos modos, si quieres aclarar cualquier punto o si tienes alguna pregunta para resolver otro problema, no dudes escribirme a través del contacto de esta web.
¿Qué es la metodología DELPHI?
Se trata de un método de estructuración de un proceso de comunicación grupal para tratar un problema complejo o con múltiples criterios a tener en cuenta.
Se basa en el análisis de las ideas de un grupo de expertos que se especializan en un campo de conocimiento en la búsqueda de un consenso de opinión.
El método DELPHI sigue una estricta metodología. Aunque la literatura científica suele hablar de 4 fases (Definición de objetivos, Selección de expertos, Elaboración y lanzamiento de los cuestionarios, Explotación de resultados), a mí me gusta ir un poco más allá y definir la metodología como un proceso y no como tareas separadas:
- Formulación del problema. En esta primera fase se plantea la formulación del problema y un objetivo general que estaría compuesto por el objetivo del estudio, el marco espacial de referencia y el horizonte temporal para el estudio.
- Redacción del cuestionario. Lógicamente, hay que redactar un cuestionario para encuestar a los expertos. Las preguntas deben ser claras, concisas y rápidas de contestar, de forma que los expertos se vean predispuestos a responder sin un esfuerzo elevado. Es importante también que haya un espacio para que los expertos expresen su opinión con cierta flexibilidad. Para ello, es bueno habilitar un espacio para sus observaciones al final del cuestionario. El feedback de los expertos resulta fundamental para extraer posteriormente las conclusiones del estudio.
- Selección del panel de expertos. Esta fase presenta dos dimensiones: a. Dimensión cualitativa: Se seleccionan en función del objetivo prefijado y atendiendo a criterios de experiencia posición, responsabilidad, acceso a la información y disponibilidad. b. Dimensión Cuantitativa: Elección del tamaño de la muestra en función de los recursos medios y tiempo disponible.
Hay quien prefiere avisar a los expertos antes de lanzar el cuestionario y quien se lo envía directamente. Eso sí, en ambos casos es necesario acudir a más expertos de los que son necesarios en el estudio, de forma que si algunos no finalizan el proceso, el estudio siga teniendo validez.
Además, es recomendable realizar el cuestionario de manera anónima (por ejemplo, haciendo uso del correo electrónico) para evitar los efectos de «líderes».
- Primer lanzamiento de los cuestionarios. Se mandan cuestionarios y a esperar las respuestas. Lo ideal es tener ya listos los estadillos para rellenar con la información recabada. Si no, es el momento de hacerlos.
- Explotación de los resultados del primer lanzamiento. Consiste en el análisis de las respuestas del cuestionario y el feedback con la información.
- Segundo lanzamiento de los cuestionarios. Se suministra a cada experto las opiniones de sus colegas, y se abre un debate transdisciplinario, para obtener un consenso en los resultados y una generación de conocimiento sobre el tema. El objetivo es tratar de conseguir consenso, por medio de la interrogación a expertos con este segundo cuestionario, a fin de poner de manifiesto convergencias de opiniones y deducir eventuales consensos. Cada experto argumentará los pros y los contras de las opiniones de los demás y de la suya propia.
- Explotación de los resultados del segundo lanzamiento. El objetivo de los cuestionarios sucesivos, es alcanzar el consenso de los expertos. Aunque la formulación teórica del método Delphi propiamente dicho comprende varias etapas sucesivas de envíos de cuestionarios, de vaciado y de explotación, los estudios se limitan normalmente a dos etapas, lo que sin embargo no afecta a la calidad de los resultados tal y como lo demuestra la experiencia acumulada. Con dos rondas, se reduce el tiempo necesario para realizar el estudio y se evitan así las deserciones que se producen en cada fase del cuestionario.
La metodología DELPHI aplicada a la localización de puertos secos
En mi Tesina, seleccioné un amplio grupo de expertos de las diferentes especialidades que confluyen en mi investigación: logística, sostenibilidad, impacto ambiental, planificación de transportes y geografía. Con esto se busca que los pesos obtenidos sean lo más representativos posible y no hayas sesgos debidos a la especialización de los expertos en un solo área.
Lo que buscaba al final eran los pesos (la importancia) de los 14 criterios que quería tener en cuenta para localizar puertos secos, los cuales había seleccionado tras revisar pormenorizadamente la literatura científica al respecto.
Los pesos obtenidos se utilizan mediante un algoritmo de Análisis Multicriterio Lineal Ponderado para evaluar la calidad de las localizaciones de los puertos secos existentes en España. Pero esto ya lo contaré…
¿Cómo extraje la información sobre los pesos?
Precisamente el principal motivo para escribir este post es que me encontré con que a lo largo y ancho de internet había muchísima información sobre qué es el DELPHI, para qué sirve, quién lo ha aplicado, muchísimos artículos científicos utilizando la técnica para los más diversos estudios… ¡pero no había prácticamente nada sobre cómo se aplica! Y, por supuesto, en castellano aún menos.
Así que, como justo acababa de hacer un curso de estadística aplicada a la investigación experimental, lo primero que hice con los datos fue analizarlos de forma descriptiva. Y me di cuenta de que la mayoría de las representaciones y análisis no me servían para mucho. Salvo los gráficos de Box and Whisker.
Lógicamente, lo que quería era medir el consenso, así que necesitaba que en la segunda fase las cajas fueran más pequeñas que en la primera (y cuanto más pequeñas mejor), que los bigotes no se separaran en exceso y saber qué datos eran atípicos (o muy altos o muy bajos respecto a la mediana). Al fin lo tenía: sólo tenía que medir el rango intercuartílico.
Al principio me emocioné y traté de programarlo en R. ¡ERROR! Después descubrí que existía R-Commander y aquello parecía que me iba a solucionar la papeleta porque ya no estaría frente a una pantalla en blanco sino que tendría barras de herramientas. ¡NUEVO ERROR!
El tiempo apremiaba para entregar la Tesina y acabé optando por SPSS. ¿Para qué tratar de inventar la rueda si ya está inventada y funciona bien? Desde luego, si queréis grandes refinamientos, como estudiar la muestra respecto de la media armónica, establecer límites distintos que los cuartiles, etc, os tocará programar en R. Si vais a usar un Box and Whiskers clásico, SPSS funciona de lujo.
Pero me enfrentaba a otro problema: la mediana es el estadístico de centralización que se usa en estos diagramas y es muy robusto, pero… ¿quién no se hace mejor idea con la media aritmética que con la mediana? Así que opté por trabajar con la mediana y pasar el segundo cuestionario a los expertos con los resultados del primer cuestionario usando la media.
El resto fue hacerme una buena hoja de cálculo para ordenar las respuestas, calcular los rangos intercuartílicos de cada criterio, sacar los diagramas de Box and Whiskers y poco más.
Para finalizar, os muestro qué consenso se alcanzó. Con esto ya estaba todo listo para extraer las conclusiones del estudio. Las tenéis en el paper adjunto al post de la categoría de |Docencia e Investigación| [ver enlace].
