La autoevaluación de los estudiantes desempeña un papel central en su formación. Sin embargo, se ha prestado poca atención a su medición para que sea válida y precisa. Esta capacidad, relacionada con el pensamiento crítico, puede estimarse comparando la evaluación de los alumnos con su rendimiento en los exámenes. Se propone el índice de consistencia como una métrica para medir el pensamiento crítico que permite observar el bajo rendimiento en la capacidad de juicio de una muestra de 23 estudiantes de ingeniería civil. Esto subraya la necesidad de mejorar este aspecto de la formación, que se requiere no solo como competencia transversal, sino también para la consecución de una capacidad de autoevaluación efectiva. Aquí presentamos un software educativo basado en el Proceso Analítico Jerárquico (AHP) que facilita a los estudiantes la autoevaluación para emitir juicios coherentes, así como para entrenar su pensamiento crítico. De este modo, se pretende que los estudiantes sean conscientes de las posibles carencias en su habilidad para la evaluación válida y consistente, así como darles la oportunidad de mejorar este aspecto a través de la autoevaluación. El software incorpora un proceso de tres pasos, en el que la autoevaluación ocurre en la última etapa: en primer lugar, se pide al estudiante una evaluación convencional del profesor basada en criterios ponderados por él mismo mediante AHP sin control de consistencia. En segundo lugar, se le solicita que active el control del índice de consistencia del software, que revelará eventuales incoherencias, y que, en consecuencia, revise sus juicios hasta que sean aceptables. Por último, se le invita a autoevaluar su capacidad para emitir un juicio coherente analizando las diferencias entre su evaluación con (paso 2) y sin (paso 1) la ayuda del control de coherencia. Ello le permite reflexionar sobre las diferencias entre la evaluación coherente y la incoherente, y a pensar en sus posibles causas. Los estudiantes pueden realizar de forma autónoma todo el proceso en el software presentado. Además, sirve como plataforma para la auto-retroalimentación efectiva y el entrenamiento de su precisión de evaluación y capacidad de pensamiento crítico.
Referencia:
SALAS, J.; SIERRA, L.; YEPES, V. (2021). AHP-based educational sofware for strudents’ self-assessment of critical thinking capacity. 15th annual International Technology, Education and Development Conference (INTED 2021), 8th-9th March, 2021, pp. 2744-2753, Valencia, Spain. ISBN: 978-84-09-27666-0
En los objetivos de desarrollo sostenible recientemente establecidos se reconoce la importancia de las infraestructuras para lograr un futuro sostenible. A lo largo de su ciclo de vida, las infraestructuras generan una serie de impactos cuya reducción ha sido uno de los principales focos de atención de los investigadores en los últimos años. La optimización de los intervalos de mantenimiento de las estructuras, como los puentes, ha despertado la atención del sector de la ingeniería civil, pues la mayoría de los impactos de las infraestructuras se producen durante la fase de servicio. Así pues, actualmente los puentes se proyectan para atender a los efectos económicos y ambientales derivados de las actividades de mantenimiento. Sin embargo, en esos análisis se suele descuidar el pilar social de la sostenibilidad. Dado que todavía no existe una metodología universalmente aceptada para su evaluación, la dimensión social no se incluye de forma efectiva en las evaluaciones del ciclo de vida de las infraestructuras. En la presente comunicación se evalúan los efectos del ciclo de vida de diseños alternativos de los tableros de hormigón de los puentes en un ambiente costero que requiere mantenimiento. Los intervalos de mantenimiento derivados de la fiabilidad se optimizan primero minimizando los impactos económicos y ambientales. En una segunda etapa del análisis, se incluye la dimensión social en el proceso de optimización y se comparan los resultados. Los resultados de optimización de estas evaluaciones combinadas se obtienen aplicando la técnica de toma de decisiones multicriterio AHP-TOPSIS. En este trabajo se muestra cómo la inclusión de la dimensión social puede conducir a estrategias de mantenimiento óptimo diferentes y más orientadas a la sostenibilidad. El enfoque tridimensional que se aplica aquí ha dado lugar a que se prefieran otras alternativas a las derivadas de la evaluación convencional que considera las perspectivas económica y ambiental. Esa conclusión apoya la idea de que se requieren evaluaciones holísticas del ciclo de vida para el diseño sostenible de las infraestructuras y de que es necesario hacer más esfuerzos urgentes para integrar la dimensión social en las evaluaciones de la sostenibilidad de las estructuras.
Referencia:
NAVARRO, I.J.; YEPES, V.; MARTÍ, J.V. (2020). Role of the social dimension on the sustainability-oriented maintenance optimization of bridges in coastal environments. 10th International Conference on High Performance and Optimum Design of Structures and Materials HPSM/OPTI 2020, pp. 205-215, 3-5 June 2020, Prague, Czech Republic.
La evaluación de las competencias transversales adquiridas a lo largo de la formación universitaria es un objetivo fundamental para garantizar la adecuada formación de los alumnos. Con los recientemente establecidos Objetivos de Desarrollo Sostenible, la demanda de competencias transversales orientadas a tal fin es cada vez mayor y, su desarrollo y evaluación, más urgente. En el contexto de la sostenibilidad, resulta particularmente relevante la capacidad de pensamiento crítico de los estudiantes. Ante la falta de consenso en cuanto a cómo determinar el grado de adquisición de las competencias transversales, se propone un procedimiento objetivo orientado a la evaluación del pensamiento crítico basado en la resolución de casos de estudio, combinados con la aplicación del Proceso Analítico Jerárquico de decisión multicriterio. La aplicación de este proceso permite determinar, de forma objetiva, la coherencia implícita de los alumnos en sus juicios y ofrece, por lo tanto, una herramienta valiosa para evaluar su capacidad de pensamiento crítico y la claridad con la que perciben la sostenibilidad y sus implicaciones en el desarrollo de su futura práctica profesional.
Referencias:
NAVARRO, I.J.; YEPES, V.; MARTÍ, J.V. (2020). Comparación pareada como método de evaluación de competencias transversales en materia de sostenibilidad.VI Congreso de Innovación Educativa y Docencia en Red. IN-RED 2020, 16 y 17 de julio de 2020. Doi: http://dx.doi.org/10.4995/INRED2020.2020.12000
Os dejo a continuación un ejemplo sencillo de aplicación de la técnica AHP de toma de decisiones dirigida a la selección de alternativas en la construcción de un puente mixto en cajón. Se trata de un caso que utilizamos con nuestros estudiantes para enseñar la técnica. Tratamos de evitar que, en los estudios de soluciones, los estudiantes recurran siempre a las matrices de valoración ponderada, donde los pesos de cada criterio siempre se ponen de forma más o menos arbitraria, o bien para justificar la solución preferida. Este tipo de problemas también suelen aparecer en los concursos de licitación de obras públicas.
Referencia:
YEPES, V.; MARTÍNEZ-MUÑOZ, D.; ATA-ALI, N.; MARTÍ, J.V. (2019). Multi-criteria decision analysis techniques applied to the construction of a composite box-girder bridge. 13th annual International Technology, Education and Development Conference (INTED 2019), Valencia, 11th, 12th and 13th of March, 2019, 1458-1467. ISBN: 978-84-09-08619-1
Acabamos de presentar una comunicación en el 10th International Conference on High Performance and Optimum Design of Structures and Materials HPSM/OPTI 2020, que se tuvo que desarrollar en Praga (República Checa) del 3 al 5 de junio, pero que por motivos del coronavirus, se ha desarrollado virtualmente del 2 al 4 de septiembre. A continuación os paso un resumen de la misma, así como la presentación que hemos realizado.
En los objetivos de desarrollo sostenible recientemente establecidos se reconoce la importancia de las infraestructuras para lograr un futuro sostenible. A lo largo de su largo ciclo de vida, las infraestructuras generan una serie de impactos cuya reducción ha sido uno de los principales focos de atención de los investigadores en los últimos años. La optimización de los intervalos de mantenimiento de las estructuras, como los puentes, ha despertado la atención del sector de la ingeniería civil, pues la mayoría de los impactos de las infraestructuras se producen durante su fase operativa. Así pues, actualmente los puentes se diseñan para atender a los efectos económicos y ambientales derivados de las actividades de mantenimiento. Sin embargo, en esos análisis se suele descuidar el pilar social de la sostenibilidad. Dado que todavía no existe una metodología universalmente aceptada para su evaluación coherente, la dimensión social no se incluye efectivamente en las evaluaciones del ciclo de vida de las infraestructuras. En la presente comunicación se evalúan los efectos del ciclo vital de diseños alternativos de los tableros de hormigón de los puentes en un entorno cercano a la costa que requiere mantenimiento. Los intervalos de mantenimiento derivados de la fiabilidad se optimizan primero minimizando los impactos económicos y ambientales. En una segunda etapa del análisis, se incluye la dimensión social en el proceso de optimización y se comparan los resultados. Los resultados de optimización de estas evaluaciones combinadas se obtienen aplicando la técnica de toma de decisiones multicriterio AHP-TOPSIS. En el presente documento se demuestra cómo la inclusión de la dimensión social puede conducir a estrategias de mantenimiento óptimo diferentes y más orientadas a la sostenibilidad. El enfoque tridimensional que se aplica aquí ha dado lugar a que se prefieran otras alternativas a las derivadas de la evaluación convencional que considera las perspectivas económica y ambiental. Esa conclusión apoya la idea de que se requieren evaluaciones holísticas del ciclo vital para el diseño sostenible de las infraestructuras y que es necesario hacer más esfuerzos urgentes para integrar la dimensión social en las evaluaciones de la sostenibilidad de las estructuras.
Figure 1: Product system boundaries (Navarro et al., 2020)
ABSTRACT
The recently established Sustainable Development Goals recognize the importance of infrastructures for achieving a sustainable future. Along their long-lasting life cycle, infrastructures generate a series of impacts, the reduction of which has been one of the main focus of researchers’ attention in the past years. The optimization of maintenance intervals of structures, such as bridges, has aroused the attention of the civil engineering sector, since most of the impacts of infrastructures occur during the operational phase. Thus, bridges are currently designed to attend the economic and environmental impacts derived from maintenance activities. However, the social pillar of sustainability is usually neglected in those analyses. Since no universally accepted methodology does yet exist for its consistent evaluation, the social dimension is not effectively included in the life cycle assessments of infrastructures. This communication evaluates the life cycle impacts of alternative concrete bridge deck designs in a maintenance-demanding environment near shore. Reliability-derived maintenance intervals are first optimized by minimizing the economic and environmental impacts. In a second stage of the analysis, the social dimension is included in the optimization process and results are compared. Optimization results from these combined assessments are obtained applying the Multi-Criteria Decision-Making technique AHP-TOPSIS. The present paper demonstrates how the inclusion of the social dimension may lead to different, more sustainability-oriented optimal maintenance strategies. The three-dimensional approach applied here has resulted in other alternatives to be preferred against those derived from the conventional assessment that considers the economic and environmental perspectives. Such finding supports the idea that holistic life cycle assessments are required for sustainable designs of infrastructures and that more efforts are urgently needed to integrate the social dimension in sustainability assessments of structures.
KEYWORDS
Life cycle assessment, bridges, maintenance, reliability, social impacts, sustainable design, sustainability, corrosion, Multi-Criteria Decision Making, AHP.
REFERENCE
NAVARRO, I.J.; YEPES, V.; MARTÍ, J.V. (2020). Social dimension on the sustainability-oriented maintenance optimization of bridges in coastal environments. 10th International Conference on High Performance and Optimum Design of Structures and Materials HPSM/OPTI 2020, 3-5 June 2020, Prague, Czech Republic, 11 pp.
En este artículo se aborda una metodología para reducir al mínimo la influencia subjetiva que tienen los decisores a la hora de tomar decisiones, en este caso, utilizando criterios relacionados con la sostenibilidad. Para este fin se ha utilizado el análisis de componentes principales (ACP), la optimización basada en kriging y el método AHP para buscar soluciones sostenibles, eliminando la relación entre criterios dependientes y asegurando la obtención de una solución sostenible frente a las diferentes perspectivas de los responsables de la toma de decisiones. Os dejo el artículo en abierto.
Referencia:
PENADÉS-PLÀ, V.; YEPES, V.; GARCÍA-SEGURA, T. (2019). Metodología para valorar la sostenibilidad con baja influencia de los decisores. 5th International Conference on Mechanical Models in Structural Engineering, CMMoST 2019, 23-25 oct 2019, Alicante, Spain, pp. 461-473. ISBN: 978–84–17924–58–4
Acaban de publicarnos un artículo en la revista Structure and Infrastructure Engineering (revista indexada en el JCR) sobre la aplicación de la lógica neutrosófica (una generalización de la lógica difusa y la lógica intuicionista) al diseño y mantenimiento de puentes en ambiente marino. El trabajo se enmarca dentro del proyecto de investigación DIMALIFE que dirijo como investigador principal en la Universitat Politècnica de València.
La metodología propuesta utiliza la lógica neutrosófica para obtener los pesos en un Proceso Analítico Jerárquico (AHP) que considerar la subjetividad de los expertos en el proceso de toma de decisión. Se ha aplicado al diseño sostenible de puentes y su mantenimiento considerando simultáneamente las tres dimensiones de la sostenibilidad.
El artículo se puede descargar gratuitamente en el siguiente enlace:
Essential infrastructures such as bridges are designed to provide a long-lasting and intergenerational functionality. In those cases, sustainability becomes of paramount importance when the infrastructure is exposed to aggressive environments, which can jeopardise their durability and lead to significant maintenance demands. The assessment of sustainability is however often complex and uncertain. The present study assesses the sustainability performance of 16 alternative designs of a concrete bridge deck in a coastal environment on the basis of a neutrosophic group analytic hierarchy process (AHP). The use of neutrosophic logic in the field of multi-criteria decision-making, as a generalisation of the widely used fuzzy logic, allows for a proper capture of the vagueness and uncertainties of the judgements emitted by the decision-makers. TOPSIS technique is then used to aggregate the different sustainability criteria. From the results, it is derived that only the simultaneous consideration of the economic, environmental and social life cycle impacts of a design shall lead to adequate sustainable designs. Choices made based on the optimality of a design in only some of the sustainability pillars will lead to erroneous conclusions. The use of concrete with silica fume has resulted in a sustainability performance of 46.3% better than conventional concrete designs.
Acaban de publicarnos un artículo en la revista Advances in Civil Engineering (revista indexada en el JCR) sobre la revisión de las técnicas de valoración multicriterio aplicadas al diseño sostenible de infraestructuras. El trabajo se enmarca dentro del proyecto de investigación DIMALIFE que dirijo como investigador principal en la Universitat Politècnica de València.
Dados los grandes impactos asociados a la construcción y mantenimiento de infraestructuras, tanto en la dimensión ambiental como en la económica y social, un enfoque sostenible de su diseño parece esencial para facilitar el cumplimiento de los Objetivos de Desarrollo Sostenible fijados por las Naciones Unidas. Un repaso a la bibliografía existente indica, por lo general, que se aplican métodos de toma de decisiones multicriterio para abordar los criterios complejos y a menudo contradictorios que caracterizan la sostenibilidad. El presente estudio revisa el estado actual de la técnica en la aplicación de dichas técnicas en la evaluación de la sostenibilidad de las infraestructuras, analizando también los impactos y criterios de sostenibilidad incluidos en las evaluaciones.
Given the great impacts associated with the construction and maintenance of infrastructures in both the environmental, the economic and the social dimensions, a sustainable approach to their design appears essential to ease the fulfilment of the Sustainable Development Goals set by the United Nations. Multicriteria decision-making methods are usually applied to address the complex and often conflicting criteria that characterise sustainability. The present study aims to review the current state of the art regarding the application of such techniques in the sustainability assessment of infrastructures, analysing as well the sustainability impacts and criteria included in the assessments. The Analytic Hierarchy Process is the most frequently used weighting technique. Simple Additive Weighting has turned out to be the most applied decision-making method to assess the weighted criteria. Although a life cycle assessment approach is recurrently used to evaluate sustainability, standardised concepts, such as cost discounting, or presentation of the assumed functional unit or system boundaries, as required by ISO 14040, are still only marginally used. Additionally, a need for further research in the inclusion of fuzziness in the handling of linguistic variables is identified.
En numerosas ocasiones contamos con muy poca información o tenemos que tomar una decisión teniendo en cuenta aspectos cualitativos que son difíciles de valorar. Para solucionar este tipo de problemas, muy habituales en situaciones reales, el profesor Thomas L. Saaty propuso en la década de los 70 un método denominado Analytic Hierarchy Process (AHP), que se ha traducido al español como Proceso Analítico Jerárquico. Este método multiatributo, nacido como respuesta a problemas concretos de toma de decisiones en el Departamento de Defensa de los Estados Unidos, hoy día se aplica habitualmente a casi todos los ámbitos de la empresa, la economía o la investigación de operaciones, entre otros muchos.
En apretada síntesis, AHP es un método que selecciona alternativas en función de una serie de criterios o variables, normalmente jerarquizados, los cuales suelen entrar en conflicto. En esta estructura jerárquica, el objetivo final se encuentra en el nivel más elevado, y los criterios y subcriterios en los niveles inferiores, tal y como se muestra en la Figura 2. Para que el método sea eficaz, es fundamental elegir bien los criterios y subcriterios, los cuales deben estar muy bien definidos, ser relevantes y mutuamente excluyentes (independencia entre ellos). Es importante que el número de criterios y subcriterios en cada nivel no sea superior a 7, para evitar excesivas comparaciones a pares.
Figura 2. Ejemplo de estructura jerárquica AHP
Una vez definida la estructura jerárquica, se comparan los criterios de cada grupo del mismo nivel jerárquico y la comparación directa por pares de las alternativas respecto a los criterios del nivel inferior. Para ello se utilizan matrices de comparación pareadas usando una Escala Fundamental (Tabla 1). Esta es la clave del método, usar una escala de comparación por pares, puesto que el cerebro humano está especialmente bien diseñado para comparar dos criterios o alternativas entre sí, pero menos cuando tiene que hacer comparaciones conjuntas. En efecto, la Ley de Weber-Fechner establece que el menor cambio discernible en la magnitud de un estímulo es proporcional a la magnitud de dicho estímulo. Como la relación entre el estímulo y la percepción corresponde a una escala logarítmica, si un estímulo crece en progresión geométrica, la percepción evolucionará como una progresión aritmética. Es por ello que AHP utiliza una escala fundamental del 1 al 9 que ha sido satisfactoria en comprobaciones empíricas realizadas en situaciones reales muy diversas.
Tabla 1. Escala fundamental de comparación por pares (Saaty, 1980)
La comparación de las diferentes alternativas respecto al criterio del nivel inferior de la estructura jerárquica, como la comparación de los diferentes criterios de un mismo nivel jerárquico dan lugar a una matriz cuadrada denominada matriz de decisión. Esta matriz cumple con las propiedades de reciprocidad (si aij=x, entonces aji=1/x), homogeneidad (si i y j son igualmente importantes, aij=aji=1, y además, aii= 1 para todo i), y consistencia (la matriz no debe contener contradicciones en la valoración realizada). La consistencia se obtiene mediante el índice de consistencia (Consistency Index, CI) donde λmax es el máximo autovalor y n es la dimensión de la matriz de decisión. Un índice de consistencia igual a cero significa que la consistencia es completa. Una vez obtenido CI, se obtiene la proporción de consistencia (Consistency Ratio, CR) siendo aceptado siempre que no supere los valores indicados en la Tabla 3. Si en una matriz se supera el CR máximo, hay que revisar las ponderaciones.
Donde RI es el índice aleatorio, que indica la consistencia de una matriz aleatoria (Tabla 2):
Tabla 2. Índice aleatorio RI
Tabla 3. Porcentajes máximos del ratio de consistencia CR
Una vez verificada la consistencia, se obtienen los pesos, que representan la importancia relativa de cada criterio o las prioridades de las diferentes alternativas respecto a un determinado criterio. Para ello, el AHP original utiliza el método de los autovalores, donde hay que resolver la siguiente ecuación:
donde A representa la matriz de comparación, w el autovector o vector de preferencia, y λmax el autovalor.
A continuación os dejo algunos vídeos de interés donde se explica el método AHP y sus aplicaciones. Espero que os sean de utilidad.
Seguimos en este entrada explicando los conceptos básicos que subyacen a a toma de decisión multicriterio. El concepto de toma de decisiones multi-criterio(MCDM) abarcaba en sus inicios al conjunto de métodos que servían como herramienta para el proceso de toma de decisiones (Cinelli et al., 2014). Sin embargo, el desarrollo de estos métodos ha sido exponencial, de forma que es necesario algún tipo de clasificación para entender mejor el funcionamiento de cada técnica.
Hwang and Yoon (1981) propusieron dividir los métodos MCDM en métodos de toma de decisión multi-atributo (Multi-attribute decision-making, MADM) y métodos de toma de decisión multi-objetivo (Multiobjective decision-making, MODM). En la Figura se puede ver esta clasificación general de los métodos. Los métodos MADM se utilizan para resolver problemas discretos: las alternativas están predeterminadas y los expertos valoran “a priori” cada criterio e indicando la importancia de cada uno de ellos. Los métodos MODM se utilizan para resolver problemas continuos: las alternativas no están predeterminadas, pues son grupos de soluciones igualmente buenas bajo una serie de restricciones, participando los expertos “a posteriori”.
Los métodos MADM, a su vez, se pueden subdividir en función del tipo de información inicial (determinista, estocástica o incierta), o dependiendo de los grupos de decisores (un único grupo o varios grupos). Sin embargo, la clasificación más habitual es la propuesta por Hajkwociz y Collins (2007) y De Brito y Evers (2016) en los siguientes métodos:
Los métodos de puntuación directa(scoring methods) son los más simples, basados en evaluar las diferentes alternativas mediante operaciones aritméticas básicas. SAW y COPRAS evalúan las alternativas sumando el valor normalizado de cada criterio por su peso correspondiente. SAW es más antiguo y permite realizar este proceso únicamente cuando se desea maximizar un criterio. COPRAS constituye una evolución de SAW y se aplica tanto para criterios que se desean maximizar como minimizar.
Los métodos basados en la distancia (distance-based methods) calculan la distancia entre cada alternativa y un punto concreto. El método GP pretende obtener la alternativa que satisfaga un conjunto de metas, es decir, el punto no es el óptimo, sino aquel que cumpla una serie de condiciones. El método CP trata de obtener aquella alternativa más próxima al hipotético punto óptimo. Los métodos VIKOR y TOPSIS se basan en CP, diferenciándose en la normalización de los criterios. VIKOR tiene en cuenta la distancia a la solución ideal y TOPSIS considera tanto la distancia tanto a la solución ideal como a la solución no ideal.
Los métodos de comparación por pares (pairwise comparision methods) son muy útiles para obtener los pesos de los diferentes criterios y evaluar criterios subjetivos comparando las alternativas entre sí. El método AHP fue el primero en desarrollarse y es uno de los métodos más usados en la toma decisiones. ANP es una evolución del AHP que permite usar criterios dependientes entre sí. MACBETH es una alternativa similar al AHP en cuanto a forma, pero con algunas diferencias en cuanto a conceptos.
Los métodos de superación (outranking methods) establecen una relación de preferencia entre un conjunto de soluciones donde cada una de ellas muestra un grado de dominación sobre las otras respecto a un criterio. Estos métodos son capaces de tratar con información incompleta y difusa, y permite clasificar las alternativas en función de la relación de preferencia existente entre ellas. Dentro de este grupo se encuentran PROMETHEE y ELECTRE.
Los métodos basados en funciones de utilidad o valor (utility/value methods) como MAUT (utilidad) y MAVT (valor), definen funciones que determinan el grado de satisfacción de una alternativa respecto a un criterio. Estas funciones convierten las valoraciones de las alternativas en un grado de satisfacción para cada criterio. Dichas funciones presentan diferentes formas en función de la relación entre la valoración y el grado de satisfacción. MIVES es un derivado de los anteriores en el cual se proporciona las ecuaciones que definen las diferentes funciones de satisfacción.
Tabla. Clasificación de los métodos MADM (Penadés-Plà et al., 2016)
A pesar de todo lo anterior, la vida real es compleja. Siempre existe una incertidumbre en las valoraciones o en las comparaciones. Es por ello que muchos de estos métodos utilizan herramientas como la teoría fuzzy, el método de Montecarlo o los números Grey. Además, cuando la toma de decisiones no es individual, suelen existir diferentes grupos con diferentes intereses, con lo que es necesario llegar a un consenso entre ellos. El método Delphi es una herramienta útil para cuando hay diferentes decisores.
Referencias:
Cinelli, M.; Coles, M.; Kirwan, K. Analysis of the potentials of multi criteria decision analysis methods to conduct sustainability assessment.Ecol. Indic. 2014, 46, 138–148.
De Brito, M. M.; Evers, M. Multi-criteria decision-making for flood risk management: A survey of the current state of the art.Nat. Hazards Earth Syst. Sci. 2016, 16, 1019–1033.
García-Segura, T.; Penadés-Plà, V.; Yepes, V. (2018). Sustainable bridge design by metamodel-assisted multi-objective optimization and decision-making under uncertainty.Journal of Cleaner Production, 202: 904-915.
Hajkowicz, S.; Collins, K. A review of multiple criteria analysis for water resource planning and management.Water Resour. Manag. 2007, 21, 1553–1566.
Hwang, C. L.; Yoon, K. Multiple attribute decision making: Methods and Applications; 1981.
Zamarrón-Mieza, I.; Yepes, V.; Moreno-Jiménez, J.M. (2017). A systematic review of application of multi-criteria decision analysis for aging-dam management.Journal of Cleaner Production, 147:217-230.
