Expert Judgment

Authors

  • Erick Ernesto Aguilar Altamirano Universidad Nacional de San Cristóbal de Huamanga. Huamanga, Ayacucho, Perú.

Keywords:

Expert Judgment, Method, Validation, Assessment

Abstract

The objective of this review article is to present the expert judgment method by which a detailed evaluation of a specific topic is carried out by qualified experts in the area in question. Therefore, a rigorous investigation was carried out on the judgment of experts, which is a strategy used for the evaluation and validation of an investigation to verify reliability. For this, various experts specialized in a specific topic are used, these experts are selected according to their experience, level of knowledge, study. Consequently, expert judgment is a useful but imperfect method, which is why it must be used with caution and accuracy, taking into account the various tools (tables, indicators, questionnaires, etc.) that the expert uses.

References

Almenara, J. C., & Osuna, J. B. (2013). La utilización del juicio de experto para la evaluación de TIC: el coeficiente de competencia experta. Bordon. Revista de Pedagogia, 65(2), 25–38. https://doi.org/10.13042/BRP.2013.65202

Aniceto, P. F., Luna, J., & Rodriguez, M. de L. (2021). Análisis de validación y confiabilidad de Rúbrica Socioformativa en torno al concepto gestión del conocimiento en proyectos formativos. Espacios, 42(05), 53–65. https://doi.org/10.48082/espacios-a21v42n05p04

Basulto Ramírez, P. L. (2021). Necesidades formativas del profesorado universitario para afrontar la enseñanza de la Historia de Cuba en la modalidad semipresencial. https://doi.org/10.17616/R31NJNEG

Berlaga, R. Ma. de la L., & Juárez, H. L. G. (2020). Diseño y validación de un instrumento para evaluar la retroalimentación asertiva en educación normal. IE Revista de Investigación Educativa de La REDIECH, 11, e791. https://doi.org/10.33010/ie_rie_rediech.v11i0.791

Bernal-García, M. I., Salamanca Jiménez, D. R., Perez Gutiérrez, N., & Quemba Mesa, M. P. (2020a). Content validity by expert judgment of an instrument to measure physico-emotional perceptions in anatomical dissection practice. Educacion Medica, 21(6), 349–356. https://doi.org/10.1016/j.edumed.2018.08.008

Bernal-García, M. I., Salamanca Jiménez, D. R., Perez Gutiérrez, N., & Quemba Mesa, M. P. (2020b). Content validity by expert judgment of an instrument to measure physico-emotional perceptions in anatomical dissection practice. Educacion Medica, 21(6), 349–356. https://doi.org/10.1016/j.edumed.2018.08.008

Brownstein, N. C., Louis, T. A., O’Hagan, A., & Pendergast, J. (2019). The Role of Expert Judgment in Statistical Inference and Evidence-Based Decision-Making. American Statistician, 73(sup1), 56–68. https://doi.org/10.1080/00031305.2018.1529623

Cabello Cabello, B. (2019). Programa de formación para la inclusión de estudiantes con Síndrome de Aspeger en Educación Superior. https://doi.org/10.17616/R31NJNEG

Cabero, A. J., & Infante, M. A. (2014). Empleo del método delphi y su empleo en la investigación en comunicación y educación. Revista Electrónica de Tecnología Educativa, 48. https://www.edutec.es/revista/index.php/edutec-e/article/view/187

Cabero, A. J., & Llorente, C. (2013). La aplicación del juicio de experto como técnica de evaluación de las tecnologías de la información y comunicación (TIC). Revista de Tecnología de Información y Comunicación En Educación, 7, 11–22. https://www.researchgate.net/publication/260750592_La_aplicacion_del_juicio_de_experto_como_tecnica_de_evaluacion_de_las_tecnologias_de_la_informacion_y_comunicacion_TIC

Cabero Almenara, J., Romero Tena, R., Barroso Osuna, J. M., & Palacios Rodríguez, A. de P. (2020). Marcos de Competencias Digitales Docentes y su adecuación al profesorado universitario y no universitario. RECIE. Revista Caribeña de Investigación Educativa, 4(2), 137–158. https://doi.org/10.32541/RECIE.2020.V4I2.PP137-158

Cabero-Almenara, J., Barroso-Osuna, J., Palacio-Rodríguez, A., & Llorente-Cejudo, C. (2021). Evaluación de t-MOOC universitario sobre competencias digitales docentes mediante juicio de expertos según el Marco DigCompEdu. Revista de Educación a Distancia (RED), 21(67). https://doi.org/10.6018/red.476891

Cabero-Almenara, J., Barroso-Osuna, J., Palacios Rodríguez, A., & Llorente-Cejudo, C. (2020). Marcos de Competencias Digitales para docentes universitarios: su evaluación a través del coeficiente competencia experta. Revista Electrónica Interuniversitaria de Formación Del Profesorado, 23(3). https://doi.org/10.6018/reifop.414501

Cabero-Almenara, J., Romero-Tena, R., & Palacios-Rodríguez, A. (2020). Evaluation of teacher digital competence frameworks through expert judgement: The use of the expert competence coefficient. Journal of New Approaches in Educational Research, 9(2), 275–283. https://doi.org/10.7821/naer.2020.7.578

Cómo usar el juicio de expertos en la gestión de proyectos. (n.d.).

Cuellar, J. H. P., & Cardona, D. M. R. (n.d.). EVALUATION OF DIGITAL SKILLS IN MIDDLE EDUCATION YOUNG. NOVA Hermoteca-UNAD.

Cuervo-Martínez, Á., & Escobar-Pérez, J. (2008). Validez de Contenido y Juicio de Expertos: Una Aproximación a su Utilización. Avances En Medición, 6, 27–36. https://www.researchgate.net/publication/302438451_Validez_de_contenido_y_juicio_de_expertos_Una_aproximacion_a_su_utilizacion

Dialnet-ValidacionPorJuicioDeExpertosDeUnPrototipoDeSoftwa-6430649. (n.d.).

Dorantes-Nova, J. A., Silvano Hernández-Mosqueda, J., & Tobón-Tobón, S. (2016). Judgment of experts for the validation of an instrument of measurement of burnout syndrome in teaching. https://www.redalyc.org/pdf/461/46148194023.pdf

Escobar-Pérez, J., & Cuervo-Martínez, Á. (2008). VALIDEZ DE CONTENIDO Y JUICIO DE EXPERTOS: UNA APROXIMACIÓN A SU UTILIZACIÓN. 6, 27–36.

Ferreira, L., Laura, M., Cuesta, L., Florencia, M., Acosta, L., & Ommi, S. (2022). Validez por juicio de expertos de un instrumento audiovisual de consistencias de alimentos y viscosidad de líquidos (NutriDis®) adaptados para personas con disfagia Validity by experts judgment of an audiovisual tool of food textures and thickness of liquids (NutriDis®) adapted for people with dysphagia. https://diaeta.aadynd.org.ar/index.php/2022/article/view/15/10

Friedensen, R. E., & Kimball, E. (2018). The professoriate and the post-truth era: A historiographic analysis of expert judgment and the destabilization of objective truth. Education Policy Analysis Archives, 26. https://doi.org/10.14507/epaa.26.3357

Galicia, A. L. A., Balderrama, T. J. A., & Edel, N. R. (2017). Validez de contenido por juicio de expertos: propuesta de una herramienta virtual. Apertura, 9(2), 42–53. https://doi.org/10.32870/ap.v9n2.993

García, D. J. E., Guerrero, F. A., Rodríguez, M. F., & Solís, R. E. (2022). Validación de un cuestionario sobre Alfabetización Ambiental mediante juicio de expertos. Revista Eureka, 19(3), 310101–310121. https://doi.org/10.25267/Rev_Eureka_ensen_divulg_cienc.2022.v19.i3.3101

García Moreno, E., Martínez Prats, G., & Mapén-Franco, F. de J. (2023). Validez de contenido del instrumento de gestión ambiental por juicio de expertos. Revista Perspectiva Empresarial, 9(2), 55–68. https://doi.org/10.16967/23898186.794

Gavira, S. A., & Osuna, J. B. (2018). Evaluación de un entorno de formación para la adquisición de competencias tecnológicas en el profesorado universitario. Profesorado, 22(3), 359–374. https://doi.org/10.30827/PROFESORADO.V22I3.8006

Guillot-Valdés, M., Guillén-Riquelme, A., & Buela-Casal, G. (2022). Content Validity through Expert Judgment for the Depression Clinical Evaluation Test. International Journal of Clinical and Health Psychology, 22(2). https://doi.org/10.1016/j.ijchp.2022.100292

Hernández López, V., & Juárez Hernández, L. G. (2020). Diseño y validación de contenido por juicio de expertos de un instrumento para evaluar la acción tutorial en el nivel superior. ResearchGate. researchgate.net/profile/Luis-Juarez-Hernandez-2/publication/338829073_Diseno_y_validacion_de_contenido_por_juicio_de_expertos_de_un_instrumento_para_evaluar_la_accion_tutorial_en_el_nivel_superior/links/5e2d4723299bf152167e2600/Diseno-y-validacion-de-contenido-por-juicio-de-expertos-de-un-instrumento-para-evaluar-la-accion-tutorial-en-el-nivel-superior.pdf

Herrera Masó JR, C. R. J. G. R. M. C. R. M. T. G. Y. (2022). El método de consulta a expertos en tres niveles de validación. http://scielo.sld.cu/pdf/rhcm/v21n1/1729-519X-rhcm-21-01-e4711.pdf

infolaft. (2017). ¿Cómo hacer una medición por expertos? - Infolaft. Infolaft.

Juárez-Hernández, L. G., & Tobón, S. (2018). Análisis de los elementos implícitos en la validación de contenido de un instrumento de investigación. Espacios, 39(53). https://www.revistaespacios.com/cited2017/cited2017-23.html

Julio Cabero Almenara y María del Carmen Llorente Cejudo. (2013). art01. https://revistaeduweb.org/index.php/eduweb/article/view/206/154

JULIO CABERO ALMENARA JULIO BARROSO OSUNA. (2013). Volumen 65 Número 2 2013 SOCIEDAD ESPAÑOLA DE PEDAGOGÍA. https://recyt.fecyt.es/index.php/BORDON/article/view/brp.2013.65202/11419

King, C. K., Wasley, J., Holan, J., Richardson, J., & Spedding, T. (2021). Using an expert judgment response matrix to assess the risk of groundwater discharges from remediated fuel spill sites to the marine environment at sub-Antarctic Macquarie Island, Australia. Integrated Environmental Assessment and Management, 17(4), 785–801. https://doi.org/10.1002/ieam.4382

Luque-Vara, T., Linares-Manrique, M., Fernández-Gómez, E., Martín-Salvador, A., Sánchez-Ojeda, M. A., & Enrique-Mirón, C. (2020). Content validation of an instrument for the assessment of school teachers’ levels of knowledge of diabetes through expert judgment. Intern J. of Environ. Res. and Pub. Health, 17(22), 1–13. https://doi.org/10.3390/ijerph17228605

Martínez Izaguirre, M., Yániz Álvarez de Eulate, C., & Villardón Gallego, L. (2017). Competencias profesionales del profesorado de educación obligatoria. Revista Iberoamericana de Educación.

MARTÍNEZ, J. P. G. E. y J. L. G. (2020). Diseno y validacion del intrumento enfoque directivoa20v41n01p13. Espacios. https://www.revistaespacios.com/a20v41n01/a20v41n01p13.pdf

Martínez-Corona, J. I., Palacios-Almón, G. E., & Juárez-Hernández, L. G. (2020). Diseño y Validación del instrumento: “Enfoque Directivo en la Gestión para Resultados en la Sociedad del Conocimiento. Espacios, 10(19), 153–165. https://doi.org/10.17163/ret.n19.2020.09

Mauricio RUEDA-CÁCERES, I., Marcela SÁNCHEZ-TORRES, J., & Jair DUQUE-OLIVA, E. (2017). Hacia un Modelo de Medición de la Capacidad de Innovación Mediante Facilitadores de Gestión: Evaluación de Juicio de Expertos Towards a Model for Measuring Innovation Capability through Management Levers: Evaluation of Expert Judgment (Vol. 39, Issue 13). https://www.revistaespacios.com/a18v39n13/a18v39n13p11.pdf

McAndrew, T., & Reich, N. G. (2022a). An expert judgment model to predict early stages of the COVID-19 pandemic in the United States. PLoS Computational Biology, 18(9). https://doi.org/10.1371/JOURNAL.PCBI.1010485

McAndrew, T., & Reich, N. G. (2022b). An expert judgment model to predict early stages of the COVID-19 pandemic in the United States. PLoS Computational Biology, 18(9). https://doi.org/10.1371/journal.pcbi.1010485

Mendoza, A., Solano, C., Palencia, D., & Garcia, D. (2019). Aplicación del proceso de jerarquía analítica (AHP) para la toma de decisión con juicios de expertos. Revista Chilena de Ingeniería, 27(3), 348–360. https://www.scielo.cl/scielo.php?script=sci_arttext&pid=S0718-33052019000300348&lng=en&nrm=iso&tlng=en

Mora Vergara, A. P., Díaz Rincón, M., Lora Díaz, O., & Pérez, O. (2023). VALIDACIÓN POR JUICIO DE EXPERTOS DE UN CUESTIONARIO SOBRE CONOCIMIENTOS ACTITUDES Y PRÁCTICAS DEL CONSUMO DE FRUTAS Y VERDURAS. ReseachGate. interciencia.net/wp-content/uploads/2023/02/06_6945_Com_Mora_v48n1_5.pdf

Pamies, M., Cascales, A., & Gomariz, M. (2020). La validación de expertos en el proceso de adaptación de cuestionarios. El cuestionario de transferencia de la formación del profesorado no universitario. La Docencia En La Enseñanza Superior. Nuevas Aportaciones Desde La Investigación e Innovación Educativas, 528–538.

Pedrosa, I., Suárez-Álvarez, J., & García-Cueto, E. (2014). Evidencias sobre la Validez de Contenido: Avances Teóricos y Métodos para su Estimación [Content Validity Evidences: Theoretical Advances and Estimation Methods]. Acción Psicológica, 10(2), 3–18. https://doi.org/10.5944/ap.10.2.11820

Petrolia, D. R., Nyanzu, F., Cebrian, J., Harri, A., Amato, J., & Walton, W. C. (2020). Eliciting expert judgment to inform management of diverse oyster resources for multiple ecosystem services. Journal of Environmental Management, 268. https://doi.org/10.1016/j.jenvman.2020.110676

Prado Límaco, G. (2023). Virtualización del proceso de validación por juicio de expertos. Revista Ciencias y Artes. https://revistasucal.com/index.php/rca/article/view/7/1

Reynoso, D. (n.d.). 317 Política y gobierno volumen xxII · nÚmero 2 · II semestre de 2015 · el espacio ideológico subnacional mexicano según juicios de expertos.

Reynoso, D., & Vronkistinos, G. (2020). REVISTA DE CIENCIA POLÍTICA / VOLUMEN 40 / N° 1 / 2020 / 95-114 Artículos Ciencia Política Political Spaces and High-Low Style. An Analysis of Provincial Leaders, Based on Expert Judgments in Argentina 2015. https://www.scielo.cl/pdf/revcipol/v40n1/0718-090X-revcipol-40-01-0095.pdf

Rodríguez, M. A., Poblano, E. R., Alvarado, L., González, A., & Rodríguez, M. I. (2021). Validation by Expert Judment of an Evaluation Instrument for Evidence of Conceptual Learning. RIDE Revista Iberoamericana Para La Investigación y El Desarrollo Educativo, 11(22).

Rodríguez Medina, M. A., Poblano-Ojinaga, E. R., Alvarado Tarango, L., González Torres, A., & Rodríguez Borbón, M. I. (2021). Validación por juicio de expertos de un instrumento de evaluación para evidencias de aprendizaje conceptual. RIDE Revista Iberoamericana Para La Investigación y El Desarrollo Educ, 11(22). https://doi.org/10.23913/ride.v11i22.960

Romero-Tena, R., Cabero-Almenara, J., & Palacios-Rodríguez, A. (2020). Evaluation of teacher digital competence frameworks through expert judgement: The use of the expert competence coefficient. Journal of New Approaches in Educational Research, 9(2), 275–283. https://doi.org/10.7821/naer.2020.7.578

Sapp, A. C., Amaya, M. P., Havelaar, A. H., & Nane, G. F. (2022). Attribution of country level foodborne disease to food group and food types in three African countries: Conclusions from a structured expert judgment study. PLoS Neglected Tropical Diseases, 16(9). https://doi.org/10.1371/JOURNAL.PNTD.0010663

Tobón, S., Pimienta-Prieto, J. H., Herrera-Meza, S. R., Juárez-Hernández, L. G., & Hernández-Mosqueda, J. sivano. (2018). Validez y confiabilidad de una rúbrica para evaluar las prácticas pedagógicas en docentes de Educación Media (SOCME-10). Revista Espacios, 39(No 53), 1–13.

Torrecilla Salinas, C. J., Troyer, O. de, Escalona Cuaresma, M. J., & Mejías Risoto, M. (2017). Una aplicación práctica del método Delphi para la validación de una propuesta de Ingeniería Web. 1. https://doi.org/10.17616/R31NJNEG

Torres-Malca, J. R., Vera-Ponce, V. J., Zuzunaga-Montoya, F. E., Talavera, J. E., & De La Cruz-Vargas, J. A. (2022). Content validity by expert judgment of an instrument to measure knowledge, attitudes and practices about salt consumption in the peruvian population. Revista de La Facultad de Medicina Humana, 22(2), 273–279. https://doi.org/10.25176/rfmh.v22i2.4768

Vásquez Ortiz, C. A., Alsina, Á., Pincheira, N., Gea, M. M., & Chandia, E. (2020). Construcción y validación de un instrumento de observación de clases de probabilidad. Revista de Investigación y Experiencias Didácticas, 38(2), 25–43. https://doi.org/10.5565/rev/ensciencias.2820

Villavicencio, A., Cardoso Gómez, M. A., Sánchez Ruíz, J. G., & Arellano Cobián, J. F. (2017). R E S P Y N. Artículo Original Revista de Salud Pública y Nutrición, 16(2), 36. https://www.medigraphic.com/pdfs/revsalpubnut/spn-2017/spn172e.pdf

Vinogradova-Zinkevič, I. (2021). Application of bayesian approach to reduce the uncertainty in expert judgments by using a posteriori mean function. Mathematics, 9(19). https://doi.org/10.3390/math9192455

Violoni, M. L., Sanz, C. V., & Pesado, P. M. (2022). Prototype of a framework for the creation of Learning Objects and its evaluation by expert judgment. Edutec, 81, 137–154. https://doi.org/10.21556/edutec.2022.81.2529

Więckowski, J., Kizielewicz, B., Shekhovtsov, A., & Sałabun, W. (2023). RANCOM: A novel approach to identifying criteria relevance based on inaccuracy expert judgments. Engineering Appl. of Artif. Intellig, 122, 106114.

Published

2023-10-31

How to Cite

Aguilar Altamirano, E. E. . (2023). Expert Judgment. Multidisciplinary &Amp; Health Education Journal, 5(3), 556–570. Retrieved from http://journalmhe.org/ojs3/index.php/jmhe/article/view/84

Issue

Section

REVIEW ARTICLE

Most read articles by the same author(s)