Entrevistas Cognitivas en la Búsqueda de Evidencia de Validez Basada en el Proceso de Respuesta

Autores/as

DOI:

https://doi.org/10.1590/1982-4327e3336

Palabras clave:

Contenido del item (test), Construcción de test, Validacion de test, Tests psicológicos

Resumen

Las entrevistas cognitivas pueden proporcionar evidencia de validez para los instrumentos basados en el proceso de respuesta al ítem. En la literatura brasileña, sin embargo, aún prevalece el uso de grupos focales; además, el análisis semántico solo se ha considerado en la búsqueda de evidencias de validez basadas en el contenido de la prueba. Este manuscrito presenta una propuesta para el análisis de datos cualitativos de entrevistas cognitivas. El objetivo es proporcionar a los investigadores un protocolo que posibilite las mejores prácticas en la realización de esta técnica, consolidándola en la literatura brasileña como una opción para la búsqueda de evidencias de validez a partir del proceso de respuesta a los ítems. Finalmente, se presentan algunas críticas en relación a los procedimientos actuales de búsqueda de evidencias de validez en base al contenido y se discuten posibilidades.

Descargas

Biografía del autor/a

  • Ana Gabriela Rocha Araújo, Universidade Federal do Rio Grande do Sul

    Ana Gabriela Rocha Araújo is a Ph.D. candidate of the Instituto de Psicologia at the Universidade Federal do Rio Grande do Sul, Porto Alegre-RS, Brazil.

  • Cláudio Simon Hutz, Universidade Federal do Rio Grande do Sul

    Cláudio Simon Hutz is a Professor of the Instituto de Psicologia at the Universidade Federal do Rio Grande do Sul, Porto Alegre-RS, Brazil.

  • Cleonice Alves Bosa, Universidade Federal do Rio Grande do Sul

    Cleonice Alves Bosa is a Professor of the Instituto de Psicologia at the Universidade Federal do Rio Grande do Sul, Porto Alegre-RS, Brazil.

Referencias

Almanasreh, E., Moles, R., & Chen, T. F. (2019). Evaluation of methods used for estimating content validity. Research in Social and Administrative Pharmacy, 15(2), 214-221. https://doi.org/10.1016/j.sapharm.2018.03.066

American Educational Research Association, American Psychological Association, & National Council on Measurement in Education (Eds.). (2014). The standards for educational and psychological testing. AERA.

American Psychological Association. (2020). Publication manual of the American Psychological Association (7th ed.). APA.

Boateng, G. O., Neilands, T. B., Frongillo, E. A., Melgar-Quiñonez, H. R., & Young, S. L. (2018). Best practices for developing and validating scales for health, social, and behavioral research: A primer. Frontiers in Public Health, 6, 149. https://doi.org/10.3389/fpubh.2018.00149

Borsa, J. C., & Seize, M. M. (2017). Construção e adaptação de instrumentos psicológicos: Dois caminhos possíveis [Construction and adaptation of psychological instruments: Two possible paths]. In B. Damasio & J. C. Borsa (Eds.), Manual de desenvolvimento de instrumentos psicológicos [Psychological instrument development manual] (pp. 15-38). Vetor.

Clark, L. A., & Watson, D. (2019). Constructing validity: New developments in creating objective measuring instruments. Psychological Assessment, 31(12), 1412-1427. https://doi.org/10.1037/pas000626

Ellis, A. (1946). The validity of personality questionnaires. Psychological Bulletin, 43(5), 385-440. https://doi.org/10.1037/h0055483

Fryer, L. K., & Nakao, K. (2020). The future of survey self-report: An experiment contrasting likert, VAS, slide, and swipe touch interfaces. Frontline Learning Research, 8(3), 10-25. https://doi.org/10.14786/flr.v8i3.501

Hubley, A. M. (2021). Response processes validity evidence : Understanding the meaning of scores from psychological measures. In P. Graf & D. J. A. Dozois (Eds.), Handbook on the state of the art in applied psychology (pp. 413-434). Wiley Blackwell.

Meadows, K. (2021). Cognitive interviewing methodologies. Clinical Nursing Research, 30(4), 375-379. https://doi.org/10.1177/10547738211014099

Miller, K., Willson, S., Chepp, V., & Ryan, J. M. (2014). Analysis. In K. Miller, S. Willson, V. Chepp, & J. L. Padilla (Eds.), Cognitive interviewing methodology (pp. 35-50). Wiley.

Pacico, J. C. (2015). Como é feito um teste? Produção de itens [How is a test built? Item production]. In C. S. Hutz, D. R. Bandeira, & C. M. Trentini (Orgs.), Psicometria [Psychometrics] (pp. 55-70). Artmed.

Padilla, J.-L., & Benítez, I. (2014). Validity evidence based on response processes. Psicothema, 26(1), 136-144. https://doi.org/10.7334/psicothema2013.259

Pasquali, L. (1998). Princípios de elaboração de escalas psicológicas [Principles of elaboration of psychological scales]. Revista de Psiquiatria Clínica, 25(5), 206-213. http://ppget.ifam.edu.br/wp-content/uploads/2017/12/Principios-de-elaboracao-de-escalas-psicologicas.pdf

Peterson, C. H., Peterson, N. A., & Powell, K. G. (2017). Cognitive interviewing for item development: Validity evidence based on content and response processes. Measurement and Evaluation in Counseling and Development, 50(4), 217-223. https://doi.org/10.1080/07481756.2017.1339564

Schwarz, N. (1999). Self-reports: How the questions shape the answers. American Psychologist, 54(2), 93-105. https://doi.org/10.1037//0003-066x.54.2.93

Tourangeau, R. (1984). Cognitive sciences and survey methods. In T. B. Jabine, M. L. Straf, J. M. Tanur, & R. Tourangeau (Eds.), Cognitive aspects of survey methodology: Building a bridge between disciplines (pp. 73-100). The National Academies.

Tourangeau, R., & Hanover, L. (2018). The survey response process from a cognitive viewpoint. Quality Assurance in Education, 26(2), 169-181. https://doi.org/10.1108/qae-06-2017-0034

Tourangeau, R., Maitland, A., Steiger, D., & Yan, T. (2019). A framework for making decisions about question evaluation methods. In P. Beatty, D. Collins, L. Kaye, J. L. Padilla, G. Willis, & A. Wilmot (Eds.), Advances in questionnaire design, development, evaluation and testing (pp. 47-73). Wiley.

Urbina, S. (2014). Essentials of psychological testing (2nd ed.). Wiley.

Willis, G. B. (2005). Cognitive interviewing: A tool for improving questionnaire design. SAGE.

Willis, G. B. (2018). Cognitive interviewing in survey design: State of the science and future directions. In D. Vannette & J. Krosnick (Eds.), The Palgrave handbook of survey research (pp. 103-107). Palgrave Macmillan.

Willson, S., & Miller, K. (2014). Data collection. In K. Miller, V. Chepp, S. Willson, & J. L. Padilla (Eds.), Cognitive interviewing methodology (pp. 15-33). Wiley.

Wolcott, M. D., & Lobczowski, N. G. (2021). Using cognitive interviews and think-aloud protocols to understand thought processes. Currents in Pharmacy Teaching & Learning, 13(2), 181-188. https://doi.org/10.1016/J.cptl.2020.09.005

Descargas

Publicado

2023-05-04

Número

Vol. 33 (2023)

Sección

Thematic Dossier “Methodological Challenges in Psychology: Contributions to Academic Practice and Training”

Licencia

Derechos de autor 2023 Paidéia (Ribeirão Preto)

Creative Commons License

Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial 4.0.

Para poner a disposición los contenidos, Paidéia adopta la Licencia Creative Commons, CC-BY. Esta licencia permite copiar y redistribuir el material en cualquier medio o formato, así como remezclar, transformar y construir a partir del material para cualquier propósito, incluso comercialmente, lo que da los debidos créditos de derechos de autor apropiados a la revista, ofrece un enlace a la licencia e indica se han realizado cambios.

Reproducción parcial de otras publicaciones

Las citas que exceden las 500 palabras, la reproducción de una o más figuras, tablas u otras ilustraciones deben contar con la autorización escrita del titular de los derechos de autor del trabajo original para la reproducción especificada en la revista 

Cómo citar

Cruz, A. C. A. da, Araújo, A. G. R., Hutz, C. S., & Bosa, C. A. (2023). Entrevistas Cognitivas en la Búsqueda de Evidencia de Validez Basada en el Proceso de Respuesta. Paidéia (Ribeirão Preto), 33, e3336. https://doi.org/10.1590/1982-4327e3336