Evidence of content validity of an instrument for assessing the use of metacognitive strategies by undergraduate and graduate students

Evidence of content validity of an instrument for assessing the use of metacognitive strategies by undergraduate and graduate students

Authors

DOI:

https://doi.org/10.18675/1981-8106.v.36.n.71.s19055

Keywords:

Metacognition. Metacognitive strategies. Instrument development.

Abstract

Metacognition refers to an individual's thoughts and knowledge about their own cognitive processes, as well as the subsequent ability to adjust them to enhance their learning and problem-solving processes consciously. Metacognitive strategies are one of the components of metacognition, defined as practices used to monitor progress when accomplishing a task. Psychology lacks adequate psychometric instruments with good psychometric properties to evaluate these strategies. In view of the gap in this area, this research aims to develop a new psychometric instrument for investigating the use of metacognitive strategies and verifying their psychometric properties. To achieve this goal, we developed items based on the existing literature on the construct, obtaining evidence of content validity through expert analysis and semantic analysis with the target audience. Aiken's V index was used for the content validity analysis, with index values between 0.75 and 1.00 obtained for the 48 items of the instrument. The instrument obtained an average of 8.99 for its wording regarding semantic quality, indicating that the items are easily understood by its target audience. Such evidence of content validity of the instrument suggests that it completed the initial phase of its construction with excellence.

References

AMANI, S. Metacognitive strategy instruction and pre-task planning: Impact on L2 argumentative writing ability. 2014. 311 f. Tese (Doutorado em Psicologia) – University of Auckland, Auckland, 2014.

ARCOVERDE, Â. R.; BORUCHOVITCH, E. Autorregulação da aprendizagem nos cursos de formação de professores: por que ensinar estratégias de aprendizagem aos futuros docentes?. Teresina: Instituto Federal de Educação, Ciência e Tecnologia do Piauí, 2022.

DAMÁSIO, B. F.; BORSA, J. C. Manual de desenvolvimento de instrumentos psicológicos. Vetor editora, 2017.

DIAS, L. C.; BORUCHOVITCH, E. Estratégias de aprendizagem autorregulada e formação inicial de professores de Geografia: uma revisão sistemática de literatura. Revista de Educação PUC-Campinas, v. 25, 2020. DOI: 10.24220/2318-0870v25e2020a4568. Acesso em: 8 set. 2025.

FLAVELL, J. H. Metacognition and cognitive monitoring: a new area of cognitive-developmental inquiry. American Psychologist, v. 34, n. 10, p. 906-911, 1979. DOI: 10.1037/0003-066X.34.10.906. Acesso em: 8 set. 2025.

FRANÇA, A. B. Escala de Metacognição - Sênior: evidências de validade, precisão e normas iniciais para idosos. 2017. 187 f. Tese (Doutorado em Psicologia) – Universidade Federal de São Carlos, São Carlos, 2017.

FRANÇA, A. B.; SCHELIN, P. W. Escala de Avaliação da Metacognição em Idosos: Evidências de Validade e Consistência Interna. Psicologia: Teoria e Pesquisa, v. 33, p. 1-7, 2018. DOI: 10.1590/0102.3772e3324. Acesso em: 8 set. 2025.

FUJIE, M. A.; SCHELINI, P. W. Monitoramento metacognitivo de adultos em processo de alfabetização em tarefas de memória, processamento e inteligência geral. Psico, v. 49, n. 3, p. 285-293, 2018. DOI: 10.15448/1980-8623.2018.3.27955. Acesso em: 8 set. 2025.

HUANG, Y.; ZHANG, L. J. Facilitating L2 writers’ metacognitive strategy use in argumentative writing using a process-genre approach. Frontiers in Psychology, v. 13, 2022. DOI: 10.3389/fpsyg.2022.1036831. Acesso em: 8 set. 2025.

LIMA FILHO, R. N.; BRUNI, A. L. Metacognitive awareness inventory: Tradução e validação a partir de uma análise fatorial confirmatória. Psicologia: Ciência e Profissão, v. 35, p. 1275-1293, 2015. DOI: 10.1590/1982-3703002292013. Acesso em: 8 set. 2025.

MUHID, A. et al. The Effect of Metacognitive Strategies Implementation on Students' Reading Comprehension Achievement. International Journal of Instruction, v. 13, n. 2, p. 847-862, 2020. DOI: 10.29333/iji.2020.13257a. Acesso em: 8 set. 2025.

MURPHY, D. H.; CASTEL, A. D. Responsible remembering: How metacognition impacts adaptive selective memory. Zeitschrift für Psychologie, v. 228, n. 4, p. 301, 2020. DOI: 10.1027/2151-2604/a000428. Acesso em: 8 set. 2025.

PASCUALON, J. F.; SCHELINI, P. W. Escala de avaliação da metacognição infantil: Evidências de validade baseadas no conteúdo e análise semântica. Avaliação Psicológica, v. 12, p. 147-156, 2013. Disponível em: https://www.redalyc.org/articulo.oa?id=335027505006. Acesso em: 8 set. 2025.

PINTRICH, P. R. The role of motivation in promoting and sustaining self-regulated learning. International journal of educational research, v. 31, n. 6, p. 459-470, 1999.

SACILOTTO, I. C. As estratégias de aprendizagem e aprendizagem autorregulada de professores em exercício no Ensino Fundamental: conhecimentos, crenças e concepções. 2014. 96 f. Dissertação (Mestrado em Educação) – Universidade Estadual de Campinas, Campinas, 2024.

SCHELINI, P. W. et al. Avaliação do monitoramento metacognitivo: análise da produção científica. Avaliação Psicológica, v. 15, p. 57-65, 2016. Disponível em: https://www.redalyc.org/articulo.oa?id=335049854007. Acesso em: 8 set. 2025.

SOTO, C. M.; SEGOVIA, J. L. Intervalos de confianza asimétricos para el índice la validez de contenido: Un programa Visual Basic para la V de Aiken. Anales de Psicología/Annals of Psychology, v. 25, n. 1, p. 169-171, 2009. Disponível em: https://revistas.um.es/analesps/article/view/71631. Acesso em: 8 set. 2025.

TRENTINI, C. M.; BANDEIRA, D. R.; KRUG, J. S. Escolha dos instrumentos e das técnicas no psicodiagnóstico. In: HUTZ, C. S. et al. (org.). Psicodiagnóstico. Porto Alegre: Artmed, 2016.

VAN SOMEREN, M.; BARNARD, Y. F.; SANDBERG, J. The think aloud method: a practical approach to modelling cognitive. London: Academic Press, 1994. p. 29-41.

ZHANG, L.; SEPHO, S. Metacognitive strategy use and academic reading achievement: insights from a Chinese context. Electronic Journal of Foreign Language Teaching, v. 10, n. 1, 2013. Disponível em: https://e-flt.nus.edu.sg/wp-content/uploads/2020/09/v10n12013/zhang.pdf. Acesso em: 8 set. 2025.

Published

2025-12-03

How to Cite

DUARTE, L. A. D.; SCHELINI, P. W. Evidence of content validity of an instrument for assessing the use of metacognitive strategies by undergraduate and graduate students. Educação: Teoria e Prática, [S. l.], v. 36, n. 71, p. e09[2026], 2025. DOI: 10.18675/1981-8106.v.36.n.71.s19055. Disponível em: https://www.periodicos.rc.biblioteca.unesp.br/index.php/educacao/article/view/19055. Acesso em: 5 dec. 2025.
Loading...