Construção e estudo de evidências de validade da Escala de Avaliação Docente

• Published in: Revista brasileira de educação Vol. 22; no. 70; pp. 690 - 707
• Main Authors: SILVA, MÔNIA APARECIDA DA, MACHADO, WAGNER DE LARA, PILOTTO, LUCIANE MARIA, BACKES, BÁRBARA, ZANON, REGINA BASSO, MACHADO, PATRÍCIA VASCONCELOS, ZOLTOWSKI, ANA PAULA COUTO, VIEIRA, REBECA VERAS DE ANDRADE, ENDRES, RENATA GIULIANI, FRANCALANCI, MARTINA, OLIVEIRA, VICTOR ADRIEL DE JESUS, KRUG, JEFFERSON SILVA, BANDEIRA, DENISE RUSCHEL
• Format: Journal Article
• Language: English
• Published: 01.07.2017
• ISSN: 1413-2478; 1413-2478
• DOI: 10.1590/s1413-24782017227035

RESUMO Este estudo objetivou apresentar a construção da Escala de Avaliação Docente (EADoc) e suas evidências de validade. A escala foi desenvolvida com base em uma revisão de literatura e de entrevistas com estudantes de graduação. A EADoc foi avaliada por dez juízes quanto a evidências de validade de conteúdo, com subsequente análise de evidências de validade de construto e fidedignidade. A matriz de correlação tetracórica foi submetida a análises fatoriais exploratórias, e o método Hull foi usado para a decisão do número de dimensões a serem retidas. Foram conduzidas análises de teoria de resposta ao item (TRI), pelo modelo rating scale, que excluiu sete itens. O índice Kaiser-Meyer-Olkin (KMO) e o teste de esfericidade de Bartlett indicaram a fatorabilidade da matriz de correlações policóricas dos itens. O método Hull apontou a retenção de um fator, com autovalor de 15,49. As medidas de fidedignidade para o fator foram de α=0,96 e ω =0,95. Considera-se que a EADoc pode auxiliar na avaliação de práticas da educação superior no Brasil. RESUMEN En este estudio se presentan los procesos de construcción de la Escala de Evaluación Docente y sus pruebas de validez. La escala fue desarrollada a partir de una revisión de la literatura y entrevistas con estudiantes de pregrado. La escala fue sometida a diez jueces para investigar evidencias de validez de contenido, seguido por el análisis de evidencias de validez de constructo y fiabilidad. La matriz de correlaciones tetracóricas se sometió a análisis factorial exploratorio y el método HULL se utilizó para decidir el número de dimensiones a ser retenidas. Se realizaron los análisis de Teoría de Respuesta a los Ítems (TRI) por el modelo de escala de clasificación y se excluyeron siete ítems. El índice Kaiser-Meyer-Olkin (KMO) y la prueba de esfericidad de Bartlett y el índice de KMO indica la factorabilidad de la matriz de correlaciones policóricas de ítems. El método HULL indicó la retención de un factor con el valor propio de 15,49. Las medidas de fiabilidad para el factor fueron α=0,96 y ω =0,95. Se considera que la escala puede ayudar en la evaluación de las prácticas de enseñanza superior en Brasil. ABSTRACT The objective of this study was to present the construction of the Teaching Assessment Scale (TAS) and the validity evidence for it. This scale was developed through a literature review and interviews with graduate students. The evidence for content validity of the TAS was evaluated by ten referees, and this was followed by the analysis of the evidence for construct validity and reliability. The tetrachoric correlation matrix was submitted for exploratory factorial analysis, and the Hull method was used to decide the number of dimensions to be retained. Item response theory (IRT) analysis was performed using the rating scale model with the result that seven items needed to be excluded. The Kaiser-Meyer-Olkin (KMO) index and Bartlett’s Test of Sphericity indicated that the polychoric correlation matrix was factorable. The Hull method suggested the retention of a factor, with the eigenvalue of 15.49. The factor’s reliability measures were α = 0.96 and ω = 0.95. As a result, the TAS is considered helpful in evaluating higher education teaching methods in Brazil.