ABSTRACT
Abstract The Teacher Behavior Checklist (TBC) is a worldwide valued instrument to measure teachers' performance. Nonetheless, the studies about TBC in Brazil are still scarce, with samples mainly composed of psychology and civil engineering students. The aim of this study was to replicate the research by Keeley et al. (2010) to evaluate the psychometric properties of the Brazilian version of the TBC with a new sample. Participants were 107 undergraduates from physical education courses from a Brazilian public university. Participants used the TBC to evaluate three types of teachers: the worst they had ever had, a regular one, and the best one. The order of evaluation of teacher types did not interfere with the response patterns, but as expected, statistically significant differences were found among the three types of teachers. Additionally, the two-factor model of the TBC was confirmed through Confirmatory Factor Analysis, providing additional evidence of construct validity. However evidence to advocate in favor of a one-factor solution was also found. McDonald's Omega results provided evidence of reliability. These findings support the use of TBC in the formative evaluation of teachers in Brazil.
Resumen The Teacher Behavior Checklist (TBC) es un instrumento valorado en todo el mundo para medir el desempeño de los profesores. Sin embargo, los estudios sobre el TBC en Brasil siguen siendo escasos, con muestras compuestas principalmente por estudiantes de psicología e ingeniería civil. El objetivo de este estudio fue replicar la investigación de Keeley et al. (2010) para evaluar las propiedades psicométricas de la versión brasileña del Teacher Behavior Checklist (TBC) con una nueva muestra. Participaron 107 estudiantes de educación física de una universidad pública brasileña. Los participantes utilizaron el TBC para evaluar tres tipos de profesores: el peor que hayan tenido, uno regular y el mejor. El orden de evaluación de los tipos de docentes no interfirió con los patrones de respuesta, pero como se esperaba, encontramos diferencias estadísticamente significativas entre los tres tipos de docentes. Además, el modelo de dos factores del TBC se confirmó a través de un análisis factorial confirmatorio, proporcionando evidencia adicional de validez de la construcción. No obstante, también encontramos evidencia para abogar a favor de una solución de un factor. Los resultados del Omega de McDonald indicaron evidencia de confiabilidad. Estos hallazgos apoyan el uso de TBC en la evaluación formativa de los docentes en Brasil.
ABSTRACT
Abstract Performance evaluations help university teachers to improve teaching, especially when based on internationally recognized criteria. This study aimed to carry out a cross-cultural adaptation of the Teacher Behavior Checklist (TBC) for Brazilian students to evaluate their teachers (Study 1) and investigate its psychometric evidence (Study 2). In Study 1, evidence was favorable to the use of TBC for teacher evaluation by the student. In Study 2, 714 public university students participated (Average age = 24.3 years; SD = 6.85), 57.2% women. The TBC was applied collectively in the classroom. The results corroborated the two-factor model according to the instrument's original version, demonstrating an evidence of validity. Evidence of reliability has been documented (alpha = 0.92; Test-Retest = 0.75). This study presented an adequate instrument for the teacher formative evaluation and expanded Brazil's insertion in international research on effective teaching.
Resumo Avaliações de desempenho auxiliam professores universitários a aperfeiçoar o ensino, especialmente quando baseadas em critérios internacionalmente reconhecidos. O objetivo deste estudo foi realizar uma adaptação transcultural do Teacher Behavior Checklist (TBC) para que discentes brasileiros avaliem seus professores (Estudo 1) e investigar suas evidências psicométricas (Estudo 2). No Estudo 1 as evidências foram favoráveis ao uso do TBC para a avaliação docente pelo discente. No Estudo 2, participaram 714 estudantes de universidade pública (Média de idade = 24,3 anos; DP = 6,85), 57,2% mulheres. O TBC foi aplicado coletivamente em sala de aula. Os resultados corroboraram o modelo de dois fatores conforme a versão original do instrumento, demonstrando uma evidência de validade. Foram documentadas evidências de fidedignidade (alpha = 0,92; Teste-Reteste = 0,75). Este estudo apresentou instrumento adequado para a avaliação formativa docente e ampliou a inserção do Brasil na investigação internacional sobre ensino eficaz.
Resumen Las evaluaciones de desempeño ayudan a que los docentes universitarios mejoren la enseñanza, sobre todo cuando se basan en criterios reconocidos internacionalmente. El presente estudio tuvo como objetivo llevar a cabo una adaptación transcultural de la Teacher Behavior Checklist (TBC) para que los estudiantes brasileños evalúen a sus profesores (Estudio 1), así como investigar las evidencias psicométricas (Estudio 2). En el Estudio 1, las evidencias fueron favorables al uso de la TBC para que el estudiante evalúe al profesor. En el Estudio 2, participaron 714 estudiantes de una universidad pública (Promedio de edad = 24,3 años; DE = 6,85), siendo el 57,2% mujeres. La TBC se aplicó colectivamente en el aula. Los resultados corroboran el modelo de dos factores de acuerdo con la versión original del instrumento, lo que demuestra evidencia de validez. Se documentaron evidencias de fiabilidad (alfa = 0,92; Test-Retest = 0,75). Este estudio presentó un instrumento adecuado para evaluar a los docentes y expandió la inserción de Brasil en la investigación internacional sobre la enseñanza efectiva.