Validade e confiabilidade do protocolo de observação de aula do Programa Segundo Tempo

Abstract

O objetivo dos estudos que compõem esta dissertação é de elaborar um instrumento de observação da aula com o intuito de medir o grau de adesão dos professores à tecnologia pedagógica do Programa Segundo Tempo, bem como estabelecer sua validade de face, de conteúdo (Artigo 1), validade de critério e confiabilidade (consistência interna, reprodutibilidade intra e interobservador) (Artigo 2). Para a concepção, validação de face e conteúdo, foram realizadas revisões dos documentos que fundamentam o programa, reuniões, consultas com a Equipe Pedagógica e aplicação piloto. Para a validade concorrente e confiabilidade intra e interobservador, foi elaborada uma capacitação de ensino a distância em que os observadores avaliaram duas vídeoaulas em momentos diferentes. Sobre a validade de face e conteúdo, não foram encontradas divergências entre as equipes quanto ao nível de relevância dos itens e seus ponderamentos. Além disso, a aplicação piloto apresentou bons valores de Índice de Concordância (0,71 ± 0,22). Em relação à confiabilidade e validade critério, as medidas do instrumento apresentaram boa confiabilidade (Alfa de Conbrach – 0,90; Reprodutibilidade Interobservador com CCI entre 0,89 e 0,91 e Reprodutibilidade Intraobservador com 11 dos itens apresentando valor de p significativo para ambas videoaulas); contudo, sobre a validade critério, apenas 5 itens apresentaram concordância acima de 50%. Desse modo, é necessário que a capacitação de Ensino à Distância seja reforçada com feedbacks sobre as aulas avaliadas, principalmente em relação às divergências encontradas, a fim de reforçar os critérios de avaliação.