AVALIACAO DO PROFESSOR PELO ALUNO: questiondrio avaliativo e testes de validacio ANSON UN RAE og trowaes INTRODUCAG Apresenta-se um questionfrio que tem o objetivo precfpuo, mas nao exclusivo, de propiciar que o aluno avalie o desenperho de seu pro- fessor em sala de aula e se relatam algumas evidéncias de validade do ancsmo. Este trabalho se constitui em um resumo da dissertagiio de mes- trado do primeiro autor supracitado (Pinent, 1992). (O questionirio (vide Anexo) fol inspiradoemum instrumento apre~ sentado por Silveira ¢ Moreira (1984), amplamente utilizado na UPROS ¢, posteriormente, no Instituto de Fisica da PUCRS, para a avaliacéio do desempenho docente pelos alunos (Silveira ¢ Moreira, 1984, Silveira ct *Dofastno de Matomitica da PUCRS, DepananestodeExattica da UNISINOS¢ ds UCS. _Dolasuun de Fst Pao gran tm bacon dt FUCKS, last de Hica da UFRGS. ‘77 DaFculdade de Bévcagio da PUCRS. 6alii, 1985, Silveira, 1989). O questionfrio que aqui se apresenta é uma adaptagio daquele, expandindo-o no que se refere & opinigo do aluno a respeito da disciplina, matéria ou conteddo ensinado. O QUESTIONARIO Observa-se no Apéndice que o questionério 6 constitufdo por 40 itens. Os primeiros 30 itens referem-se diretamente ao professor, deven- do o aluno escolher uma das cinco alternativas de resposta como a que melhor expresse a sua opinido. As alternativas esto escalonadas de tal forma que a primeira (alternativa A) sempre expressa a opinido mais fa- voravel poss{vel ¢ a diltima (alternativa E) a menos favordvel. Isto 6 ex- plicado ao aluno nas instrugdes com o objetivo de facilitar a sua deciso no caso de diivida entre alternativas vizinhas. Os itens 31 235 tém o ob- jetivo de avaliar a disciplina. Os itens 36 a 40 constituem-se em quest5es adicionais, questées de auto-avaliacdo do aluno e importancia por ele atribufda a disciplina ¢ ao questionério. Adicionalmente o aluno poder manifestar por escrito sua opiniao sobre qualquer aspecto que julgue re- levante, Os 30 itens iniciais sio utilizados na construgio de um escore total, que deve representar, de maneira global, o desempenho do professor na opiniao do aluno. Esse escore total ¢ obtido da soma dos escores emcada item; se a opgao do aluno for a alternativa A em qualquer item, entdio 0 escore no item é 5; caso tenha sido a alternativa B, 0 escore no item 64,6 assim por diante até I para a alternativa E. O escore total 6, entiio, uma va- rifvel discreta, podendo assumir um valor entre 30 (30x1)¢ 150 (30x5); quanto mais alto ele for, tanto melhor a avaligio que o aluno fez.de seu professor. Os dez tiltimos itens sii quantificados da mesma forma, ndosendo, entretanto, computados como medida do desempenho do professor. APLICACAO DO QUESTIONARIO O instrumento foi aplicado no Centro de Ciéneias Fxatas da Uni- versidade do Vale do Rio dos Sinos (Centro 6 da UNISINOS) em junho de 1991, na semana intermedifria entre a 1" e a 2* verificagdes do semes- tre letivo, conforme o procedimento usual para estes casos (Moreira, 1981). Todos os alunos, professores ¢ disciplinas daquele Centro foram envolvidos na pesquisa, num total de 1 13 professores e 336turmas, resul-tando em 6.916 grades de resposta. Os detalhes da elaboraco dos dados ¢ testes de validade podem ser encontrados em Pinent (1992). RESULTADOS ENCAMINHADOS AOS PROFESSORES Cada professor recebeu uma planilha contendo o escore médio e 0 desvio padriio do escore por iteme para o escore total nos 30itens iniciais (que 6 a medida global do desempenho do professor na turma). Essas es- tatfsticas foram calculadas a partir de todas as respostas dadas pelos alu- nos de uma turma do referido professor. O professor também recebeu uma tabela que permitia colocar os seus escores médios dentro da distribuigdo de escores médios de todo o Centro 6 da UNISINOS. Ou seja, 0 professorteve acesso A média dos es- ‘cores médios por turma em cada item e parao total, bem como de dois ou- tros escores por item ¢ para o total (0 limite superior do grupo inferior ¢ o limite inferior do grupo superior). Esses dois escores possibilitavam ao professorsse situarem um dos trés grupos; inferior, médio ou superior. Os ‘grupos inferior e superior perfaziam aproximadamente 25% dos profes- sores do Centro 6 cada um, respectivamente nos extremos da distribuigao das médias (Pinent, 1992). CONSISTENCIA INTERNA DO INSTRUMENTO Devido a diversidade de opinides entre os alunos de uma turma so- breo seu professor justifica-se a adogiio dosescores médios nositense do escore total médio como medidas do desempenho do professor. Aconstrugao doescore total médio, como medida global dodesem- penho do professor, pode ni ter sentido 2 menos que exista um fator co- mum subjacente a todos os itens. A inexisténcia do fator comum compro- mete a construgio do escore total médio, tornando-o no interpretdvel. Pode-se testar a existncia do fator comum através do coeficiente alfa (Cronbach, 1951); esse cocficiente informa, com boa aproximagio, qual 6aproporgao da varifincia doescore total médio que é devida ao primeiro fator comumaositens. O coeficientealfa também se constitui em uma es- timativa do coeficiente de fidedignidade do escore total. O coeficiente alfa para o escore total médio resultou em 0,97, apoiando empiricamente a.construgiio do mesmo. Foram também calculados os coeficientes de correlagio entre 0 es- core médio em cada item e 0 escore total médio. Eles permitem identifi- orcar itens que nfio merecem permanecer como componentes do escore to- tal médio; a identificacio de tais itens ocorre quando ocoeficiente de cor- Telagdo item-total € baixo. Com uma excegdo apenas, o item 24, todos apresentaram coeficiente de correlagiio item-total superior a 0,40; para o item 24, que se refere & assiduidade dos professores, esse coeficiente foi de 0,17. A baixa correlagio se deve ao fato dea grande maioria dos pro- fessores do Centro 6 serem assfduos (0 escore médio de todos os profes- sores foi 4,77, muito préximo doescore méximo possivel, que é 5), sendo essa caracterfstica nfo discriminadora entre eles. E interessante notar que Silveira et alii (1985) encontraram resultado semelhante com os profes- sores do Instituto de Ffsica da PUCRS. Optou-se pela manutengao do item 24 na construgao do escore to- tal, visto que ele nfio comprometia 2 fidedignidade do mesmo, conforme atesta 0 altissimo coeficiente alfa obtido com esse item incluso. A VALIDADE DO QUESTIONARIO O item 40 expressa a opinido dos alunos sobre a importincia do questionério para a melhoria do ensino. O escore médio de todo o Centro 6 neste item foi 4,53, identificando uma opinigo altamente favordvel por parte dos alunos, Esse resultado se constitui em um indicador de valida- de de conteiido para o questiondrio na opinio dos alunos. Um argumento de validade de construto (Nunnally, 1967) foi construfdo testando-se diversas hipdteses relativas A medida global do desempenho do professor, Essa medida, em todas as hipoteses, est4 quantificada no escore total médio obtido na turma que o avaliou, Passa- se, a seguir, a explicitagao das hip6teses e dos resultados das testagens. Hipétese 1: 0 descmpenho global do professor niio se relaciona com o grau de importfincia que os alunos atribuem & disciplina em rela- do aos seus cursos. A medida desse grau de importiincia € 0 escore médiono item 39. O coeficiente de correlagao entre ambos os escores foi 0,05 (nfvel de signi- ficfncia maior do que 20%), configurando auséncia de relagiio entre cles, ipétese 2: 0 desempenho global do professor nfo se relaciona com a auto-avaliagio realizada pelos alunos. A medida da auto-avaliagao € o escore médio no item 38. O coefi- ciente de correlagiio entre ambos os escores foi 0,28 (nfvel de significiin- cia menor do que 1%). Apesar do coeficiente obtido implicar uma rela-ao entre ambos os escores, ela 6 muito fraca, constituindo-se em uma quase-independéncia.. Hip6tese 3: o desempenho global do professor se relaciona com 0 quanto os alunos acreditam que aprendem nas aulas desse professor. A medida dessa crenga 6 o escore médio no item 37. O coeficiente de correlagao entre ambos os escores foi 0,61 (nfvel de significfincia me- nor do que 0,1%), demonstrando uma relagdo moderada entre eles, Hip6tese 4: o desempenho global do professor no se relaciona com a importancia que os alunos atribuem ao questionério na melhoria doensino, A medida dessa importncia 6 0 escore médio no item 40. O coefi- ciente de correlagao entre ambos os escores foi 0,04 (nfvel de significAn- cia maior do que 20%), configurando auséncia de relagao entre eles. ‘Hip6tese 5: 0 desempenho global para um mesmo professor em turmas diferentes é menos varidvel do que o desempenho global de dife- rentes professores em diferentes turmas, Utilizou-se para a testagem dessa hipdtese a fragiio da variancia to- tal que 6 devida a diferengas entre turmas de mesmos professores e de di- ferentes professores. Essa porcentagem, calculada de acordo com Winer (1962), em estudos de andlise de variancia para turmas diferentes deum mesmo professor (dez professores foram estudados) foi no mfnimo 1,6% eno m4ximo 14%, Para diferentes professores (36 diferentes professo- res foram estudados) essa porcentagem foi no mfnimo 15% e no méximo atingiu o grande percentual de 66%. Esses resultados corroboram a hip6- tese 5, demonstrando estabilidade dos resultados para um mesmo profes- sore poder de discriminar entre os diferentes professores. Maiores deta- Thes podem ser encontrados em Pinent (1992). CONCLUSAO O questionério aqui apresentado parece constituir-seemum instru- mento capaz de fornecer informagdes confidveis sobre o desempenho do professor na opinigo do aluno, podendo colaborar para a promogio da melhoria do ensino. Referéncias Bibliogréficas CRONBACH, L. J. (1951) Coefficient Alpha and the Internal Structure of Tests. Psy- chometrika, New York, 16:297-334,MOREIRA, M. A. (1981) Avaliagio do Professor pelo Aluno como Instrumento de Methoria doEnsino Universitario. Educagioe Seleciia, Sio Paulo, 4: 107-119. juldez, NUNNALLY. J.C. (1967) Prychometrl Theory. New York, McGraw-Hill, PINENT, C. E. da C. (1992) Avaliagio do Professor pelo Aluno: um Estudo na UNISINOS, Porto Alegre, dissertagio de mestrado, PUCRS. SILVEIRA, F. L. (1989) Avaliagdo do Ensino: 0s Enfoques Objetivo e Qualitativo, Educagii eSelegio. Sao Paulo, 20, jul/éez. SILVEIRA, F.L. e MOREIRA, M. A. (1984) Avaliag0 do Desempenho do Professor pelo Aluno, Evidéncias de Validade de um Instrumento. Ciéncia e Cultura. ‘Sto Paulo, 36(3), 466-472, maio. SILVEIRA, F. L. MOREIRA, M. A. e NUNES, A. D. (1985) Avaliagiio do Desempe- nho do Professor pelo Aluno: Novas Evidéncias de Validade de um Instrumen- to. Citneia e Cultura. Sio Paulo, 37(8), 1237-1240. WINER, B. J. (1962) Statistical Principles in Experimental Design. New York, McGraw-Hill, 10ANEXO QUESTIONARIO DE AVALIACAO DE PROFESSOR E DISCIPLINA Prezado aluno: O objetivo deste questionério 6 colher informagSes dos alunos sobre os professores eas disciplinas que cursam, Com isso, o professor poderd ter informagdes adicionais paraconhecerseu desempenho, ea discipli- na poderd ser analisada criticamente para reformulagdes, se for 0 caso. RESPONDA NA GRADEDERESPOSTAS ANEXA. Nioassine, Expresse a sua opinido livremente, Em nenhuma hipétese sua avaliagdo poderd influenciar as suas notas. Aprecisio de suas respostas ¢ importante, procure abster-se de sim- patias ou antipatias com relagio ao professor e/ou disciplina, responda da maneira mais imparcial e objetiva possfveis. Medite um instante em cada questo e suas alternativas ¢ dé a resposta que lhe parecer & primeira vista a mais adequada; como vai observar, elas esto escalonadas em ordem decrescente e cada alternativa é mais favordvel que a seguinte, mesmo que aparentemente digam a mesma coisa, Se tiver, ao final, algo mais a dizer, escreva no verso do cartio- resposta. ASSINALE SOMENTE NA GRADE DE RESPOSTAS A AL- TERNATIVA ESCOLHIDA PARA CADA [{TEM. ANTES DE EN- TREGAR, VERIFIQUE SE NAO DEIXOU NENHUMA QUESTAO EM BRANCO. DEVOLVA 0 QUESTIONARIO JUNTO COM O CARTAO-RESPOSTA. UTILIZE O VERSO DOCARTAOSETIVER ALGUM COMENTARIO A FAZER. QUESTGES: NAO ASSINALE NADA NO QUESTIONARIO PARA QUEELESEJA REAPROVEITADO EM OUTRAS TURMAS CARACTERISTICAS DO PROFESSOR 1 Estimula interesse pela matéria? a) Sempre estimula o interesse do aluno. b)Geralmente estimula. c) Ocasionalmente estimula. d) Nao estimula, mas ndo diminui o interesse do aluno. e) Nuncaestimulae diminui o interesse do aluno, n2. Domina o contetido que est{ ensinando? a) Parece ter domfnio excepcional. b) Parece ter domfnio muito firme. c) As vezes parece ter bom dominio, mas 2s vezes no. ) Parece ter deficiéncias de dom{nio. e) Parece no ter domfnio. 3, Apresenta a matéria de um modo geral? a) Apresenta excepcionalmente bem. b) Geralmente apresenta bem. c) Apresenta bem, mas as vezes 6 confuso. 6) Apresenta geralmente de maneira confusa. ¢) Sempre apresenta mal a matéria. 4. Explica principioe conceitos basicos do contetido? a) Eexcepcionalmente claro ¢ elucidativo. b) Emuito claro. ¢) Geralmente ¢ claro mas as vezes se confunde, )Nio parece ser muito claro. €) Geralmente no é claro, deixa o aluno sempre em divida. 5. Déiaula com alegriae entusiasmo? a) E sempre alegre e entusiasmado. b) Bmoderadamente alegre ¢ entusiasmado. c) Nem sempre 6alegre e nem sempre apresenta entusiasmo. 4) Geralmente mostra pouca alegria © cntusiasmo. e) Parece nunca estar alegre e entusiasmado. 6. Define 0(s) objetivo(s) de cada aula? a) Sempre define. b) Geralmente define. ¢) Ocasionalmente define, d) Raramente define. ¢) Nunca define.7.Mostra como um determinado topico se encaixa no todo da disci- ina? Bem masta b) Geralmente mostra. c) Ocasionalmente mostra. d) Raramente mostra. e) Nunca mostra. 8. Procura informar-se dos conhecimentos prévios do aluno so ex- porum t6pico? a) Nunca comega uma exposi¢iosem levar em conta esse aspec- to. b) Geralmente leva isso em conta. ¢) Ocasionalmente eva isso cm conta. ) Raramente leva isso em conta. e) Nunca se preocupa com isso porque parece admitir que isso niio é problema dele, 9) Demonstra preocupagio de que os alunos aprendam? a) Est4 sempre preocupado com a aprendizado. b) Quase sempre se preocupa com isso. c) Ocasionalmente demonstra essa preocupagao. d) Raramente se preocupa com isso, e) Nunca se preocupa com isso porque parece admitir que isso niio € problema dele. 10) Planeja as aulas? a) Parece sempre planejar as aulas. b) Geralmente parece planejar. c) As vezes sime As vezes nio parece planejar. d) Raramente parece planejar. ¢) Parece nunca plancjar as aulas. 11) Ajuda os almos que t¢m maior dificuldade? a) Procura sempre identificar esses alunos para ajudé-los. b) Geralmente ajuda os alunos com maior dificuldade, c) Ocasionalmente ajuda esses alunos. d) Raramente faz isso. e) Nunca se propéea ajudé-los. B" 12) Accita o ponto de vista do aluno? a) Est4 sempre pronto a aceitfi-lo. ‘b) Geralmente aceita. c) As vezes accita, outras vezes nfo. d) Raramente aceita, e) Nunca aceita. 13) Estimula o aluno a participar da aula? a) Sempre estimula os alunos a participarem. b) Geralmente estimula, c) As vezes estimula, outras vezes nfo. d) Raramenteestimula. e) Nunca estimula. 14) Exige raciocinio dos alunos? a) Sempre exige raciocfnio. b) Geralmente exige, c) Ocasionalmente exige. 4) Raramente exige. e) Nunca exige, 15) Responde perguntas dos alunos? a) Sempre responde. b) Geralmente responde, c) As vezes sim e As vezes niio responde. d)Raramente responde, ©) Nunca responde, 16. £ seguro ao responder perguntas? a) Sempre responde com seguranga, b) Geralmente respande com seguranca. c) Responde adequadamente mas nem sempre com seguranga. d)Raramente demonstra seguranga na resposta e)E sempre inseguro ao responder.17, Estabelece relagées entre teoria ¢ pritica? a) Sempre estabelece essas relages. b)Geralmenteestabelece. ¢) Ocasionalmente estabelece. @)Raramente estabelece. e) Nuncaestabelece. 18, Estabelece relagSes entre matéria de ensinoe situagdes da vida real? a) Sempre estabelece essas relagdes. b)Geralmente estabelece. ¢) Ocasionalmente estabclece. d) Raramente estabelece. ¢) Nuncaestabelece. 19, Gostade dar aulas? a) Parece gostar muito, ) Geralmente parece gostar, c) As vezes parece gostar mas nem sempre. 4) Parece nfo gostar. e) Parece estar sendo obrigadoadaraula. 20, Aceita o aluno como pessoa? a) Acima de tudo, vé aluno como pessoa. b) Geralmente vé 0 aluno como pessoa. ¢) Nem sempre parece ver 0 alunto como pessoa. d) Raramente parece considerar 0 aluno como pessoa. ¢) Ignora o aluno como pessoa, parece considerf-lo um mero receptador de informagGes., 21. Bacessivel aos alunos? a) E sempre acessivel. b) Geralmente éacesstvel. c) Nem sempre € acessivel. d) Raramente € acessfvel. e) Nunca éacessfvel. 56 22, Bjusto na atribuigaio de conceitos? a) E sempre justo, b) Geralmente parece ser justo. c) As vezes parece ser justo, outras vezes no, d) Freqtientemente parece nfio ser justo. e) E sempre injusto. 23. Epontual? a) E sempre pontual. b) Geralmente é pontual. c) Nem sempre é pontual. 4) Raramente é pontual. €) Nunca é pontual. 24. Bassfduo? a) Nunca falta. ‘b) Raramente falta, c) As vezes falta. 4d) Falta periodicamente. e) Falta muito, mais do que o tolerével. 25. senstvel (tem consideragiio) com relagiio aos problemas gerais extra-classe dos alunos? a) Tem Gtimasensibilidade e leva em conta os problemas gerais extra-classe dos alunos. b) Geralmente € sensfvel a isso. c) As vezes leva isso em conta, mas nem sempre. d) Raramente leva isso em conta. ¢) Nunca considera isso, parece ser insensfvel aos problemas extra-classe dos alunos. 26. Utiliza exemplos e ilustragdes ao expora matéria? a) Emuito eficiente no uso de exemplos ¢ ilustragées. b) Geralmente usa bem isso. c) As vezes sim mass vezes nao usa bem, ¢) Usa deficientemente exemplos e ilustragdes. €) Usa ineficientemente ou nunca usa isso.27. Utiliza bem o quadro? a) Utiliza excepcionalmente bem quadro. b) Utiliza bem. ¢) Utiliza de mancira razodvel. d) Utiliza de maneira sofrivel. ¢) Utiliza muito mal o quadro, 28. Elabora provas compativeis (coerentes) com os contetidos dados? a) As provas so muito bem elaboradas e compatfveis com os contetidos dados. b) As provas sio bastante boas. ©) As provas sto parcialmente boas. 4) Asprovas so mal claboradas mas ainda compatfveis com os contetidos dados, e) As provas so muito mal elaboradas e incompativeis com os contetidos dados, 29. E bem sucedido ao ministrar a disciplina? a) Dé muito bem a disciplina. b) Débema disciplina, ¢)Dade um modo razodvel a disciplina. 4) Df de modo sofrivel a disciplina. e)D4 muito maladisciplina. 30. Se meus colegas pedissem minha opiniZo sobre matricular-se com esse professor, eu a) recomendaria fortemente. e) desaconselharia fortemente,CARACTERISTICA DA DISCIPLINA B 31. A disciplina tem a ver com meu curso? a) A disciplina ¢ perfeitamente compativel com o meu curso. ) Ela parece ser compatfvel. c) As vezes parece compatfvel mas as vezes nfo. d) Ela parece ser muito pouco compatfvel. e) Ela parece nada ter a ver como meu curso. 32. A disciplina tem aplicagio profissional? a) A disciplina parece ser muito importantena minha profissio furora. b) Ela parece ter boa aplicagao profissional. ) Ela parece ter alguma aplicacao. d) Ela parece ter pouca aplicagao. e) Ela parece ter nenhuma aplicago profissional, podendo ser dispensada, 33. A organizagio dos conteddos é bem feita? a) Os contetidos sfio muito bem distribufdos. ) A organizaciio dos contetidos parece ser boa. c) Parece que umas partes so bem organizadas mas outras nio. d) A organizagao nao € muito boa. €) Os contexidos sfio muito mal organizados. 34, Os contetidos so importantes? a) Todos os contetidos parecem ser importantes. 'b) Amaioria dos contetidos parece ser importante, c) Parece que alguns contetidos sio importantes mas outros nao. d) A maioria dos contetidos parece nao ser importante. e) Todos os contetidos parecem nfo ter qualquer importncia, 35.0 ntimero de eréditos 6 adequado? a) Oniimero de créditos parece ser perfeito para o aprendizado dessa disciplina, b) Ontimero de créditos parece ser bom. ©) Nio sei dizer sc o némero de créditos € bom ounio. 4) Ontimero de créditos parece ser excessivo, poderia ser menor. ) Ontimero de créditos parece ser insuficiente, precisaria ser maior para aprendizado.fTENS ADICIONAIS 36. 0 esforgo que dispensa no estudo dessa disciplina é a) muito grande. b) grande, ¢) normal. ¢) pouco. ©) muito pouco, 37. Quanto ao que aprendo nesta disciplina, acho que a) aprendo muito. b) aprendo bastante. c) aprendo um pouco. 4) aprendo muito pouco. ¢) aprendo praticamente nada. 38. Numa autoeritica, nesta disciplina acho que sou a) um aluno muito bom e esforgado. b)umaluno bom. ©) umaluno médio, 4) umaluno fraco e displicente, e) um mau aluno, desinteressado, 39. Fm relagfo.a meu curso, creio que esta disciplina a) € muito importante, +b) éimportante. ¢) tem alguma importancia. 4) € pouco importante. ¢) no tem nenhuma importancia, 40, Supondo que o professor realmente dé atengo &s respostas aqui contidas, acho que, para melhoria doensino, este tipo de ques- tionfrio a) 6 muito importante. b) importante. ©) talvez tenha alguma importincia, 4d) € de pouca importancia. ¢) 6 perda de tempo. 9