Na presente secção pretende-se dar ênfase aos princípios de ordem genérica que orientaram e assistiram a análise efetuada à informação recolhida através de todas as fontes utilizadas.
No estudo descrito no presente documento, os dados em bruto a analisar foram provenientes das seguintes fontes: testes realizados pelos alunos participantes e entrevistas semiestruturadas efetuadas aos cinco professores envolvidos no estudo.
Capítulo 3 – Metodologia
49
Perante as diferentes fontes utilizadas, a análise das informações foi de dois tipos: análise estatística e análise de conteúdo. Na análise das respostas dadas pelos alunos nos testes utilizou-se, simultaneamente, a análise de conteúdo e a análise estatística e a informação recolhida nas entrevistas foi submetida a uma análise de conteúdo.
3.6.1 Testes
Os resultados obtidos nos testes foram sujeitos a uma análise estatística - com recurso ao programa estatístico Statistical Package for Social Sciences (SPSS – versão 17), com o objectivo de verificar se a utilização de simulações computacionais promove uma melhoria na aprendizagem dos conceitos de peso e de massa.
Para tornar possível a análise estatística das respostas dadas pelos alunos nos testes aplicados (pré-teste e pós-teste), surgiu a necessidade de encontrar categorias de resposta.
Assim, ao analisar o conteúdo das respostas que os alunos deram às questões colocadas nos testes, e com base na bibliografia consultada (Gönen, 2008; Trundle & Bell, 2010), chegou-se às categorias de resposta que constam no quadro 3.5.
Nível Critério
3 2 1
- Respostas que incluem todos os componentes da resposta validada - Respostas que mostram alguma compreensão dos conceitos
- Respostas com informação incorreta ou irrelevante, sem lógica, ou respostas que não são claras; deixa a resposta em branco
Quadro 3.5 – Categorias de resposta apuradas nas respostas aos testes.
Assim sendo, os critérios definidos, e os respetivos níveis atribuídos, permitem classificar as respostas dos alunos e fazer comparações sobre o seu nível de compreensão.
A classificação das respostas foi efetuada tendo em conta, simultaneamente, a resposta dada na escolha múltipla e a respetiva justificação, em cada questão. No entanto, a justificação dada pelos alunos foi o que teve maior importância na classificação.
As respostas dadas pelos alunos participantes no estudo foram analisadas independentemente, pela professora/investigadora e por mais dois investigadores (em Didática e em Física), tendo-se obtido em todos os casos um grau de concordância superior a
Capítulo 3 – Metodologia
50
95% (o grau de concordância médio foi de 98,6%). Nas situações em que se verificou discordância na classificação das respostas, as discrepâncias foram de apenas um nível.
Recordando que a finalidade da administração dos testes foi recolher informação que permitisse conhecer as conceções dos alunos sobre os conceitos de peso e de massa, concluiu- se que a primeira questão do teste (“No vazio, onde só existe um corpo, esse corpo tem…- peso e massa”) foi elaborada de uma forma que poderia levar os alunos a pensar que o peso é uma propriedade característica dos corpos, tal como a massa, reforçando, desta forma, as suas conceções erradas sobre os conceitos de peso e de massa. Por outro lado, esta temática da questão 1 do teste não foi abordada de forma explícita na implementação em sala de aula (nas atividades experimentais “Hands-on” ou na simulação computacional). Os guiões das atividades experimentais contemplavam duas tarefas (tarefa 2 e tarefa 3) que estavam diretamente relacionadas com as questões Q3 e Q2, respetivamente, dos testes administrados aos alunos.
Com base nestas ideias e com vista ao garante da credibilidade dos dados apurados, considerou-se que os dados provenientes das respostas dadas pelos alunos participantes à questão 1 não seriam tidos em conta na análise dos resultados.
Assim sendo, após a análise de conteúdo efetuada às respostas dadas pelos alunos às questões Q2 e Q3 dos testes, recorreu-se ao programa estatístico SPSS (versão 17), tendo sido usados testes estatísticos não paramétricos (Cohen et al., 2007).
Para comparar as duas turmas de cada professor no pré-teste, e também no pós-teste, foi aplicado o teste estatístico não paramétrico Mann-Whitney. Para comparar cada grupo entre o momento pré- e o momento pós- foi aplicado o teste estatístico não paramétrico Wilcoxon. Para comparar os grupos “Hands-on” de todos os professores, e para comparar os grupos que usaram a simulação computacional de todos os professores, no momento pré-, e também no momento pós-, foi aplicado o teste estatístico não paramétrico Kruskal-Wallis. Utilizando o teste Kruskall-Wallis pode concluir-se que um dos grupos difere significativamente dos restantes. Porém, este teste não diz em qual dos grupos essa diferença é estatisticamente significativa. Para identificar em qual dos grupos existe uma diferença significativa é necessário usar o teste LSD de Fisher (Marôco, 2010).
Nos testes estatísticos aplicados definiu-se como limiar o valor de p=0,05, ou seja, considerou-se que existia uma diferença estatística significativa se p0,05.
Capítulo 3 – Metodologia
51
Assim, foram determinados os valores anteriormente referidos constantes de cada um dos testes estatísticos aplicados, e os valores dos ganhos de nível 3 (categoria de resposta de nível 3), os ganhos de nível 2 (categoria de resposta de nível 2), e os ganhos médios normalizados (Hake, 1998), e obtidas as representações gráficas dos ganhos médios normalizados, para cada uma das questões (Q2 e Q3) e para cada um dos grupos de tratamento, dos três professores participantes no estudo, A, D e E.
3.6.2 Entrevistas
As entrevistas conduzidas foram transcritas (ver anexo V) e a análise de conteúdo efetuada processou-se sobre essas transcrições, como vários metodólogos aconselham a fazer (por exemplo, Denscombe, 1998).
A análise de conteúdo efetuada às transcrições das entrevistas foi conduzida no sentido de encontrar características da mediação do professor, quando usa simulações computacionais, que promovam a aprendizagem dos alunos sobre os conceitos de peso e de massa.
Nesta análise foram tidas como referência as dez dimensões nas quais assenta o modelo proposto por Lopes et al. (2010b), referidas na secção 2.3.1.4.
Apesar de todos os professores participantes neste estudo terem sido previamente informados sobre os seus objetivos, e todos os aspetos a serem considerados durante a implementação com os alunos na sala de aula, nomeadamente o material necessário para a realização das atividades experimentais, houve alterações introduzidas pelos professores B e C, que inviabilizaram a recolha de informações.
Por outro lado, estes dois professores informaram os alunos de que não seriam formalmente avaliados nestas atividades, o que influenciou o interesse e envolvimento dos alunos. Assim, os dados obtidos pelos alunos dos professores B e C não foram tidos em conta na análise dos resultados.
Capítulo 3 – Metodologia
53