Com o objetivo de avaliar o desempenho dos alunos nos testes e detectar suas concepções alternativas, estruturamos algumas variáveis em forma de siglas, com o intuito de detalhar a leitura dos resultados dos gabaritos sob o código de cores.
As variáveis criadas se dividiam em dois grupos: as variáveis que focariam o desempenho geral do grupo de alunos em cada uma das questões do teste, e as variáveis que focariam o desempenho de cada um dos alunos no teste.
grupo I - variáveis que mediriam em cada uma das questões do teste, os percentuais totais de: acertos, erros, dúvidas e ―incerteza total‖. Ou seja, esse grupo analisaria as questões em si, e não os acertos, erros, dúvidas e ―incerteza total‖ de cada um dos alunos;
grupo II - variáveis que mediriam em cada uma das questões do teste, os percentuais totais de: acertos, erros, dúvidas e ―incerteza total‖ para cada um dos alunos. Ou seja, nesse grupo, as variáveis se concentrariam na análise do desempenho do aluno no teste quanto aos acertos, erros, dúvidas e ―incerteza total‖ de cada um dos alunos e não da questão em si;
Para o grupo I de variáveis, analisamos a tabela 1, em busca dos resultados do G.C (grupo de controle) no teste 1, e para o teste 2, analisamos a tabela 4.
14 Percentuais de escolha das alternativas das questões dos testes, e que estão disponíveis no cd-room da pesquisa.
Quanto ao G.E, analisamos as variáveis do grupo I pela tabela 7 , para os resultados do T1, e para o T2 , pela tabela 10.
Para os alunos do G.C, as variáveis do grupo II , foram analisadas nas tabelas 3 para o teste 1, e pela tabela 6 no teste 2. Para os alunos do G.E, essa análise ocorreu através da tabela 9 para o teste 1 e da tabela 12 para o T2 15.
As tabelas 2, 5, 8 e 11 indicam os percentuais de alternativas escolhidas em cada uma das questões (%letra), e foram construídas com o objetivo de se detectar as concepções alternativas dos alunos no teste 1, e de verificar se houve alteração nas concepções dos alunos envolvidos após a realização e análise dos gabaritos do teste 2.
Definimos as variáveis do grupo I, conforme a seguir :
T.A.Q – indica o total de acerto num dado quesito do teste. Seu valor é computado somando-se na coluna do quesito específico, as letras na cor azul escura e na cor azul clara;
T.E.Q – indica o total de erro num dado quesito do teste. Seu valor é computado somando-se na coluna do quesito específico, as letras na cor vermelha e na cor amarela;
% T.A.Q - Indica o percentual total de acerto no quesito do teste. % T.E.Q – indica o percentual total de erro do quesito no teste.
C- Indica o total de alunos que marcaram C (certeza da resposta) na cor azul escura;
%C – Indica o percentual de alunos que pelo código de cores, estariam na cor azul escura;
I- Indica o total de alunos que marcaram C (certeza da resposta) na cor vermelha;
%I- Indica o percentual de alunos que pelo código de cores estariam na cor vermelha;
C- Indica o total de alunos que marcaram I (incerteza da resposta) na cor azul clara;
15 Todas as tabelas de ambos os grupos de variáveis estão no arquivo ADadosJHT.xls, disponível no cd-rom da pesquisa.
%C- Indica o percentual de alunos que pelo código de cores estariam na cor azul clara;
I- indica o total de alunos que marcaram I (incerteza da resposta) na cor amarela;
%I- Indica o percentual de alunos que pelo código de cores, estariam na cor amarela;
Ainda para as variáveis do grupo I, criamos o parâmetro % (percentual delta) para quantificar o uso das concepções alternativas pelos alunos nos quesitos do teste, ou o uso das concepções alternativas por um dado aluno em todo teste.
Por isso, subdividimos o parâmetro % em dois tipos:
i)%1 : mede o percentual de alunos que fizeram uso de concepções alternativas num dado quesito do teste, não especificando qual o aluno;
ii)%2: mede o percentual de uma dada concepção alternativa em todo o teste.
No cálculo de %1, usaremos a expressão:
% 100 . % 1 C I I (i)
Na expressão acima, quando o valor de C0, implica que 1100%, e portando, a questão em análise revela que o grupo de alunos apresenta elevado índice de uso de concepções alternativas errôneas.
Se I 0 implica que 1 0%, e assim, não haveria uso das concepções alternativas errôneas.
A expressão do %1 foi criada partindo da lógica que quando os alunos indicassem a certeza da resposta (C) numa dada alternativa do quesito do teste, haveria a possibilidade de erro (I) ou de acerto (C), calculando o valor desse parâmetro, pela razão de I (e não de C) e o total de alunos, dado por CI, medindo dessa forma a concepção alternativa errônea.
Na análise das concepções alternativas dos alunos, seguindo as orientações pressupostas por Mortimer (2000), partimos do princípio de que quando uma alternativa incorreta é considerada como correta pelo aluno, então, há o uso de sua concepção errônea sobre a análise da questão.
A seguir, analisamos os gabaritos de ambas as turmas A e B, fazendo uso do código de cores numa planilha para todos os 44 alunos envolvidos.
Pelo código de cores, as questões que estivessem na cor vermelha, seriam consideradas as concepções alternativas do teste aplicado. Essas questões foram confrontadas com os objetivos específicos propostos em cada uma das 25 questões do teste 1 e com o parâmetro ―%letra‖ de maior valor e incorreto em relação ao gabarito do teste, para assim detectar as concepções alternativas.
As concepções alternativas identificadas serviram de subsídio para que se planejasse um plano de ação mais eficiente para o processo de ensino- aprendizagem.
Quanto a definição de cada uma das variáveis do grupo II:
TaC – Total de acertos do aluno no teste, independente de ter cido marcado a certeza (C) ou incerteza (I);
TeR – Total de erros do aluno no teste;
AcI – Acertos na incerteza.Total de acertos do aluno no teste quando em dúvida parcial, ou seja, a dúvida ocorre apenas entre duas alternativas das 4 existentes na questão;
AcC – Acertos na certeza. Total de acertos quando indicado a certeza da alternativa escolhida, e portanto sem dúvida alguma;
ErC – Mede a quantidade de questões que o aluno apresentou suas concepções alternativas (letras na cor vermelha), pois marca errado o que julgou como certo;
ErI – Total de questões que o aluno não sabia responder ou tinha dúvida em 3 alternativas;
Os percentuais de acerto e erro , respectivamente, foram computados por %TaC e % TeR;
Para as variáveis do grupo II , criamos o parâmetro %2, que detectaria o
percentual de concepção alternativa usada no teste em análise por cada um dos
alunos16.
Para calcular o %2 utilizamos a expressão:
% 100 . ) ( % 2 AcC ErC ErC (ii)
Se houvesse variação no valor de %2 , haveria variação também no uso das concepções alternativas do aluno no teste. A lógica de construção da expressão desse parâmetro ocorreu da seguinte forma: se dividíssemos os erros do aluno no teste, quando pensara que estivessem corretas ErC , pela soma entre esses erros e o total de acertos do aluno no teste na certeza da alternativa escolhida (AcC), obteríamos o percentual daquelas questões onde o aluno apresentara os erros involuntários, ou seja, as concepções alternativas, indicado pelo valor de %2.
Os resultados desse estudo foram analisados em duas partes. Na primeira, fazemos uso das ferramentas discutidas nessa secção. Depois fazemos uma discussão focando uma análise estatística dos resultados obtidos após o uso do Modellus.
16 Observe que o %
1
mede o percentual de alunos que fizeram uso de uma dada concepção alternativa numa questão específica do teste . Não mede todas as concepções alternativas que um determinado aluno usou no teste.