Other L2 Related BCRs See Table 3-6

Apresenta-se na Tabela 4 o resultado da distribuição dos 210 itens do QDAO (Gandini, 1997) resultante das classificações dos quatro juízes (Apêndice A). O Juiz 1 considerou 103 itens classificando-os como Afetivo Relacional e 34 itens classificando como sociocultural e assim por diante.

Tabela 4

Distribuição dos quatro juízes pelos quatro setores da adaptação (210 questões).

Setores Juízes

1 2 3 4

Afetivo Relacional – A-R 103 111 106 112

Sociocultural – S-C 34 29 32 32

Produtividade - Pr 37 37 32 33

Orgânico - Org 36 33 40 33

Nota. Leitura da Tabela: o juiz 1 colocou o A-R em 103 questões, o juiz 2 colocou o A-R em 111 questões, e assim por diante.

Para validar a análise de conteúdo realizada pelos entendimentos dos peritos juízes foi realizado o teste estatístico que seria a Estatística Kappa que avalia a qualidade da concordância

entre os Juízes. Os resultados dessa Estatística estão apresentados na Tabela 5, que revela as significâncias estatísticas (p-valor ou p) da Estatística Kappa para cada categoria avaliada, jun- tamente com seu respectivo valor e com o intervalo de confiança. Os valores Kappa foram iguais ou maiores de 0,85. Tomando como referência a Tabela 3, pode-se dizer que em cada um dos quatro setores houve alta concordância entre os Juízes, pois se nota que os índices estão acima 0,80 em todos os setores da adaptação.

Tabela 5

Estatística Kappa dos quatro setores da adaptação com os respectivos intervalos de confiança.

A-R S-C Or Pr

Valor da Estatística Kappa _{0,88 0,89 0,85 0,86}

P-valor _{< 0,001 < 0,001 < 0,001 < 0,001}

Intervalo de Confiança de 95% da

Estatística Kappa [0,821; 0,931] [0,83; 0,941] [0,792; 0,903] [0,81;0,92] Nota. Note que todas as Estatística Kappa foram maiores que 0,8 indicando alta concordância.

Na Tabela 6 apresenta-se a Estatística Kappa geral que também apresentou alto valor (K=0,869) e estatisticamente significante com p < 0,001. Lembra-se que a concordância perfeita é quando a estatística K = 1,00, logo, tem-se uma excelente concordância (vide Tabela 3). Tabela 6

Estatística Kappa Geral

Valor da Estatística Kappa geral _0,869

P-valor _{< 0,001}

Os quatro setores da adaptação (A-R, S-C, Pr e Org) tiveram as Estatísticas Kappa ade- quadas (K>0,85) e significantes (p<0,001) inclusive a Kappa geral; logo, pode-se dizer que há forte indicação de que a análise de conteúdo foi satisfatória.

No que se refere à análise de conteúdo para testar a concordância entre juízes sobre cada pergunta do questionário (QDAO), observou-se que 32 questões tinham baixa concordância (abaixo de 80% - Apêndice B), sendo consideradas inconsistentes e, portanto, eliminadas do questionário (instrumento) QDAO. Então, dos 210 itens iniciais mantiveram-se 178 itens com

concordâncias acima de 80% entre os quatro juízes e também com c.v.ci > 0,80. Assim, a partir

daqui tem-se um novo formato da medida QDAO. Na retirada dos 32 itens a nova distribuição dos Juízes perante os quatro setores da adaptação pode ser verificada na Tabela 7, onde se pode observar altas concordâncias.

Tabela 7

Distribuição final da concordância dos quatro juízes pelas quatro categorias de adaptação.

Setores da Adaptação Juiz 1 Juiz 2 Juiz 3 Juiz 4 Concordância entre quatro Juízes

Afetivo Relacional (A-R) 98 96 96 95 95

Sociocultural (S-C) 26 26 26 26 26

Produtividade (Pr) 28 28 28 28 28

Orgânico (Org) 29 29 29 29 29 (a₎

Total Geral 178

Nota. a _{com a inclusão da questão de número 64 = Periodicamente satisfaço minha necessidade sexual.}

Foi calculado o coeficiente de validade de conteúdo (c.v.c.) dos 178 itens e dos 32 itens

e obteve-se que a média dos 178 itens foi de 1,0 (c.v.ct), ou seja, acima de 0,80 nos mesmos

178 itens e nos demais itens (32) a média foi abaixo de 0,70 fortalecendo o descarte desses itens que foram desconsiderados, então pelos dois critérios: c.v.c e Kappa, que foram equivalentes eliminando-se os mesmos itens e considerando os mesmos 178 itens.

O coeficiente de validade de conteúdo total (c.v.c) foi calculado e encontrado o valor de 1,0:

Cvc

=

∑1781=1𝑥̅𝑖=1

178

= 1,00

O c.v.c é a média das médias dos 178 itens, sendo” um”, considerado um valor alto, mostrando que, de fato, esses itens medem o que se propõem a medir, ou seja, revelam que houve 100% de acerto ou de concordância entre os juízes.

Assim, fica finalizada a análise de conteúdo, permanecendo o novo QDAO com 178 itens. A análise semântica dos 178 itens, através de 3 grupos de escolaridade (focais), a qual foi realizada para averiguação quanto ao entendimento e clareza das perguntas perante a população, estas etapas já foram descritas no item 5.3.1.2. Terminada esta análise optou-se por retirar ape- nas um item, o de número 64 (64 - Periodicamente satisfaço minha necessidade sexual), pois este item foi classificado como pertencente ao setor Orgânico (Org) e foi criticado nos 03 (três) grupos de análise semântica. Então por unanimidade, todos os três grupos entenderam que ele tinha várias interpretações e poderia gerar confusões nos respondentes.

Foram eliminados 33 itens, sendo um item pelos integrantes do grupo de análise semân- tica e os outros 32 itens por não haver concordância dos 4 juízes na análise de conteúdo, tendo restado 177 itens dos 210 iniciais, estes com 100% de concordância entre os juízes. Então para avaliar a adequação ou o constructo Eficácia Adaptativa pelos quatro setores da adaptação o novo QDAO ficou composto por 177 itens validados perante as duas análises: de conteúdo e semântica. Assim, a distribuição dos 177 itens perante os quatro setores da adaptação está dis- posta na Tabela 8.

Após a finalização das análises de conteúdo e semântica, conclui-se que o instrumento ficou apto para a aplicação na população alvo, pois está satisfatória a consistência interna do

instrumento, onde os indicadores apresentados anteriormente ajustaram-se aos valores reco- mendados teoricamente.

Tabela 8

Distribuição final dos quatro setores da adaptação (177 questões).

Setores Contagem de Setores da Adaptação

Afetivo Relacional 95

Sócio Cultural 26

Produtividade 28

Orgânico 28

Total Geral 177