PARTIE 5 : RESULTATS
1. Résultats aux tests : cas où le type d’intervention a un effet sur les capacités orthographiques 188
Dans cette section, sont présentés les onze cas pour lesquels il a été possible de mettre en évidence un effet statistiquement significatif du groupe témoin ou expérimental sur les
189
capacités orthographiques des élèves. Conformément à la structure des résultats détaillés dans l’exemple développé dans la partie 4 consacrée à la méthodologie, nous fournirons de manière successive pour chacun de ces cas les conclusions de l’ANOVA, des tests non paramétriques de Mann-Whitney et Wilcoxon, puis de la régression linéaire.
Le·a lecteur·trice est invité·e à se référer au chapitre 5 de la partie 4 pour retrouver la description des tests et la constitution des variables créées pour procéder aux analyses que nous allons présenter. Un tableau recensant l’ensemble des cas traités a été placé en Annexe 12.
1.1 Exercice 2 : Accord du GN – élèves de 11 ans
Dans l’exercice 2, basé sur les phrases données, nous évaluons avec la variable V21 la justification de l’accord d’un nom au pluriel au sein du GN. Cette variable correspond à un rendement calculé comme le nombre de points obtenus par l’élève (0, 1 ou 2) rapporté au nombre total de points de l’item (2 points). En termes d’interprétation, une augmentation de la valeur de cette variable correspond à une progression des résultats des élèves.
Selon l’ANOVA, il n’existe pas d’effet spécifique du groupe sur les résultats des élèves (Tableau 16).
Tableau 16 - Résultats de l’ANOVA pour l'exercice 2 (V21) Élèves de 11 ans
Mesures Hypothèse de sphéricité 0.002 1 0.002 0.029 0.865 0.000
Greenhouse-Geisser 0.002 1 0.002 0.029 0.865 0.000
Huynh-Feldt 0.002 1 0.002 0.029 0.865 0.000
Borne inférieure 0.002 1 0.002 0.029 0.865 0.000
Mesures x Groupe Hypothèse de sphéricité 0.417 1 0.417 7.513 0.007 0.046
Greenhouse-Geisser 0.417 1 0.417 7.513 0.007 0.046
Huynh-Feldt 0.417 1 0.417 7.513 0.007 0.046
Borne inférieure 0.417 1 0.417 7.513 0.007 0.046
Erreur (Mesures) Hypothèse de sphéricité 8.708 157 0.055 Greenhouse-Geisser 8.708 157 0.055
190
D’après le test de Mann-Whitney, il n’y a pas d’écart au prétest et au posttest entre les deux groupes (Tableau 17).
Tableau 17 - Significativité des différences entre groupes témoin et expérimental pour l’exercice 2 (V21) Élèves de 11 ans
Toutefois, le test de Wilcoxon indique qu’il n’y a pas d’évolution pour le groupe témoin alors qu’il existe une baisse statistiquement significative pour le groupe expérimental (Tableau 18).
Tableau 18 - Significativité de l'évolution des résultats pour l’exercice 2 (V21) Élèves de 11 ans
Les résultats de la régression linéaire confirment l’avantage en faveur du groupe témoin (Tableau 19). Nous sommes cependant dans un cas très proche du seuil de significativité de 5%, ce qui nous laisse penser qu’il faut considérer ce résultat avec une certaine prudence.
Tableau 19 - Résultats de la régression linéaire pour l’exercice 2 (V21) Élèves de 11 ans
Résultat au prétest 64.8% 73.7% 8.9% -1.856 0.064 ns
Résultat au posttest 71.6% 66.0% -5.6% -1.372 0.170 ns
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Mann-Whitney
Groupe témoin 64.81% 71.60% 6.79% -1.608 0.108 ns
Groupe expérimental 73.72% 66.03% -7.69% -2.353 0.019 Sig.
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Wilcoxon
Paramètres Coefficients
Erreurs-types T Prob.
critique Sig.
Constante 0.582 0.077 7.569 0.000 Sig.
Résultat au prétest 0.339 0.070 4.865 0.000 Sig.
Groupe Expérimental
(réf. = groupe témoin) -0.086 0.043 -2.015 0.046 Sig.
R2
ns = non significatif; Sig. = significatif au seuil de 5%
14.0%
191
1.2 Exercice 2 : Accord du verbe avec un sujet au pluriel – élèves de 11 ans
Dans l’exercice 2, nous évaluons avec la variable V2223 la justification de l’accord du verbe avec un sujet au pluriel. Chacune des variables V22 et V23 comporte 3 modalités codées de 0 à 2. Nous calculons un rendement qui correspond au nombre de points obtenus par l’élève (de 0 à 4) divisé par le nombre maximum de points (4). En termes d’interprétation, une augmentation de la valeur de cette variable correspond à une progression des résultats des élèves.
Selon l’ANOVA, il n’existe pas d’effet spécifique du groupe sur les résultats des élèves (Tableau 20).
Tableau 20 - Résultats de l’ANOVA pour l’exercice 2 (V22-23) Élèves de 11 ans
Le test de Mann-Whitney indique que les deux groupes ont le même niveau initial, mais qu’ils n’ont pas le même niveau final, le groupe témoin ayant mieux réussi (Tableau 21).
Source Somme
Mesures Hypothèse de sphéricité 0.060 1 0.060 0.750 0.388 0.005
Greenhouse-Geisser 0.060 1 0.060 0.750 0.388 0.005
Huynh-Feldt 0.060 1 0.060 0.750 0.388 0.005
Borne inférieure 0.060 1 0.060 0.750 0.388 0.005
Mesures x Groupe Hypothèse de sphéricité 0.173 1 0.173 2.170 0.143 0.014
Greenhouse-Geisser 0.173 1 0.173 2.170 0.143 0.014
Huynh-Feldt 0.173 1 0.173 2.170 0.143 0.014
Borne inférieure 0.173 1 0.173 2.170 0.143 0.014
Erreur (Mesures) Hypothèse de sphéricité 12.513 157 0.080 Greenhouse-Geisser 12.513 157 0.080
192
Tableau 21 - Significativité des différences entre groupes témoin et expérimental pour l’exercice 2 (V22-23) Élèves de 11 ans
D’après le test de Wilcoxon, il n’existe aucune évolution significative au sein de chacun des groupes (Tableau 22).
Tableau 22 - Significativité de l'évolution des résultats pour l’exercice 2 (V22-23) Élèves de 11 ans
Les résultats de la régression linéaire indiquent qu’à niveau identique au prétest deux élèves obtiennent des résultats différents au posttest en fonction du groupe auquel ils et elles ont appartenu (Tableau 23). En effet, il existe un avantage comparatif pour le groupe témoin.
Tableau 23 - Résultats de la régression linéaire pour l’exercice 2 (V22-23) Élèves de 11 ans
Résultat au prétest 64.2% 62.5% -1.7% -0.224 0.823 ns
Résultat au posttest 71.6% 60.6% -11.0% -2.360 0.018 Sig.
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Mann-Whitney
Groupe témoin 64.20% 71.60% 7.41% -1.761 0.078 ns
Groupe expérimental 62.50% 60.58% -1.92% -0.621 0.535 ns
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Wilcoxon
Paramètres Coefficients
Erreurs-types T Prob.
critique Sig.
Constante 0.708 0.086 8.195 0.000 Sig.
Résultat au prétest 0.179 0.070 2.553 0.012 Sig.
Groupe Expérimental
(réf. = groupe témoin) -0.107 0.046 -2.310 0.022 Sig.
R2
ns = non significatif; Sig. = significatif au seuil de 5%
7.2%
193
1.3 Dictée : Taux de mots correctement orthographiés – élèves de 13 ans
Dans la dictée, nous évaluons avec les variables D_TX et DP_TX le taux de mots correctement orthographiés (le nombre total de mots est de 121 pour tous les élèves). En termes d’interprétation, une augmentation du taux correspond à une progression des résultats des élèves.
Selon l’ANOVA, il existe un effet spécifique du groupe sur les résultats des élèves (Tableau 24).
Tableau 24 - Résultats de l’ANOVA pour le taux de mots correctement orthographiés en dictée Élèves de 13 ans
D’après le test de Mann-Whitney, il n’y a pas de différence statistiquement significative de niveau entre groupes témoin et expérimental au prétest, mais il existe en revanche une différence statistiquement significative au posttest (Tableau 25).
Source Somme
des carrés de type III
ddl Carré moyen
F Signification Eta-carré partiel
Mesures Hypothèse de sphéricité 0.000 1 0.000 0.079 0.779 0.001
Greenhouse-Geisser 0.000 1 0.000 0.079 0.779 0.001
Huynh-Feldt 0.000 1 0.000 0.079 0.779 0.001
Borne inférieure 0.000 1 0.000 0.079 0.779 0.001
Mesures x Groupe Hypothèse de sphéricité 0.005 1 0.005 4.504 0.036 0.033
Greenhouse-Geisser 0.005 1 0.005 4.504 0.036 0.033
Huynh-Feldt 0.005 1 0.005 4.504 0.036 0.033
Borne inférieure 0.005 1 0.005 4.504 0.036 0.033
Erreur (Mesures) Hypothèse de sphéricité 0.138 133 0.001 Greenhouse-Geisser 0.138 133 0.001
Huynh-Feldt 0.138 133 0.001
Borne inférieure 0.138 133 0.001
Tests des effets intra-sujets
Source Somme
des carrés de type III
ddl Carré moyen
F Signification Eta-carré partiel
Constante 211.757 1 211.757 15496.941 0.000 0.991
Groupe 0.073 1 0.073 5.372 0.022 0.039
Erreur 1.817 133 0.014
Tests des effets inter-sujets
194
Tableau 25 - Significativité des différences entre groupes témoin et expérimental pour le taux de mots correctement orthographiés en dictée
Élèves de 13 ans
L’observation des résultats du test de Wilcoxon nous amène à conclure que le groupe témoin ne voit pas ses résultats changer de façon statistiquement significative entre les deux mesures (i.e. les résultats restent stables) alors que les résultats progressent dans le groupe expérimental de façon significative (Tableau 26).
Tableau 26 - Significativité de l'évolution des résultats pour le taux de mots correctement orthographiés en dictée Élèves de 13 ans
Il existe donc un effet spécifique positif de la méthode d’enseignement de l’orthographe mise en œuvre dans le groupe expérimental sur les résultats en dictée pour les élèves de 13 ans. Ceci est confirmé par les résultats de la régression linéaire (Tableau 27) qui met en évidence un avantage en faveur du groupe expérimental (coefficient positif et significatif).
Tableau 27 - Résultats de la régression linéaire pour le taux de mots correctement orthographiés en dictée Élèves de 13 ans
Résultat au prétest 87.58% 90.05% -2.47% -1.874 0.061 ns
Résultat au posttest 86.63% 90.77% -4.14% -2.570 0.010 Sig.
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Mann-Whitney
Groupe témoin 87.6% 86.6% -1.0% -1.232 0.109 ns
Groupe expérimental 90.0% 90.8% 0.8% -2.513 0.006 Sig.
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Wilcoxon
Paramètres Coefficients
Erreurs-types T Prob.
critique Sig.
Constante -0.025 0.044 -0.570 0.570 ns
Résultat au prétest 0.999 0.050 20.033 0.000 Sig.
Groupe Expérimental
(réf. = groupe témoin) 0.017 0.008 2.092 0.038 Sig.
R2
ns = non significatif; Sig. = significatif au seuil de 5%
76.4%
195
1.4 Production : Taux de mots correctement orthographiés – élèves de 13 ans
En production écrite, nous évaluons avec les variables PR_TX et PRP_TX le taux de mots correctement orthographiés (le nombre total de mots varie d’un élève à l’autre). En termes d’interprétation, une augmentation de la valeur de cette variable entre le prétest et le posttest correspond à une progression des résultats des élèves.
Selon l’ANOVA, il existe un effet spécifique du groupe sur les résultats des élèves (Tableau 28).
Tableau 28 - Résultats de l’ANOVA pour le taux de mots correctement orthographiés en production Élèves de 13 ans
D’après le test de Mann-Whitney, il n’y a pas de différence statistiquement significative de niveau entre groupes témoin et expérimental au prétest (i.e. aucune différence de
Mesures Hypothèse de sphéricité 0.008 1 0.008 3.271 0.073 0.025
Greenhouse-Geisser 0.008 1 0.008 3.271 0.073 0.025
Huynh-Feldt 0.008 1 0.008 3.271 0.073 0.025
Borne inférieure 0.008 1 0.008 3.271 0.073 0.025
Mesures x Groupe Hypothèse de sphéricité 0.006 1 0.006 2.398 0.124 0.018
Greenhouse-Geisser 0.006 1 0.006 2.398 0.124 0.018
Huynh-Feldt 0.006 1 0.006 2.398 0.124 0.018
Borne inférieure 0.006 1 0.006 2.398 0.124 0.018
Erreur (Mesures) Hypothèse de sphéricité 0.302 130 0.002 Greenhouse-Geisser 0.302 130 0.002
196
Tableau 29 - Significativité des différences entre groupes témoin et expérimental pour le taux de mots correctement orthographiés en production
Élèves de 13 ans
Le test de Wilcoxon (Tableau 30) amène à penser que dans le groupe expérimental, les élèves ont progressé de façon statistiquement significative entre les deux mesures (88.9%→90.9%, soit +2 points de %), alors que dans le groupe témoin le taux de mots correctement orthographiés est resté stable (87.0%→87.1%). Il semble donc exister un effet spécifique positif de la méthode d’enseignement de l’orthographe mise en œuvre dans le groupe expérimental sur les résultats en production pour les élèves de 13 ans.
Tableau 30 - Significativité de l'évolution des résultats pour le taux de mots correctement orthographiés en production Élèves de 13 ans
La régression linéaire vient confirmer ces conclusions (Tableau 31). En effet, l'appartenance au groupe expérimental possède un coefficient positif et statistiquement significatif, même si on se situe à la limite du seuil de significativité de 5%.
Groupe
Résultat au prétest 86.99% 88.91% -1.92% -1.220 0.222 ns
Résultat au posttest 87.14% 90.91% -3.77% -2.557 0.011 Sig.
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Mann-Whitney
Groupe témoin 87.0% 87.1% 0.1% -0.883 0.189 ns
Groupe expérimental 88.9% 90.9% 2.0% -3.042 0.001 Sig.
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Wilcoxon
197
Tableau 31 - Résultats de la régression linéaire pour le taux de mots correctement orthographiés en production Élèves de 13 ans
1.5 Production : Flexions verbales – élèves de 13 ans
En production, nous évaluons avec la variable V161718_2 le taux d’erreurs concernant les flexions verbales : le nombre d’erreurs cumulées pour les variables V16, V17 et V18 a été rapporté au nombre total de mots écrits. Ces trois variables concernent les erreurs liées à une relation mal établie entre le sujet et le verbe (verbe-sujet juxtaposés, sujet-verbe inversés, sujet-sujet-verbe non juxtaposés). Une baisse de la valeur du taux signifie que les élèves ont progressé sur ce point-là.
Selon l’ANOVA, il n’existe pas d’effet spécifique du groupe sur les résultats des élèves (Tableau 32).
Tableau 32 - Résultats de l’ANOVA pour les flexions verbales en production Élèves de 13 ans
Paramètres Coefficients
Erreurs-types T Prob.
critique Sig.
Constante 0.171 0.070 2.433 0.016 Sig.
Résultat au prétest 0.779 0.079 9.815 0.000 Sig.
Groupe Expérimental
(réf. = groupe témoin) 0.023 0.012 1.936 0.050 Sig.
R2
ns = non significatif; Sig. = significatif au seuil de 5%
45.3%
Source Somme
des carrés de type III
ddl Carré moyen
F Signification Eta-carré partiel
Mesures Hypothèse de sphéricité 0.001 1 0.001 5.704 0.018 0.042
Greenhouse-Geisser 0.001 1 0.001 5.704 0.018 0.042
Huynh-Feldt 0.001 1 0.001 5.704 0.018 0.042
Borne inférieure 0.001 1 0.001 5.704 0.018 0.042
Mesures x Groupe Hypothèse de sphéricité 0.000 1 0.000 1.077 0.301 0.008
Greenhouse-Geisser 0.000 1 0.000 1.077 0.301 0.008
Huynh-Feldt 0.000 1 0.000 1.077 0.301 0.008
Borne inférieure 0.000 1 0.000 1.077 0.301 0.008
Erreur (Mesures) Hypothèse de sphéricité 0.023 130 0.000 Greenhouse-Geisser 0.023 130 0.000
Huynh-Feldt 0.023 130 0.000
Borne inférieure 0.023 130 0.000
Tests des effets intra-sujets
198
Le test de Mann-Whitney montre que le groupe témoin et le groupe expérimental ont le même niveau initial au prétest (Tableau 33). En revanche, nous notons une différence significative de niveau final : le groupe expérimental est meilleur au posttest.
Tableau 33 - Significativité des différences entre groupes témoin et expérimental pour les flexions verbales en production
Élèves de 13 ans
Selon le test de Wilcoxon, pour le groupe témoin il n’y a pas d’évolution des résultats entre les deux mesures (Tableau 34). En revanche, les élèves du groupe expérimental connaissent une amélioration significative de leurs résultats. Ainsi, nous pouvons penser qu’il existe un avantage comparatif pour le groupe expérimental.
Tableau 34 - Significativité de l'évolution des résultats pour les flexions verbales en production Élèves de 13 ans
Ceci est confirmé par les résultats de la régression linéaire qui montrent qu’à niveau identique au prétest deux élèves obtiennent des résultats différents au posttest en fonction du groupe auquel ils ou elles ont appartenu, la proportion de mots mal orthographiés étant plus faible dans le groupe expérimental (Tableau 35).
Source Somme
Résultat au prétest 1.25% 1.08% -0.17% -0.384 0.701 ns
Résultat au posttest 1.03% 0.52% -0.51% -2.043 0.041 Sig.
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Mann-Whitney
Groupe témoin 1.25% 1.03% 0.00 -0.885 0.376 ns
Groupe expérimental 1.08% 0.52% -0.01 -3.494 0 Sig.
ns = non significatif; Sig. = significatif au seuil de 5%
Test de Wilcoxon
199
Tableau 35 - Résultats de la régression linéaire pour les flexions verbales en production Élèves de 13 ans
1.6 Exercice 1 : Flexions verbales – élèves de 13 ans
Dans l’exercice 1, nous observons avec la variable V6101819_2mod la capacité des élèves à choisir la bonne graphie en matière de flexions verbales. Celle-ci est évaluée au moyen de quatre items : un accord sujet-verbe avec inversion (V6), un accord sujet-verbe avec présence d’un rupteur entre le sujet et le verbe (V10), un accord sujet-verbe (V18), un autre accord sujet-verbe avec présence d’un rupteur entre le sujet et le verbe (V19).
Chaque item est codé 1 ou 0 (1 pour juste et 0 pour faux). Le score analysé correspond au nombre total de bonnes réponses sur ces quatre items (il est compris entre 0 et 4).
Une augmentation de la valeur du score correspond à une progression des résultats des élèves.
Selon l’ANOVA, il existe un effet spécifique du groupe sur les résultats des élèves (Tableau 36).
Tableau 36 - Résultats de l’ANOVA pour l’exercice 1 – Flexions verbales Élèves de 13 ans
Paramètres Coefficients
Erreurs-types T Prob.
critique Sig.
Constante 0.014 0.004 3.588 0.000 Sig.
Résultat au prétest 0.114 0.074 1.547 0.124 ns
Groupe Expérimental
(réf. = groupe témoin) -0.005 0.002 -2.156 0.033 Sig.
R2
ns = non significatif; Sig. = significatif au seuil de 5%
5.4%
Mesures Hypothèse de sphéricité 1.340 1 1.340 2.360 0.127 0.018
Greenhouse-Geisser 1.340 1 1.340 2.360 0.127 0.018
Huynh-Feldt 1.340 1 1.340 2.360 0.127 0.018
Borne inférieure 1.340 1 1.340 2.360 0.127 0.018
Mesures x Groupe Hypothèse de sphéricité 1.612 1 1.612 2.840 0.094 0.021
Greenhouse-Geisser 1.612 1 1.612 2.840 0.094 0.021
Huynh-Feldt 1.612 1 1.612 2.840 0.094 0.021
Borne inférieure 1.612 1 1.612 2.840 0.094 0.021
Erreur (Mesures) Hypothèse de sphéricité 73.793 130 0.568 Greenhouse-Geisser 73.793 130 0.568
Huynh-Feldt 73.793 130 0.568
Borne inférieure 73.793 130 0.568
Tests des effets intra-sujets