Le Modèle d’évaluation de l’efficience de la recherche

La recherche est l’autre grande mission de l’université et de l’enseignement supérieur. Là encore les modèles de croissance insistent énormément sur l’impact des dépenses de recherche et développement et du nombre des brevets sur les taux de croissance de la production. La fonction de production de la recherche est une relation intrant / extrant. Les extrants ici sont les découvertes scientifiques. Ces découvertes sont transmises sur des supports que sont les articles dans les revues scientifiques ou les livres. On a ainsi la même problématique que pour l’enseignement. Il faut des indicateurs de quantité comme le nombre d’articles publiés pour 1000 étudiants et des indicateurs de qualité de la recherche comme le nombre de citations par articles publiés. Côté intrant, les ressources financières affectées au financement de la recherche et les ressources humaines sont des variables évidentes. On peut utiliser comme indicateur de ressources financières, les dépenses par étudiant pour la Recherche et Développement et pour les ressources humaines le nombre des enseignants-chercheurs pour 1000 étudiants.

2.2.1. Les extrants en matière de recherche

L’extrant de la recherche est le nombre d’articles publiés, indicateur de quantité et le nombre de citations par article, indicateur de qualité.

Pour l’indicateur, nombre d’articles publiés, il est exprimé en nombre d'étudiants dans le système universitaire et non par rapport au nombre d’enseignants-chercheurs. Deux raisons expliquent ce choix. L’objectif est d’évaluer l’efficience des systèmes universités qui ont des tailles différentes

Dépenses Totales par étudiant ($ ppp)

Taux d'accès des étudiants à l'enseignement supérieur Qualité des étudiants

entrants dans l'enseignement supérieur

Taux d'obtention de diplômes à l’issue d’un programme tertiaire

de type A

Taux d'obtention de diplômes à l'issue d'un programme de

recherche de haut niveau Taux d'emploi des diplômés

âgés de 25 à 34 ans 2009 2010 2011 2008 2012 Intrants Extrants Scores PISA 2006

149 reflétées par le nombre des étudiants dans chaque système, ainsi pour une meilleure comparabilité permettant d'éviter les biais en faveur des grands systèmes, la production scientifique d'un système universitaire devrait être relativisée par rapport à la taille de ce système. La seconde raison est que l’indicateur du nombre des publications par enseignant-chercheur est déjà en lui même une mesure de l'efficience de la recherche car elle traduit la productivité des chercheurs. Il crée alors une confusion entre intrant et extrant.

Afin de calculer le nombre d'articles publiés pour 1000 étudiants, en 2006 et en 2012, pour 35 pays, nous avons utilisé la base de données bibliométriques "Web of Science" pour recueillir les données sur le nombre total d'articles (indexés dans Web of Science) publiés par tous les établissements d'enseignement supérieur de chaque pays. L’exploitation de la base "Web of Science Core Collection database" conduit à traiter trois sous bases : Science Citation Index Expanded (SCI-EXPANDED), Social Science Citation Index (SSCI), et Arts and Humanities Citation Index (A&HCI). Le traitement de ses bases a été fait grâce au moteur de recherche avancé de Web of Science, des opérateurs booléens, des parenthèses, et un ensemble de requêtes spécifiques entrées dans le moteur de recherche permettant d'inclure uniquement les publications qui ont été publiées par les établissements d'enseignement supérieur (universities/ colleges/ schools/ ecoles/ polytechs), évitant ainsi de compter les publications publiées en dehors du système d'enseignement supérieur (par exemple par des entreprises privées, ou par des chercheurs dans des centres de recherche indépendants et sans collaboration avec les universités).

En plus des données sur le nombre d'articles publiés par tous les établissements d'enseignement supérieur de chacun des 35 pays en 2006 et 2012, et afin de refléter la qualité de recherche, des données sur le nombre total de citations que ces articles avaient générées durant une période de quatre années à partir de la date de leur publication ont également été recueillies. Pour les articles publiés en 2006, les citations sont recueillies pour les années 2006, 2007, 2008, et 2009. Pour les articles publiés en 2012, les citations sont recueillies pour les années 2012, 2013, 2014, et 2015. Afin de rechercher des citations d'articles, le nombre maximum permis à la fois par le moteur de recherche "Web of Science" est seulement 10.000 articles, sachant que la plupart des pays publient plus de 10.000 articles par an. Pour contourner cette limitation, nous avons fait en sorte de décomposer les articles de chaque pays par différents domaines de recherche proposés dans le moteur de recherche, pour pouvoir regrouper chaque 8.000-10.000 articles ensemble, et enfin nous avons calculé la somme des citations pour tous les domaines de recherche pour chaque pays.

Le nombre des articles et de citations une fois obtenus par système universitaire, l'on peut calculer le nombre de citations par article. Enfin, il reste à utiliser le nombre brut d’étudiants dans

150 chaque système universitaire (données EAG) pour calculer le nombre d'articles publiés pour 1000 étudiants.

2.2.2. Les intrants en matière de recherche

Contrairement au modèle d’enseignement, le modèle de recherche introduit un intrant qui mesure l’effet des ressources humaines sur le montant des extrants. Pour l’enseignement, les dépenses de ressources humaines étaient déjà prises en compte dans le montant total des dépenses. Pour la recherche ce n’est pas le cas. Le modèle d’efficience de la recherche utilise ainsi comme un premier intrant : les dépenses en Recherche et Développement, qui ne tiennent pas compte des salaires du personnel académique et le nombre du personnel académique. Pour produire des articles scientifiques il faut des chercheurs et des moyens pour que ces chercheurs puissent développer leur activité. D'où l'importance d'utiliser le deuxième intrant : nombre du personnel académique relativisé par rapport au nombre des étudiants (taille du système universitaire). Il est important ici est de vieller à utiliser les mêmes types d'effectifs –temps plein équivalent pour notre étude- et les mêmes niveaux de formation - total du système universitaire dans notre étude- pour les deux indicateurs (nombre des étudiants et nombre du personnel académique), en vue d'obtenir un ratio "nombre du personnel académique pour 1000 étudiant" qui soit correct et comparable entre les pays. A titre d'exemple, si on divise le nombre des étudiants à temps plein équivalent par le nombre du personnel académique uniquement à temps-plein, on obtient un intrant ratio étudiants/personnel académique sur-estimé, et donc également des scores d'efficience erronés. D'autant plus que la méthode DEA est connue d'être très sensible à la qualité et à la comparabilité des données sur les indicateurs intrants/extrants utilisés.

2.2.3. Le modèle d’efficience de la recherche

Le modèle d’efficience de la recherche est donc le suivant (Figure 2). Il calcule les scores d’efficience avec les intrants calculés en moyenne pour les années 2010-2011-2012 et les extrants de l’année 2012.

151 Figure 2

Un schéma d'un cadre conceptuel pour mesurer l'efficience de la recherche, en 2012, dans les systèmes d'enseignement supérieur (2 intrants, 2 extrants)

A noter que contrairement aux activités d'enseignement, les activités de recherche utilisent presque en temps réel les budgets qui leurs sont affectés. Un chercheur dans un laboratoire peut commencer à publier les résultats préliminaires de ses recherches juste une année ou deux années après après avoir reçu ses fonds de recherche. La temporalité des dépenses d’enseignement n’est pas la même que la temporalité du temps de la recherche.

2.3. Le Modèle d’efficience de l’attractivité et de la réputation d’un système universitaire