L'évaluation du système d'éducation universitaire

Résumé du document

Pour 2008, le Centre de Recherche sur la Gestion des Organisations compte 104 travaux alors qu'en 2007 il en avait présenté 91. Le CREGOR est un des quatre laboratoires du Pôle Formation et Recherche SHS de l'Université Montpellier 2. On peut se demander si l'augmentation du nombre de travaux est le fruit du processus d'évaluation de l'enseignement supérieur, qui pousse à une productivité accrue des chercheurs.
A l'heure où l'évaluation est adaptée à l'éducation et entraine des réformes contestées dans toute la France, on peut s'interroger sur la naissance de l'évaluation, son développement et ses limites. En somme, dans quelles mesures l'évaluation peut-elle être adoptée dans les universités ?

Le corpus comprend cinq textes dont deux qui présentent la bibliométrie et ses limites : Bibliométrie et évaluation en sciences humaines et sociales : une brève introduction de Ghislaine Filliatreau, ainsi que Du mauvais usage de faux indicateurs d'Yves Gingras. La recherche scientifique au crible du benchmarking, petite histoire d'une technologie de gouvernement par Isabelle Bruno, s'intéresse à l'application de l'évaluation à l'éducation et aux services publics. Enfin, les deux textes restant étudient l'arrivée même de l'évaluation dans l'université et ses conséquences: Comment l'évaluation est arrivée dans les universités françaises de Jean-Yves Mérindol et L'évaluation des enseignements, une révolution invisible de Sandrine Garcia.

Extraits

[...] En somme, dans quelles mesures l'évaluation peut-elle être adoptée dans les universités ? Le corpus comprend cinq textes dont deux qui présentent la bibliométrie et ses limites : Bibliométrie et évaluation en sciences humaines et sociales : une brève introduction de Ghislaine Filliatreau, ainsi que Du mauvais usage de faux indicateurs d'Yves Gingras. La recherche scientifique au crible du benchmarking, petite histoire d'une technologie de gouvernement par Isabelle Bruno, s'intéresse à l'application de l'évaluation à l'éducation et aux services publics. [...]

[...] L'évaluation s'est donc diffusée jusqu'à devenir un concept utilisé dans de nombreux domaines, y compris non marchands. Différents outils ont été créés pour satisfaire ce besoin de classement. L'évaluation, un principe incontournable aux outils et utilisations variées - 1850 : General Register Office, ancêtre du benchmarking : bureau britannique qui à partir de données statistiques a fait le rapport entre les taux de mortalité infantile et la misère sociale dans les villes. Il a comparé les résultats pour que les villes pauvres atteignent le résultat de la meilleure ville saine. [...]

[...] - Application du benchmarking : stratégie de Lisbonne. Améliorer la compétitivité de l'Europe dans les domaines de la recherche, de l'innovation et de l'éducation. Classement des performances nationales pour une meilleure collaboration et pour concurrencer les universités américaines et japonaises. - Autre outil : la bibliométrie. Années 60, Eugene Garfield met en place la Science Citation Index. Base de données à partir de laquelle des indicateurs ont été créés. But : rassembler et publier toutes les informations pertinentes sur un sujet scientifique pour que les chercheurs y aient accès. [...]

[...] Les améliorations que l'on peut apporter - Convaincre les institutions de ne pas utiliser les mauvais indicateurs. - Éduquer les scientifiques aux dangers des mauvais usages et enseigner aux chercheurs l'utilisation des indicateurs. - Effectuer une étude plus poussée sur la circulation des connaissances pour adapter l'évaluation aux SHS - Construire des indicateurs homogènes, sur un seul domaine, pour que leur interprétation soit plus simple - Pour les évaluations individuelles, les statistiques ne suffisant pas, il faut s'appuyer sur une expertise complète - Laisser l'évaluation aux pairs qui connaissent bien le fonctionnement de l'université. [...]

[...] - D'autre part, l'évaluation individuelle est difficile. Ainsi, une des applications de la bibliométrie à l'échelle individuelle est le H index Cet index est basé sur des critères trop hétérogènes qui mènent à une mauvaise interprétation, mettant en avant la quantité plus que la qualité des travaux. - Le classement de Shanghai rencontre lui aussi des obstacles : les critères de sélection sont trop variés et parfois trop subjectifs (les revues choisies, Sciences et Nature, favorisent les chercheurs américains et britanniques). [...]