Établissement d'un seuil pour l'inclusion des demandes dans les discussions des comités d'évaluation par les pairs (CEP)

Question de recherche :

Quel seuil engloberait le plus grand pourcentage des demandes ayant été approuvées à la suite des discussions des comités d'évaluation par les pairs (CEP) tout en minimisant le pourcentage de demandes qui ne seraient pas financées sans une discussion?

Ensemble de données :

Description détaillée
  • Dix concours du POSF (2010-2015)
  • 24 101 demandes
  • 3 974 demandes financées
  • Taux de réussite de 16,48 %

Méthode :

Les rangs centiles des demandes à l'échelle des CEP avant les réunions en personne ont été comparés aux résultats des demandes à la suite des discussions.

Pour les demandes classées au-delà d'un rang centile donné, le pourcentage de demandes approuvées après les discussions dans chaque groupe a été calculé.

Résultat :

Quatre-vingt-dix-huit pour cent de toutes les demandes dont le financement a été approuvé à la suite des discussions des CEP avaient un rang centile initial de 60 ou plus, alors que le pourcentage de demandes perdues — c'est-à-dire celles qui auraient été financées si elles avaient fait l'objet d'une discussion — est de deux pour cent.

Figure 1. Classement des demandes avant les réunions des comités d'évaluation par les pairs et taux de réussite dans dix concours du POSF (2010-2015)

Figure 1 — description détaillée
Rang centile avant les réunions Si le seuil pour l'inclusion des demandes dans les discussions des CEP est fixé à un centile particulier :
% de demandes ayant été approuvées après les discussions des CEP qui sont incluses % de demandes ayant été approuvées après les discussions des CEP qui sont perdues
0 100 % 0 %
10 99,95 % 0,05 %
20 99,87 % 0,13 %
30 99,77 % 0,23 %
40 99,52 % 0,48 %
50 99,02 % 0,98 %
60 98,01 % 1,99 %
70 94,56 % 5,44 %
80 84,07 % 15,93 %
90 55,54 % 44,46 %
100 10,95 % 89,05 %

La ligne bleue représente le pourcentage de demandes financées après les discussions des CEP qui ne sont pas comprises dans la tranche entre un centile donné et la demande la mieux classée.

Conclusion :

L'analyse montre que l'utilisation d'un seuil d'inclusion à l'égard des rangs centiles avant les réunions aurait orienté davantage les discussions des CEP sur les demandes plus susceptibles d'être financées.

Pour connaître les résultats de cette analyse pour chaque concours du POSF, consultez la page Ventilation par concours.

Remarque : Une analyse semblable a été réalisée pour déterminer s'il existe un seuil au-dessus duquel les demandes sont toujours financées et ne nécessitent pas de discussion d'un CEP. Toutefois, il n'y avait aucun rang centile au-dessus duquel la totalité des demandes était financée chaque fois. Voir l'analyse ci-dessous.

Question de recherche :

Existe-t-il un seuil au-dessus duquel les demandes sont toujours financées et ne nécessitent pas de discussion d'un CEP?

Figure 2 — description détaillée
Rang centile avant les réunions Pourcentage des demandes approuvées après les discussions des CEP
0 16,49 %
10 18,06 %
20 20,29 %
30 23,08 %
40 26,83 %
50 31,60 %
60 39,23 %
70 49,98 %
80 65,36 %
90 82,47 %
100 95,39 %

La ligne verte représente le pourcentage des demandes financées à la suite des discussions des CEP qui se classaient au-delà d'un centile donné.

Date de modification :