b. Test de robustesse des poids et des seuils
Min
La robustesse des poids est testée par les
algorithmes des logiciels que nous avons mis au point sur Excel. Au terme de
cet examen, nous avons obtenu des intervalles à l'intérieur
desquels la variation des poids n'affecte pas la structure des
évaluations. Les résultats relatifs au test de robustesse sont en
faveur du système de pondérations adopté. En effet,
l'étendue des intervalles de confiance est globalement égale
à deux fois la valeur de chaque poids, plus particulièrement au
niveau des tris pessimistes, où l'on retrouve des intervalles de
confiance de type [-100% ; +100%].
C'est le cas de l'intégralité des poids
du volet politique en 1995 et en 2005. C'est partiellement le cas des deux
autres volets, où l'on retrouve aussi des intervalles de type [-50% ;
+100%] ou encore [-25% ; +100%]. Ils traduisent le fait que le modèle
reste stable même si le poids augmente du double ou diminue de
moitié ou du quart (cf. annexe 22).
Tester la robustesse des modèles en faisant
varier les niveaux de coupe est un moyen de parvenir au scénario le plus
probant quant à l'évaluation de la situation des PM. D'une
certaine manière, nous faisons de la simulation en vue de valider la
pertinence de notre logiciel d'analyse multicritère. Les
résultats relatifs aux deux premiers scénarios sont
quasi-identiques en tout point. En revanche, ils sont moins robustes que ceux
du scénario 3, où l'étendue de l'intervalle de
stabilité est plus importante, notamment en tri pessimiste (cf.
annexes 19 et 20). La formule des variations moyennes des écarts
est donc la plus appropriée dans le cadre de notre
application.
Pour ce qui est de la robustesse des seuils, il s'agit
d'une étape complémentaire et néanmoins indispensable pour
tester la stabilité du scénario sélectionné. En
faisant varier les seuils de préférence et d'indifférence,
nous avons confirmé notre choix pour le scénario 3. En effet, il
s'est avéré que la longueur des intervalles de confiance y est au
moins égale à la valeur du seuil testé (cf.
annexe 23).
| 
