Vraie MSP ou barres de tendance colorées : lire la météo du risque
01Le problème d’une flèche colorée
La plupart des tableaux de bord de sécurité affichent chaque indicateur sous forme de tuile : rouge, orange ou verte, souvent accompagnée d’une petite flèche vers le haut ou vers le bas. Cela paraît décisif. Le problème, c’est ce que la couleur signifie réellement. Une tuile rouge/orange/verte encode exactement deux faits : le chiffre a bougé, et la dernière valeur est au-dessus ou au-dessous d’une ligne fixe choisie par quelqu’un lors de la mise en place du tableau de bord.
Ce n’est pas un signal. C’est une comparaison avec une ligne arbitraire. Trois problèmes en découlent directement :
- Elle ne voit pas la variation normale. Tout indicateur fluctue d’un mois à l’autre. Un taux de remises de gaz qui oscille entre 3 et 7 pour mille atterrissages ne s’améliore pas les bons mois et ne se dégrade pas les mauvais : il varie, tout simplement. Une tuile colorée bascule entre le vert et l’orange au gré de cette fluctuation et fabrique une alarme là où il n’y en a pas.
- Le seuil est une supposition. Quelqu’un a choisi la ligne orange. Placez-la trop serrée et tous les indicateurs s’affolent; placez-la trop lâche et une véritable dérive reste au vert pendant des mois. Dans un cas comme dans l’autre, la couleur reflète la ligne que quelqu’un a tracée, pas le comportement de l’exploitation.
- Elle masque la forme du changement. Un seul mauvais mois et six mois consécutifs qui glissent dans la même direction peuvent afficher la même couleur. L’un est du bruit; l’autre est une véritable dérive de l’exploitation. La tuile ne peut pas les distinguer, et la personne qui la lit non plus.
Le résultat est un tableau que quelqu’un doit évaluer à l’œil et interpréter. Il vous dit qu’un chiffre a augmenté. Il ne vous dit pas si le changement est réel. C’est cette lacune que comble la véritable maîtrise statistique des procédés.
02Ce que fait réellement la maîtrise statistique des procédés
La maîtrise statistique des procédés (MSP) est une méthode établie de longue date pour distinguer la variation ordinaire d’un véritable changement dans ce qui est mesuré. Elle ne demande à personne de choisir une ligne. Elle construit la ligne à partir des données.
Pour chaque indicateur de performance de sécurité (SPI), une mesure quantifiable d’un aspect de la sécurité, comme les approches non stabilisées pour mille étapes, la MSP produit une carte de contrôle :
- Une ligne centrale : le niveau habituel de l’indicateur, calculé à partir de son propre historique. C’est ce à quoi ressemble la « normale » pour cet indicateur, et non un chiffre emprunté à un modèle.
- Des limites de contrôle supérieure et inférieure : les bornes de la variation normale, également calculées à partir des données propres à l’indicateur. Tant que l’indicateur reste à l’intérieur de ces limites et ne présente aucune série hors norme, l’exploitation se comporte comme elle l’a toujours fait.
L’intérêt des limites, c’est qu’elles sont méritées, et non supposées. Un indicateur qui présente une forte dispersion naturelle d’un mois à l’autre obtient des limites plus larges; un indicateur stable obtient des limites plus serrées. La carte s’adapte au comportement réel de chaque indicateur, ce qu’un seuil de couleur fixe ne peut précisément pas faire.
Le Doc 9859 de l’OACI, le Manuel de gestion de la sécurité, oriente les exploitants vers ce type d’analyse justement parce qu’il supprime le débat sur l’endroit où tracer la ligne. Ce sont les données qui la tracent. La seule question qui reste est la bonne : l’indicateur est-il resté dans sa propre enveloppe normale, ou a-t-il réellement changé?
03Les règles qui signalent un vrai changement
Une carte de contrôle seule n’est qu’une image. Ce qui la transforme en signal, c’est un ensemble fixe de tests appliqués à chaque nouveau mois, les règles de la Western Electric. Elles recherchent les motifs qui signifient « ce n’est plus le même processus », chacun étant une forme différente de changement réel plutôt que de bruit :
- Un point au-delà de la limite. Un seul mois tombe en dehors de la limite de contrôle supérieure ou inférieure. C’est le signal mensuel le plus fort : une valeur aussi extrême a très peu de chances d’être une variation ordinaire.
- Une série d’un seul côté. Plusieurs mois consécutifs se situent tous du même côté de la ligne centrale. Aucun mois pris isolément n’est alarmant, mais une série soutenue d’un côté traduit une exploitation qui dérive vers un nouveau niveau, le motif qu’une tuile colorée manque le plus souvent.
- Une tendance régulière. Une série de mois qui progressent dans la même direction, à la hausse ou à la baisse, mois après mois. Une montée constante est un mouvement réel, même lorsque chaque mois pris isolément semble encore dans les limites.
- Un regroupement près d’une limite. Plusieurs mois récents se resserrent près d’une limite de contrôle. L’indicateur glisse vers le bord de la normale : c’est une alerte précoce, avant qu’un point ne la franchisse réellement.
La discipline des règles est tout l’intérêt. Elles s’appliquent de la même façon chaque mois, à chaque indicateur, de sorte qu’un analyste n’a pas à plisser les yeux devant une carte pour décider au jugé si quelque chose cloche. Un seul mauvais mois qui n’est qu’une variation ne déclenche pas de règle de série; une dérive discrète et soutenue qu’aucune tuile ne signalerait la déclenche. C’est la différence entre un chiffre qui augmente et un indicateur qui a réellement changé, un vrai signal de cause spéciale.
Questions
Une barre de tendance colorée, une tuile rouge, orange ou verte ou une flèche vers le haut ou vers le bas, encode une seule chose : ce chiffre a-t-il bougé, et la dernière valeur est-elle au-dessus ou au-dessous d’une ligne fixe choisie par quelqu’un. Elle ne peut pas vous dire si le mouvement est significatif ou s’il s’agit simplement de la fluctuation normale d’un mois à l’autre que tout indicateur présente. Une vraie carte de contrôle calcule ses propres limites à partir de vos données historiques et applique un ensemble fixe de règles statistiques pour décider quand un point ou une série de points sort réellement de l’enveloppe attendue. L’une est une couleur que quelqu’un évalue à l’œil; l’autre est un signal produit par les mathématiques.
La maîtrise statistique des procédés (MSP, en anglais SPC) est une méthode établie de longue date pour distinguer la variation normale d’un processus mesuré d’un véritable changement du processus lui-même. Appliquée à un indicateur de performance de sécurité (SPI), elle calcule une ligne centrale (votre niveau habituel) ainsi que des limites de contrôle supérieure et inférieure à partir de l’historique propre à l’indicateur, puis teste chaque nouveau mois au regard d’un ensemble de règles. Le Doc 9859 de l’OACI, le Manuel de gestion de la sécurité, oriente les exploitants vers exactement ce type d’analyse plutôt que vers des seuils de couleur fixes, parce qu’une carte de contrôle s’adapte au comportement réel de l’indicateur au lieu de demander à chacun de s’entendre sur une ligne rouge arbitraire.
Les règles de la Western Electric forment un petit ensemble normalisé de motifs qui signalent qu’une carte de contrôle a détecté un véritable signal de cause spéciale plutôt qu’un bruit ordinaire. Elles vont au-delà d’un seul point élevé : un point unique au-delà de la limite de contrôle, une série de points consécutifs tous du même côté de la ligne centrale, une série régulière orientée à la hausse ou à la baisse, et plusieurs points regroupés près d’une limite. Chaque motif est une forme différente de « ce n’est plus le même processus ». Elles sont importantes parce qu’un seul mauvais mois n’est souvent qu’une variation, alors qu’une série soutenue d’un côté de la ligne traduit une véritable dérive de l’exploitation, et seules les règles, pas une couleur, permettent de distinguer les deux.
Une véritable maîtrise statistique des procédés. eAviora calcule les limites de contrôle de chaque indicateur de performance de sécurité à partir de ses propres mesures et applique les règles de la Western Electric, conformément au Doc 9859 de l’OACI, pour décider si l’indicateur a réellement changé ou s’il varie simplement de façon normale. L’analyse des tendances place chaque type d’événement sous une carte de contrôle hebdomadaire, avec la semaine où chaque règle s’est déclenchée marquée dessus. Les indicateurs proviennent d’une bibliothèque organisée de 516 définitions que vous activez par niveau de maturité.