Run chart
Un run chart est un graphique en courbes qui porte une mesure dans l'ordre du temps et prend sa médiane comme ligne centrale. L'équipe le lit avec des règles de probabilité. Une longue suite de points du même côté de la médiane ou des points qui montent ou descendent sans interruption signalent une variation non aléatoire. Une alternance trop rare ou trop fréquente autour de la médiane et un point très éloigné des autres la signalent aussi. Le graphique ne demande ni limites de contrôle ni hypothèse sur la distribution des données. Il se lit dès une douzaine de points. Il doit son nom aux séquences (runs) de points consécutifs du même côté de la médiane.
Objectif
Le run chart est un graphique de suivi: il porte chaque valeur d'une mesure à sa date et la situe par rapport à la médiane. Il montre si la mesure a changé et à partir de quel point.
Les statistiques descriptives résument une période sans l'ordre de ses valeurs. Une moyenne avant et une moyenne après un changement disent qu'un indicateur a baissé. Elles ne disent ni quand la baisse commence ni si elle tient. Perla, Provost et Murray montrent trois unités qui ont la même moyenne et le même écart type avant et après une amélioration. Dans la première, le gain tient. Dans la deuxième, la baisse avait commencé avant le changement. Dans la troisième, le gain s'efface. Seul l'ordre des points distingue les trois histoires.
Le livrable est le graphique annoté: les points datés, la médiane de la période de référence, les changements introduits, la règle qui a donné un signal et le point où elle s'est déclenchée. L'équipe y lit l'effet d'un changement et décide de le garder, de le corriger ou de l'abandonner.
Une carte de contrôle porte les mêmes points avec la moyenne et des limites de contrôle. Le run chart remplace la moyenne par la médiane et n'a pas de limites. Il ne dit pas si le processus est stable: cette question revient à la carte de contrôle.
Usage
Quand l'utiliser
- Amélioration en cours: suivre l'indicateur point par point et voir si le changement agit avant d'avoir une base de référence assez longue pour des limites de contrôle.
- Comparaison avant-après: montrer quand l'effet commence.
- Avant de calculer des limites de contrôle: une série qui donne un signal ne sert pas de base de référence à une carte de contrôle.
- Valeur de la semaine qui inquiète: vérifier si elle prolonge un décalage ou une tendance avant de demander des explications.
- Après une amélioration: vérifier que le gain tient, en phase Control d'un DMAIC.
Quand ne pas l'utiliser
- Question de stabilité ou de prévisibilité: le run chart ne la tranche pas, tracer une carte de contrôle.
- Mesures sans ordre dans le temps: un lot mesuré d'un coup n'a pas de chronologie, décrire sa répartition par un histogramme.
Description
Les éléments
L'axe horizontal porte l'ordre du temps: des jours, des semaines ou des cas successifs quand chaque demande ou chaque livraison donne une valeur. L'axe vertical porte la mesure: un nombre, un taux, un délai.
La ligne centrale est la médiane: la valeur qui laisse autant de points au-dessus qu'en dessous. Autour de la médiane, chaque point a une chance sur deux de tomber au-dessus. Les règles de lecture reposent sur cette probabilité. Une valeur extrême ne déplace pas la médiane.
La période de référence regroupe les points relevés avant le changement. L'équipe calcule la médiane sur ces points seulement. Si la période ne montre aucun signal, l'équipe fige la médiane et la prolonge sur les points suivants. Les annotations placent sur l'axe du temps les changements introduits et les événements connus: une nouvelle procédure, une migration, une équipe réduite pendant les vacances. Une ligne d'objectif peut s'ajouter. Les règles l'ignorent.
Une séquence (run) est une suite de points consécutifs du même côté de la médiane. Un point sur la médiane ne prolonge ni n'interrompt la séquence en cours. Le nombre de séquences dépasse d'une unité le nombre de fois où la ligne traverse la médiane. Les points utiles sont ceux qui ne tombent pas sur la médiane. Les seuils des règles dépendent de leur nombre.
Construire le run chart
- Définir la mesure, l'unité de temps et le jeu de règles. L'équipe écrit ce qu'elle compte, sur quel périmètre et à quel rythme: les défauts relevés par semaine en test d'acceptation (UAT) ou le délai de chaque demande dans l'ordre de clôture. Hors de l'informatique, une administration cantonale peut porter la durée de traitement de chaque dossier. La définition reste la même pendant tout le suivi. Une définition qui change produit un décalage que la règle signale comme un effet. Un nombre brut dépend aussi du volume traité. Quand le volume varie d'une période à l'autre, l'équipe porte un taux, par exemple les défauts pour 100 cas de test exécutés. Si la moitié des valeurs ou plus tombe à 0 ou à 100 %, la médiane se pose sur la borne. L'équipe porte alors le temps écoulé entre deux événements. Elle choisit enfin le jeu de règles avant la collecte des données.
- Relever les valeurs. Les valeurs viennent d'un système, d'un export ou d'une feuille de relevé tenue au poste. Chaque valeur garde sa date.
- Tracer les points. L'équipe porte un point par période dans l'ordre du temps et relie chaque point au précédent.
- Calculer la médiane de la période de référence. L'équipe trie les valeurs de la période et prend la valeur du milieu. Pour un nombre pair de valeurs, la médiane est la moyenne des deux valeurs du milieu. L'équipe trace la médiane en ligne horizontale et marque sur l'axe la date du changement.
- Vérifier la période de référence. L'équipe applique les règles aux seuls points de la période. Sans signal, elle fige la médiane et la prolonge vers la droite. Un signal montre que la période contient déjà un changement. L'équipe en cherche la cause avant de prendre la période comme référence.
- Porter les nouveaux points et appliquer les règles. Chaque nouveau point se lit contre la médiane figée.
- Interpréter le signal. Un signal indique que quelque chose a changé. Il n'indique pas quoi. L'équipe confronte la date du signal aux annotations: le changement introduit, une autre modification du processus, une nouvelle façon de compter. La lecture demande du jugement et la connaissance du contexte. Quand l'objectif est atteint, Anhøj et Olesen proposent de calculer une nouvelle médiane sur les points d'après le changement ou de prendre l'objectif comme nouvelle médiane.
Les règles de Perla, Provost et Murray
Les règles 1 à 3 retiennent des motifs que le hasard seul produit avec une probabilité inférieure à 5 %. La règle 4 relève du jugement.
| Règle | Signal | Comment compter |
|---|---|---|
| 1. Décalage (shift) | 6 points consécutifs ou plus tous au-dessus ou tous en dessous de la médiane | Un point sur la médiane est sauté. Il ne compte pas et n'interrompt pas la suite. |
| 2. Tendance (trend) | 5 points consécutifs ou plus qui montent tous ou qui descendent tous | Deux valeurs égales qui se suivent comptent pour un seul point. |
| 3. Séquences (runs) | Moins de séquences que la borne basse ou plus que la borne haute | Les bornes dépendent du nombre de points utiles. |
| 4. Point hors norme (astronomical point) | Un point manifestement différent de tous les autres | L'équipe en juge. La valeur la plus haute d'une série n'est pas pour autant hors norme. |
Trop peu de séquences veut dire que les points restent longtemps du même côté de la médiane. Le plus souvent, le niveau a changé. Trop de séquences veut dire que les points changent de côté plus souvent que le hasard ne le fait, par exemple quand la série alterne les valeurs de deux équipes.
| Points utiles | Borne basse | Borne haute |
|---|---|---|
| 12 | 3 | 11 |
| 20 | 6 | 16 |
| 23 | 7 | 17 |
| 30 | 11 | 21 |
Le tableau de l'article couvre 10 à 60 points utiles. Il repose sur les tables de Swed et Eisenhart (1943). Les règles 1 et 3 demandent plus de dix points. Avec trois ou quatre points, aucune règle ne s'applique. Le graphique montre déjà le niveau et la direction.
Les règles d'Anhøj et Olesen
Les jeux de règles publiés ne fixent pas les mêmes seuils. Anhøj relève qu'aucun accord n'existe sur ce qu'est une séquence anormalement longue. Anhøj et Olesen ont mesuré par simulation le taux de faux signaux de plusieurs règles. Ils en retiennent deux, dont les seuils grandissent avec le nombre n de points utiles.
- Décalage: signal si la plus longue séquence dépasse log2(n) + 3 arrondi à l'entier le plus proche. Dans un tableur:
ARRONDI(LOG(n;2)+3;0). - Croisements: signal si la ligne traverse la médiane moins de fois que le 5e centile d'une loi binomiale de paramètres n − 1 et 0,5. Dans un tableur:
LOI.BINOMIALE.INVERSE(n-1;0.5;0.05).
| Points utiles | Plus longue séquence sans signal (maximum) | Croisements sans signal (minimum) |
|---|---|---|
| 10 | 6 | 2 |
| 12 | 7 | 3 |
| 20 | 7 | 6 |
| 23 | 8 | 7 |
| 30 | 8 | 10 |
Le seuil de 6 points du décalage de Perla ne change pas avec la longueur de la série. Plus la série compte de points, plus un faux signal devient probable. Les seuils d'Anhøj et Olesen grandissent avec n. Chaque règle garde un taux de faux signaux proche de 5 % quel que soit le nombre de points. Les deux ensemble le relèvent un peu. Anhøj et Olesen demandent au moins 12 points avant de tracer la médiane et en conseillent 20.
Leur simulation teste aussi une règle de tendance. Une dérive de 0,3 écart type par point la déclenche sur environ 20 % des séries de 100 points. Les règles de décalage et de croisements détectent la même dérive presque à coup sûr dès 20 points.
En 2015, Anhøj compare sur des séries simulées les règles de Perla, les siennes et celles de Carey. Il mesure leur valeur diagnostique par le rapport de vraisemblance positif: combien de fois un signal est plus probable avec un décalage réel que sans décalage. Pour un décalage de deux écarts types, ce rapport vaut 2 à 4 avec les règles de Perla et environ 10 avec celles d'Anhøj ou de Carey. Anhøj prend pour exemple les infections urinaires contractées chaque mois dans un hôpital pendant une période sans action ciblée. Les règles de Perla y montrent un décalage et une tendance. Celles d'Anhøj et de Carey y lisent une variation aléatoire. Anhøj recommande de choisir le jeu de règles avant la collecte des données. Les règles de Perla et celles d'Anhøj ne se combinent pas: chaque test ajouté rend un faux signal plus probable.
Le run chart et la carte de contrôle
| Run chart | Carte de contrôle | |
|---|---|---|
| Ligne centrale | Médiane | Moyenne |
| Limites | Aucune | Limites de contrôle calculées sur la variation du processus |
| Question tranchée | La mesure a-t-elle changé? | Le processus est-il stable? |
| Données demandées | Une douzaine de points utiles pour appliquer les règles | Une base de référence pour calculer les limites |
| Vocabulaire du signal | Variation aléatoire ou non aléatoire | Cause commune ou cause spéciale |
Perla, Provost et Murray réservent les termes «cause commune», «cause spéciale», «stable» et «instable» à la carte de contrôle. Sur une de leurs séries, le run chart ne donne aucun signal. La carte de Shewhart tracée sur les mêmes données repère des causes spéciales. Anhøj et Olesen conseillent de tracer le run chart avant la carte de contrôle: un signal peut venir de valeurs qui dépendent les unes des autres. Cette dépendance invalide la carte.
Les simulations d'Anhøj et Olesen mesurent aussi la sensibilité. Pour un déplacement du niveau jusqu'à deux écarts types, les règles de décalage et de croisements réagissent plus souvent que la seule règle des trois écarts types d'une carte de contrôle. Aucune règle de comptage ne réagit en revanche à un point isolé très loin des autres. Seule la règle du point hors norme peut le relever.
Le test 4 de la carte de contrôle cherche huit valeurs successives du même côté de la ligne centrale. La règle du décalage cherche le même dessin autour de la médiane à partir de six points. Sur l'exemple des défauts relevés en test d'acceptation, une carte des valeurs individuelles calcule sa ligne centrale et ses limites sur les treize semaines de référence. La moyenne des étendues mobiles y vaut 2,5. La carte place sa ligne centrale à 15,08 défauts et ses limites à 8,43 et 21,73. Aucun point ne franchit les limites. La règle du décalage se déclenche en semaine 21 et le test 4 en semaine 23.
Le run chart et ses voisins
L'histogramme montre la répartition des mêmes valeurs et perd leur ordre. En analyse exploratoire des données, le manuel du NIST décrit le même tracé sans médiane ni règles sous le nom de run-sequence plot. L'analyste y cherche un déplacement du niveau ou de la dispersion et des valeurs isolées.
Les erreurs courantes
Réagir au dernier point. Une valeur haute en fin de série appelle des explications, puis une correction. Si elle ne forme aucun signal, la correction ajoute de la variation au processus au lieu d'en retirer.
Parler de tendance sans règle. Une équipe annonce que les défauts augmentent après trois points qui montent. La règle de la tendance en demande cinq.
Recalculer la médiane à chaque point. La médiane suit alors les données et efface le décalage qu'elle devait montrer. L'exemple des défauts en test d'acceptation le montre: contre la médiane des 25 semaines, aucune séquence n'atteint six points.
Choisir les règles en lisant le graphique. L'équipe qui essaie plusieurs jeux de règles finit par trouver un signal. Elle écrit le jeu retenu avant la première valeur.
Considérations IA
Un assistant écrit en quelques minutes le script R ou Python qui trace le run chart et applique le jeu de règles choisi. L'analyste vérifie dans le script que la médiane porte sur la seule période de référence, que les points sur la médiane sont sautés et que le nombre de points utiles les exclut. Un script écrit vite calcule la médiane sur toute la série.
Un modèle de langage à qui l'on colle une colonne de valeurs compte les séquences et les croisements sans calcul. Il peut se tromper sans le signaler. L'analyste fait imprimer par le script le côté de chaque point, les séquences et les croisements, puis vérifie deux ou trois comptes sur le graphique.
À la question «y a-t-il un changement?», un modèle peut essayer plusieurs règles jusqu'à en trouver une qui réagit, puis déclarer le processus «stable» avec le vocabulaire de la carte de contrôle. L'analyste lui donne le jeu de règles fixé d'avance et demande une réponse par règle.
Le modèle propose des causes au signal. Il ignore le calendrier des mises en production, l'absence d'un testeur ou le changement de la façon de compter. Ses causes restent des hypothèses, que l'équipe confronte aux annotations du graphique.
Exemples
Le run chart de l'exemple montre un décalage sous la médiane figée après un changement. Une équipe relève chaque semaine les défauts trouvés en test d'acceptation. En semaine 14, elle introduit une liste de contrôle pour la revue des exigences. Les semaines 1 à 13 forment la période de référence. Leur médiane vaut 15.
| Semaine | Défauts | Côté | Semaine | Défauts | Côté |
|---|---|---|---|---|---|
| 1 | 16 | + | 14 | 13 | − |
| 2 | 17 | + | 15 | 16 | + |
| 3 | 13 | − | 16 | 12 | − |
| 4 | 14 | − | 17 | 14 | − |
| 5 | 15 | sur la médiane | 18 | 11 | − |
| 6 | 18 | + | 19 | 12 | − |
| 7 | 12 | − | 20 | 10 | − |
| 8 | 13 | − | 21 | 13 | − |
| 9 | 16 | + | 22 | 15 | sur la médiane |
| 10 | 17 | + | 23 | 12 | − |
| 11 | 14 | − | 24 | 11 | − |
| 12 | 13 | − | 25 | 13 | − |
| 13 | 18 | + |
| Vérification | Perla, Provost et Murray | Anhøj et Olesen |
|---|---|---|
| Période de référence (12 points utiles) | 7 séquences pour des bornes de 3 à 11. Plus longue séquence: 2 points. Aucun signal | 6 croisements pour un minimum de 3. Plus longue séquence: 2 points pour un maximum de 7. Aucun signal |
| Décalage (23 points utiles) | 9 points sous la médiane des semaines 16 à 25. Le 6e tombe en semaine 21. Signal | Plus longue séquence: 9 points pour un maximum de 8. Signal |
| Tendance | Au plus 4 points qui montent ou qui descendent (semaines 3 à 6 et semaines 7 à 10). Aucun signal | Pas de règle |
| Séquences ou croisements | 10 séquences pour des bornes de 7 à 17. Aucun signal | 9 croisements pour un minimum de 7. Aucun signal |
| Point hors norme | Valeur la plus haute: 18 (semaines 6 et 13). Elle reste dans la dispersion des autres. Aucun signal | Pas de règle |
La moyenne passe de 15,08 défauts avant la liste de contrôle à 12,67 après. Ces deux chiffres ne montrent pas que la série reste sous la médiane à partir de la semaine 16.
Visualisations
Le run chart de l'exemple et les motifs des règles sont des dessins: la position des points par rapport à la médiane porte l'information. Les règles, leurs seuils, la comparaison avec la carte de contrôle, les données et leur lecture sont faits de lignes et de colonnes, donc de tableaux.
Coût
| Dimension | Niveau | Justification |
|---|---|---|
| Préparation | Faible | Définir la mesure, l'unité de temps et le jeu de règles. Retrouver une douzaine de valeurs de référence ou les relever quand elles n'existent pas. Sans historique, un relevé hebdomadaire demande trois mois avant la première lecture. |
| Exécution | Faible | Un tableur trace le graphique en quelques minutes. |
| Documentation | Faible | Le graphique annoté, la médiane de référence, le jeu de règles retenu et la date de chaque signal. |
Outils
Un papier et un crayon suffisent. Affiché au mur de l'équipe, le graphique reçoit un point par semaine.
Un tableur trace le run chart en graphique en courbes. La médiane de référence s'ajoute comme deuxième série, qui répète la même valeur à chaque période. La fonction MEDIANE la calcule sur les cellules de la période de référence. Une colonne qui note le côté de chaque point sert à compter les séquences et les croisements.
Le paquet R qicharts2 de Jacob Anhøj trace le run chart et applique les règles d'Anhøj et Olesen. Les tests du run chart de Minitab reposent sur des valeurs p et portent sur le regroupement, le mélange, la tendance et l'oscillation. Ce jeu diffère de ceux de Perla et d'Anhøj. Minitab compte un point sur la médiane avec les points du dessous. Les règles de Perla et d'Anhøj le sautent.
Sources
- Perla, Rocco J., Provost, Lloyd P., Murray, Sandy K., «The run chart: a simple analytical tool for learning from variation in healthcare processes», BMJ Quality & Safety, 2011, 20(1), p. 46-51, doi:10.1136/bmjqs.2009.037895: les éléments du graphique, la médiane figée, les quatre règles, le tableau des séquences et les limites de la technique face à la carte de contrôle. Les exemples viennent des soins hospitaliers.
- Anhøj, Jacob, Olesen, Anne Vingaard, «Run Charts Revisited: A Simulation Study of Run Chart Rules for Detection of Non-Random Variation in Health Care Processes», PLOS ONE, 2014, 9(11): e113825: les règles de décalage et de croisements, leurs seuils, leur taux de faux signaux et la comparaison avec la règle des trois écarts types.
- Anhøj, Jacob, «Diagnostic Value of Run Chart Analysis: Using Likelihood Ratios to Compare Run Chart Rules on Simulated Data Series», PLOS ONE, 2015, 10(3): e0121349: la comparaison de trois jeux de règles et le choix du jeu avant la collecte des données.
- NIST/SEMATECH, e-Handbook of Statistical Methods, §1.3.3.25 «Run-Sequence Plot»: le même tracé en analyse exploratoire, pour repérer un déplacement du niveau ou de la dispersion et des valeurs isolées.

