Your Training Partner
Toolbox des techniques
Run chart des défauts relevés chaque semaine en test d'acceptation pendant 25 semaines. La médiane des semaines 1 à 13 vaut 15 défauts et se prolonge vers la droite. Une liste de contrôle pour la revue des exigences entre en service en semaine 14. Des semaines 16 à 25, neuf points de suite tombent sous la médiane. Le point de la semaine 22 tombe sur la médiane et ne compte pas.

Run chart

Un run chart est un graphique en courbes qui porte une mesure dans l'ordre du temps et prend sa médiane comme ligne centrale. L'équipe le lit avec des règles de probabilité. Une longue suite de points du même côté de la médiane ou des points qui montent ou descendent sans interruption signalent une variation non aléatoire. Une alternance trop rare ou trop fréquente autour de la médiane et un point très éloigné des autres la signalent aussi. Le graphique ne demande ni limites de contrôle ni hypothèse sur la distribution des données. Il se lit dès une douzaine de points. Il doit son nom aux séquences (runs) de points consécutifs du même côté de la médiane.

Objectif

Le run chart est un graphique de suivi: il porte chaque valeur d'une mesure à sa date et la situe par rapport à la médiane. Il montre si la mesure a changé et à partir de quel point.

Les statistiques descriptives résument une période sans l'ordre de ses valeurs. Une moyenne avant et une moyenne après un changement disent qu'un indicateur a baissé. Elles ne disent ni quand la baisse commence ni si elle tient. Perla, Provost et Murray montrent trois unités qui ont la même moyenne et le même écart type avant et après une amélioration. Dans la première, le gain tient. Dans la deuxième, la baisse avait commencé avant le changement. Dans la troisième, le gain s'efface. Seul l'ordre des points distingue les trois histoires.

Le livrable est le graphique annoté: les points datés, la médiane de la période de référence, les changements introduits, la règle qui a donné un signal et le point où elle s'est déclenchée. L'équipe y lit l'effet d'un changement et décide de le garder, de le corriger ou de l'abandonner.

Une carte de contrôle porte les mêmes points avec la moyenne et des limites de contrôle. Le run chart remplace la moyenne par la médiane et n'a pas de limites. Il ne dit pas si le processus est stable: cette question revient à la carte de contrôle.

Usage

Quand l'utiliser

  • Amélioration en cours: suivre l'indicateur point par point et voir si le changement agit avant d'avoir une base de référence assez longue pour des limites de contrôle.
  • Comparaison avant-après: montrer quand l'effet commence.
  • Avant de calculer des limites de contrôle: une série qui donne un signal ne sert pas de base de référence à une carte de contrôle.
  • Valeur de la semaine qui inquiète: vérifier si elle prolonge un décalage ou une tendance avant de demander des explications.
  • Après une amélioration: vérifier que le gain tient, en phase Control d'un DMAIC.

Quand ne pas l'utiliser

  • Question de stabilité ou de prévisibilité: le run chart ne la tranche pas, tracer une carte de contrôle.
  • Mesures sans ordre dans le temps: un lot mesuré d'un coup n'a pas de chronologie, décrire sa répartition par un histogramme.

Description

Les éléments

L'axe horizontal porte l'ordre du temps: des jours, des semaines ou des cas successifs quand chaque demande ou chaque livraison donne une valeur. L'axe vertical porte la mesure: un nombre, un taux, un délai.

La ligne centrale est la médiane: la valeur qui laisse autant de points au-dessus qu'en dessous. Autour de la médiane, chaque point a une chance sur deux de tomber au-dessus. Les règles de lecture reposent sur cette probabilité. Une valeur extrême ne déplace pas la médiane.

La période de référence regroupe les points relevés avant le changement. L'équipe calcule la médiane sur ces points seulement. Si la période ne montre aucun signal, l'équipe fige la médiane et la prolonge sur les points suivants. Les annotations placent sur l'axe du temps les changements introduits et les événements connus: une nouvelle procédure, une migration, une équipe réduite pendant les vacances. Une ligne d'objectif peut s'ajouter. Les règles l'ignorent.

Une séquence (run) est une suite de points consécutifs du même côté de la médiane. Un point sur la médiane ne prolonge ni n'interrompt la séquence en cours. Le nombre de séquences dépasse d'une unité le nombre de fois où la ligne traverse la médiane. Les points utiles sont ceux qui ne tombent pas sur la médiane. Les seuils des règles dépendent de leur nombre.

Construire le run chart

  1. Définir la mesure, l'unité de temps et le jeu de règles. L'équipe écrit ce qu'elle compte, sur quel périmètre et à quel rythme: les défauts relevés par semaine en test d'acceptation (UAT) ou le délai de chaque demande dans l'ordre de clôture. Hors de l'informatique, une administration cantonale peut porter la durée de traitement de chaque dossier. La définition reste la même pendant tout le suivi. Une définition qui change produit un décalage que la règle signale comme un effet. Un nombre brut dépend aussi du volume traité. Quand le volume varie d'une période à l'autre, l'équipe porte un taux, par exemple les défauts pour 100 cas de test exécutés. Si la moitié des valeurs ou plus tombe à 0 ou à 100 %, la médiane se pose sur la borne. L'équipe porte alors le temps écoulé entre deux événements. Elle choisit enfin le jeu de règles avant la collecte des données.
  2. Relever les valeurs. Les valeurs viennent d'un système, d'un export ou d'une feuille de relevé tenue au poste. Chaque valeur garde sa date.
  3. Tracer les points. L'équipe porte un point par période dans l'ordre du temps et relie chaque point au précédent.
  4. Calculer la médiane de la période de référence. L'équipe trie les valeurs de la période et prend la valeur du milieu. Pour un nombre pair de valeurs, la médiane est la moyenne des deux valeurs du milieu. L'équipe trace la médiane en ligne horizontale et marque sur l'axe la date du changement.
  5. Vérifier la période de référence. L'équipe applique les règles aux seuls points de la période. Sans signal, elle fige la médiane et la prolonge vers la droite. Un signal montre que la période contient déjà un changement. L'équipe en cherche la cause avant de prendre la période comme référence.
  6. Porter les nouveaux points et appliquer les règles. Chaque nouveau point se lit contre la médiane figée.
  7. Interpréter le signal. Un signal indique que quelque chose a changé. Il n'indique pas quoi. L'équipe confronte la date du signal aux annotations: le changement introduit, une autre modification du processus, une nouvelle façon de compter. La lecture demande du jugement et la connaissance du contexte. Quand l'objectif est atteint, Anhøj et Olesen proposent de calculer une nouvelle médiane sur les points d'après le changement ou de prendre l'objectif comme nouvelle médiane.

Les règles de Perla, Provost et Murray

Les règles 1 à 3 retiennent des motifs que le hasard seul produit avec une probabilité inférieure à 5 %. La règle 4 relève du jugement.

Décalage
6 points de suite sous la médiane
Tendance
5 points qui montent
Trop peu de séquences
4 séquences pour 20 points
Trop de séquences
20 séquences pour 20 points
Point hors norme
1 point loin de tous les autres
Les motifs que cherchent les règles de Perla, Provost et Murray. Chaque panneau ne déclenche que sa propre règle. Décalage: 6 points de suite sous la médiane. Tendance: 5 points qui montent. Trop peu de séquences: 4 séquences pour 20 points. La borne basse vaut 6. Trop de séquences: 20 séquences pour 20 points. La borne haute vaut 16. Point hors norme: 1 point loin de tous les autres.
RègleSignalComment compter
1. Décalage (shift)6 points consécutifs ou plus tous au-dessus ou tous en dessous de la médianeUn point sur la médiane est sauté. Il ne compte pas et n'interrompt pas la suite.
2. Tendance (trend)5 points consécutifs ou plus qui montent tous ou qui descendent tousDeux valeurs égales qui se suivent comptent pour un seul point.
3. Séquences (runs)Moins de séquences que la borne basse ou plus que la borne hauteLes bornes dépendent du nombre de points utiles.
4. Point hors norme (astronomical point)Un point manifestement différent de tous les autresL'équipe en juge. La valeur la plus haute d'une série n'est pas pour autant hors norme.
Les règles de lecture de Perla, Provost et Murray: le motif qui donne un signal et la façon de compter les points.

Trop peu de séquences veut dire que les points restent longtemps du même côté de la médiane. Le plus souvent, le niveau a changé. Trop de séquences veut dire que les points changent de côté plus souvent que le hasard ne le fait, par exemple quand la série alterne les valeurs de deux équipes.

Points utilesBorne basseBorne haute
12311
20616
23717
301121
Bornes du nombre de séquences selon le nombre de points utiles, extraites du tableau 1 de Perla, Provost et Murray. Un nombre de séquences sous la borne basse ou au-dessus de la borne haute donne un signal.

Le tableau de l'article couvre 10 à 60 points utiles. Il repose sur les tables de Swed et Eisenhart (1943). Les règles 1 et 3 demandent plus de dix points. Avec trois ou quatre points, aucune règle ne s'applique. Le graphique montre déjà le niveau et la direction.

Les règles d'Anhøj et Olesen

Les jeux de règles publiés ne fixent pas les mêmes seuils. Anhøj relève qu'aucun accord n'existe sur ce qu'est une séquence anormalement longue. Anhøj et Olesen ont mesuré par simulation le taux de faux signaux de plusieurs règles. Ils en retiennent deux, dont les seuils grandissent avec le nombre n de points utiles.

  • Décalage: signal si la plus longue séquence dépasse log2(n) + 3 arrondi à l'entier le plus proche. Dans un tableur: ARRONDI(LOG(n;2)+3;0).
  • Croisements: signal si la ligne traverse la médiane moins de fois que le 5e centile d'une loi binomiale de paramètres n − 1 et 0,5. Dans un tableur: LOI.BINOMIALE.INVERSE(n-1;0.5;0.05).
Points utilesPlus longue séquence sans signal (maximum)Croisements sans signal (minimum)
1062
1273
2076
2387
30810
Seuils des règles d'Anhøj et Olesen selon le nombre de points utiles. Les valeurs viennent de leur tableau 1. Une séquence plus longue que le maximum ou un nombre de croisements sous le minimum donne un signal.

Le seuil de 6 points du décalage de Perla ne change pas avec la longueur de la série. Plus la série compte de points, plus un faux signal devient probable. Les seuils d'Anhøj et Olesen grandissent avec n. Chaque règle garde un taux de faux signaux proche de 5 % quel que soit le nombre de points. Les deux ensemble le relèvent un peu. Anhøj et Olesen demandent au moins 12 points avant de tracer la médiane et en conseillent 20.

Leur simulation teste aussi une règle de tendance. Une dérive de 0,3 écart type par point la déclenche sur environ 20 % des séries de 100 points. Les règles de décalage et de croisements détectent la même dérive presque à coup sûr dès 20 points.

En 2015, Anhøj compare sur des séries simulées les règles de Perla, les siennes et celles de Carey. Il mesure leur valeur diagnostique par le rapport de vraisemblance positif: combien de fois un signal est plus probable avec un décalage réel que sans décalage. Pour un décalage de deux écarts types, ce rapport vaut 2 à 4 avec les règles de Perla et environ 10 avec celles d'Anhøj ou de Carey. Anhøj prend pour exemple les infections urinaires contractées chaque mois dans un hôpital pendant une période sans action ciblée. Les règles de Perla y montrent un décalage et une tendance. Celles d'Anhøj et de Carey y lisent une variation aléatoire. Anhøj recommande de choisir le jeu de règles avant la collecte des données. Les règles de Perla et celles d'Anhøj ne se combinent pas: chaque test ajouté rend un faux signal plus probable.

Le run chart et la carte de contrôle

Run chartCarte de contrôle
Ligne centraleMédianeMoyenne
LimitesAucuneLimites de contrôle calculées sur la variation du processus
Question tranchéeLa mesure a-t-elle changé?Le processus est-il stable?
Données demandéesUne douzaine de points utiles pour appliquer les règlesUne base de référence pour calculer les limites
Vocabulaire du signalVariation aléatoire ou non aléatoireCause commune ou cause spéciale
Ce qui distingue le run chart de la carte de contrôle: la ligne centrale, les limites, la question tranchée, les données demandées et le vocabulaire du signal.

Perla, Provost et Murray réservent les termes «cause commune», «cause spéciale», «stable» et «instable» à la carte de contrôle. Sur une de leurs séries, le run chart ne donne aucun signal. La carte de Shewhart tracée sur les mêmes données repère des causes spéciales. Anhøj et Olesen conseillent de tracer le run chart avant la carte de contrôle: un signal peut venir de valeurs qui dépendent les unes des autres. Cette dépendance invalide la carte.

Les simulations d'Anhøj et Olesen mesurent aussi la sensibilité. Pour un déplacement du niveau jusqu'à deux écarts types, les règles de décalage et de croisements réagissent plus souvent que la seule règle des trois écarts types d'une carte de contrôle. Aucune règle de comptage ne réagit en revanche à un point isolé très loin des autres. Seule la règle du point hors norme peut le relever.

Le test 4 de la carte de contrôle cherche huit valeurs successives du même côté de la ligne centrale. La règle du décalage cherche le même dessin autour de la médiane à partir de six points. Sur l'exemple des défauts relevés en test d'acceptation, une carte des valeurs individuelles calcule sa ligne centrale et ses limites sur les treize semaines de référence. La moyenne des étendues mobiles y vaut 2,5. La carte place sa ligne centrale à 15,08 défauts et ses limites à 8,43 et 21,73. Aucun point ne franchit les limites. La règle du décalage se déclenche en semaine 21 et le test 4 en semaine 23.

Le run chart et ses voisins

L'histogramme montre la répartition des mêmes valeurs et perd leur ordre. En analyse exploratoire des données, le manuel du NIST décrit le même tracé sans médiane ni règles sous le nom de run-sequence plot. L'analyste y cherche un déplacement du niveau ou de la dispersion et des valeurs isolées.

Les erreurs courantes

Réagir au dernier point. Une valeur haute en fin de série appelle des explications, puis une correction. Si elle ne forme aucun signal, la correction ajoute de la variation au processus au lieu d'en retirer.

Parler de tendance sans règle. Une équipe annonce que les défauts augmentent après trois points qui montent. La règle de la tendance en demande cinq.

Recalculer la médiane à chaque point. La médiane suit alors les données et efface le décalage qu'elle devait montrer. L'exemple des défauts en test d'acceptation le montre: contre la médiane des 25 semaines, aucune séquence n'atteint six points.

Choisir les règles en lisant le graphique. L'équipe qui essaie plusieurs jeux de règles finit par trouver un signal. Elle écrit le jeu retenu avant la première valeur.

Considérations IA

Un assistant écrit en quelques minutes le script R ou Python qui trace le run chart et applique le jeu de règles choisi. L'analyste vérifie dans le script que la médiane porte sur la seule période de référence, que les points sur la médiane sont sautés et que le nombre de points utiles les exclut. Un script écrit vite calcule la médiane sur toute la série.

Un modèle de langage à qui l'on colle une colonne de valeurs compte les séquences et les croisements sans calcul. Il peut se tromper sans le signaler. L'analyste fait imprimer par le script le côté de chaque point, les séquences et les croisements, puis vérifie deux ou trois comptes sur le graphique.

À la question «y a-t-il un changement?», un modèle peut essayer plusieurs règles jusqu'à en trouver une qui réagit, puis déclarer le processus «stable» avec le vocabulaire de la carte de contrôle. L'analyste lui donne le jeu de règles fixé d'avance et demande une réponse par règle.

Le modèle propose des causes au signal. Il ignore le calendrier des mises en production, l'absence d'un testeur ou le changement de la façon de compter. Ses causes restent des hypothèses, que l'équipe confronte aux annotations du graphique.

Exemples

Le run chart de l'exemple montre un décalage sous la médiane figée après un changement. Une équipe relève chaque semaine les défauts trouvés en test d'acceptation. En semaine 14, elle introduit une liste de contrôle pour la revue des exigences. Les semaines 1 à 13 forment la période de référence. Leur médiane vaut 15.

SemaineDéfautsCôtéSemaineDéfautsCôté
116+1413−
217+1516+
313−1612−
414−1714−
515sur la médiane1811−
618+1912−
712−2010−
813−2113−
916+2215sur la médiane
1017+2312−
1114−2411−
1213−2513−
1318+
Défauts relevés en test d'acceptation par semaine et côté de chaque point par rapport à la médiane de référence de 15. Valeurs d'illustration.
Un décalage sous la médiane après la liste de contrôleRun chart des défauts relevés chaque semaine en test d'acceptation pendant 25 semaines. La médiane des semaines 1 à 13 vaut 15 défauts et se prolonge vers la droite. Une liste de contrôle pour la revue des exigences entre en service en semaine 14. Des semaines 16 à 25, neuf points de suite tombent sous la médiane. Le point de la semaine 22 tombe sur la médiane et ne compte pas.8101214161820Défauts12345678910111213141516171819202122232425SemaineMédiane de référence: 15Liste de contrôle pour la revue des exigencesMédiane figée6e point: signal9 points sous la médianeSur la médiane: ne compte pas Un décalage sous la médiane après la liste de contrôleRun chart des défauts relevés chaque semaine en test d'acceptation pendant 25 semaines. La médiane des semaines 1 à 13 vaut 15 défauts et se prolonge vers la droite. Une liste de contrôle pour la revue des exigences entre en service en semaine 14. Des semaines 16 à 25, neuf points de suite tombent sous la médiane. Le point de la semaine 22 tombe sur la médiane et ne compte pas.8101214161820Défauts135791113141719212325SemaineMédiane de référence: 15Liste de contrôle pourla revue des exigencesMédiane figée6e point: signal9 points sous la médianeSur la médiane: ne compte pas
Run chart des défauts relevés par semaine en test d'acceptation. La médiane des semaines 1 à 13 vaut 15. Après l'introduction de la liste de contrôle en semaine 14, neuf points de suite tombent sous la médiane des semaines 16 à 25. La règle du décalage se déclenche en semaine 21 avec le sixième point. Le point de la semaine 22 tombe sur la médiane et ne compte pas.
VérificationPerla, Provost et MurrayAnhøj et Olesen
Période de référence (12 points utiles)7 séquences pour des bornes de 3 à 11. Plus longue séquence: 2 points. Aucun signal6 croisements pour un minimum de 3. Plus longue séquence: 2 points pour un maximum de 7. Aucun signal
Décalage (23 points utiles)9 points sous la médiane des semaines 16 à 25. Le 6e tombe en semaine 21. SignalPlus longue séquence: 9 points pour un maximum de 8. Signal
TendanceAu plus 4 points qui montent ou qui descendent (semaines 3 à 6 et semaines 7 à 10). Aucun signalPas de règle
Séquences ou croisements10 séquences pour des bornes de 7 à 17. Aucun signal9 croisements pour un minimum de 7. Aucun signal
Point hors normeValeur la plus haute: 18 (semaines 6 et 13). Elle reste dans la dispersion des autres. Aucun signalPas de règle
Le run chart lu avec chacun des deux jeux de règles. Les deux jeux donnent le même verdict: un décalage sous la médiane après la semaine 14.

La moyenne passe de 15,08 défauts avant la liste de contrôle à 12,67 après. Ces deux chiffres ne montrent pas que la série reste sous la médiane à partir de la semaine 16.

Visualisations

Le run chart de l'exemple et les motifs des règles sont des dessins: la position des points par rapport à la médiane porte l'information. Les règles, leurs seuils, la comparaison avec la carte de contrôle, les données et leur lecture sont faits de lignes et de colonnes, donc de tableaux.

Coût

DimensionNiveauJustification
PréparationFaibleDéfinir la mesure, l'unité de temps et le jeu de règles. Retrouver une douzaine de valeurs de référence ou les relever quand elles n'existent pas. Sans historique, un relevé hebdomadaire demande trois mois avant la première lecture.
ExécutionFaibleUn tableur trace le graphique en quelques minutes.
DocumentationFaibleLe graphique annoté, la médiane de référence, le jeu de règles retenu et la date de chaque signal.

Outils

Un papier et un crayon suffisent. Affiché au mur de l'équipe, le graphique reçoit un point par semaine.

Un tableur trace le run chart en graphique en courbes. La médiane de référence s'ajoute comme deuxième série, qui répète la même valeur à chaque période. La fonction MEDIANE la calcule sur les cellules de la période de référence. Une colonne qui note le côté de chaque point sert à compter les séquences et les croisements.

Le paquet R qicharts2 de Jacob Anhøj trace le run chart et applique les règles d'Anhøj et Olesen. Les tests du run chart de Minitab reposent sur des valeurs p et portent sur le regroupement, le mélange, la tendance et l'oscillation. Ce jeu diffère de ceux de Perla et d'Anhøj. Minitab compte un point sur la médiane avec les points du dessous. Les règles de Perla et d'Anhøj le sautent.

Sources

Roue des parties prenantes
Toutes les techniques
Running the Swamp