
La plupart des modèles de cas de test sont un tableur de quinze colonnes : un identifiant, un module, une priorité, les préconditions, les étapes, le résultat attendu, puis un statut, la personne qui l’a exécuté, la date, le build concerné, et une colonne commentaires qui se remplit de « réussi » et de « voir Slack ».
Regardez ces colonnes de nouveau et elles décrivent deux choses différentes. La première moitié décrit une vérification. La seconde décrit une fois où quelqu’un l’a effectuée. Mettre les deux sur la même ligne est la raison pour laquelle les tableurs de cas de test finissent par pourrir, et c’est la seule chose que ce modèle fait différemment.
Le cas et l’exécution sont deux documents différents
Un cas de test est écrit une seule fois et ne change que lorsque le comportement qu’il vérifie change. Une exécution a lieu à chaque version. L’un est une définition, l’autre un enregistrement, et leurs durées de vie ne sont pas les mêmes.
Si vous donnez à la ligne du cas une seule colonne Statut, chaque exécution écrase la précédente. La feuille ne connaît que le résultat le plus récent. « Il a réussi à la dernière version sur ce build » disparaît dès que quelqu’un tape « échec » par-dessus, et avec lui disparaît la preuve qui permettrait de savoir si l’échec est nouveau.
- Faible
- Une ligne par cas, avec des colonnes Statut, Testé par et Date, qui sont écrasées à chaque exécution du cas.
- Mieux
- Le cas écrit une seule fois, avec un journal d'exécution en dessous auquel on ajoute uniquement de nouvelles lignes.
La seconde forme répond aux questions que les gens se posent réellement : quand cela a-t-il réussi pour la dernière fois, sur quel build a-t-il commencé à échouer, et a-t-il déjà été exécuté sur Safari. La première forme ne peut répondre à aucune de ces questions, parce que chaque réponse a été écrite dans la même cellule.
Le modèle
Quatre sections. Les trois premières définissent la vérification et changent rarement. La quatrième est le journal d’exécution, et elle ne fait que s’allonger.
# Cas de test : [ce qui est vérifié, en une phrase]
**ID :** [numéro TC]
**Domaine :** [fonctionnalité ou écran]
**Dernière modification :** [date, et ce qui a changé dans le comportement]
## Préconditions
L'état dans lequel le système doit se trouver avant que l'étape 1 ait un sens. Le cas
se met lui-même en place ; il ne dépend jamais de l'exécution préalable d'un autre test.
- [compte, rôle ou données qui doivent exister]
- [environnement, indicateur ou navigateur, si cela compte]
## Étapes
Une action par étape.
1. [action]
2. [action]
3. [action]
## Résultat attendu
Assez précis pour pouvoir être faux. Dites aussi ce qui ne doit PAS se produire.
- [ce que la personne qui exécute le cas doit voir]
- [ce qui ne doit pas se produire : pas de navigation, pas de second e-mail, pas de débit]
## Journal d'exécution
Une ligne par exécution. Ne modifiez jamais une ancienne ligne ; ajoutez-en une nouvelle.
| Date | Build | Par | Navigateur et environnement | Résultat | Ce qui a réellement été observé | Preuve |
| --- | --- | --- | --- | --- | --- | --- |
| [date] | [version] | [nom] | [navigateur, SE, environnement] | réussi / échec / bloqué | [observé, en mots] | [lien] |
Bloqué n’est pas échoué
La colonne Résultat a trois valeurs, et la troisième est celle que la plupart des modèles omettent.
Un cas est bloqué lorsqu’il n’a pas pu être exécuté du tout : le compte de test manquait, l’environnement de staging était en panne, l’indicateur de fonctionnalité était désactivé. Rien n’a été appris sur le comportement. Si vous le notez comme un échec, le nombre de défauts augmente pour une raison qui n’a rien à voir avec le logiciel, quelqu’un ouvre un bogue que personne ne peut reproduire, et la vraie question, pourquoi la précondition n’a pas été remplie, n’est jamais posée.
Le noter comme une réussite, ce qui arrive plus souvent que quiconque ne l’admet, revient à compter comme couverture une vérification qui n’a jamais été exécutée. Des deux mensonges, celui-ci est la pire, car c’est celle à laquelle personne ne revient pour la corriger.
La colonne qui fait le travail
Ce qui a réellement été observé est la cellule la plus précieuse du journal d’exécution, et dans la plupart des tableurs elle n’existe pas. On y trouve à la place une colonne Statut, et « échec » dans une colonne Statut n’apprend presque rien à la personne suivante.
Comparez « échec » avec « le message d’erreur est apparu, mais la page a aussi navigué vers le tableau de bord et l’utilisateur était connecté ». La seconde formulation est déjà à moitié un rapport de bogue. Elle dit ce qui s’est passé, elle dit en quoi cela diffère du résultat attendu rédigé trois sections plus haut, et elle a été écrite par la seule personne qui l’a vu, au seul moment où elle pouvait encore le décrire fidèlement.
Écrivez-la aussi pour les réussites, en quelques mots. Une réussite qui consigne ce qui a été observé peut être vérifiée plus tard. Une réussite qui ne consigne que « réussi » doit être crue sur parole.
Ce qu’il faut supprimer
La plupart des colonnes de la version à quinze colonnes, car autre chose les contient déjà.
Conçu par et Date de création figurent dans l’historique des versions de l’endroit où vit le cas. La Priorité appartient au domaine testé plutôt qu’à chaque cas, et sur un cas isolé elle est fixée une fois, puis jamais réexaminée. Les Données de test appartiennent aux préconditions, où elles se lisent comme une partie de la mise en place plutôt que dans une colonne à côté. Les Post-conditions sont généralement le résultat attendu répété, et lorsque ce n’est pas le cas, ce sont les préconditions du cas suivant.
Ce qu’il ne faut pas supprimer, c’est la ligne Dernière modification. Un cas dont le résultat attendu a été discrètement modifié le jour où il a commencé à échouer est le document le plus trompeur du test, et une seule ligne avec une date et une raison permet de le voir.
Pour savoir ce qui va dans chaque section et comment écrire des étapes que quelqu’un d’autre peut suivre, le guide sur la rédaction d’un cas de test le détaille. Lorsque les cas s’additionnent pour former une version, le modèle de plan de tests est la page qui indique lesquels sont dans le périmètre.
Quand une exécution échoue
Une exécution en échec est le début d’un rapport de bogue, et une bonne ligne de journal a fait l’essentiel du travail : les étapes sont écrites, le résultat attendu est écrit, et ce qui a réellement été observé est écrit à côté. Ce que la ligne ne peut pas contenir, c’est l’état de la machine sur laquelle l’échec s’est produit. La version du navigateur, la console et les requêtes derrière la page sont exactement ce que la personne qui corrigera le problème demandera, et au moment où elle les demande, l’onglet aura déjà été fermé.
Session Replay
Extension Chrome gratuite. Un clic sur la page qui se comporte mal capture la capture d'écran, la console et le journal réseau, et vous donne un lien à coller dans le ticket.
Ce lien, c’est précisément à quoi sert la colonne Preuve. Mettez-le dans la ligne, mettez l’identifiant du cas dans le rapport de bogue, et les deux restent liés : celui qui corrige peut relancer la même vérification, et celui qui l’exécutera à la prochaine version peut voir qu’elle a déjà échoué, et pourquoi.
La version courte
Rédigez le cas une fois et consignez chaque exécution sous lui, plutôt que d’écraser un seul statut. Donnez au résultat trois valeurs, car une vérification qui n’a pas pu être exécutée n’est ni une réussite ni un échec. Consignez ce qui a été réellement observé, pour les réussites comme pour les échecs. Supprimez les colonnes que quelque chose d’autre enregistre déjà, et gardez la ligne qui indique quand le résultat attendu a changé pour la dernière fois.