
La plupart des checklists QA de site web sont une liste de choses à regarder. Les formulaires s’envoient, les liens fonctionnent, les images se chargent, ça a l’air correct sur mobile. Elles ne sont pas fausses, et elles attrapent presque rien, parce que la partie difficile du QA avant lancement n’a jamais été de savoir quels éléments figurent sur la liste.
Ce sont deux autres choses. Qui regarde, et dans quelle configuration il regarde.
La personne qui l’a construit ne peut pas le voir
Demandez au développeur qui a construit une page de vérifier qu’elle fonctionne, et il vérifiera qu’elle fonctionne. Il cliquera sur ce qu’il a construit, dans l’ordre où il l’a construit, avec les données qu’il a utilisées pendant le développement, dans le navigateur qu’il avait ouvert.
Ce n’est pas une critique envers lui, c’est une description de la manière dont on sait qu’une chose fonctionne. Il sait quel bouton vient ensuite. Il sait que le formulaire veut une date dans tel format. Il sait, sans même s’en rendre compte, que l’élément à gauche est un onglet et non un titre. Un visiteur qui arrive pour la première fois ne sait rien de tout cela, et l’élément de checklist « vérifier que le parcours d’inscription fonctionne » reçoit honnêtement une réponse oui de quelqu’un qui ne pourrait absolument pas constater qu’il se passe mal.
Donc la première colonne d’une checklist qui mérite sa place n’est pas l’élément. C’est qui la fait, et pour tout ce qu’un inconnu va toucher, ce devrait être quelqu’un qui ne l’a pas construit. Un collègue d’une autre équipe, pendant quinze minutes, trouve un ensemble de problèmes différent de celui que trouve l’auteur en deux heures.
« Ça marche » est une affirmation sur une seule configuration
La deuxième colonne est celle que les checklists omettent généralement complètement.
Votre passage de QA tourne sur une seule machine : un navigateur, une taille de fenêtre, un système d’exploitation, un jeu de réglages, un réseau, un profil avec vos extensions. Le site que reçoivent vos visiteurs est un autre. La même page est rendue par un moteur différent, à un zoom différent, avec le mode sombre forcé, avec une extension qui injecte du CSS, sur une connexion qui coupe.
C’est pourquoi « testé sur Chrome » est une affirmation plus faible qu’elle n’en a l’air, et pourquoi les trois moteurs comptent davantage que les vingt noms de navigateurs. Une checklist qui dit « vérifier la mise en page » pose une question sans réponse. Une qui dit « vérifier la mise en page à 200 % de zoom, et dans une fenêtre privée sans extension » pose deux questions qui ont chacune une réponse.
- Faible
- Vérifier que la page de paiement fonctionne sur mobile.
- Mieux
- Quelqu'un qui ne l'a jamais vue effectue un achat sur un vrai téléphone, dans Safari, avec la taille de texte du système augmentée.
Utiliser des données semblables à la production
Le troisième point, et le moins coûteux à corriger. Un passage de QA mené avec Test User et test@example.com teste un site que personne n’utilisera. La production contient des noms avec des apostrophes, des adresses qui s’étendent sur quatre lignes, des comptes qui ne contiennent encore rien, et une liste de onze mille lignes.
Mettez quatre ou cinq enregistrements délicats dans ce que vous vérifiez, une seule fois, et gardez-les. La plupart des bugs de mise en page qui atteignent les clients ne sont pas dans la mise en page. Ils résident dans une hypothèse sur la longueur d’une chaîne de caractères.
La checklist
Trois colonnes, et les deux de droite sont celles qui font le travail. Gardez-la assez courte pour que quelqu’un la fasse réellement.
# Contrôle QA avant lancement : <ce qui est livré>
Chaque ligne : ce qui est vérifié, qui le vérifie, et dans quelle configuration.
« Quelqu'un d'autre » désigne une personne qui n'a pas construit cela.
| Vérification | Qui | Configuration |
| --- | --- | --- |
| Le point principal de cette version, du début à la fin | quelqu'un d'autre | un vrai téléphone, Safari |
| La même chose, sur un moteur de bureau qui n'est pas Chromium | n'importe qui | Firefox ou Safari |
| Mise en page à 200 % de zoom du navigateur | n'importe qui | n'importe quel navigateur de bureau |
| La page sans extension et sans session enregistrée | n'importe qui | fenêtre privée |
| Formulaires, avec des données délicates | quelqu'un d'autre | n'importe laquelle |
| L'état vide, avec un compte neuf | quelqu'un d'autre | n'importe laquelle |
| L'état chargé, avec une grande liste | n'importe qui | n'importe laquelle |
| Clavier seul, sans souris, sur le parcours principal | quelqu'un d'autre | n'importe quel navigateur de bureau |
| Mode sombre, si le réglage du système est respecté | n'importe qui | système réglé en sombre |
| Tout ce que les notes de version affirment | quelqu'un d'autre | n'importe laquelle |
## Données délicates à garder sous la main
- un nom avec une apostrophe et un nom de 80 caractères
- un compte sans rien dedans
- une liste assez longue pour défiler
- une valeur dans un format de monnaie ou de date qui n'est pas le vôtre
## Non vérifié cette fois
Noté, une ligne. Le but est que personne ne suppose plus tard que ça l'a été.
## En cas de problème
Dites ce que vous faisiez, ce que vous avez vu, et dans laquelle des configurations ci-dessus.
Une capture d'écran vaut mieux qu'une description. Ne corrigez pas au passage.
Ce que la checklist ne peut pas faire
Il vaut la peine d’être honnête sur le plafond, car une checklist donne l’impression que la finir signifie que le site est correct.
Tout ce qui précède reste une seule équipe, sur une poignée de configurations, un jour où rien d’autre ne tourne mal. La première semaine de trafic réel produira une série de pannes qu’aucun passage avant lancement n’aurait pu trouver : le navigateur auquel vous n’avez pas pensé, l’extension que vous n’avez jamais installée, le réseau qui expire à mi-chemin, l’état que personne ne peut reproduire parce qu’il dépend de ce que la personne a fait vingt minutes plus tôt.
Session Replay
Extension Chrome gratuite. Un clic sur la page qui se comporte mal enregistre la capture d'écran, la console et le journal réseau, puis vous donne un lien à coller dans le ticket.
Donc la chose à livrer avec la checklist est un moyen pour ces personnes de vous le dire, avec assez de pièces jointes pour que vous ne partiez pas de « ça n’a pas marché ». C’est la moitié qu’une checklist ne peut structurellement pas couvrir, car elle porte sur les configurations dont vous ne saviez pas qu’elles existaient.
Quoi supprimer
Sur un petit changement, la plus grande partie. Trois lignes et une ligne de périmètre constituent un vrai passage de QA et prennent dix minutes.
Ce qui ne part jamais, ce sont la deuxième et la troisième colonne. Une checklist avec la seule première colonne est une liste de choses que quelqu’un cochera en regardant la version du site qui fonctionne déjà pour lui, ce qui revient à ne pas la faire. Le modèle de plan de test est le document un niveau au-dessus, et le test de fumée est la version de cinq minutes pour quand il n’y a pas le temps pour tout cela.