La maggior parte delle checklist QA per siti web è un elenco di cose da controllare. I moduli si inviano, i link funzionano, le immagini si caricano, su mobile sembra tutto a posto. Non sono sbagliate, e quasi non intercettano nulla, perché la parte difficile del QA pre-lancio non è mai stata quali voci inserire nell’elenco.

Sono altre due cose. Chi sta guardando, e in quale configurazione lo sta facendo.

Chi ha costruito la cosa non riesce a vederla

Chiedi allo sviluppatore che ha costruito una pagina di verificare che funzioni, e la verificherà: funziona. Cliccherà su ciò che ha costruito nell’ordine in cui l’ha costruito, con i dati che ha usato mentre lavorava, nel browser che aveva aperto.

Non è una critica nei suoi confronti, è una descrizione di come funziona il sapere qualcosa. Sa qual è il pulsante successivo. Sa che il modulo vuole una data in un certo formato. Sa, senza accorgersene, che la cosa a sinistra è una scheda e non un titolo. Un visitatore che arriva per la prima volta non sa nulla di tutto questo, e la voce di checklist “verifica che il flusso di registrazione funzioni” viene confermata in buona fede da qualcuno che non potrebbe mai sperimentare che qualcosa va storto.

Quindi la prima colonna di una checklist che merita il suo posto non è la voce. È chi la esegue, e per tutto ciò che uno sconosciuto toccherà, dovrebbe essere qualcuno che non l’ha costruito. Un collega di un altro team, per quindici minuti, trova un insieme di cose diverso da quello che trova l’autore in due ore.

“Funziona” è un’affermazione su una sola configurazione

La seconda colonna è quella che di solito le checklist omettono del tutto.

Il tuo test QA gira su una macchina: un browser, una dimensione di finestra, un sistema operativo, un insieme di impostazioni, una rete, un profilo con le tue estensioni dentro. Il sito che ricevono i tuoi visitatori è un altro. La stessa pagina viene resa da un motore diverso, con uno zoom diverso, con la modalità scura forzata, con un’estensione che inietta CSS, su una connessione che cade.

Ecco perché “testato su Chrome” è un’affermazione più debole di quanto sembri, e perché i tre motori di rendering contano più dei venti nomi di browser. Una checklist che dice “controlla il layout” pone una domanda senza risposta. Una che dice “controlla il layout al 200% di zoom, e in una finestra privata senza estensioni” pone due domande, ciascuna con una sola risposta.

Debole
Verifica che la pagina di pagamento funzioni su mobile.
Migliore
Qualcuno che non l'ha mai vista completa un acquisto con un telefono reale, in Safari, con la dimensione del testo di sistema aumentata.

Usa dati simili a quelli di produzione

Il terzo punto, e il più economico da correggere. Un test QA eseguito con Utente di prova e test@example.com verifica un sito che nessuno userà. La produzione ha nomi con apostrofi, indirizzi che occupano quattro righe, account senza ancora nulla dentro, e una lista con undicimila righe.

Inserisci quattro o cinque registrazioni scomode in ciò che stai verificando, una volta sola, e tienile. La maggior parte dei bug di layout che arrivano ai clienti non sta nel layout. Sta in un’ipotesi sulla lunghezza di una stringa.

La checklist

Tre colonne, e le due a destra sono quelle che fanno il lavoro. Mantienila abbastanza breve perché qualcuno la esegua davvero.

# QA pre-lancio: <cosa viene rilasciato>

Ogni riga: cosa viene controllato, chi lo controlla, e in quale configurazione.
"Qualcun altro" significa una persona che non ha costruito questa cosa.

| Controllo | Chi | Configurazione |
| --- | --- | --- |
| La funzione principale di questa release, dall'inizio alla fine | qualcun altro | un telefono reale, Safari |
| Lo stesso, su un motore desktop che non sia Chromium | chiunque | Firefox o Safari |
| Layout con zoom del browser al 200% | chiunque | qualsiasi browser desktop |
| La pagina senza estensioni e senza sessione salvata | chiunque | finestra privata |
| Moduli, con dati scomodi | qualcun altro | qualsiasi |
| Lo stato vuoto, con un account nuovo | qualcun altro | qualsiasi |
| Lo stato pieno, con una lista lunga | chiunque | qualsiasi |
| Solo tastiera, senza mouse, attraverso il flusso principale | qualcun altro | qualsiasi browser desktop |
| Modalità scura, se l'impostazione del sistema operativo viene rispettata | chiunque | sistema impostato su scuro |
| Tutto ciò che promettono le note di rilascio | qualcun altro | qualsiasi |

## Dati scomodi da tenere a portata di mano

- un nome con un apostrofo e un nome lungo 80 caratteri
- un account senza nulla dentro
- una lista abbastanza lunga da dover scorrere
- un valore in un formato di valuta o di data che non è il tuo

## Non verificato questa volta

Scritto in una sola riga. Il punto è che nessuno, dopo, dia per scontato che sia stato verificato.

## Se qualcosa non va

Scrivi cosa stavi facendo, cosa hai visto, e in quale delle configurazioni sopra.
Uno screenshot batte una descrizione. Non correggerlo di sfuggita.
Checklist QA del sito webqa-checklist.it.txt1,62 KBScarica

Cosa non può fare la checklist

Vale la pena essere onesti sul limite, perché una checklist induce a credere che completarla significhi che il sito è corretto.

Tutto quanto sopra resta un solo team, su una manciata di configurazioni, in un giorno in cui nient’altro va storto. La prima settimana di traffico reale produrrà una serie di errori che nessun test pre-lancio avrebbe potuto trovare: il browser a cui non hai pensato, l’estensione che non hai mai installato, la rete che va in timeout a metà, lo stato che nessuno riesce a riprodurre perché dipende da ciò che la persona ha fatto venti minuti prima.

Session Replay

Estensione Chrome gratuita. Un clic sulla pagina che si comporta male cattura lo screenshot, la console e il log di rete, e ti dà un link da incollare nel ticket.

Scarica l'estensione

Quindi la cosa che vale la pena rilasciare insieme alla checklist è un modo per permettere a quelle persone di segnalarti il problema, con abbastanza allegato da non dover partire da “non ha funzionato”. È la metà che una checklist non può coprire per sua natura, perché riguarda le configurazioni che non sapevi nemmeno esistessero.

Cosa eliminare

Su una modifica piccola, gran parte della checklist. Tre righe e una riga di perimetro sono un vero test QA e richiedono dieci minuti.

Ciò che non va mai eliminato sono la seconda e la terza colonna. Una checklist con solo la prima è un elenco di cose che qualcuno spunterà guardando la versione del sito che già funziona per lui, cioè equivale a non eseguirla. Il modello di piano di test è il documento un livello più in alto, e il test di smoke è la versione da cinque minuti per quando non c’è tempo per niente di tutto questo.