De reținut
- Verificarea: „Construim produsul corect?” Se potrivește cu specificația?
- Validarea: „Construim produsul potrivit?” Răspunde nevoilor reale ale utilizatorilor?
- Un produs se poate potrivi perfect cu specificația și totuși să fie inutil, dacă specificația a fost greșită. Testerii ajută la ambele întrebări.
Două întrebări, două cuvinte
Inginerul software Barry Boehm a rezumat diferența în două întrebări pe care testerii le citează și azi (în original, în engleză):
- Verificarea: Are we building the product right? (Construim produsul corect?)
- Validarea: Are we building the right product? (Construim produsul potrivit?)
Verificarea compară produsul cu ce s-a specificat. Validarea îl compară cu ce au nevoie oamenii de fapt.
Verificarea: potrivirea cu specificația
Verificarea confirmă că un produs de lucru îndeplinește cerințele specificate. Se poate face pe orice: cerințe, design, cod sau sistemul final.
- Analiza unui design față de cerințe.
- Code review și analiză statică.
- Rularea cazurilor de test cu rezultate așteptate luate din specificație.
Dacă cerința spune „parolele trebuie să aibă cel puțin 12 caractere”, verificarea confirmă că o parolă de 11 caractere e respinsă.
Validarea: nevoile reale
Validarea confirmă că produsul e potrivit pentru scopul lui, pentru utilizatorii reali, în mediul real.
- Testare de acceptanță cu utilizatori reali.
- Sesiuni de usability: urmărești oameni care încearcă să ducă la capăt sarcini reale.
- Versiuni beta și feedback din producție.
- Prototipuri arătate utilizatorilor înainte să se construiască ceva.
Regula celor 12 caractere poate fi verificată perfect. Validarea întreabă dacă utilizatorii se mai pot autentifica sau dacă acum își scriu parolele pe bilețele.
Comparate
| Verificare | Validare | |
|---|---|---|
| Întrebarea | Am construit produsul corect? | Am construit produsul potrivit? |
| Comparat cu | Specificația, cerințele, standardele | Nevoile și utilizarea reală |
| Când | Pe tot parcursul dezvoltării | Pe tot parcursul, mai ales pe versiuni funcționale |
| Exemple | Review-uri, teste unitare, teste de sistem | Teste de acceptanță, teste de usability, beta |
| Prinde | Produsul nu se potrivește cu specificația | Specificația nu se potrivește cu realitatea |
Când verificarea spune „da”, iar realitatea „nu”
Oglinda principală a lui Hubble a fost șlefuită cu o grijă extremă și măsurată din nou și din nou în timpul fabricației. Fiecare măsurătoare spunea că are forma corectă.
După lansarea din 1990, primele imagini ale lui Hubble au fost neclare. Oglinda era prea plată spre margine, cu aproximativ 1/50 din grosimea unui fir de păr.
Investigația NASA a găsit cauza: instrumentul folosit pentru a verifica forma oglinzii avea o lentilă deplasată cu 1,3 mm. Oglinda fusese lucrată ca să se potrivească unei referințe greșite. Alte teste arătaseră semne ale erorii, dar rezultatele au fost puse deoparte.
Astronauții au montat optică de corecție în 1993, iar Hubble a făcut apoi știință remarcabilă.
Lecția: oglinda a trecut verificarea față de instrumentul de test. Doar utilizarea reală, fotografiatul în spațiu, a arătat că nu era potrivită scopului. Verifică-ți referințele și ia în serios rezultatele ciudate ale verificărilor independente.
Ce înseamnă asta pentru testeri
- Majoritatea cazurilor de test pe care le scrii sunt de verificare: verifică comportamentul față de cerințe.
- Ține mereu cont și de validare: „Ar fi mulțumit un utilizator real de asta?” Dacă răspunsul e nu, semnalează, chiar dacă specificația e respectată.
- Pune la îndoială chiar specificația. O cerință poate fi clară, testabilă și totuși greșită.
Așa da
Să raportezi când o funcționalitate respectă specificația, dar i-ar încurca sau frustra pe utilizatori. Explică impactul asupra lor și propune o discuție cu product ownerul.
Așa nu
Să taci pentru că „așa scrie în cerință”. Cerințele sunt scrise de oameni, iar oamenii greșesc.
Verifică-te
O aplicație de calcul al impozitelor produce exact rezultatele cerute de specificație. Dar specificația a folosit cotele de anul trecut. A trecut verificarea? Dar validarea?
Arată răspunsul
Verificarea a trecut: aplicația se potrivește cu specificația. Validarea a picat: aplicația nu e potrivită scopului, pentru că utilizatorii au nevoie ca impozitele de anul acesta să fie calculate corect.
