De reținut
- Quality engineering (QE) tratează calitatea ca pe o proprietate a întregului sistem de lucru: cerințe, design, cod, pipeline-uri, operare și bucle de feedback. Nu e o etapă și nici un departament.
- Rolul QE trece de la paznic la facilitator: construiește infrastructura de testare, face coaching echipelor, răspunde de strategia de calitate și de risc și închide bucla de la producție înapoi spre dezvoltare.
- Măsoară rezultatele, precum performanța livrării, defectele scăpate, fiabilitatea față de SLO-uri și impactul asupra clienților, nu activitatea de testare. Cercetarea rezumată în Accelerate arată că viteza și stabilitatea se pot îmbunătăți împreună.
De unde pornim
Ai văzut testarea în echipele Agile, shift left și shift right, testarea continuă și observabilitatea. Quality engineering e ce rezultă din toate aceste practici atunci când o organizație le ia în serios.
De la testare la QE
| Testarea tradițională | Quality engineering |
|---|---|
| O etapă după dezvoltare | Continuu, de la idee la producție |
| O echipă separată verifică munca altora | Toată echipa răspunde de calitate; specialiștii o facilitează |
| Succes = bug-uri găsite | Succes = mai puține bug-uri create, recuperare mai rapidă, utilizatori mulțumiți |
| Regresie manuală la final | Verificări automate în pipeline; oamenii explorează și analizează riscul |
| Poartă la lansare | Multe bucle mici de feedback; siguranța lansării prin canary și rollback |
| Raportează numărul de teste | Raportează riscuri, rezultate și tendințe |
Asta nu face competențele de testare mai puțin importante. Le face să fie aplicate mai larg: analiza riscului, proiectarea testelor, explorarea și gândirea critică influențează cerințele, arhitectura, pipeline-urile și operarea.
Ce fac quality engineers
- Strategia de calitate și riscul: răspund de strategia de testare, țin la zi imaginea riscurilor și consiliază deciziile de lansare.
- Facilitează, nu blochează: construiesc framework-uri de testare, unelte pentru date de test, medii și verificări în pipeline care îi ajută pe toți programatorii să testeze bine.
- Fac coaching: lucrează în pereche cu programatorii pe proiectarea testelor; conduc sesiuni three amigos și example mapping; predau testarea exploratorie.
- Testare în profunzime acolo unde contează: sesiuni exploratorii, performanță, securitate, accesibilitate și reziliență pentru zonele cele mai riscante.
- Închid bucla: analizează defectele scăpate și incidentele; le transformă în teste, monitoare și schimbări de proces.
- Păzesc sănătatea suitei: viteză, instabilitate, adecvare și încredere.
Cum măsori ce contează
Performanța livrării (DORA)
Programul de cercetare DORA, rezumat în cartea Accelerate (2018) a lui Nicole Forsgren, Jez Humble și Gene Kim, a identificat patru indicatori-cheie ai livrării software:
| Indicator | Întrebare |
|---|---|
| Frecvența deploy-urilor | Cât de des facem deploy în producție? |
| Timpul de livrare a schimbărilor (lead time) | Cât durează de la commit până la rularea în producție? |
| Rata de eșec a schimbărilor | Ce parte din deploy-uri produc o defecțiune care cere remediere? |
| Timpul de restabilire a serviciului | Cât de repede ne revenim după o defecțiune? |
Doi măsoară debitul; doi măsoară stabilitatea. Rapoartele DORA ulterioare au rafinat definițiile și au adăugat fiabilitatea, dar ideea de bază rămâne.
Rezultatele de calitate
- Defectele scăpate, pe severitate și pe stratul care ar fi trebuit să le prindă.
- Fiabilitatea față de SLO-uri și consumul bugetului de erori.
- Semnalele de la clienți: tichete de suport pe versiune, categorii de reclamații, probleme de accesibilitate raportate.
- Sănătatea suitei: durata pipeline-ului, rata de instabilitate, timpul de diagnosticare a eșecurilor.
Ani la rând, multe organizații au crezut că a merge mai repede înseamnă a accepta mai multe defecțiuni, așa că au încetinit lansările și au adăugat porți ca să protejeze calitatea.
Cercetarea DORA, bazată pe date din sondaje cu mii de profesioniști din tehnologie, a găsit tiparul opus. Echipele cu cele mai bune performanțe făceau deploy mai des și cu timpi de livrare mai scurți, și aveau rate de eșec ale schimbărilor mai mici și recuperare mai rapidă decât echipele cu performanțe slabe. Practicile asociate cu performanța ridicată includeau automatizarea testelor, integrarea continuă, dezvoltarea pe ramura principală (trunk-based development) și monitorizarea, adică nucleul quality engineering.
Lecția: calitatea și viteza se întăresc reciproc atunci când calitatea e integrată în sistemul de livrare. Porțile de la final te încetinesc fără să te facă mai sigur; feedback-ul rapid și de încredere le face pe amândouă.
Cum conduci schimbarea
- Pornește de la rezultate: stabiliți ce înseamnă calitatea pentru utilizatorii și business-ul vostru și alegeți câțiva indicatori de rezultat.
- Desenează buclele de feedback: unde se creează defectele, unde sunt găsite, cât durează fiecare buclă? Scurtează-le pe cele mai lungi și mai scumpe.
- Fă din testare treaba tuturor: programatorii răspund de testele unitare și de integrare; QE-ii le fac ușor de scris și predau proiectarea testelor.
- Investește în platformă: pipeline-uri rapide, medii de încredere, unelte pentru date de test, observabilitate.
- Păstrează umană testarea în profunzime: protejează timpul pentru testarea exploratorie, bazată pe risc și nefuncțională.
- Învață fără să cauți vinovați: analize ale incidentelor și ale defectelor scăpate care se concentrează pe sisteme, nu pe oameni.
- Dezvoltă oamenii: trasee de carieră pentru quality coaches, automation engineers și quality leads, nu un singur traseu de „tester”.
Așa da
Să raportezi calitatea ca pe o poveste scurtă, cu dovezi: „Rata de eșec a schimbărilor a scăzut în acest trimestru de la 18% la 7%; cele mai multe defecte scăpate au fost în regulile de preț, așa că adăugăm teste cu tabele de decizie și un canary pentru schimbările de preț.”
Așa nu
Să redenumești echipa de testare în „QE”, să păstrezi aceeași poartă de la finalul ciclului și să măsori succesul după bug-urile găsite. S-a schimbat numele; sistemul nu.
Verifică-te
Procesul de lansare al unei firme are la final o etapă de regresie manuală de două săptămâni. Rata de eșec a schimbărilor e mare, iar lansările au loc lunar. Ce ar schimba mai întâi o abordare de quality engineering?
Arată răspunsul
S-ar uita la buclele de feedback: ar automatiza în pipeline cele mai valoroase verificări de regresie, la cele mai de jos straturi eficiente, ca schimbările să primească feedback în câteva minute; ar introduce lansări mai mici și mai dese, cu canary și rollback rapid; ar muta timpul testerilor spre analiza riscului, testarea exploratorie și coaching, mai devreme în ciclu; și ar urmări indicatorii DORA și defectele scăpate ca să arate dacă schimbările funcționează.
