Automatizované testy
Ak už raz opravená chyba zaokrúhlenia faktúry príde s novou verziou späť, dáva zmysel uložiť tento prípad ako automatický test. Pri ďalšej zmene dostane vývojár výsledok s očakávanou aj vypočítanou sumou. Začíname pravidlami, pri ktorých poznáte správny výsledok a chyba preruší prácu.
Automatizované testy: podrobnejšie
-
Selenium
Selenium WebDriver riadi skutočný prehliadač cez štandardizované rozhranie.
Otvoriť -
Appium
Appium automatizuje používateľské rozhranie cez ovládače pre jednotlivé platformy.
Otvoriť -
Protractor
Protractor bol nástroj pre koncové testovanie webových aplikácií, často používaný s Angularom.
Otvoriť -
fMBT
fMBT je nástroj pre modelovo riadené testovanie.
Otvoriť -
XCTest
XCTest je testovací framework Apple pre kontrolu správania kódu a súvisiace testy na platformách Apple.
Otvoriť -
TestStack.White
TestStack.White sprístupňuje automatizáciu desktopového rozhrania Windows cez jeho automatizačné prvky.
Otvoriť -
Coded UI Test (CUIT)
Coded UI Test je starší prístup Microsoftu k automatizácii rozhrania vo Visual Studio.
Otvoriť -
Ranorex
Ranorex podporuje automatizáciu používateľského rozhrania s evidenciou prvkov a testovacích modulov.
Otvoriť -
Postman
Postman umožňuje organizovať API požiadavky do kolekcií a overovať odpovede.
Otvoriť -
Apache JMeter
JMeter generuje záťaž protokolových rozhraní a zbiera výsledky požiadaviek.
Otvoriť -
HP QuickTest Professional
QuickTest Professional je historický názov produktu v rodine neskôr známej ako UFT.
Otvoriť -
Unified Functional Testing (UFT)
UFT označuje rodinu funkčného testovania nad aplikáciami a rozhraniami.
Otvoriť -
Playwright
Playwright automatizuje prehliadače a poskytuje izolované kontexty, lokátory a kontroly so zabudovaným čakaním.
Otvoriť -
Vitest
Vitest spúšťa jednotkové a integračné testy pre JavaScript a TypeScript.
Otvoriť
Čo automatizujeme
Výpočty
Porovnáme cenu po zľave, súčet položiek a zaokrúhlenie s dohodnutými príkladmi.
Kľúčové cesty
Test prejde napríklad cestu od schválenej ponuky až po vytvorenie dokladu.
Rozhrania
Výmena údajov s inými systémami.
Oprávnenia
Že každá rola vidí len to, čo má.
Ako vyzerá automatický test vystavenia faktúry
- 1
Príprava
Test vytvorí zákazníka a zákazku s tromi položkami a zľavou.
- 2
Akcia
Vystaví faktúru rovnako, ako by to spravil človek.
- 3
Kontrola
Overí súčet, DPH, zaokrúhlenie a splatnosť.
- 4
Upratanie
Odstráni testovacie údaje, aby neovplyvnili ďalšie testy.
Kde má prednosť ručná kontrola
Často sa meniace obrazovky
Test by sa musel neustále prepisovať.
Jednorazové kontroly
Rýchlejšie je preklikať ich ručne.
Vzhľad
Či obrazovka vyzerá dobre, posúdi lepšie človek.
Zriedkavé výnimky
Pokiaľ nemajú vážny dopad, stačí ručná kontrola pred vydaním.
Stabilné testy pri práci s časom a pracovným radom
Automatická kontrola pripomienky by nemala závisieť od toho, aký dátum má počítač pri spustení testu. V skúšobnom prostredí nastavte kontrolovateľné hodiny, pripravte známu zákazku a zaznamenajte presný čas, kedy pripomienka očakávane vznikne. Pri asynchrónnom odoslaní sledujte dohodnutú udalosť alebo stav namiesto pevného počtu sekúnd čakania.
Pri paralelnom behu musia mať dve skúšky samostatné prípady a prístupové údaje primerané svojim rolám. Čistenie jednej skúšky nesmie odstrániť záznam, ktorý ešte používa druhá. Výsledok zlyhania má uviesť pôvodný vstup, verziu aplikácie a posledný dosiahnutý krok.
Pomalý alebo občas zlyhávajúci test rozoberte podľa toho, či je problém v čakaní, príprave vstupu, dostupnosti služby alebo správaní aplikácie. Bez rozlíšenia týchto príčin môže opakovanie testu zamaskovať skutočnú chybu v poradí udalostí.
Kedy pri kontrole ponechať skutočné prepojenie
Pri výpočte ceny môže stačiť známy vstup a očakávané číslo. Pri odovzdaní kódu výrobku do iného programu treba navyše potvrdiť, že prijímač stále rozumie formátu. Rýchle testy môžu použiť kontrolovaný príklad odpovede a samostatná integračná skúška periodicky preverí tú istú dohodu s testovacím prostredím partnera. Výsledky týchto kontrol evidujte oddelene, aby výpadok cudzieho prostredia neprekryl regresiu vlastného výpočtu.
Automat má preveriť dôsledok úkonu aj po zmene vzhľadu obrazovky
Pri potvrdení objednávky môže aplikácia zmeniť text tlačidla alebo navigáciu, kým samotná povinnosť vytvoriť rezerváciu zostáva rovnaká. Sada skúšok potrebuje rozlíšiť kontrolu používateľského priechodu od kontroly následného obchodného stavu. Inak môže drobná úprava zahltiť tím množstvom podobných hlásení.
Na jednom príklade preto overte správne dokončenie používateľského úkonu a samostatne jeho dôsledok v evidencii zásob. Pri zlyhaní výstup ukáže, či sa zmenil spôsob ovládania, samotné pravidlo alebo väzba medzi nimi. Oprava potom mieri k príčine.
Otázky z praxe
Ako rozhodnúť, či nestabilný automatický test skrýva chybu aplikácie?
Pri zlyhaní uložte relevantný stav, čas, testovacie údaje a výsledok jednotlivých krokov. Porovnajte opakovania so zlyhaniami za rovnakých podmienok a preskúmajte spoločné závislosti. Dočasné vyňatie testu má mať vlastníka a podmienku návratu, aby nestabilita trvalo nezakryla dôležitý obchodný scenár.
Ako pripraviť údaje, aby súbežné automatické skúšky nekolidovali?
Každá skúška môže používať samostatné identifikátory alebo vyhradený priestor a jasné pravidlo upratovania. Zdieľané číselníky majú zostať v predvídateľnom stave. Po spustení úloh súčasne aj v inom poradí overte, či výsledok jednej skúšky nevzniká len vďaka zvyšku po predchádzajúcej.
Ktorú časť kontroly ponechať človeku aj po automatizácii?
Napríklad prirodzenosť pomenovania, zrozumiteľnosť upozornenia alebo rozhodovanie používateľa pri nezvyčajnom prípade si často vyžadujú pozorovanie človeka. Automat môže overovať presne definovaný výsledok a pripraviť potrebný vstup. Tím tak venuje ručný čas hodnoteniu správania, ktoré ešte nemá jednoznačný strojovo vyjadriteľný výsledok.
Súvisiace stránky
-
DevOps
Ako bezpečne nasadiť novú verziu aplikácie. Automatické kontroly, skúška migrácie databázy, kontrola prevádzky a plán obnovy pri chybe.
Otvoriť -
Funkčné testovanie
Funkčné testovanie porovná správanie aplikácie so zadaním. Preveríme pracovné roly, chybné vstupy aj výnimky a zaznamenáme odchýlky pre vývojára.
Otvoriť -
Výkonnostné testy
Záťažový test aplikácie pri uzávierke alebo náraste objednávok. Zmeriame čas odozvy, chybovosť a hranicu, pri ktorej sa predlžuje čakanie.
Otvoriť