- Mitä on ohjelmistotestauksen mittarit?
- Mitä on ohjelmistotestien mittaaminen?
- Miksi testata mittareita?
- Mittareiden elinkaari
- Manuaalisen testauksen mittarit
- Esimerkkejä ohjelmistotestauksen mittareista
- Päätelmä
- Suositeltu lukeminen
Ohjelmistoprojekteissa on tärkeintä mitata projektin ja prosessien laatua, kustannuksia ja tehokkuutta. Ilman näiden mittaamista projektia ei voida saattaa onnistuneesti päätökseen.
Tämänpäiväisessä artikkelissa opimme esimerkkien ja kaavioiden avulla - Ohjelmistotestauksen mittarit ja mittaukset ja miten niitä käytetään ohjelmistotestausprosessissa.
On olemassa kuuluisa lausunto: "Emme voi hallita asioita, joita emme voi mitata".
Projektin hallinta tarkoittaa tässä sitä, miten projektipäällikkö/johto pystyy tunnistamaan poikkeamat testaussuunnitelmasta ASAP, jotta hän voi reagoida testaukseen. Projektin tarpeisiin perustuvien testausmittareiden luominen on erittäin tärkeää testattavan ohjelmiston laadun saavuttamiseksi.
Mitä on ohjelmistotestauksen mittarit?
Metriikka on määrällinen mittari, joka osoittaa, missä määrin järjestelmä, järjestelmän osa tai prosessi omaa tietyn ominaisuuden.
Mittarit voidaan määritellä "STANDARDEINA". OF MITTAUS ".
Ohjelmiston mittareita käytetään projektin laadun mittaamiseen. Yksinkertaisesti sanottuna mittari on yksikkö, jota käytetään jonkin ominaisuuden kuvaamiseen. Mittari on mitta-asteikko.
Oletetaan, että yleisesti ottaen "kilogramma" on metri, jolla mitataan ominaisuutta "paino". Vastaavasti ohjelmistoissa "Kuinka monta ongelmaa löytyy tuhannesta koodirivistä?", h ere Ongelmien määrä on yksi mittaustapa & koodirivien määrä on toinen mittaustapa. Metriikka määritellään näiden kahden mittaustavan perusteella. .
Esimerkki testimittareista:
- Kuinka monta vikaa moduulissa on?
- Kuinka monta testitapausta suoritetaan henkilöä kohden?
- Mikä on testin kattavuus %?
Mitä on ohjelmistotestien mittaaminen?
Mittaus on määrällinen osoitus tuotteen tai prosessin jonkin ominaisuuden laajuudesta, määrästä, ulottuvuudesta, kapasiteetista tai koosta.
Testi Esimerkki mittauksesta: Vikojen kokonaismäärä.
Katso alla olevaa kaaviota, jotta ymmärrät selkeästi mittausten ja mittareiden välisen eron.
Miksi testata mittareita?
Ohjelmistotestin mittareiden tuottaminen on ohjelmistotestin johtajan/päällikön tärkein tehtävä.
Testimittareita käytetään,
- Päätöksenteko seuraavaa vaihetta varten, kuten kustannusarvio & tulevien hankkeiden aikataulu.
- Ymmärtää, millaisia parannuksia hankkeen onnistuminen edellyttää.
- tehdä päätös muutettavasta prosessista tai teknologiasta jne.
Ohjelmistotestauksen mittareiden merkitys:
Kuten edellä on selitetty, testimittarit ovat tärkeimpiä ohjelmiston laadun mittaamisessa.
Nyt, miten voimme mitata ohjelmiston laatua mittareiden avulla? ?
Oletetaan, että jos projektilla ei ole mittareita, miten testianalyytikon tekemän työn laatua mitataan?
Esimerkiksi, Testianalyytikon on,
- Suunnittele testitapaukset 5 vaatimusta varten
- Suunniteltujen testitapausten suorittaminen
- kirjaa viat & täytyy epäonnistua asiaan liittyvät testitapaukset
- Kun vika on korjattu, meidän on testattava vika & uudelleen; suoritettava vastaava epäonnistunut testitapaus uudelleen.
Jos edellä esitetyssä skenaariossa mittareita ei noudateta, testianalyytikon tekemä työ on subjektiivista, eli testiraportilla ei ole asianmukaista tietoa työnsä/projektinsa tilasta.
Jos metriikka on mukana hankkeessa, hänen työnsä tarkka tilanne ja asianmukaiset numerot/tiedot voidaan julkaista.
eli testiraportissa voimme julkaista:
- Kuinka monta testitapausta on suunniteltu vaatimusta kohti?
- Kuinka monta testitapausta on vielä suunnittelematta?
- Kuinka monta testitapausta suoritetaan?
- Kuinka monta testitapausta on läpäisty/hylätty/estetty?
- Kuinka monta testitapausta ei ole vielä suoritettu?
- Kuinka monta vikaa tunnistetaan & mikä on näiden vikojen vakavuus?
- Kuinka monta testitapausta on epäonnistunut yhden tietyn vian vuoksi? jne.
Projektin tarpeiden mukaan meillä voi olla muitakin mittareita kuin edellä mainittu luettelo, jotta voimme tietää projektin tilan yksityiskohtaisesti.
Edellä mainittujen mittareiden perusteella testauspäällikkö/päällikkö saa käsityksen alla mainituista avainkohdista.
- %ge suoritetusta työstä
- %ge vielä keskeneräisistä töistä
- Jäljellä olevien töiden suorittamiseen tarvittava aika
- eteneekö hanke aikataulun mukaisesti vai onko se viivästynyt jne.
Jos projekti ei mittareiden perusteella valmistu aikataulun mukaisesti, johtaja hälyttää asiakkaan ja muut sidosryhmät ilmoittamalla viivästymisen syyt, jotta vältytään viime hetken yllätyksiltä.
Mittareiden elinkaari
Manuaalisen testauksen mittarit
Testausmittarit jaetaan pääasiassa kahteen luokkaan.
- Perusmittarit
- Lasketut mittarit
Perusmittarit: Perusmittarit ovat mittareita, jotka on johdettu testianalyytikon testitapauksen kehittämisen ja suorittamisen aikana keräämistä tiedoista.
Näitä tietoja seurataan koko testin elinkaaren ajan, esimerkiksi keräämällä tietoja, kuten projektia varten kehitettyjen testitapausten kokonaismäärä (tai) suoritettavien testitapausten määrä (tai) läpäistyjen/epäonnistuneiden/estettyjen testitapausten määrä jne.
Lasketut mittarit: Laskennalliset mittarit johdetaan perusmittareista kerätyistä tiedoista. Näitä mittareita seuraa yleensä testin johtaja/päällikkö testiraportointia varten.
Esimerkkejä ohjelmistotestauksen mittareista
Otetaan esimerkki eri testimittareiden laskemisesta, joita käytetään ohjelmistotestausraporteissa:
Seuraavassa on taulukkomuoto, jossa testeihin osallistuvalta testianalyytikolta saadut tiedot esitetään:
Määritelmät ja kaavat mittareiden laskemiseksi:
#1) %ge Suoritetut testitapaukset : Tätä mittaria käytetään testitapausten suoritustilanteen selvittämiseen %ge-arvona.
%ge Suoritetut testitapaukset = ( Suoritettujen testitapausten määrä / kirjoitettujen testitapausten kokonaismäärä) * 100.
Edellä esitettyjen tietojen perusteella,
%ge Suoritetut testitapaukset = (65 / 100) * 100 = 65%.
#2) %ge Testitapauksia ei ole suoritettu : Tätä metriikkaa käytetään testitapausten odottavan suorituksen tilan määrittämiseen %ge:nä.
%ge Testitapauksia ei ole suoritettu = ( Suorittamatta jääneiden testitapausten määrä / kirjoitettujen testitapausten kokonaismäärä) * 100.
Edellä esitettyjen tietojen perusteella,
%ge Estetyt testitapaukset = (35 / 100) * 100 = 35 %.
#3) %ge Testitapaukset läpäisty : Tätä mittaria käytetään suoritettujen testitapausten läpäisyprosentin määrittämiseen.
%ge Testitapaukset Hyväksytty = ( Hyväksyttyjen testitapausten määrä / suoritettujen testitapausten kokonaismäärä) * 100.
Edellä esitettyjen tietojen perusteella,
%ge Hyväksytyt testitapaukset = (30 / 65) * 100 = 46%.
#4) %ge Testitapaukset Epäonnistuneet : Tätä mittaria käytetään suoritettujen testitapausten epäonnistumisprosentin määrittämiseen.
%ge Testitapaukset Epäonnistuneet = ( Epäonnistuneiden testitapausten määrä / suoritettujen testitapausten kokonaismäärä) * 100.
Edellä esitettyjen tietojen perusteella,
%ge Hyväksyttyjä testitapauksia = (26 / 65) * 100 = 40 %.
#5) %ge Estetyt testitapaukset : Tätä mittaria käytetään, jotta saadaan suoritettujen testitapausten estettyjen prosenttien määrä. Yksityiskohtainen raportti voidaan toimittaa määrittämällä todellinen syy testitapausten estämiselle.
%ge Testitapaukset Estetty = ( Estettyjen testitapausten määrä / suoritettujen testitapausten kokonaismäärä) * 100.
Edellä esitettyjen tietojen perusteella,
%ge Estetyt testitapaukset = (9 / 65) * 100 = 14%.
#6) Vian tiheys = Tunnistettujen vikojen lukumäärä / koko
( Tässä "kokoa" pidetään vaatimuksena. Näin ollen tässä tapauksessa virhetiheys lasketaan vaatimusta kohden tunnistettujen virheiden lukumääränä. Vastaavasti virhetiheys voidaan laskea 100 koodiriviä kohden tunnistettujen virheiden lukumääränä [TAI] moduulia kohden tunnistettujen virheiden lukumääränä jne. )
Edellä esitettyjen tietojen perusteella,
Virhetiheys = (30 / 5) = 6.
#7) Virheiden poistotehokkuus (DRE) = ( ( Laadunvarmistustestauksessa havaittujen vikojen määrä / (Laadunvarmistustestauksessa havaittujen vikojen määrä + loppukäyttäjän havaitsemien vikojen määrä)) * 100
DRE:tä käytetään järjestelmän testin tehokkuuden määrittämiseen.
Oletetaan, että kehityksen ja laadunvarmistuksen testauksen aikana olemme tunnistaneet 100 virhettä.
Laadunvarmistustestauksen jälkeen, alfa- ja beetatestin aikana, loppukäyttäjä/asiakas havaitsi 40 virhettä, jotka olisi voitu havaita laadunvarmistustestauksen aikana.
Nyt DRE lasketaan seuraavasti,
DRE = [100 / (100 + 40)] * 100 = [100 /140] * 100 = 71 %.
#8) Virheiden vuotaminen : Virhevuoto on mittari, jota käytetään tunnistamaan laadunvarmistustestauksen tehokkuus eli kuinka monta virhettä jää huomaamatta/liukuu pois laadunvarmistustestauksen aikana.
Vika Vuoto = ( UAT-testissä havaittujen vikojen määrä / QA-testissä havaittujen vikojen määrä) * 100
Oletetaan, että kehityksen ja laadunvarmistuksen testauksen aikana olemme tunnistaneet 100 virhettä.
Laadunvarmistustestauksen jälkeen, alfa- ja beetatestauksen aikana, loppukäyttäjä/asiakas havaitsi 40 virhettä, jotka olisi voitu havaita laadunvarmistustestauksen aikana.
Vuotovirhe = (40 /100) * 100 = 40 %.
#9) Viat tärkeysjärjestyksessä : Tätä mittaria käytetään tunnistamaan havaittujen vikojen määrä vian vakavuuden / prioriteetin perusteella, jota käytetään päättämään ohjelmiston laadusta.
%ge Kriittiset viat = havaittujen kriittisten vikojen määrä / havaittujen vikojen kokonaismäärä * 100 %.
Edellä olevassa taulukossa esitettyjen tietojen perusteella,
%ge Kriittiset viat = 6/ 30 * 100 = 20 %.
%ge Suuret viat = havaittujen suurten vikojen määrä / havaittujen vikojen kokonaismäärä * 100 %.
Edellä olevassa taulukossa esitettyjen tietojen perusteella,
%ge Korkea vikojen määrä = 10/30 * 100 = 33,33%.
%ge Keskisuuret viat = havaittujen keskisuurten vikojen määrä / havaittujen vikojen kokonaismäärä * 100 prosenttia.
Edellä olevassa taulukossa esitettyjen tietojen perusteella,
%ge Keskisuuret viat = 6/ 30 * 100 = 20 %.
%ge Vähäiset viat = havaittujen vähäisten vikojen määrä / havaittujen vikojen kokonaismäärä * 100 %.
Edellä olevassa taulukossa esitettyjen tietojen perusteella,
%ge Vähäiset virheet = 8/ 30 * 100 = 27 %.
Päätelmä
Tässä artikkelissa esitettyjä mittareita käytetään pääasiassa päivittäisen/viikoittaisen tilaraportin tuottamiseen tarkoilla tiedoilla testitapausten kehitys-/toteutusvaiheen aikana & tämä on myös hyödyllistä projektin tilan & laadun seurannassa.
Kirjoittajasta : Tämä on Anuradha K:n vieraskirjoitus. Hänellä on yli 7 vuoden kokemus ohjelmistotestauksesta ja hän työskentelee tällä hetkellä konsulttina MNC:ssä. Hänellä on myös hyvä tietämys mobiiliautomaatiotestauksesta.
Mitä muita testimittareita käytät projektissasi? Kerro meille tavalliseen tapaan ajatuksistasi/kysymyksistäsi alla olevissa kommenteissa.