- Какво представлява метриката за тестване на софтуер?
- Какво представлява измерването на софтуерни тестове?
- Защо да тествате метриките?
- Жизнен цикъл на метриките
- Видове метрики за ръчно тестване
- Примери за метрики за тестване на софтуер
- Заключение
- Препоръчително четиво
При софтуерните проекти най-важно е да се измерват качеството, разходите и ефективността на проекта и процесите. Без тяхното измерване проектът не може да бъде завършен успешно.
В днешната статия ще научим с примери и графики - Метрики и измервания за тестване на софтуер и как да ги използваме в процеса на тестване на софтуер.
Има едно известно твърдение: "Не можем да контролираме неща, които не можем да измерим".
Тук контролирането на проектите означава как ръководителят/ръководителят на проекта може да идентифицира отклоненията от плана за тестване възможно най-скоро, за да реагира своевременно. Генерирането на тестови метрики въз основа на нуждите на проекта е много важно за постигане на качеството на тествания софтуер.
Какво представлява метриката за тестване на софтуер?
Метриката е количествена мярка за степента, в която дадена система, системен компонент или процес притежава даден атрибут.
Метриките могат да се определят като "СТАНДАРТИ". ОТ ИЗМЕРВАНЕ ".
Софтуерните метрики се използват за измерване на качеството на проекта. Най-просто казано, метриката е единица, използвана за описание на даден атрибут. Метриката е скала за измерване.
Да предположим, че в общия случай "Килограм" е метрика за измерване на атрибута "Тегло". По подобен начин в софтуера "Колко проблеми се откриват в хиляда реда код?", h тук Броят на проблемите е едно измерване & броят на редовете код е друго измерване. Метриката се определя от тези две измервания. .
Пример за тестови метрики:
- Колко дефекта има в модула?
- Колко тестови случая се изпълняват от един човек?
- Какво е % покритие на тестовете?
Какво представлява измерването на софтуерни тестове?
Измерването е Количествен показател за степента, количеството, размера, капацитета или размера на някакъв атрибут на продукт или процес.
Тест Пример за измерване: Общ брой дефекти.
Моля, направете справка с диаграмата по-долу, за да разберете ясно разликата между измерване и метрика.
Защо да тествате метриките?
Генерирането на метрики за софтуерни тестове е най-важната отговорност на ръководителя/мениджъра на софтуерни тестове.
Тестовите метрики се използват за,
- Вземане на решение за следващата фаза на дейностите, като например оценка на разходите & график на бъдещите проекти.
- Разберете вида на подобрението, необходимо за успеха на проекта
- Вземане на решение за процеса или технологията, които трябва да бъдат променени, и т.н.
Значение на показателите за тестване на софтуер:
Както беше обяснено по-горе, тестовите показатели са най-важни за измерване на качеството на софтуера.
Сега, как можем да измерим качеството на софтуера с помощта на метрики ?
Да предположим, че ако проектът не разполага с никакви метрики, тогава как ще се измерва качеството на работата, извършена от тестовия анализатор?
Например, Тестовият анализатор трябва да,
- Проектиране на тестови случаи за 5 изисквания
- Изпълнение на проектираните тестови случаи
- Регистриране на дефектите & трябва да се провалят свързаните тестови случаи
- След като дефектът бъде отстранен, трябва да тестваме отново дефекта & да изпълним отново съответния неуспешен тестови случай.
В горния сценарий, ако не се следват метриките, работата, извършена от тестовия анализатор, ще бъде субективна, т.е. тестовият отчет няма да разполага с подходяща информация, за да знае състоянието на своята работа/проект.
Ако в проекта участват метрици, може да се публикува точното състояние на тяхната работа с подходящи числа/данни.
т.е. в Доклада за изпитване можем да публикуваме:
- Колко тестови случая са разработени за всяко изискване?
- Колко тестови случая предстои да се проектират?
- Колко тестови случая се изпълняват?
- Колко тестови случая са приети/неуспешни/блокирани?
- Колко тестови случая все още не са изпълнени?
- Колко дефекта са идентифицирани & каква е сериозността на тези дефекти?
- Колко тестови случая са неуспешни поради един конкретен дефект? и т.н.
В зависимост от нуждите на проекта можем да въведем повече показатели от гореспоменатия списък, за да се запознаем подробно със състоянието на проекта.
Въз основа на горепосочените показатели ръководителят/мениджърът на тестовете ще получи представа за посочените по-долу ключови точки.
- %ге на извършената работа
- %ге от работата, която все още не е завършена
- Време за завършване на останалата работа
- Дали проектът върви по график или изостава? и т.н.
Въз основа на показателите, ако проектът няма да бъде завършен по график, мениджърът ще алармира клиента и другите заинтересовани страни, като посочи причините за забавянето, за да избегне изненадите в последния момент.
Жизнен цикъл на метриките
Видове метрики за ръчно тестване
Метриките за тестване се разделят основно на 2 категории.
- Базови показатели
- Изчислени показатели
Базови показатели: Базовите метрики са метриките, които се получават от данните, събрани от тестовия анализатор по време на разработването и изпълнението на тестовия случай.
Тези данни ще бъдат проследявани през целия жизнен цикъл на теста, т.е. ще се събират данни като общ брой тестови случаи, разработени за даден проект (или) брой тестови случаи, които трябва да бъдат изпълнени (или) брой приети/неуспешни/блокирани тестови случаи и т.н.
Изчислени показатели: Изчислените метрики се получават от данните, събрани в базовите метрики. Тези метрики обикновено се проследяват от ръководителя/мениджъра на теста за целите на отчитането на теста.
Примери за метрики за тестване на софтуер
Нека вземем пример за изчисляване на различни тестови метрики, използвани в докладите за тестване на софтуер:
По-долу е представен формат на таблицата за данните, получени от тестовия анализатор, който действително участва в тестването:
Определения и формули за изчисляване на показателите:
#1) %ge Изпълнени тестови случаи : Тази метрика се използва за получаване на информация за състоянието на изпълнение на тестовите случаи по отношение на %ge.
%ge Изпълнени тестови случаи = ( Брой изпълнени тестови случаи / Общ брой написани тестови случаи) * 100.
И така, от горните данни,
%ge Изпълнени тестови случаи = (65 / 100) * 100 = 65%
#2) %ge Неизпълнени тестови случаи : Тази метрика се използва за получаване на статуса на неизпълнените тестови случаи по отношение на %ge.
%ge Неизпълнени тестови случаи = ( Брой неизпълнени тестови случаи / Общ брой написани тестови случаи) * 100.
И така, от горните данни,
%ge Блокирани тестови случаи = (35 / 100) * 100 = 35%
#3) %ge Случаите на изпитване са преминали : Тази метрика се използва за получаване на %ge на преминаване на изпълнените тестови случаи.
%ge Случаите на изпитване са преминали = ( Брой на успешно преминалите тестови случаи / Общ брой на изпълнените тестови случаи) * 100.
И така, от горните данни,
%ge Успешно преминати тестови случаи = (30 / 65) * 100 = 46%
#4) %ge Неуспешни тестови случаи : Този показател се използва за получаване на % на неуспех на изпълнените тестови случаи.
%ge Неуспешни тестови случаи = ( Брой неуспешни тестови случаи / Общ брой изпълнени тестови случаи) * 100.
И така, от горните данни,
%ge Издържани тестови случаи = (26 / 65) * 100 = 40%
#5) %ge Блокирани тестови случаи : Тази метрика се използва за получаване на блокираните %ge на изпълнените тестови случаи. Може да се представи подробен отчет, като се посочи действителната причина за блокиране на тестовите случаи.
%ge Тестови случаи Блокирани = ( Брой на блокираните тестови случаи / Общ брой на изпълнените тестови случаи) * 100.
И така, от горните данни,
%ge Блокирани тестови случаи = (9 / 65) * 100 = 14%
#6) Плътност на дефектите = Брой установени дефекти / размер
( Тук "Размер" се счита за изискване. Следователно тук плътността на дефектите се изчислява като брой дефекти, идентифицирани за изискване. По подобен начин плътността на дефектите може да се изчисли като брой дефекти, идентифицирани на 100 реда код [ИЛИ] Брой дефекти, идентифицирани за модул, и т.н. )
И така, от горните данни,
Плътност на дефектите = (30 / 5) = 6
#7) Ефективност на отстраняване на дефекти (DRE) = ( Брой дефекти, открити по време на тестването на ОК / (брой дефекти, открити по време на тестването на ОК + брой дефекти, открити от крайния потребител)) * 100
DRE се използва за определяне на ефективността на теста на системата.
Да предположим, че по време на разработката & QA тестване, сме идентифицирали 100 дефекти.
След тестването на ОК, по време на тестването Alpha & Beta, крайният потребител/клиентът идентифицира 40 дефекта, които е можело да бъдат идентифицирани по време на фазата на тестване на ОК.
Сега DRE се изчислява по следния начин,
DRE = [100 / (100 + 40)] * 100 = [100 /140] * 100 = 71%
#8) Изтичане на дефекти : Изтичането на дефекти е метриката, която се използва за определяне на ефективността на тестването на ОК, т.е. колко дефекти са пропуснати/отпаднали по време на тестването на ОК.
Изтичане на дефект = ( Брой дефекти, открити при UAT / Брой дефекти, открити при тестване на качеството.) * 100
Да предположим, че по време на разработката & QA тестване, сме идентифицирали 100 дефекти.
След тестването на ОК, по време на тестването на Алфа и Бета, крайният потребител/клиентът идентифицира 40 дефекта, които е можело да бъдат идентифицирани по време на фазата на тестване на ОК.
Изтичане на дефекти = (40 /100) * 100 = 40%
#9) Дефекти по приоритет : Този показател се използва за определяне на броя на идентифицираните дефекти въз основа на тежестта/приоритета на дефекта, който се използва за определяне на качеството на софтуера.
%ge критични дефекти = брой установени критични дефекти / общ брой установени дефекти * 100
От данните, налични в горната таблица,
%ge Критични дефекти = 6/ 30 * 100 = 20%
%ge Високи дефекти = брой установени високи дефекти / общ брой установени дефекти * 100
От данните, налични в горната таблица,
%ge Високи дефекти = 10/ 30 * 100 = 33,33%
%ge Средни дефекти = брой установени средни дефекти / общ брой установени дефекти * 100
От данните, налични в горната таблица,
%ge Средни дефекти = 6/ 30 * 100 = 20%
%ge Ниски дефекти = брой установени ниски дефекти / общ брой установени дефекти * 100
От данните, налични в горната таблица,
%ge Ниски дефекти = 8/ 30 * 100 = 27%
Заключение
Метриките, предоставени в тази статия, се използват главно за генериране на ежедневен/седмичен доклад за състоянието с точни данни по време на фазата на разработване/изпълнение на тестовите случаи &; това е полезно и за проследяване на състоянието на проекта & Качеството на софтуера.
За автора : Това е гостуваща публикация на Anuradha K. Тя има над 7 години опит в тестването на софтуер и в момента работи като консултант в MNC. Тя също така има добри познания за автоматизираното тестване на мобилни устройства.
Кои други показатели за тестване използвате във вашия проект? Както обикновено, споделете вашите мисли/запитвания в коментарите по-долу.