2" Фиг. 12 Ефективност на тестването в проект "Офис Уеб- 1" Фиг. 13 Ефективност на тестването в проект "ГИС-1" Съпоставка и точност на метриката Прави впечатление, че два от проектите постигат стойност на 𝑄 𝑡 леко надхвърляща 0.70, а други два - стойност над 0.90. Ако направим паралел между характеристиките на проектите, виждаме, че и двата проекта, които постигат високи резултати, са за създаване на нови продукти. Ясно е, че ако даден продукт не се използва, то няма да има потребители, които да откриват несъответствия в него. От тази гледна точка е възможно високите стойности на новите проекти да са резултат на по-малкото потребители, които използват продукта и откриват несъответствия. Двата проекта, които достигат стойност около 0.70, са продължение на съществуващи продукти. И двата проекта имат потребители, което очаквано води до откриване на несъответствия. Продължителното проследяване и на двата проекта и по-голямото количество данни, а и силните тенденции към стабилизиране около определена стойност показват, че при тях стойността на 𝑄 𝑡 зависи повече от реалната ефективност на тестването. При 𝑄 𝑡 = 0.70, цели 30% от несъответствията в продуктите са открити от клиенти, което подсказва, че вероятно ефективността на тестването може да бъде подобрена. Първата стъпка е поставяне на цел, която трябва да бъде постигната, като метриката може да бъде използвана именно за това (напр. може да бъде поставена цел през следващите шест месеца 𝑄 𝑡 да бъде повишено до 0.75). При използване на данни с натрупване, голямото количество стари данни предизвиква латентност, при която дори голяма промяна в ефективността може дълго време да не предизвика значително изменение. Затова е важно избирането на подходящ прозорец от време, за което да се разглеждат данните. При изследване на стойностите, получени на база на 0.7 0.75 0.8 0.85 0.9 0.95 1 1.05 0 20 40 60 80 2012 -01 2012 -03 2012 -05 2012 -07 2012 -12 2013 -04 2013 -11 Bp-run Bt-run Qt 0 0.2 0.4 0.6 0.8 1 0 20 40 60 80 100 120 140 2014 -04 2014 -08 2014 -11 2015 -02 2015 -06 2015 -09 Bp-run Bt-run Qt 0 0.2 0.4 0.6 0.8 1 1.2 0 5 10 15 20 25 30 35 Bp-run Bt-run Qt 0 0.2 0.4 0.6 0.8 0 50 100 150 2012 -01 2012 -07 2013 -01 2013 -07 2014 -01 2015 -01 2015 -07 Bp-run Bt-run Qt
25 първите 25 записа за всяка година, още от първите 12 записа стойностите достигат 0.75 за всяка година, което е много точно приближение (±8%), при средна стойност за проекта от 0.70.
