Het niet vinden van gebreken in geïnspecteerde steekproeven is gunstig bewijs, maar bewijst niet dat elk product foutloos is of dat toekomstige problemen onmogelijk zijn.
Wat het resultaat daadwerkelijk vaststelt
Een foutloze steekproef betekent dat inspecteurs bij de onderzochte eenheden geen vastgestelde gebreken hebben waargenomen, onder de gebruikte controles en omstandigheden. De conclusie geldt voor die steekproef en die inspectieomvang. Ze beschrijft niet automatisch niet-onderzochte eenheden, kenmerken die niet zijn getest of producten die onder andere omstandigheden zijn gemaakt.
Het NIST Engineering Statistics Handbook legt uit dat acceptatiesteekproeven informatie uit een steekproef gebruiken om te beslissen of een partij waarschijnlijk aanvaardbaar is. Het hoofddoel is de beslissing over de partij, niet een volledige schatting van de kwaliteit van de partij. Daarom vormen een geaccepteerde partij en een perfecte steekproef geen absolute garanties.
Waarom restrisico blijft bestaan
Steekproeven onderzoeken slechts een deel van een partij. Een gebrek kan zeldzaam zijn, geconcentreerd zijn in een niet-onderzocht deel of door toeval ontbreken in de geselecteerde eenheden. Ook de inspectiedekking is van belang: een visuele controle kan geen niet-gemeten functionele eigenschap vaststellen, en een test onder één omstandigheid kan de prestaties onder elke mogelijke gebruiksomstandigheid niet vaststellen.
De bewijskracht van een foutloos resultaat hangt daarom af van de definitie van de partij, de selectiemethode, de steekproefomvang, de gebrekcriteria, de uitgevoerde tests en de vastgelegde resultaten. Zonder die details zegt de uitdrukking „nul gebreken” weinig over hoeveel van het relevante risico daadwerkelijk is onderzocht.
De verantwoorde conclusie
De verdedigbare uitspraak is dat binnen de aangegeven testomvang geen gespecificeerde gebreken zijn gevonden in de geïnspecteerde steekproef. Dit mag niet worden uitgebreid tot beweringen dat de hele partij geen gebreken heeft, dat elke gebruiker een foutloze eenheid zal ontvangen of dat er in de toekomst geen storing kan optreden. Voor een productspecifieke conclusie hebben lezers het relevante steekproefrapport van de partij en de testdekking nodig.
Bewijst een grotere foutloze steekproef dat het risico nul is?
Nee. Een grotere, passend geselecteerde steekproef kan sterker bewijs leveren, maar steekproeven alleen kunnen niet bewijzen dat het risico op een niet-waargenomen gebrek exact nul is.