At det ikke ble funnet feil i de inspiserte prøvene, er gunstig dokumentasjon, men det beviser ikke at hvert produkt er feilfritt eller at fremtidige problemer er umulige.
Hva resultatet faktisk fastslår
En feilfri prøve betyr at inspektørene ikke observerte noen definerte feil blant enhetene som ble undersøkt, under kontrollene og forholdene som ble brukt. Konklusjonen gjelder denne prøven og dette inspeksjonsomfanget. Den beskriver ikke automatisk enheter som ikke ble undersøkt, egenskaper som ikke ble testet eller produkter som ble fremstilt under andre forhold.
NIST Engineering Statistics Handbook forklarer at akseptanseprøving bruker informasjon fra en prøve for å avgjøre om et parti sannsynligvis er akseptabelt. Hovedformålet er å avgjøre partiets status, ikke å gi et fullstendig estimat av partiets kvalitet. Derfor er et akseptert parti og en perfekt prøve ikke absolutte garantier.
Hvorfor restrisiko består
Prøvetaking undersøker bare en del av et parti. En feil kan være sjelden, samlet i en uundersøkt del eller mangle i de utvalgte enhetene på grunn av tilfeldigheter. Inspeksjonsdekningen er også viktig: En visuell kontroll kan ikke fastslå en funksjonell egenskap som ikke er målt, og en test utført under én betingelse kan ikke fastslå ytelse under alle mulige bruksforhold.
Hvor sterkt et feilfritt resultat er, avhenger derfor av partidefinisjonen, utvalgsmetoden, prøvestørrelsen, feilkriteriene, testene som ble utført og de registrerte resultatene. Uten disse detaljene sier uttrykket «null feil» lite om hvor mye av den relevante risikoen som faktisk ble undersøkt.
Den ansvarlige konklusjonen
Den forsvarlige formuleringen er at det ikke ble funnet noen spesifiserte feil i den inspiserte prøven innenfor det angitte testomfanget. Dette bør ikke utvides til påstander om at hele partiet har null feil, at hver bruker vil motta en feilfri enhet eller at ingen fremtidig svikt kan oppstå. For en produktspeifik konklusjon trenger leserne den relevante prøvetakingsrapporten for partiet og testdekningen.
Beviser en større feilfri prøve at risikoen er null?
Nei. En større, riktig utvalgt prøve kan gi sterkere dokumentasjon, men prøvetaking alene kan ikke bevise at risikoen for uobserverte feil er nøyaktig null.