In de Neyman-Pearson procedure moet men op grond van de steekproefresultaten een keuze maken tussen de twee hypothesen. Met andere woorden: men moet beslissen welke van de twee hypothesen verworpen en welke geaccepteerd moet worden. Je ziet dat dit verschilt van de nulhypothese-toetsingsprocedure, waarbij het erom ging een beslissing te nemen over de houdbaarheid van één hypothese, namelijk de nulhypothese.
Over deze beslissing valt meer te zeggen dan tot nu toe is gedaan. We gaan nog even terug naar het voorbeeld met de munt. Daar werd op grond van het resultaat (12 maal kop bij 12 keer gooien) de hypothese verworpen dat het zou gaan om een zuivere munt. Je hebt toen kunnen zien dat er bij toetsing altijd een kans bestaat om ten onrechte een hypothese te verwerpen die waar is. Je weet inmiddels dat deze kans wordt aangeduid met
Er is echter ook nog een andere situatie mogelijk, namelijk de kans om
Beide beslissingen zijn dus fout. Naast deze twee kansen op foute beslissingen, zijn er natuurlijk ook twee kansen op juiste beslissingen, maar daar komen we straks nog op terug.
