הסקה, אומדן וקבלת החלטות מנתונים
בדיקת השערות היא דרך מסודרת לענות על השאלה "האם האפקט הזה אמיתי, או שזה רק רעש?", שהיא בדיוק השאלה "האם מודל A באמת טוב יותר ממודל B?" מתחילים בהנחה ששום דבר אינו מתרחש ושואלים עד כמה הנתונים שלך היו מפתיעים אילו זה היה נכון.
שתי טענות מתחרות. השערת האפס H₀ היא ברירת המחדל המשעממת: אין אפקט, אין הבדל. ההשערה החלופית H₁ היא מה שאתה חושד בו: שיש אפקט. מחשבים סטטיסטי מבחן מהנתונים ושואלים: אילו H₀ הייתה נכונה, עד כמה קיצוני הערך הזה?
אם הסטטיסטי כה קיצוני עד שהוא היה מתרחש רק לעיתים רחוקות תחת H₀, דוחים את H₀. אחרת אין דוחים אותה (שים לב: לעולם לא "מקבלים", שכן היעדר ראיה אינו ראיה להיעדר).