רמת חשיבות בבדיקת השערה

בדיקת השערה היא תהליך מדעי נרחב המשמש בכל תחומי המדע הסטטיסטי והחברה. במחקר הסטטיסטיקה מושגת תוצאה משמעותית סטטיסטית (או אחת בעלת משמעות סטטיסטית) במבחן השערה כאשר ערך ה- p נמוך מרמת המשמעות המוגדרת. ה ערך p היא ההסתברות להשיג נתון מבחן או תוצאת מדגם קיצונית או קיצונית יותר מזו שנצפתה במחקר ואילו רמת המשמעות או האלפא מספרות לחוקר כיצד חייבות להיות תוצאות קיצוניות כדי לדחות ה השערת אפס. במילים אחרות, אם ערך ה- p שווה או פחות מרמת המשמעות המוגדרת (נקוב בדרך כלל על ידי α), החוקר יכול להניח בבטחה כי הנתונים שנצפו אינם עולים בקנה אחד עם ההנחה כי ה השערת אפס נכון, כלומר ניתן לדחות את השערת האפס, או הנחת יסוד כי אין קשר בין המשתנים שנבדקו.

על ידי דחיית או הפרת ההשערה האפסית, חוקר מסיק שיש בסיס מדעי לכך האמונה היא קשר כלשהו בין המשתנים וכי התוצאות לא נבעו מטעות דגימה או סיכוי. אמנם דחיית השערת האפס היא יעד מרכזי ברוב המחקר המדעי, אך חשוב לציין זאת דחיית השערת האפס אינה שקולה להוכחת אלטרנטיבה של החוקר השערה.

מושג המשמעות הסטטיסטית הוא בסיסי לבדיקת ההשערה. במחקר שכולל ציור מדגם אקראי מאוכלוסייה גדולה יותר במאמץ להוכיח תוצאה כלשהי שניתן ליישם על ה- אוכלוסיה כולה, קיים פוטנציאל מתמיד לנתוני המחקר כתוצאה משגיאת דגימה או צירוף מקרים פשוט או סיכוי. על ידי קביעת רמת משמעות ובדיקת ערך ה- p נגדו, חוקר יכול לקיים או לדחות את השערת האפס בביטחון. רמת המשמעות, במילים הפשוטות ביותר, היא הסתברות הסף לדחייה שגויה של השערת האפס כאשר היא אכן נכונה. זה ידוע גם בשם

שגיאה מסוג I, או שגיאה מהסוג הראשון, מתרחשת כאשר ההשערה האפסית נדחית כאשר במציאות היא נכונה. במילים אחרות, שגיאה מסוג I דומה להשוואה חיובית שגויה. שגיאות מסוג I נשלטות על ידי הגדרת רמת משמעות הולמת. שיטות עבודה מומלצות בבדיקת השערות מדעיות קוראות לבחור רמת משמעות עוד לפני איסוף הנתונים. רמת המשמעות הנפוצה ביותר היא 0.05 (או 5%) מה שאומר שיש סבירות של 5% שהבדיקה תסבול משגיאה מסוג I על ידי דחיית השערת אפס אמיתית. לעומת זאת, רמת משמעות זו מתורגמת ל 95% רמת אמוןכלומר, בסדרה של בדיקות השערה, 95% לא יביאו לשגיאה מסוג I.