“มีนัยสำคัญทางสถิติ” หมายความว่าอย่างไร

“อันที่จริงการมีนัยสำคัญทางสถิติเป็นแนวคิดที่ยุ่งยาก มันบอกเราได้ว่าความแตกต่างเกิดจากความบังเอิญหรือไม่ เช่น ระหว่างยาจริงกับยาหลอก หรือระหว่างอายุคาดเฉลยของคน 2 กลุ่ม…โดยแปล ว่าความแตกต่างเท่าที่สังเกตพบไม่น่าจะเกิดเพียงเพราะบังเอิญ

นักสถิติใช้ระดับมาตรฐานของการที่ ‘ไม่น่าจะบังเอิญ’ โดยทั่วไปใช้นัยสำคัญที่ร้อยละ 5 (อาจเขียนได้ว่า p = 0.05) ในกรณีนี้จะถือว่าความแตกต่างนั้นๆ ‘มีนัยสำคัญ’ เมื่อมีโอกาสน้อยกว่า 1 ใน 20 ที่ เกิดจากความบังเอิญ”

Spiegelhalter D, quoted in: Making Sense of Statistics. 2010. www.senseaboutscience.org