2-16 Confidence intervals should be reported

The observed difference in outcomes is the best estimate of how effective or safe treatments are (or would be, if the comparison were made in many more people). However, because of the play of chance, the true difference may be larger or smaller. The confidence interval is the range within which the true difference is likely to lie, after taking into account the play of chance. Although a confidence interval (margin of error) is more informative than a p-value, the latter is often reported. P-values are often misinterpreted to mean that treatments have or do not have important effects.

Understanding a confidence interval may be necessary to understand the reliability of an estimated treatment effect. Whenever possible, consider confidence intervals when assessing estimates of treatment effects. Do not be misled by p-values.

Browse by Key Concept

Back to Learning Resources home

Filter these resources:

Clear Filters

CASP logo

Confidence Intervals – CASP

The p-value gives no direct indication of how large or important the estimated effect size is. So, confidence intervals are often preferred.

| 0 Comments | Evaluated

Know Your Chances

This book has been shown in two randomized trials to improve peoples' understanding of risk in the context of health care choices.

| 0 Comments | Evaluated
CASP logo

P Values – CASP

Statistical significance is usually assessed by appeal to a p-value, a probability, which can take any value between 0 and 1 (certain).

| 0 Comments

False Precision

The use of p-values to indicate the probability of something occurring by chance may be misleading.

| 0 Comments
Book cover

วิธีการรักษา “แตกต่างอย่างมีนัยสำคัญ” แปลว่าอะไร

คำถามนี้ตอบยาก เพราะ “ความแตกต่างที่มีนัยสำคัญ” อาจแปลได้หลายอย่าง อย่างแรก คือ ความแตกต่างที่สำคัญต่อผู้ป่วยจริง ทว่าเมื่อผู้เขียนรายงานวิจัยกล่าวว่าวิธีการรักษา “แตกต่างอย่างมีนัยสำคัญ” พวกเขามักหมายถึง “ความแตกต่างทางสถิติ” ทั้งนี้ “ความแตกต่างที่มีนัยสำคัญทางสถิติ”  อาจไม่ได้ “มีนัยสำคัญ” ในความหมายที่ใช้กันทั่วไป “ความแตกต่าง” ระหว่างวิธีการรักษา “ที่มีนัยสำคัญทางสถิติ” ซึ่งก็คือ […]

| 2 Comments
Book cover

การประเมินผลจากความบังเอิญในการตรวจสอบอย่างเที่ยงธรรม

ผลจากความบังเอิญอาจทำให้เกิดความผิดพลาดได้ 2 ลักษณะในการแปลผลการเปรียบเทียบวิธีการรักษาอย่างเที่ยงธรรม คือเราอาจสรุปพลาดว่าวิธีการรักษาให้ผลการรักษาต่างกัน ทั้งที่จริงไม่ต่าง หรือกลับกัน ยิ่งสนใจสังเกตผลการรักษาจำนวนมากเท่าใด แนวโน้มที่เราจะเข้าใจผิดเช่นนี้ก็ยิ่งต่ำลงเท่านั้น การหา “ความแตกต่างที่แท้จริง” ระหว่างวิธีการรักษาต่างๆ นั้นเป็นไปไม่ได้เลย เพราะไม่อาจเปรียบเทียบวิธีการรักษาในคนทุกคนที่เป็น หรือจะเป็นโรคนั้น การศึกษาจึงต้องพยายามคาดเดาให้ใกล้เคียงที่สุดแทนว่าความแตกต่างที่แท้จริงน่าจะเป็นเท่าไร ความน่าเชื่อถือของความแตกต่างที่ประมาณได้มักแสดงในรูป “ช่วงความเชื่อมั่น (confidence interval)” โดยระบุช่วงที่น่าจะครอบคลุมความแตกต่างที่แท้จริง […]

| 4 Comments
Book cover

บทที่ 7 คำนึงถึงผลจากความบังเอิญ

ประเด็นสำคัญ ต้องมีการพิจารณา โดยประเมินว่าเชื่อมั่นคุณภาพและจำนวนของหลักฐานที่มีได้เพียงใด ความบังเอิญและกฎว่าด้วยจำนวนมาก การป้องกัน (และการแก้ไขความลำเอียงที่ไม่ได้ป้องกันไว้) ทำให้เกี่ยวกับผลเชื่อถือได้ หากการตรวจสอบอย่างเที่ยงธรรมขาดองค์ประกอบเหล่านี้ ต่อให้ปรับผลจากการวิจัยอย่างไรก็ไม่อาจแก้ปัญหารวมถึงผลกระทบจากปัญหาที่อาจคร่าชีวิตได้ (ดูบทที่ 1 และ 2) และแม้เมื่อลดความลำเอียงได้ด้วยขั้นตอนต่างๆ แล้ว เราก็ยังอาจถูกความบังเอิญหลอกเอาได้ ทุกคนรู้ว่าถ้าโยนเหรียญซ้ำๆ จะออกหัวหรือก้อย “ติดกัน” 5 […]

| 1 Comment

No Resources Found

Try clearing your filters or selecting different ones.