효과 크기

효과 크기(effect size)는 결과의 방향과 크기를 단위에 덜 의존하는 형태로 표현한 값이다. p값이 '차이가 우연일 가능성'을 말한다면, 효과 크기는 '그 차이가 실질적으로 얼마나 큰가'를 말한다. 두 지표는 서로 다른 질문에 답하므로 함께 읽어야 한다.

• 표준화 평균차(SMD)·코헨의 d: 두 군의 평균 차이를 표준편차로 나눠 표준화한 값. 대략 0.2(작음)·0.5(중간)·0.8(큼)을 관례적 기준으로 삼지만 절대적 잣대는 아니다.
• 평균차(MD): 원래 단위 그대로의 차이(예: 통증 10점 척도에서 -1.1점). 이 값은 최소 임상 중요 차이(MCID)와 직접 비교할 수 있어 해석이 직관적이다.
• AUC(곡선하면적): 검사가 두 집단을 얼마나 잘 판별하는지의 지표. 0.5는 동전 던지기, 1.0은 완벽. 예측·선별 검사의 성능을 볼 때 쓴다.

• 작지만 유의할 수 있다. 방향선호 만성 요통에 대한 매켄지(MDT) 메타분석(2024)의 단기 통증 평균차는 약 -1.1/10점으로, 통계적으로 유의해도 흔히 인용되는 MCID(약 2점)에는 못 미치는 크기다 — '유의하지만 작다'는 전형적 예다.
• 판별력이 약한 예. 움직임 선별검사(FMS)의 부상 예측 메타분석은 AUC 약 0.587로, 동전 던지기(0.5)보다 조금 나은 수준에 그쳤다. 신뢰도는 좋아도(검사자 간 신뢰도) 개인 예측이라는 효과는 작다는 것을 보여준다(~).
• 크기의 불확실성. 통증신경과학교육(PNE)의 운동공포 개선은 연구에 따라 SMD가 -0.7(유의하지 않음)에서 -1.1~-1.5(큼)까지 폭넓게 보고돼, 효과 크기 자체의 불확실성이 크다(신뢰구간·이질성 참조).

• "p<0.05 = 효과가 크다"가 아니다 — 표본이 크면 사소한 차이도 유의해진다. 유의성은 크기를 말하지 않는다.
• 효과 크기 ≠ 확실성 — 큰 효과라도 신뢰구간이 넓거나 근거 확실성이 낮으면 신뢰하기 어렵다.
• 표준화 지표의 함정 — SMD는 단위를 지워 여러 연구를 묶는 데 편하지만, 실제 임상적 체감과의 연결은 원 단위(MD)와 MCID로 되짚어야 한다.

• (2024). 방향선호 만성 요통 매켄지(MDT) 메타분석 — 단기 통증 평균차 약 -1.11/10점. PMC11924268.
• Moran RW 외. FMS 합산 점수의 부상 예측력 체계적 문헌고찰·메타분석 — AUC 약 0.587. British Journal of Sports Medicine.
• 통증신경과학교육(PNE) 우산형 고찰 (2023) — 운동공포 SMD 추정치의 큰 편차. Frontiers in Neuroscience.