숫자를 언제 인용하고 언제 보류할까

"통계 문해력은 숫자를 많이 인용하는 능력이 아니야. 숫자가 말할 수 있는 범위까지 함께 전하는 능력이야."

숫자보다 조건이 길 때가 있어

숫자 하나를 반복하는 데는 몇 초면 되지만, 모집단·표본·분포·불확실성을 설명하려면 문장이 길어져. 그래도 조건을 빼면 정확한 숫자가 오해를 만드는 도구가 될 수 있어. 인용할지 말지의 기준은 숫자가 마음에 드는지가 아니라, 출처와 해석 범위를 확인할 수 있는지야.

이럴 때는 인용해도 좋아

• 무엇을 측정했는지 분명할 때. 평균·중앙값·백분위 중 왜 그 요약값을 썼는지 설명할 수 있어야 해.
• 모집단과 표본이 드러날 때. 누가 조사 대상이었고 응답률과 가중치가 어땠는지 함께 전해.
• 불확실성이 붙어 있을 때. 점추정치만 떼지 말고 신뢰구간, 표준오차, 표본 크기, 모형 가정을 가능한 만큼 밝혀.
• 효과의 크기와 맥락이 있을 때. p-value만이 아니라 효과 크기, 연구 설계, 다중비교 여부, 선행 증거를 함께 봐.
• 조건부확률의 방향이 맞을 때. 민감도나 DNA 일치확률을 곧바로 양성 뒤 질병확률이나 유죄확률로 바꾸지 마.

이럴 때는 보류하거나 한계를 붙여

• 출처와 분모를 찾을 수 없을 때.
• 표본선정이 결과와 관련되어 보이는데 보정 방법이 없을 때.
• 얇은 꼬리 모형으로 극단위험을 계산했지만 자료의 꼬리와 의존성을 점검하지 않았을 때.
• 성공자 사례만으로 전략의 성공률을 일반화할 때.
• 평균 하나가 비대칭 분포의 전형적인 경험을 대표하는 것처럼 쓰일 때.

평균이나 p-value가 있다는 이유만으로 자동 거부할 필요는 없어. 필요한 맥락을 붙여도 결론이 유지되는지를 보는 것이 핵심이야.

사회적 비용

"그 숫자는 어떤 표본에서 나왔어?"라고 묻는 일은 대화를 잠깐 느리게 해. 하지만 짧고 깨끗한 오정보를 빠르게 퍼뜨리는 것보다 낫지. 모르면 보류하고, 확인되면 조건과 함께 공유해.

운영 원칙