직관 — 어려운 수술을 도맡은 의사
솜씨 좋은 의사가 어려운 수술을 도맡으면 쉬운 수술을 주로 맡는 동료보다 전체 성공률이 낮게 나올 수 있다. 쉬운 수술끼리, 어려운 수술끼리 견주면 그가 모두 앞서는데도 그렇다. 그래서 성공률을 견주기 전에 누가 어떤 환자를 맡았는지부터 본다.
이 글은 심슨의 역설 가운데 층마다 같은 방향인 비교가 자료를 합치면 뒤집히는 역전을 실제 자료로 살피고, 역전이 생기는 조건과 바로잡는 방법을 정리한다. 빅데이터와 편향에서 본 두 모형의 순위 역전 한 경우를 일반 조건·표준화·층화 비교로 넓히며, 그 글의 필수 범위를 넘는 확장 읽기다.
수술의 난이도는 자료를 나누는 층, 의사가 맡은 환자 가운데 각 난이도의 비율은 구성비에 대응한다. 인공지능 모형의 정확도를 평가할 때도 환경별 정확도와 평가 자료의 구성비를 함께 적어야 같은 함정을 피한다.
심슨의 역설은 층별 비교와 전체 비교가 어긋나는 현상이다
심슨의 역설(Simpson's paradox)은 자료를 몇 개의 층으로 나누어 본 비교와 층을 합친 전체 비교가 어긋나는 현상이다. 층은 자료를 겹치지 않게 나눈 부분 집단이다. 가장 뚜렷한 꼴은 모든 층에서 한 집단이 앞서는데 전체에서는 그 집단이 뒤지는 역전이다. 층마다 있던 차이가 합치면 사라지거나, 층마다 없던 차이가 합치면 생기는 경우도 같은 이름으로 부른다.11 SEP 'Simpson's Paradox'의 머리말은 층으로 나눌 때 관계가 생기거나 사라지거나 뒤집히는 경우를 모두 이 이름으로 부르고, 2.1절에서 그 종류를 나눈다.
피어슨(1899)과 율(1903)이 먼저 지적했고, 심슨(1951)의 짧은 논문 이후 이 이름이 붙었다. 그래서 Yule–Simpson effect라고도 부른다.22 SEP 'Simpson's Paradox' 1절. 역전을 두 집단 와 두 층에 대해 쓰면 다음 세 부등식이 함께 성립하는 경우다.
| 기호 | 이름 | 원어 | 뜻 |
|---|---|---|---|
| 비교하는 두 집단 | groups | 아래 예에서 는 개복 수술, 는 경피적 신쇄석술 | |
| 층 번호 | stratum index | 1은 작은 결석, 2는 큰 결석 | |
| 층별 자료 수 | stratum size | 의 층 에 속한 사례 수. 그 합이 | |
| 층별 성공 수 | successes | 의 층 에서 성공한 수 | |
| 층별 비율 | stratum rate | ||
| 구성비 | composition weight | . 의 자료 가운데 층 의 비율 | |
| 전체 비율 | overall rate | 층을 합친 성공 수를 로 나눈 값 |
의 기호도 같은 뜻이며, 빅데이터와 편향의 , 와 같은 기호다. 층별 비율은 상대도수처럼 성공 수를 그 층의 자료 수로 나눈 값이다. 확률과 통계를 배웠다면 을 '를 받은 작은 결석 환자가 성공한 조건부확률'로 읽을 수 있다.
Charig 외(1986)는 런던의 같은 외과 팀이 1972~1985년에 치료한 신장결석 환자를 치료법별로 비교했다. 층 1은 결석의 평균 지름이 2 cm 미만, 층 2는 2 cm 이상이거나 결석이 여러 개인 환자다. 성공은 3개월 뒤 결석이 없거나 2 mm 미만의 조각만 남은 경우다.33 Charig 외, BMJ 292, 1986, 표 I·II. 개복 수술은 세 종류의 수술을 합친 값이다.
| 치료 | 층 | 환자 수 | 성공 수 | 성공 비율 |
|---|---|---|---|---|
| 개복 수술 | 1 작은 결석 | 87 | 81 | 0.931 |
| 개복 수술 | 2 큰 결석 | 263 | 192 | 0.730 |
| 경피적 신쇄석술 | 1 작은 결석 | 270 | 234 | 0.867 |
| 경피적 신쇄석술 | 2 큰 결석 | 80 | 55 | 0.688 |
두 층 모두 가 앞선다. 그런데 층을 합치면 순위가 뒤집힌다.
식 (2)·(3)으로 식 (1)의 세 부등식이 모두 성립한다. 자료를 만나면 다음 순서로 확인한다.
- 층마다 비율을 구해 비교한다.
- 층을 합친 전체 비율을 구해 비교한다.
- 두 결과의 방향이 다르면 두 집단의 구성비를 나란히 적고, 같은 구성비로 다시 계산한다.
심슨의 역설은 왜 생기나 — 전체 비율은 구성비로 가중한 평균이다
심슨의 역설은 전체 비율이 층별 비율의 단순 평균이 아니라 구성비를 비중으로 한 가중평균이라서 생긴다. 는 환자의 75%가 성공률이 낮은 큰 결석이고, 는 77%가 성공률이 높은 작은 결석이라 두 전체 비율이 반대쪽으로 끌려간다.
가중평균은 각 값에 합이 1인 비중을 곱해 더한 평균이다. 성공 수는 이므로, 두 층의 성공 수를 더해 로 나누면 다음 식이 된다.
, 을 넣으면 식 (2)·(3)과 같은 값이 나온다. 식 (4)에 따르면 는 두 층의 비율 사이에 있고, 구성비가 큰 층의 비율에 더 가깝다.
그림 1의 가로축 은 집단을 가리지 않고 쓴 작은 결석의 구성비다. 각 선분은 층별 비율을 고정하고 구성비만 바꿀 때의 전체 비율이다. 선분 는 어디서나 선분 보다 위에 있지만, 실제 구성비에 찍힌 점은 가 왼쪽 아래, 가 오른쪽 위라 높이가 뒤집힌다.
figures/weighted_average_segments.py전체 차이는 층 안의 차이와 구성의 차이로 나뉜다. 가운데에 를 빼고 더하면 다음 세 식을 얻는다.
층 안 차이 은 의 환자 구성을 그대로 두고 층별 비율만 비교한 값이다. 구성 차이 는 층별 비율을 의 것으로 두고 구성비만 바꾼 효과다. 두 층이면 이므로 식 (7)이 곱 하나로 묶인다.
신장결석 자료를 넣는다. 의 층별 비율은 정확히 과 이다.
식 (9)의 75.4와 180.8125는 과 으로, 의 환자가 의 층별 비율대로 성공했을 때의 성공 수다. 식 (10)의 두 분수는 과 이다. 그림 2처럼 층 안 차이 0.048을 구성 차이 −0.094가 덮어 전체 차이가 −0.046이 된다.44 의 구성비를 기준으로 나누면 두 몫은 0.059와 −0.105로 바뀌지만 합은 같다.
figures/difference_decomposition.py심슨의 역설은 평균 점수에서도 생겨?
그렇다. 평균도 집단 크기를 비중으로 한 가중평균이라 같은 역전이 생긴다. 가상 학교 X가 기초반 30명 평균 62점, 심화반 10명 82점이고 Y가 기초반 10명 60점, 심화반 30명 80점이면, 두 반 모두 X가 앞서지만 전체 평균은 X 67점, Y 75점이다.
심슨의 역설은 언제 생기나 — 역전의 조건
두 층에서 역전이 생기려면 식 (8)의 구성 차이가 음수이고, 그 크기가 층 안 차이보다 커야 한다. 식 (8)이 음수이려면 두 인수가 0이 아니고 부호가 달라야 하므로, 다음 세 가지가 모두 필요하다.
- 두 집단의 구성비가 다르다. 이면 식 (8)이 0이라 이다.
- 의 두 층 비율이 다르다. 이면 역시 식 (8)이 0이다.
- 층마다 앞서는 가, 의 비율이 낮은 층을 보다 더 많이 맡는다. 신장결석 자료는 이고 라 식 (8)이 음수다.
범위로도 가능성을 판정할 수 있다. 식 (4)에서 는 의 두 층 비율 가운데 작은 값보다 작아질 수 없고, 는 의 두 층 비율 가운데 큰 값보다 커질 수 없다. 따라서 역전에는 다음이 필요하다. min은 작은 값, max는 큰 값이다.
신장결석 자료는 이라 식 (11)을 만족한다. 그림 3은 층별 비율을 이 자료로 고정하고 두 구성비만 바꾸어, 역전이 생기는 구성을 색칠한 것이다. 같은 구성비를 뜻하는 대각선은 색칠한 삼각형에 닿지 않는다.
figures/reversal_region.py조건 1~3과 식 (11)은 필요조건일 뿐 충분조건이 아니다. 그림 3의 빈 점 (0.4, 0.6)처럼 경계선과 대각선 사이에서는 조건 1~3이 모두 맞아도 구성 차이가 층 안 차이를 덮지 못해 역전이 없다.
심슨의 역설과 교란 요인은 무슨 관계야?
심슨의 역설은 층을 나누는 변수가 집단의 구성과 결과에 모두 관련될 때만 생길 수 있다. 그 변수가 처치보다 먼저 정해지며 어느 처치를 받을지와 결과에 모두 영향을 주는 조건이면 교란 요인이라 한다. 결석 크기는 치료 전에 정해지고, 치료 선택(큰 결석의 비율 75%, 23%)과 관련되며 성공률에도 영향을 주는 교란 요인이다. 교란 요인으로 층을 나누어 비교하거나 표준화하면 그 영향을 덜어 낸다.
심슨의 역설은 표본이 크면 안 생겨?
아니다. 심슨의 역설은 두 집단의 구성비 차이에서 생기므로 자료 수를 늘려도 저절로 사라지지 않는다. 신장결석 자료를 같은 구성으로 10배인 7,000명으로 늘려도 층별 비율과 전체 비율이 그대로라 역전도 남는다.
심슨의 역설은 같은 구성비로 표준화하면 사라진다
표준화는 비교하는 집단들에 같은 구성비 를 적용해 전체 비율을 다시 계산하는 방법이다. 모든 층에서 가 앞서면 어떤 공통 구성비를 골라도 의 표준화 비율 가 더 크다.
식 (13)의 두 괄호가 양수이고, 비중은 0 이상이며 합이 1이므로 결과도 양수다. 그림 1에서 같은 가로 위치의 두 점을 위아래로 견주는 것이 표준화다.
표준 구성비는 결론을 적용할 대상에 맞춰 고른다. 두 치료의 환자 700명을 합치면 작은 결석이 357명이라 이다.
순위가 층별 비교와 같아진다. 빅데이터와 편향의 사용 환경 처럼 결론을 적용할 집단의 구성을 표준으로 써도 된다.55 나이 구성이 다른 지역의 사망률을 견줄 때 쓰는 연령표준화 사망률도 같은 생각이다. 층화임의추출에서 층의 크기로 가중해 전체 비율을 추정하는 것도 같은 가중평균이다.
심슨의 역설은 전체 비율이 층별 비율을 구성비로 가중한 평균이라서 생기며, 두 집단에 같은 구성비를 적용하면 모든 층에서 앞선 집단이 전체에서도 앞선다.
심슨의 역설이 보이면 전체 비율과 층별 비율 중 무엇을 믿어?
층을 나눈 변수가 비교하는 처치보다 먼저 정해진 특성이면 층별 비교나 표준화한 비교를 쓴다. 결석 크기는 치료 전에 정해지므로 성공률만 보면 개복 수술이 앞선다(식 (14)·(15)의 표준화 0.833 대 0.779). 다만 두 치료는 시행 시기(1972~1980년, 1980~1985년)도 달라 다른 차이가 남을 수 있고, 층의 변수가 처치 뒤에 바뀌는 값이면 층별 비교가 오히려 틀릴 수 있다.
심슨의 역설로 유명한 버클리 입학 자료는 층화 비교로 읽는다
층화 비교는 층마다 따로 비교한 결과를 먼저 적고, 같은 구성비로 표준화해 한 수로 요약하는 방법이다. 층별 방향이 엇갈리면 표준화 결과가 표준 구성비에 따라 달라지므로, 어떤 구성비를 썼는지도 밝힌다.
1973년 UC 버클리 대학원의 큰 여섯 학과 지원자 4,526명 자료에서 합격률은 남학생 0.445, 여학생 0.304였다. 학과별로는 A, B, D, F에서 여학생이, C, E에서 남학생이 높아 방향이 엇갈린다. 그림 4 아래의 지원자 수에서 보듯, 합격률이 60%를 넘는 학과 A, B에 남학생 지원자는 51%가 지원했지만 여학생은 7%만 지원했다.
figures/berkeley_departments.py학과별 방향이 엇갈리므로 이 자료는 식 (1)의 꼴이 아니다. 그림 4에서 합친 비교 은 남학생이, 표준화한 비교 은 여학생이 높아 방향이 반대인 넓은 뜻의 심슨의 역설이다.
표준 구성비를 바꾸면 차이의 크기가 달라진다. 모든 지원자의 구성이면 여학생이 0.043 높고, 남학생 지원자의 구성이면 0.071, 여학생 지원자의 구성이면 0.001 높다. 이 셋은 방향이 같지만, 학과 C만 표준으로 삼으면 남학생이 높아진다. 엇갈리는 층에서는 표준에 따라 방향도 바뀔 수 있다.
Bickel 외(1975)는 학과별로 보면 남학생에게 유리한 치우침이 드러나지 않고, 전체 차이는 여학생이 합격률이 낮은 학과에 더 많이 지원한 데서 생겼다고 설명했다.66 SEP 'Simpson's Paradox' 5.5절과 R UCBAdmissions 문서의 요약. 원 논문은 더 많은 학과를 분석했다.
심슨의 역설의 흔한 오해
- 구성비만 다르면 역전이 생긴다. — 그림 3의 빈 점 (0.7, 0.3)과 (0.4, 0.6)은 구성비가 달라도 역전이 없다. 층별 비율이 0.90·0.80, 0.75·0.60처럼 식 (11)이 깨지면 어떤 구성비에서도 역전이 없다.
- 전체 비율이 같으면 층에서도 차이가 없다. — Simpson(1951)의 예에서 두 집단의 전체 비율은 20/40과 6/12로 모두 0.5지만, 층별로는 0.615 대 0.571, 0.444 대 0.400으로 한쪽이 모두 앞선다. 합치면 차이가 사라지는 이 경우도 넓은 뜻의 심슨의 역설이며, 원인은 역전과 같은 가중평균이다.
직접 해보기
- 가상 고객센터 X는 쉬운 문의 20건 중 18건, 어려운 문의 80건 중 24건을 해결했다. Y는 쉬운 문의 80건 중 68건, 어려운 문의 20건 중 5건을 해결했다. 층별 해결 비율과 전체 비율을 구하고 심슨의 역설인지 판정하라.
- 1번 자료를 쉬운 문의와 어려운 문의가 반반인 구성으로 표준화하라.
- 1번 자료의 전체 차이를 식 (6)과 식 (8)로 층 안 차이와 구성 차이로 나누어라.
- 층별 비율이 0.70·0.60, 0.65·0.55인 두 집단은 구성비에 따라 역전될 수 있는가? 0.80·0.70, 0.68·0.60이면 어떤가?
- 신장결석 자료의 층별 비율은 그대로 두고 개복 수술의 구성비만 로 바꾼다. 경피적 신쇄석술의 구성비 이 얼마보다 크면 역전이 생기는지 구하고, 그림 3의 경계선과 견주어라.
답
- X는 0.9와 0.3, 전체 이고 Y는 0.85와 0.25, 전체 이다. 두 층 모두 X가 앞서지만 전체는 Y가 앞서므로 심슨의 역설이다.
- X는 , Y는 로 X가 앞선다.
- X의 구성비는 0.2와 0.8이다. , 이고 합 은 과 같다.
- 첫 자료는 라 식 (11)을 만족한다. 예를 들어 , 이면 , 로 역전된다. 둘째 자료는 이라 식 (11)이 깨져 어떤 구성비에서도 역전이 없다.
- 식 (4)로 이다. 역전은 이 이보다 클 때이고, 이므로 이다. 그림 3에서 인 세로선이 경계선을 지나는 높이이며, 빈 점 (0.4, 0.6)은 이어도 이 높이보다 낮아 역전이 없다.
더 읽기
- Comparison of treatment of renal calculi by open surgery, percutaneous nephrolithotomy, and extracorporeal shockwave lithotripsy — Charig·Webb·Payne·Wickham, BMJ 292, 1986, 879–882쪽, 표 I·II. 신장결석 표의 환자 수·성공 수와 성공의 정의를 원문으로 확인한다. '심슨의 역설은 층별 비교와 전체 비교가 어긋나는 현상이다' §가 기댄다.
- Simpson's Paradox — Sprenger·Weinberger, Stanford Encyclopedia of Philosophy, 2021(2026 개정), 머리말·1절·2.1절·2.2절·5.5절. 이름의 내력, 역전보다 넓은 정의와 종류, 역전의 필요조건, 버클리 사례의 해석을 정리한다. 정의 §, '역전의 조건' §와 흔한 오해가 기댄다.
- Student Admissions at UC Berkeley (UCBAdmissions) — R Core Team, R datasets 패키지 문서. 큰 여섯 학과 4,526명의 자료와 전체 합격률 44.5%·30.4%를 확인한다. '버클리 입학 자료' §가 기댄다.
영상 노트
- 00:00 어려운 수술을 도맡은 의사의 비유
- 00:40 신장결석 표에서 식 (1)~(3)으로 역전 확인
- 01:40 식 (4)의 가중평균을 그림 1의 선분으로 판서
- 02:40 식 (5)~(10)으로 층 안 차이와 구성 차이를 계산하고 그림 2로 정리
- 03:40 세 조건과 식 (11)을 그림 3의 영역으로 확인
- 04:30 식 (12)~(15)의 표준화와 그림 4의 버클리 층화 비교
지도에서의 위치
- 2026-11-17 · 에이전트 초안 — 전수 검수에서 분리 제안된 유형 (수식 15, 그림 4)
- 2026-11-17 · 전수 검수 반영 — 원 논문 표와 R 자료로 신장결석·버클리 숫자 대조, 역전 조건의 필요조건 범위 정리, 질문 블록을 해당 절로 배치, 좁은 화면용 그림 글자 키움, 정의를 사라짐·생김까지 넓히고 버클리 자료의 꼴 명시, 용어를 교란 요인으로 통일, 역전 영역 그림에 띠 안의 점과 위 변 눈금 추가, 해보기 5를 경계 계산으로 교체 (에이전트 수정, 그림 0→4)
- 2026-11-17 · 전수 검수(에이전트 편집·독립 검증) 통과 — 주인 요청으로 완성으로 올림