모던지 / 수학 / 확률론 1강. 확률의 탄생과 공리

확률론 1강. 확률의 탄생과 공리

확률론은 진리 탐구가 아니라 도박 판돈을 공정하게 나누는 문제에서 태어났습니다.

풀고 시작

문제 1. 두 사람이 5판 3선승 내기를 하다 A가 2승, B가 1승인 상태에서 중단됐습니다. 판돈을 공정하게 나누는 기준은 무엇일까요?
파스칼과 페르마의 답은 과거의 승수가 아니라 미래의 가능성을 세는 것이었습니다. 남은 최대 두 판의 결과 네 가지를 모두 세면 A가 이기는 경우가 3, B가 이기는 경우가 1이므로 3 대 1로 나눕니다. 과거 비율 2 대 1은 그럴듯하지만 남은 판의 구조를 반영하지 못하죠.

1654년, 도박꾼의 질문

확률론의 출생 신고서에는 날짜가 있습니다. 1654년, 도박을 즐기던 프랑스 귀족 슈발리에 드 메레(Chevalier de Méré)가 파스칼(Blaise Pascal)에게 질문을 던졌고, 파스칼은 페르마(Pierre de Fermat)와 서신을 주고받으며 답을 만들었습니다. 핵심 문제가 분배 문제(problem of points)입니다. 내기가 도중에 중단되면 판돈을 어떻게 나눠야 공정할까요? 두 사람의 통찰은 단순하지만 혁명적이었습니다. 공정한 몫은 과거의 전적이 아니라 미래에 일어날 수 있는 경우들의 비율로 정해진다는 것입니다. 아직 일어나지 않은 일을 체계적으로 세는 수학, 즉 불확실성의 수학이 여기서 시작됐죠. 하위헌스가 1657년 이 아이디어를 최초의 확률론 교과서로 정리했고, 기댓값 개념(3강에서 다룹니다)도 이 흐름에서 나왔습니다.

고전적 정의와 그 한계

이 전통을 라플라스(Pierre-Simon Laplace)가 정식화한 것이 고전적 정의입니다. 확률은 전체 경우의 수에 대한 유리한 경우의 수의 비, 즉 P = 유리한 경우 / 전체 경우입니다. 주사위에서 짝수가 나올 확률은 3/6이죠. 명료해 보이지만, 여기에는 두 개의 균열이 있습니다.

첫째, 순환성입니다. 이 정의는 모든 경우가 "똑같이 그럴듯하다"는 전제 위에 서 있습니다. 그런데 "똑같이 그럴듯하다"는 말이 이미 확률 개념이죠. 확률을 정의하는 데 확률을 쓰는 셈입니다. 둘째, 적용 범위입니다. 찌그러진 주사위, 내일 비가 올 확률, 무한히 많은 경우처럼 대칭적인 경우의 수를 셀 수 없는 상황에는 답을 주지 못합니다. 확률이 무엇인지에 대한 논쟁은 이렇게 시작부터 잠복해 있었고, 5강에서 정면으로 다룹니다.

콜모고로프의 해법: 정의하지 말고 공리화하라

1933년 콜모고로프(Andrey Kolmogorov)의 『확률론의 기초』가 이 교착을 끊었습니다. 전략은 힐베르트의 기하학 공리화와 같습니다. 확률이 "무엇인지"는 묻지 않고, 확률이라 불리려면 만족해야 할 규칙만 못박는 것이죠.

공리 내용
공리 1 모든 사건의 확률은 0 이상이다
공리 2 표본공간 전체의 확률은 1이다
공리 3 서로 배반인 사건들의 합사건 확률은 각 확률의 합이다

이 세 줄에서 나머지 전부가 정리로 유도됩니다. 여집합의 확률이 1 − P(A)라는 것도, 확률이 1을 넘을 수 없다는 것도 공리의 귀결이죠. 확률론은 이로써 측도론(해석학 6강에서 본 엄밀화의 연장선) 위에 선 현대 수학의 정식 분과가 됐습니다.

표본공간과 사건: 모형을 먼저 그려라

공리가 작동하려면 무대가 필요합니다. 표본공간(sample space) Ω는 일어날 수 있는 모든 결과의 집합이고, 사건(event)은 그 부분집합입니다. 주사위 한 번이면 Ω = {1, 2, 3, 4, 5, 6}, "짝수"라는 사건은 {2, 4, 6}이죠. 그런데 확률 문제에서 생기는 혼란의 대부분은 계산 실수가 아니라 표본공간을 잘못 그린 데서 옵니다. 동전 두 개를 던져 "앞면 개수"만 보면 {0, 1, 2}가 같은 확률로 보이지만, 실제 표본공간은 (앞,앞), (앞,뒤), (뒤,앞), (뒤,뒤) 네 가지이고 앞면 1개는 그중 둘을 차지합니다. 분배 문제에서 파스칼과 페르마가 한 일도 정확히 이것, 남은 판들의 표본공간을 빠짐없이 그리는 일이었습니다. 다음 강에서는 정보가 들어왔을 때 이 표본공간이 어떻게 줄어드는지, 즉 조건부확률을 다룹니다.

인출 문제

문제 1. 분배 문제에 대한 파스칼과 페르마의 해법이 혁명적이었던 이유는 무엇일까요?
두 사람은 공정한 분배의 기준을 과거 전적이 아니라 남은 판들이 만들어낼 수 있는 모든 결과의 비율에 두었습니다. 불확실한 미래를 계산 가능한 대상으로 만든 것이 확률론의 출발점이죠. 과거 승률 분배는 드 메레 시대에도 제안됐던 그럴듯한 오답입니다.
문제 2. 확률의 고전적 정의가 가진 순환성 문제란 무엇일까요?
고전적 정의는 동등하게 일어날 법한 경우들을 전제하는데, "동등하게 일어날 법하다"가 곧 확률 개념입니다. 정의하려는 것을 정의에 미리 쓰는 순환이죠. 무한 경우 문제는 순환성이 아니라 적용 범위의 한계에 해당합니다.
문제 3. 콜모고로프의 1933년 공리화가 택한 전략은 무엇일까요?
콜모고로프는 힐베르트식 공리화를 따라 해석 논쟁을 비켜가고, 비음수성, 전체 확률 1, 배반 사건의 가산 가법성이라는 규칙만 제시했습니다. 빈도 해석과 믿음 해석은 공리가 아니라 공리를 만족하는 확률의 해석들이며, 이 논쟁은 5강의 주제입니다.
문제 4. 동전 두 개를 던질 때 앞면이 정확히 1개 나올 확률이 1/3이 아니라 1/2인 이유는 무엇일까요?
겉보기 결과 {0개, 1개, 2개}는 똑같이 그럴듯한 경우들이 아닙니다. 순서를 구분한 진짜 표본공간 4가지에서 앞면 1개는 두 경우에 해당하므로 2/4죠. 확률 오류의 다수는 표본공간을 잘못 그리는 데서 나옵니다.

생각해볼 질문 (정답 없음)

  • 콜모고로프의 공리는 확률이 무엇인지 끝내 말해주지 않습니다. 규칙만 있고 의미가 비어 있는 수학은 완성된 것일까요, 미완성인 것일까요.

이전: 해석학 6강 · 다음: 확률론 2강

모던지 · 궁금하면 모던지 GitHub · 2026-09-10