엔트로피 증가 법칙과 대수의 법칙은 서로 다른 학문 영역에서 출발했지만, 확률적 사고라는 공통 기반 위에 놓여 있다. 물리학은 거대한 입자 집합이 시간이 흐르며 어떤 상태에 머무르게 되는지를 설명하려 했고, 통계학은 반복되는 시행 속에서 평균값이 어떻게 안정되는지를 설명하려 했다. 두 이론은 다루는 대상과 표현 방식이 다르지만, 핵심 구조는 매우 유사하다. 개별 사건의 움직임은 예측하기 어렵지만, 충분히 많은 사건이 누적되면 특정 방향성이 거의 필연적으로 관측된다는 점에서 두 개념은 동일한 통계적 원리를 공유한다.
엔트로피는 흔히 무질서의 척도로 설명되지만, 보다 정확하게는 가능한 미시 상태의 수를 반영하는 값이다. 하나의 거시적 상태가 존재하기 위해서는 그 상태를 구성할 수 있는 수많은 미시적 배열이 존재해야 한다. 가능한 배열의 수가 많을수록 그 상태가 관측될 가능성은 높아진다.
대수의 법칙 역시 비슷한 구조를 갖는다. 개별 시행은 무작위성을 가지지만, 시행 횟수가 증가할수록 관측되는 평균은 일정한 값에 가까워진다. 동전을 몇 번 던질 때는 결과가 크게 흔들리지만, 시행 횟수가 충분히 많아지면 앞면과 뒷면의 비율은 거의 일정하게 유지된다.
표본의 수가 증가할수록 평균값은 모집단의 평균에 가까워진다. 이는 특정 결과가 강제로 선택되기 때문이 아니라, 가능한 결과의 분포에서 중심값 주변에 해당하는 경우의 수가 가장 많기 때문이다. 개별 시행은 예측할 수 없지만, 많은 시행이 누적되면 결과는 특정 범위로 모인다.
두 법칙은 모두 경우의 수의 구조가 만들어내는 안정성을 설명한다. 엔트로피 증가 법칙은 상태 공간에서 가장 넓은 영역이 관측된다는 사실을 말하며, 대수의 법칙은 확률 분포에서 가장 밀도가 높은 구간이 반복적으로 관측된다는 사실을 말한다. 둘 다 어떤 방향으로 힘이 작용해서 결과가 결정되는 것이 아니라, 단순히 가능한 경우의 수의 분포가 비대칭적이기 때문에 특정 결과가 반복적으로 나타난다.
이러한 관점에서 보면 엔트로피 증가는 시간의 방향을 설명하는 통계적 현상으로 이해할 수 있다. 예를 들어 컵이 깨지는 과정은 매우 자연스럽게 발생하지만, 깨진 컵이 스스로 원래 형태로 복원되는 과정은 거의 관측되지 않는다. 원자들이 정교하게 배열되어 컵의 형태를 이루는 경우의 수는 극히 제한적이며, 깨진 상태에서 가능한 배열의 수는 압도적으로 많다. 따라서 시간이 지날수록 시스템은 가능한 상태의 수가 더 많은 방향으로 이동한다. 이는 어떤 특별한 규칙이 존재해서라기보다, 가능한 결과의 공간에서 특정 영역이 대부분을 차지하기 때문이다.
대수의 법칙에서도 유사한 직관을 발견할 수 있다. 시험을 한 번 보는 경우에는 높은 점수를 받을 수도 있고 낮은 점수를 받을 수도 있다. 그러나 동일한 조건에서 시험을 반복한다면 평균 점수는 특정 범위에 안정적으로 수렴한다. 개별 결과의 변동성은 여전히 존재하지만, 시행 횟수가 증가할수록 평균값이 크게 흔들릴 가능성은 줄어든다. 이는 평균 주변에 해당하는 결과의 경우의 수가 가장 많기 때문이다.
두 법칙의 공통점은 미시적 불확실성과 거시적 안정성이 동시에 존재한다는 점이다. 개별 입자의 움직임이나 개별 시행의 결과는 예측하기 어렵지만, 전체 시스템의 거시적 상태는 비교적 안정적으로 유지된다. 이러한 구조는 확률론이 복잡한 시스템을 이해하는 데 매우 강력한 도구가 되는 이유를 보여준다. 완벽한 예측은 불가능하지만, 분포의 형태를 이해하면 시스템이 어느 방향으로 움직일 가능성이 높은지 판단할 수 있다.
또한 두 법칙 모두 충분히 큰 규모를 전제로 한다. 엔트로피가 의미를 가지기 위해서는 매우 많은 수의 입자가 필요하며, 대수의 법칙이 성립하기 위해서도 충분히 많은 시행 횟수가 필요하다. 작은 규모에서는 우연에 의한 변동성이 크게 나타난다. 동전을 세 번 던졌을 때 앞면이 세 번 나오는 것은 특별한 일이 아니지만, 삼십만 번 던졌을 때 모두 앞면이 나올 가능성은 사실상 존재하지 않는다. 시스템의 크기가 커질수록 확률 분포의 구조가 더욱 뚜렷하게 드러난다.
이러한 특징 때문에 두 개념은 다양한 분야에서 직관적 사고 도구로 활용된다. 정보이론에서는 데이터의 불확실성을 엔트로피로 측정하며, 통계학에서는 반복된 관측을 통해 평균값을 추정한다. 경제나 사회 현상에서도 개별 행동은 예측하기 어렵지만, 집합적 행동은 일정한 패턴을 형성하는 경우가 많다. 물론 물리학의 엔트로피 개념을 그대로 사회 현상에 적용하는 것은 신중해야 하지만, 경우의 수가 많은 상태가 더 자주 관측된다는 기본 구조는 여러 영역에서 반복적으로 나타난다.
PS – 충분히 큰 수가 만들어내는 안정성은 자연뿐 아니라 판단 과정에서도 반복적으로 나타난다.
같이 보면 좋은 글
–열역학 법칙, 세계를 관통하는 원리
–대수의 법칙이란?, 확률적 사고방식과의 결합
–베이지안 업데이팅이란?, 수학이 알려주는 유연한 사고
–순열과 조합, 세상은 구성되고 순서로 움직인다
–뇌가소성, 인간은 어떻게 변화하는가