[AHP 실전] 대안 하나 추가했더니 1등이 바뀌었다? — AHP 순위역전 현상 이해와 대처법

AHP 분석을 끝내고 최종 보고서까지 다 썼다고 치자. 그런데 심사 과정에서 "대안 하나를 더 넣어 보면 어떻겠냐"는 의견이 나왔다. 별 생각 없이 대안을 추가해 다시 돌렸는데, 덜컥 1등이 바뀌어 버렸다. 숫자를 건드린 것도 아닌데 말이다.

이건 계산 실수가 아니다. AHP를 쓰는 사람이라면 한 번쯤은 알아둬야 하는 고전적인 현상, 순위역전(rank reversal)이다.

📋 목차

• 1. 순위역전이란 — 대안 하나가 순위를 뒤흔든다
• 2. 왜 일어날까 — 정규화 방식의 함정
• 3. 숫자로 확인해 보기 (개념 예시)
• 4. 실전에서 대처하는 4가지 방법
• 마무리: 분석 전에 대안을 확정하라

1. 순위역전이란 — 대안 하나가 순위를 뒤흔든다

순위역전은 평가기준과 가중치는 그대로인데, 대안을 하나 추가하거나 삭제했을 뿐인데 기존 대안들의 순위가 바뀌어 버리는 현상이다. 1983년 Belton과 Gear가 Saaty의 AHP에 이런 문제가 있다고 지적하면서 학계의 긴 논쟁이 시작됐다. (출처: Belton, V. & Gear, T., "On a Short-coming of Saaty's Method of Analytic Hierarchies", Omega, 11(3), 1983, pp.228-230)

왜 문제가 되느냐. 공공사업 대안 평가나 업체 선정처럼 순위가 곧 예산과 직결되는 상황에서, "대안 하나 넣었더니 결과가 뒤집혔다"는 건 공정성 시비로 바로 번진다. 분석자의 신뢰도가 걸린 문제다.

2. 왜 일어날까 — 정규화 방식의 함정

원인은 생각보다 단순하다. AHP의 기본 계산 방식인 분배 모드(distributive mode)는 각 기준에서 대안들의 점수를 합이 1이 되도록 나눈다. 즉, 대안들의 점수는 '상대적인 파이 나누기'다.

새 대안이 들어오면 파이를 나누는 대상이 늘어나니, 기존 대안들의 몫이 재조정된다. 문제는 이 재조정이 대안마다 똑같이 일어나지 않는다는 점이다. 기준별 점수 분포에 따라 어떤 대안은 많이 깎이고, 어떤 대안은 덜 깎인다. 그 차이가 누적되면 순위가 뒤바뀐다.

Saaty는 이 지적에 대응해 이상 모드(ideal mode)라는 대안을 제시했다. 각 기준에서 가장 좋은 대안을 1로 두고, 나머지를 그에 대한 상대 비율로 매기는 방식이다. 이상 모드에서는 새 대안이 추가돼도 기존 대안들의 상대 점수가 그대로 유지돼 순위가 흔들리지 않는다. 다만, 새로 들어온 대안이 기존 1등을 추월하는 건 막을 수 없다. 그건 순위역전이 아니라 정상적인 평가 결과다.

3. 숫자로 확인해 보기 (개념 예시)

기준 가중치가 비용 0.6, 품질 0.4인 가상 사례를 보자. 분배 모드 기준으로 계산한 종합점수다.

대안	대안 3개일 때	대안 D 추가 후
A	0.42 (1위)	0.33 (2위)
B	0.35 (2위)	0.34 (1위)
C	0.23 (3위)	0.19 (3위)
D	-	0.14 (4위)

새로 들어온 D는 꼴찌인데, A와 B의 순위가 뒤집혔다. 가중치도 기준 점수도 건드리지 않았는데 말이다. 이게 분배 모드의 특성이다. 같은 상황을 이상 모드로 돌리면 A와 B의 상대 순서는 그대로 유지된다.

4. 실전에서 대처하는 4가지 방법

① 이상 모드를 선택한다 — 대안의 추가·삭제 가능성이 있는 분석이라면 처음부터 이상 모드로 돌리는 게 안전하다. 대부분의 AHP 소프트웨어와 엑셀 템플릿에서 모드를 고를 수 있다.

② 분석 도중 대안을 바꾸지 않는다 — 가장 확실한 예방책이다. 대안 집합을 먼저 확정하고 분석에 들어간다. 중간에 대안이 바뀌면 '이어서'가 아니라 처음부터 다시 돌린다.

③ 민감도 분석으로 순위 안정성을 검증한다 — 가중치를 조금씩 바꿔 봐도 1등이 유지되는지 확인한다. 순위가 쉽게 뒤집히는 구조라면, 애초에 대안 간 차이가 미미하다는 신호일 수 있다.

④ 보고서에 정규화 방식을 명시한다 — 분배 모드인지 이상 모드인지 밝혀야 제3자가 재현할 수 있다. 방식이 다르면 결과가 다르게 나올 수 있으니, 이 한 줄이 분쟁을 막는다.

마무리: 분석 전에 대안을 확정하라

순위역전은 AHP의 '버그'가 아니라 계산 방식의 '성질'이다. 알고 쓰면 피할 수 있고, 모르고 쓰면 심사 자리에서 곤란해진다. 대안은 분석 전에 확정하고, 변경 가능성이 있다면 이상 모드를 쓰고, 보고서에는 방식을 명시한다. 이 세 가지만 지켜도 순위역전 논란에서 자유로워진다.

복잡한 AHP 계산이 필요하면 www.ahpmaster.com에서 무료로 해보세요. 가중치 계산부터 CR 검증, 민감도 분석까지 한 번에 처리됩니다.