6장. 더 많은 옵션이 자유를 보장하지는 않는다.

수천 개의 검사가 놓친 것.

자동 검사 도구가 결함 여섯 개를 안고 배포됐다. 검사 자체가 없었던 것은 아니다. 수천 개의 단언문이 돌아가고 있었고, 숫자만 보면 넓은 범위를 확인한 도구처럼 보였다. 단언문의 수는 실제로 닫아 둔 실패 경로의 수를 말해 주지 않았다.

그 검사들은 결함 세 개를 놓쳤다. 빈 입력을 최고 등급으로 판정했고, 최악의 값에서 페널티가 사라졌으며, 문서에 적힌 규칙을 실행에서 건너뛰었다. 정상 경로를 확인하는 단언문이 많아도 이 세 갈림길을 열어 보지 않았다면 같은 종류의 확인을 반복한 셈이었다.

여섯 개라는 결함 수와 세 개라는 누락 수만으로 테스트 체계 전체를 평가할 수는 없다. 이 사건에서는 검사량이 많다는 인상이 빈 입력, 경계값, 문서와 실행의 불일치를 대신 보지 못했다. 무엇을 몇 번 확인했는지보다 결과가 달라지는 경로를 실제로 지나갔는지가 더 중요한 질문으로 남았다.

선택지의 수와 선택 가능성은 다르다. 테스트에서는 단언문의 수와 검사 가능한 실패 경로가 다르고, 디자인에서는 파일 수와 결과가 다른 경로가 다르다. 둘 다 많이 만들었다는 사실만으로 중요한 차이를 비교할 수 있게 되지는 않는다.

이 한 사건으로 후보가 많을수록 판단이 나빠진다고 일반화하지는 않는다. 자동 규칙이 중복을 묶고 결함을 정확히 제거한다면 비교해야 할 경로는 빠르게 줄어든다. 목표가 안정돼 있고 평가가 정확하다면 생성과 선택 비용이 함께 낮아질 수도 있다. 그래서 수량보다 경로와 비교 능력을 따로 세어야 한다.

네 가지를 따로 세기

먼저 파일 수를 센다. 생성된 산출물, 사람이 수정한 버전, 검토에 실제로 들어온 후보를 구분해 센다. 생성 폴더에 저장됐지만 아무도 보지 않은 파일과 최종 비교에 참여한 후보를 같은 수로 처리하면 후보 유입을 과장할 수 있다.

다른 하나는 결과가 다른 경로 수다. 같은 가치와 같은 손실을 표현만 바꾼 후보는 한 경로로 묶을 수 있다. 중심 행동을 앞세우는 안과 탐색을 넓히는 안처럼 사용자의 다음 상태가 달라질 때 별도 경로로 남긴다. 이 분류에는 해석이 들어가므로 독립 검토자의 일치도도 필요하다.

또 하나는 비교 비용이다. 후보를 읽는 시간만이 아니라 차이를 설명하고, 기준을 적용하고, 이해관계자와 우선순위를 정하는 비용을 포함한다. 자동 점검이 결함을 걸러 내는 시간과 사람이 가치 충돌을 논의하는 시간을 나누면 어느 단계가 실제로 길어졌는지 볼 수 있다.

마지막 하나는 되돌리기 가능성이다. 같은 비교 비용이라도 즉시 원복할 수 있는 선택과 데이터 이전이나 사용자 학습을 묶는 선택은 다르다. 되돌리기 쉬운 경로는 빠르게 실행하고 관찰할 수 있지만, 비용이 큰 경로는 선택 전에 더 많은 근거와 책임 기록을 요구한다.

네 값을 하나의 옵션 수로 접으면 자유를 잘못 읽기 쉽다. 파일 수는 늘었지만 의미 있는 경로는 그대로일 수 있고, 비교 시간은 줄었지만 되돌리기 비용은 커질 수 있다. 어떤 변화가 자유를 넓혔는지 말하려면 적어도 어느 값이 움직였는지 밝혀야 한다.

평가 역량도 고정된 사람 수와 같지 않다. 명확한 기준, 중복을 묶는 도구, 비교 언어, 결정 권한이 함께 있을 때 같은 팀이 더 많은 경로를 처리할 수 있다. 반대로 검토자가 많아도 누구도 우선순위를 정할 수 없다면 처리율은 높아지지 않는다. 후보 유입률과 평가 처리율을 같은 단위와 시간창에서 재야 하는 이유다.

자유는 모든 후보를 끝까지 보관하는 상태도 아니다. 실행할 경로를 고르지 않으면 사용자는 어떤 세계도 경험하지 못한다. 후보를 버리는 일은 가능성을 훼손할 수 있지만, 선택을 끝없이 미루는 일도 책임을 피하는 방식이 될 수 있다.

적은 후보가 더 어려운 때

후보가 세 개뿐인 결제를 생각해 보자. 하나는 완료 속도를, 하나는 오류 예방을, 하나는 사용자의 통제권을 앞세운다. 각 경로가 실제로 다른 손실을 만들고 원복 비용도 크다면 비교는 어렵다. 파일 수가 적다고 선택 비용이 작아지지 않는다.

반대로 배너 색상 변형이 서른 개 있어도 대비 하한, 브랜드 팔레트, 자동 성과 검사로 빠르게 줄일 수 있다면 선택은 짧을 수 있다. 목표가 고정되고 오류 기준이 분명하며 원복도 쉽다면 많은 후보는 자유의 확대에 가까울 수 있다.

두 사례는 후보 수와 결정 비용 사이의 방향을 미리 정할 수 없다는 점을 보여 주려고 구성한 예시다. 실제 현장 시간 자료가 아니다. 적은 후보 사례가 늘 어렵거나 많은 후보 사례가 늘 쉽다는 주장도 아니다.

후보가 늘 때 피로가 생긴다는 일상 경험은 출발점이 될 수 있다. 피로가 파일 수에서 왔는지, 결과 차이를 설명할 언어가 없어서 왔는지, 승인 구조가 복잡해서 왔는지 분리해야 한다. 원인을 나누지 않으면 해결책도 후보 제한 하나로 좁아진다.

후보 제한은 정당한 운영 규칙일 수 있다. 검토 역량이 정해져 있다면 한 번에 들어오는 후보 수를 제한하고, 나머지는 다음 회차로 넘길 수 있다. 제한 수가 자연법은 아니다. 과업 위험, 자동 평가의 범위, 의미 있는 경로 수에 맞춰 정해야 한다.

대기열을 만드는 방식도 비교할 수 있다. 먼저 온 후보부터 보거나, 위험이 큰 경로를 먼저 검토하거나, 서로 다른 가치가 뚜렷한 후보만 대표로 올릴 수 있다. 어떤 순서를 쓰느냐에 따라 같은 후보 집합에서도 검토 경험이 달라진다. 후보 수 효과를 보려면 제시 순서와 중단 규칙까지 기록해야 한다.

비교 능력을 설계하기

후보를 줄이기 전에 같은 경로의 변형을 묶는다. 모양이 다르더라도 지킨 가치와 감수한 손실이 같으면 하나의 묶음으로 볼 수 있다. 반대로 비슷해 보여도 오류 책임이나 사용자의 통제권이 달라지면 별도 경로로 남긴다.

그다음 하한과 우선순위를 나눈다. 접근성 위반, 필수 정보 누락, 기술적 오류처럼 경로를 닫는 기준은 먼저 적용한다. 남은 후보에서는 충돌하는 결과를 비교한다. 이 순서를 섞으면 하한 점수와 가치 선택이 하나의 총점 안에서 서로 보상될 수 있다.

비교 비용이 큰 경로에는 기록 깊이를 늘린다. 누가 영향을 받는지, 무엇을 지키는지, 어떤 손실을 감수하는지, 언제 다시 열지를 적는다. 원복이 쉬운 선택에는 한 줄이면 충분하다. 모든 후보에 같은 양의 기록을 요구하면 비교 능력을 늘리기보다 문서 부담만 키운다.

평가 자동화도 비교 능력의 일부다. 중복 묶기, 규격 검사, 명확한 오류 판정은 자동화가 맡을 수 있다. 목표와 예외, 정지 조건이 안정돼 있다면 사람의 검토 없이 닫아도 된다. 판단을 보존하려고 모든 후보를 사람이 읽을 이유는 없다.

문제는 자동 평가가 무엇을 대표하는지 모를 때다. 하나의 점수가 서로 다른 사용자 집단의 손실을 합치거나, 쉬운 측정값이 중요한 결과를 대신하면 처리 속도는 높아져도 선택 가능성은 넓어지지 않을 수 있다. 그때 다시 열 것은 모델의 속도가 아니라 목표와 평정 범위다.

선택 가능성에는 권한도 들어간다. 비교자가 차이를 알아도 결정을 내릴 수 없고, 승인자는 비교 근거를 받지 못하며, 결과를 관찰하는 사람은 재검토를 요청할 수 없다면 후보는 오래 머문다. 이 지연을 인지 부담으로만 설명하면 책임 구조를 놓친다. 시간 측정과 함께 승인 및 재개 경로를 남겨야 한다.

필요한 비교 실험

후보 수 조건을 달리한 검사를 설계할 수 있다. 같은 과업에서 적은 후보, 중간 후보, 많은 후보를 제시하고 결정 시간, 번복 수, 선택 이유의 구체성을 비교한다. 후보의 품질 하한과 의미 있는 경로 수를 맞추지 않으면 더 나쁜 후보가 섞인 효과를 재게 된다.

참가자, 과업, 후보 품질, 경로 구성, 제시 순서, 시간 제한을 결과 전에 고정해야 한다. 결정 시간의 시작과 끝도 정한다. 첫 클릭까지인지, 최종 승인까지인지, 재검토 뒤 확정까지인지에 따라 같은 선택이 다른 시간으로 기록될 수 있다.

번복 수는 많을수록 나쁘다고 볼 수 없다. 새로운 정보를 보고 경로를 바꾸는 일은 좋은 판단일 수 있다. 이유의 구체성도 긴 문장을 보상해서는 안 된다. 우선한 결과, 감수한 손실, 다시 열 조건을 독립 검토자가 식별할 수 있는지로 정의해야 한다.

되돌리기 가능성도 조건에 넣어야 한다. 쉽게 원복할 수 있다는 사실을 아는 집단과 큰 전환 비용을 아는 집단은 같은 후보를 다르게 검토할 수 있다. 이 차이를 통제하지 않으면 후보 수의 효과와 위험 인식의 효과가 섞인다.

후보의 제시 방식도 고정한다. 한 화면에서 동시에 비교하는지, 하나씩 순서대로 보는지, 이전 후보로 돌아갈 수 있는지에 따라 기억 부담과 번복 기회가 달라진다. 많은 후보 조건에서만 축소판을 쓰거나 검색을 제공하면 후보 수와 도구 지원이 함께 바뀐다. 인터페이스 차이는 별도 조건으로 다뤄야 한다.

현재 이 후보 수 비교를 고정한 사전 등록 문서와 동결된 결과가 없다. 후보가 늘 때 결정 시간이나 번복 수가 어느 방향으로 움직이는지, 이유가 더 구체적이거나 모호해지는지 말할 수 없다. 현장 사례에도 후보 유입과 평가 처리 시간을 함께 잰 자료가 없다.

결과 그림은 싣지 않는다. 적은 후보와 많은 후보 아래 빈 측정 칸만 그려도 독자는 어느 조건이 더 오래 걸릴지 예상하게 된다. 예시 숫자나 방향을 넣으면 검증 방법이 결과처럼 보인다. 결과가 없어 제외한다.

대체 텍스트: 이 장에는 후보 수 조건별 결정 시간, 번복 수, 선택 이유의 구체성을 비교하는 결과 그림이 없다. 사전 등록된 판정 규칙과 동결 결과가 마련되지 않았으므로 수치, 막대, 방향을 표시하지 않는다. 이 설명은 제외한 그림의 측정 항목과 배제 이유만 밝힌다.

자유를 어디서 찾을 것인가?

더 많은 옵션은 잠재적인 자유를 넓힐 수 있다. 놓쳤을 경로를 발견하고, 한 안에 일찍 고정되는 위험을 줄이며, 제약 안에서 더 나은 후보를 찾게 할 수 있다. 이 이점을 부정할 이유는 없다.

자유가 실제 선택으로 이어지려면 후보 차이를 결과로 읽고, 우선순위를 정하고, 감수한 손실을 책임질 수 있어야 한다. 비교 능력이 따라오지 못하면 파일 수의 증가는 실행 가능한 경로의 증가와 다를 수 있다. 이 관계는 아직 같은 과업 안에서 직접 검증되지 않았다.

후보 유입을 줄이는 것만이 답도 아니다. 의미 있는 경로를 묶고, 하한 검사를 자동화하고, 가역성에 따라 기록 깊이를 조절하면 같은 후보 수에서도 비교 역량을 넓힐 수 있다. 목표가 안정된 과업에서는 평가 자동화가 생성 속도를 따라잡을 수도 있다.

마지막에는 파일 수, 결과가 다른 경로, 비교 비용, 되돌리기 가능성만 따로 본다. 네 값의 관계를 재야 옵션 증가가 자유, 선택 속도, 병목에 어떤 변화를 만들었는지 판단할 수 있다. 수를 세는 일은 시작점이지만, 그 수가 어떤 결정 구조를 담았는지 해석하는 일까지 대신하지는 못한다.

후보를 가르는 가치는 어디에서 오는가. 프롬프트가 취향을 만들어 내는지, 이미 가진 구별을 확대하는지, 명시하지 않은 가치가 결과에 어떻게 스며드는지를 따져야 선택 가능성의 안쪽이 보인다.

아직 확인하지 못한 관계.

결제와 배너 사례는 후보 수, 경로 수, 비교 비용, 가역성을 분리하려고 구성한 예시다. 후보 수 비교 실험은 사전 등록되거나 실행되지 않았고 동결 결과도 없다. 후보 증가와 결정 지연, 번복, 자유 감소 사이의 효과는 아직 검증 대상이다.