값싼 평가의 종말과 무한평가의 시대로
공정함의 신화, 그리고 저비용 평가의 종말
AI를 이용한 세무사 시험 부정행위의 여파로, 이번 대학수학능력시험(이하 수능) 날 전 국민은 위급재난문자를 세 차례나 받아야 했습니다. 북한 발사체나 민방위 훈련처럼 국가안보와 직결된 상황에나 쓰이던 비상 시스템이 시험 하나를 위해 동원된 것입니다. 주식시장 개장 시간을 늦추고 듣기평가 시간에는 항공기 이착륙까지 통제해 온 수능이 한국에서 가장 신뢰받는 평가 도구라는 사실이 다시 한번 확인된 셈입니다. 그러나 그 수능조차 수명이 얼마 남지 않았습니다.
수능은 완벽한 시험이 아닙니다. 그럼에도 수능이 이토록 중시되는 까닭은 '가장 공정한 시험'이라는 믿음에 있습니다. 누구나 열심히 공부한 뒤 연필 한 자루만 들고 시험장에 들어가, 국가 정보기관이 출제과정의 보안을 책임지는 시험지로 능력을 평가받는다는 것, 바로 그 점이 공정하다고 여겨져 왔습니다. 이번 AI 부정행위는 이 전제를 송두리째 흔들었습니다. 이 사건을 단순한 업무방해로 볼 수 없는 이유는, 학력이 대학과 사회적 지위를 결정하고 그에 따라 자원이 배분되는 한국 사회의 핵심 시스템을 무너뜨리기 때문입니다. 시험은 어느 나라에나 있지만, 유독 한국에서 AI가 시험에서 심각한 문제로 떠오른 이유도 여기에 있습니다.
당분간 수능은 재난문자까지 동원해서라도 공정성을 지켜낼 것입니다. 문제는 사회 곳곳에서 쓰이는 수많은 국가공인 시험입니다. 이 시험들은 수능처럼 국가 비상 시스템을 동원할 수 없지만, 법학적성시험 (LEET)처럼 수능에 버금가는 위상을 지닌 시험이 적지 않습니다. 게다가 대학과 지위를 가르는 수능과 달리, 이 시험들은 특정 직무에 필요한 적성을 측정합니다. AI가 이런 시험을 손쉽게 통과한다는 사실은 곧 해당 전문직이 왜 필요한지를 되묻는 직접적인 근거가 됩니다. 적어도 '시험'만으로 전문직의 권위를 얻기는 어려워질 것입니다. AI가 본격적으로 고도화된 2~3년 전부터의 시험 결과까지 의심받기 시작한 것도 일부의 기우로만 볼 수는 없습니다.
평가할 방법 자체가 부족한 것은 아닙니다. 사람은 본능적으로 타인을 평가합니다. 이른바 '얼평', '옷평'부터 인생 평가까지, 요청받지도 않은 평가를 거리낌 없이 내놓는 일이 흔하고, 한국 사회는 그 정도가 유독 심합니다. 그런데도 이번 충격이 크게 다가오는 것은 서면 중심의 '저렴하고 공정한 집단 평가'를 대신할 수단이 마땅치 않기 때문입니다. 당분간은 AI 활용을 막으려 안간힘을 쓰겠지만, 기술은 그보다 빠르게 발전합니다.
통신이 필요 없는 온디바이스(On-device) AI가 상용화되고, 수험생이 초소형 기기나 스마트 콘택트렌즈를 착용한 채 시험장에 들어온다면 이를 완벽히 막을 수 있을까요? 시험 범위는 어차피 정해져 있고, 책 수백 권 분량의 지식은 머지않아 손톱만 한 기기에서도 충분히 구동될 것입니다. 지금은 AI가 거대 기업의 연산 자원에 의존하기에 통신 차단이 통하지만, 앞으로는 다릅니다. 생체 스캐너나 전파 차단기로 막으려 한들 보안·감독 비용이 기하급수적으로 치솟을 테고, 그 순간 지필고사의 최대 장점인 저비용 구조는 무너질 수밖에 없습니다.
평가의 상시화와 폭증하는 선발 비용
한국 사회는 직무 역량이나 적합성보다 공정성을 우선해 왔습니다. 서구에서 보편적인 추천제는 한국 역사에서 주류였던 적이 드뭅니다. 굳이 찾자면 천거로 인재를 뽑으려 했던 조선 중종 시기 조광조의 현량과 정도입니다. 특히 근대 이후 한국 사회는 누군가의 소개를 '빽'이나 연줄, 학연·지연·혈연으로 여기며 부정적으로 바라봤습니다. 개인의 평판이 자산으로 기능하지 못하는 사회에서는 어쩌면 당연한 일입니다. 집단주의가 강하게 작동하는 사회에서 개인의 평판은 소속 집단의 평판에 묻히거나, 그렇지 않으면 사적인 의도가 있다는 의심을 받기 쉽기 때문입니다.
그렇다면 남는 대안은 '평가의 상시화'입니다. 지금의 대학입시와 전문직 시험은 단 한 번의 시험으로 적성을 가립니다. 저렴하고 공정한 방식입니다. 그러나 AI가 이 방식의 권위를 무너뜨린 이상, 결국 실무를 직접 맡겨 보는 수밖에 없습니다. 앞으로 지필시험은 일종의 기초 자격 평가로 축소될 것입니다. 독점적 지위를 부여해야 하는 직역이라면 먼저 연수생 신분을 주는 방식이 될 것입니다. 아이돌 연습생처럼 데뷔 전 긴 기간 동안 끝없는 훈련과 평가를 거치는 구조입니다. 그 과정에서 일부만 데뷔하고, 나머지는 인내를 시험받거나 다른 길을 찾게 되겠지요.
이런 구조가 낯선 것은 아닙니다. 사법연수원, 견습 제도, 인턴 제도가 이미 그렇게 작동해 왔고, 대학 연구실에서도 미리 일을 맡겨 본 뒤 대학원생으로 선발하는 일이 흔합니다. 문제는 두 가지입니다. 과거처럼 평가자가 한 명에 그친다면 공정성 시비가 불거질 수밖에 없고, 무엇보다 사회 전체가 치러야 할 '평가 비용'이 폭증한다는 점입니다.
한국 사회가 지금까지 지필고사 중심의 평가를 고수해 온 데에는 공정성 시비에서 비교적 자유롭다는 이유도 있었지만, 무엇보다 '저렴하다'는 강점이 컸습니다. 수만 명이 치르는 시험도 장소와 시험지, 채점 도구, 감독 인력만 있으면 됩니다. 산업화 시대가 남긴 매우 효율적인 유산이고, 한국은 이를 극한까지 다듬어 왔습니다. 실습 평가를 크게 늘리지 못한 것 역시 공정성 우려 못지않게 막대한 비용 때문이었습니다. 평가 방식이 복잡하고 비싸질수록 인재 선발 비용도 함께 오릅니다.
평가 비용이 흔드는 '보상의 공정성'과 호봉제
평가가 일상이 되면 수많은 변형 인턴 제도가 등장할 것입니다. 당연히 최저임금 이상은 지급해야 합니다. 과거에는 인턴 제도를 악용해 저임금으로 무제한 노동을 시키기도 했지만, 앞으로의 제도는 한층 정교해질 것입니다. 6개월이나 1년의 평가 기간 동안 동일한 급여를 지급하되, 피평가자 역시 조직과 맞지 않는다고 판단하면 기간 중에라도 다른 곳으로 떠나는 '상호 평가'로 진화할 것입니다. 이는 자연스럽게 고용 유연화로 이어집니다.
이 과정에서 한국 사회가 그토록 불신해 온 '평판'도 마찰을 겪으며 재편될 수밖에 없습니다. 평가 비용이 치솟으면 기업은 이미 검증된 경력자를 선호하게 됩니다. 일회성 지필고사가 아니라 다른 조직에서 실제 업무 능력과 성과, 인성까지 두루 인정받은 인재 말입니다. 이런 인재를 영입하는 비용이 적을 리 없고, 당사자 역시 통상적인 임금 테이블에 만족하지 않을 것입니다. 결국 기업은 이들과 1:1로 별도의 고연봉 계약을 맺게 되고, AI 시대에 맞춘 집단 평가를 받는 계층과의 양극화는 더욱 뚜렷해질 것입니다. 물론 평가는 상시로 이루어지므로, 조건이나 환경이 맞지 않으면 이들은 언제든 자리를 옮길 것입니다.
AI는 단순히 시험을 방해하는 기술이 아닙니다. 한국 사회가 추구해 온 공정성, 그리고 그 공정성을 지탱해 온 수단에 근본적인 질문을 던지고 있습니다. 공정성을 지킬 방법은 여전히 많습니다. 부정행위가 의심되는 수험생에게 공개적으로 문제를 다시 풀게 하는 것도 한 방법입니다. 다만 그 대가로 비용이 급증합니다. 그리고 이 비용 증가는 한국 사회를 떠받치는 또 하나의 축인 '보상의 공정성'에 딜레마를 안깁니다. 평가가 깐깐해질수록 치솟는 인재의 몸값을 감당하기 위해, 한국 사회는 과연 호봉제라는 오래된 기준을 허물 수 있을 지 지켜볼 일입니다.