리걸테크 기업 로앤컴퍼니가 자체 개발한 AI 법률 비서 ‘슈퍼로이어’가 제14회 대한민국 변호사시험 선택형 시험에서 74%의 정답률을 기록하며 합격점을 넉넉히 초과했다.

로앤컴퍼니는 12일 슈퍼로이어가 총 150개 문항 중 111개를 정확히 맞혀 최근 5년간 변호사시험 선택형 평균 합격 개수(103개)를 상회하는 성과를 거뒀다고 발표했다. 이는 변호사시험 전문 기관 예측 기준으로 올해 상위 30% 수준에 해당하는 점수다.

이번 성과는 오픈AI의 GPT-4.5(정답률 49.3%)와 앤트로픽의 클로드 3.7 소넷(정답률 45.3%) 등 글로벌 빅테크 최신 AI 모델들의 성능을 크게 앞지른 것으로, 이들 모델은 모두 합격선에 도달하지 못했다.

슈퍼로이어의 이번 성적은 로앤컴퍼니가 2023년 기록했던 53.3%에서 크게 향상된 것으로, 국내 법률 AI 기술 발전의 중요한 이정표로 평가받고 있다.

슈퍼로이어의 우수한 성능 배경에는 로앤컴퍼니가 보유한 방대한 법률 데이터베이스가 있다. 495만 건의 판례 데이터를 포함해 법령, 결정례, 행정심판례, 행정규칙, 유권해석 등 다양한 법률 자료를 활용하고 있다. 특히 국내 1위 법률서적 출판사인 박영사의 600여 권에 달하는 법률서적을 독점적으로 활용함으로써 답변의 정확도를 크게 향상시켰다.

기술적 측면에서 슈퍼로이어는 최신 AI 에이전트 기술과 어드밴스드 검색증강생성(Advanced RAG) 방식을 법률 분야에 최적화했다. 단순한 일회성 데이터 검색이 아닌, 에이전트를 활용한 다단계 탐색적 검색을 통해 최적의 답변을 위한 데이터를 확보하는 방식으로 작동한다.

슈퍼로이어 개발을 총괄한 로앤컴퍼니 안기순 법률AI연구소장은 “앞으로 슈퍼로이어는 답변 성능 고도화와 할루시네이션 최소화를 위한 노력을 지속할 것”이라며 “특히 복잡한 법률 업무를 높은 수준으로 처리할 수 있도록 워크 플로우를 고려해 추론 모델을 결합한 고도화된 에이전트 개발에 집중하겠다”고 밝혔다.

로앤컴퍼니 김본환 대표는 “슈퍼로이어는 법률가들의 업무 효율성과 전문성을 극대화하기 위해 탄생한 서비스”라며 “법률가들이 보다 핵심적이고 창의적인 업무에 집중할 수 있도록 돕는 슈퍼로이어의 뛰어난 기술력을 입증하게 되어 매우 뜻깊게 생각한다”고 전했다.

지난해 7월 법률가를 대상으로 출시된 슈퍼로이어는 상용 거대언어모델(LLM)을 기반으로 하며, 로앤컴퍼니가 자체 설계한 아키텍처를 활용하고 있다.