Chatlaw: A Multi-Agent Legal Assistant based on a Role-Aligned Mixture-of-Experts Architecture
Jiaxi Cui, Munan Ning, Zongjian Li, Hao Li, Yan Yang, Bohua Chen, Bin Ling, Yonghong Tian 외
Chatlaw는 실제 로펌의 표준 운영 절차(SOP)를 모방한 다중 에이전트 프레임워크와 역할 정렬 혼합 전문가(RA-MoE) 아키텍처를 결합하여 중국 법률 서비스의 정확성과 신뢰성을 높인 AI 어시스턴트다.
일반 LLM은 중국 법률 시스템에 대한 지식이 부족하고 환각 현상에 취약하여 법률 상담과 같은 고위험 분야에서 신뢰할 수 있는 결과를 제공하기 어렵다.
로펌의 협업 구조를 모방하여 법률 보조, 연구원, 선임 변호사 등 여러 역할의 에이전트가 협력하도록 설계했다. 각 에이전트 역할에 맞게 내부 전문가(Expert)를 정렬 학습시키는 RA-MoE 아키텍처를 개발하여, 각 단계가 가장 적합한 파라미터에 의해 처리되도록 지능적으로 라우팅한다.
LawBench 벤치마크에서 GPT-4 대비 7.73% 향상된 정확도, 법률 전문가 통합 자격 시험에서 11점 높은 점수를 기록했다. 실제 사례 연구와 전문가 평가에서도 강건함을 확인했으며, 법률 서비스의 접근성과 신뢰성을 높이는 데 기여했다.