공개 차트가 보여주는 순위와 실제 최고 점수의 차이

Z.ai가 공식 CDN을 통해 배포한 벤치마크 차트에는 법률 평가에서 여러 모델의 점수가 함께 표기되어 있습니다. 차트상 최상위 점수는 페이블 5의 것이며, GLM-리걸의 점수는 그 아래에 자리합니다. 다만 어떤 항목에서 몇 점 차인지는 이미지 해상도와 표기 방식의 한계로 세부 확인이 아직 이뤄지지 않았습니다.

디지털투데이의 보도에 따르면 Z.ai는 GLM-리걸이 법률 벤치마크에서 상위 성적을 거뒀다고 전했습니다. 발표 자료에는 LegalBench와 PLawBench에서 프론티어급 대등 수준이라는 표현이 등장합니다. 그러나 해당 항목의 구체적 수치는 공식 자료에 게시되지 않아 주장 영역으로 분류됩니다.

오픈웨이트 공개 여부를 둘러싼 상충하는 설명

출처: 조사 출처

오픈웨이트 여부에 대해서는 정보원 간 설명이 서로 어긋납니다. Vals 페이지에는 WEIGHTS가 OPEN으로 표기되어 있는데, 인공지능 법률 매체 아티피셜 로위어는 오픈웨이트가 아닐 것으로 이해한다고 전했습니다. 마크테크포스트는 하깅페이스 저장소가 확인되지 않고 API 신청제로 운영된다고 지적했습니다.

이 상충은 모델의 활용 방식과 직결되는 부분입니다. 웨이트가 공개되면 기업이 자체 환경에 올릴 수 있지만, API 신청제라면 서비스 조건이 공급사에 종속됩니다. 어느 쪽이 맞는지는 Z.ai의 후속 안내나 저장소 공개 여부로 확인해야 합니다.

법률 AI 시장에서 페이블과의 경합 구도

아티피셜 로위어의 보도에 따르면 법률 시장에서는 페이블이 AI 모델 평가에서 강세를 보여온 것으로 알려져 있습니다. Z.ai가 법률 특화 모델로 이 시장에 진입한 것은 기존 강자와의 직접 비교를 전제로 한 행보로 읽힙니다. 다만 단일 벤치마크와 특정 평가 조건에서의 비교라서 일반적인 법률 업무 성능으로 확장하기는 어렵습니다.

확인되지 않은 부분도 분명히 남아 있습니다. 벤치마크 세부 수치, 오픈웨이트 공개 여부, 실제 법률 실무에서의 성능은 공식 발표만으로는 확정되지 않았습니다. Z.ai 측의 추가 자료 공개와 독립적 평가 결과가 쌓여야 판단이 가능합니다.

Z.ai의 출시 발표와 벤치마크 상위 기록은 확인된 범위에서 대체로 사실이지만, '페이블 5 제치고 1위'라는 표현은 공개 차트의 최고 점수와 어긋나 있어 보정이 필요한 부분 사실로 정리됩니다. 앞으로 벤치마크 수치의 공식 게시와 웨이트 공개 여부가 차례로 확인될 지점입니다.