摘要
法律推理具有管辖权依赖性,相同事实在不同法律体系下可能产生不同结论。现有基准很少评估LLM识别此类差异的能力。本文提出CrossLex,这是一个基于权威法律来源、针对中国、加州和德国三个法域的跨法域法律推理基准。该基准包含6149个实例,涵盖55个法律问题,并定义了单法域推理、联合比较及细粒度评估三项任务。实验表明,尽管当前模型能正确回答问题,但在提供准确的跨法域法律依据方面存在困难。
AI 推荐理由
论文核心聚焦于LLM在法律领域的跨法域推理能力评估,直接对应推理主题。
研究机构
东北大学 计算机科学与工程学院
中国电子科技集团公司第二十九研究所 重庆分所
成都电子科技大学 智能计算研究所
西南政法大学 民商法学院
论文信息