摘要
医疗大语言模型有望减少医疗差距,但印地语资源严重匮乏。现有模型在印地语及印度医学体系上表现显著下降。本文主张稳健的跨语言医疗迁移需要印地语推理能力。为此,我们推出了 HiMed,一个涵盖西方和印度医学的印地语推理语料库与基准套件。此外,通过设计衰减支架奖励机制,我们提出了 HiMed-8B,一种印地语形式的医疗推理大语言模型。实验表明,该方法提升了印地语医疗推理性能,缩小了英印准确率差距。消融研究验证了各训练阶段及奖励组件的贡献。
AI 推荐理由
论文核心在于通过新语料和奖励机制提升医疗 LLM 的印地语推理能力,直接针对推理主题。
研究机构
The Chinese University of Hong Kong, Shenzhen
Indian Institute of Technology (Banares Hindu University) Varanasi
Shenzhen Research Institute of Big Data
The Hong Kong University of Science and Technology
Tongji University
论文信息