We present MedXIAOHE, a medical vision-language foundation model designed to advance general-purpose medical understanding and reasoning in real-world clinical applications. MedXIAOHE achieves state-of-the-art performance across diverse medical benchmarks and surpasses leading closed-source multimodal systems on multiple capabilities. To achieve this, we propose an entity-aware continual pretraining framework that organizes heterogeneous medical corpora to broaden knowledge coverage and reduce long-tail gaps (e.g., rare diseases). For medical expert-level reasoning and interaction, MedXIAOHE incorporates diverse medical reasoning patterns via reinforcement learning and tool-augmented agentic training, enabling multi-step diagnostic reasoning with verifiable decision traces. To improve reliability in real-world use, MedXIAOHE integrates user-preference rubrics, evidence-grounded reasoning, and low-hallucination long-form report generation, with improved adherence to medical instructions. We release this report to document our practical design choices, scaling insights, and evaluation framework, hoping to inspire further research.


翻译:我们提出了MedXIAOHE,一个旨在提升现实世界临床应用中通用医学理解与推理能力的医学视觉语言基础模型。MedXIAOHE在多样化的医学基准测试中取得了最先进的性能,并在多项能力上超越了领先的闭源多模态系统。为实现这一目标,我们提出了一种实体感知的持续预训练框架,该框架通过组织异构医学语料库来拓宽知识覆盖范围并减少长尾差距(例如罕见疾病)。为了达到医学专家级的推理与交互水平,MedXIAOHE通过强化学习和工具增强的智能体训练融入了多样化的医学推理模式,从而实现了具有可验证决策轨迹的多步骤诊断推理。为了提高在现实世界应用中的可靠性,MedXIAOHE集成了用户偏好评估准则、基于证据的推理以及低幻觉长文本报告生成能力,并增强了对医学指令的遵循度。我们发布本报告以记录我们的实用设计选择、规模化洞见和评估框架,希望能启发进一步的研究。

0
下载
关闭预览

相关内容

面向医学的多模态大型语言模型:全面综述
专知会员服务
25+阅读 · 2025年5月1日
《多模态大语言模型评估综述》
专知会员服务
39+阅读 · 2024年8月29日
Nat. Med. | 医学中的大型语言模型
专知会员服务
58+阅读 · 2023年9月19日
LLM in Medical Domain: 大语言模型在医学领域的应用
专知会员服务
103+阅读 · 2023年6月17日
大模型如何赋能医学?全科医学人工智能基础模型
专知会员服务
89+阅读 · 2023年4月13日
医学知识图谱构建技术与研究进展
人工智能学家
18+阅读 · 2017年11月11日
国家自然科学基金
6+阅读 · 2017年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Arxiv
0+阅读 · 2月16日
VIP会员
相关基金
国家自然科学基金
6+阅读 · 2017年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员