跳到正文
热点事件持续更新

BiomedQA比较三种AI访问医学数据方式

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

JeremyCMorgan公布BiomedQA基准结果并开源基准与真值集:预写Cypher的MCP工具在40道药理学问题中答对39题,Text2Cypher答对34题,裸GPT-4o答对30题;MCP工具平均延迟为920毫秒。测试覆盖PubMed、临床试验和药物相互作用三个生物医学知识图谱。 该比较并非完全受控,结果显示MCP工具在此测试中准确率最高,但尚不能据此认定其在所有生物医学问答任务中均优于其他方式。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. AGI Hunt
    MCP 工具在 BiomedQA 击败 Text2Cypher 与裸 GPT-4o,生物医学问答实测

    MCP 工具在 BiomedQA 40 道药理学问题中答对 39 道,以 98% 正确率击败 Text2Cypher 与裸 GPT-4o。Text2Cypher 答对 34/40,裸 GPT-4o 答对 30/40,MCP 工具平均延迟为 920ms;对比并非完全受控,基准与真值集已在 GitHub 开源。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。