跳到正文
AGI Hunt· JeremyCMorgan·· 3 小时前AI 评分42

MCP 工具在 BiomedQA 击败 Text2Cypher 与裸 GPT-4o,生物医学问答实测

MCP 工具 98% 击败 Text2Cypher 与裸 GPT-4o,生物医学问答实测

AI 导读

MCP 工具在 BiomedQA 40 道药理学问题中答对 39 道,以 98% 正确率击败 Text2Cypher 与裸 GPT-4o。Text2Cypher 答对 34/40,裸 GPT-4o 答对 30/40,MCP 工具平均延迟为 920ms;对比并非完全受控,基准与真值集已在 GitHub 开源。

来源:AGI Hunt · agihunt.info