跳到正文
AGI Hunt· Worldly-Knowledge-90·· 1 小时前AI 评分62

开源工具 llm-drift-bench 0.1.0 对比模型切换前后的响应变化

开源工具 llm-drift-bench:换模型前后对比输出,揪出丢失字段与数值变化

AI 导读

开发者发布开源 Python 工具 llm-drift-bench 0.1.0,可对比旧模型与新模型的响应差异。该工具标记缺失的 JSON 字段、变化的数值及文本差异,不评判模型智能水平。它基于已保存的响应运行,无需 API key 或 GPU;作者正为 0.2.0 征集真实换模型案例。

来源:AGI Hunt · agihunt.info