跳到正文
AGI Hunt· Worldly-Knowledge-90·· 1 小时前AI 评分66

开源工具 llm-drift-bench 0.1.0 发布,可检测模型更换后的输出差异

开源工具 llm-drift-bench 助开发者检测换模型后的输出差异

AI 导读

开发者发布开源 Python 工具 llm-drift-bench 0.1.0,用于比对更换大模型前后的输出差异。输入旧模型与新模型的两组已保存响应文件后,工具可标记丢失的 JSON 字段、变化的数值和文本差异;它仅处理已保存的 JSON 或文本,无需重新调用模型。

来源:AGI Hunt · agihunt.info