跳到正文
AGI Hunt· jokiruiz·· 3 小时前AI 评分35

开源工具 SpecJudge 用本地 LLM 当裁判,公开征求置信度报告方案

AI 导读

开源工具 SpecJudge 通过读取项目 spec 与任务文件,使用本地 LLM 充当裁判推荐适配模型,并要求每个评级引用 spec 原文片段,否则评级作废。作者正公开征求社区对置信度报告方案的意见,比较「6 项信号满足 4 项」与「qualified」等标法,同时解释拒绝采用 0-100 打分的理由。

来源:AGI Hunt · agihunt.info