Tessl发布Skills价值评估框架
热点事件持续更新
Tessl发布Skills价值评估框架
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Tessl发布大规模评估Skills价值的开源框架；Tessl称，在相关Skill可用的编码任务中，绝对准确率较无Skill基线提升约20%，合适的Skill还能让小模型以约三分之一成本达到接近大模型的表现。 但该研究指出，非强制场景下Agent激活已有Skill的比例仅约40%，且约30%的自动生成任务存在泄漏等问题，可能造成偏乐观的评估结果。其框架为每个Skill生成至多5个任务及评测标准，再由Agent Solver执行、Agent Judge评分。
AI 根据报道生成 · 2 小时前更新
最新进展10月30日 22:31
Tessl 研究 Skill 可提升约 20% 编码准确率，但 Agent 激活率仅约 40%报道时间线
沿着报道，了解事件的不同侧面。
10月30日
- AGI HuntTessl 研究 Skill 可提升约 20% 编码准确率，但 Agent 激活率仅约 40%
Tessl 提出大规模评估 Skill 价值的框架，有相关 Skill 时的编码任务绝对准确率较无 Skill 基线提升约 20%。合适的 Skill 可让小模型以约 1/3 成本达到接近大模型的表现，但非强制场景下 Skill 激活率仅约 40%；约 30% 的自动生成任务存在泄漏等问题，配套评测框架已开源。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。