前谷歌工程师主张以评测驱动智能体开发
热点事件持续更新
前谷歌工程师主张以评测驱动智能体开发
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
前谷歌工程师 Cosmin Negruseri 提出,普通软件、机器学习与智能体系统的关键差异都在评测(evals),因为评测集本身就是系统规格;驱动团队开发也应从投资评测入手。 他建议新项目先明确期望输出,再收集真实示例、建立“黄金集”(golden set)、制定标注指南并定义发布指标,之后持续扩充评测集。
AI 根据报道生成 · 2 小时前更新
最新进展10月23日 13:16
前 Google 工程师 Cosmin Negruseri:普通软件与 agentic 系统的区别全在 evals报道时间线
沿着报道,了解事件的不同侧面。
10月23日
- AGI Hunt前 Google 工程师 Cosmin Negruseri:普通软件与 agentic 系统的区别全在 evals
andreisavu 转述前 Google 工程师 Cosmin Negruseri 的观点:普通软件、ML 与 agentic 系统的关键差异都体现在 evals 上,因为 eval 集本身就是系统规格。其提出新项目应先明确期望输出,再收集真实示例、构建 golden set、制定标注指南并定义发布指标,最后持续扩大评测集。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。