跳到正文
热点事件持续更新

JevBench v1.8更新榜单与成本口径

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

JevBench 发布 v1.8,新增 46 个开源模型入榜;baseten 的 mammoth-1 与 KnowLine 31B-Gen1 均获 85.2 分,mammoth-1 因此登顶 Jev-class 开源权重能力榜,每 1k tokens 成本估算约 0.027 美元。 本版还将自托管开源模型的定价基准从聊天 API 标价改为按 GPU 租时估算,包括按月租用 GPU 和使用高效推理引擎的成本。入榜系统须满足成本及中位延迟均不超过 Jev(v1.5 参考基准)两倍,能力分取 Intelligence 与 Calibration 的平均值。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. AGI Hunt
    JevBench v1.8 发布:mammoth-1 登顶开源权重榜,成本改按 GPU 租时计价

    JevBench 发布 v1.8,baseten 的 mammoth-1 以 85.2 分登顶 Jev-class 开源权重能力榜,每 1k tokens 成本约 $0.027。KnowLine 31B-Gen1 同获 85.2 分,自托管开源模型成本估算改为按 GPU 租时计价。本次新增 46 个开源模型入榜。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。