Apple端侧模型实测分类表现
热点事件持续更新
Apple端侧模型实测分类表现
2 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
NellWatson 实测 Apple 端侧 Foundation Model 在 SCADA 事件路由中的表现：在49条新留出样本上正确分类45条，低于 Jev 1.14 的49条；单次调用约1秒，数据不出 Mac，约500次调用未遭拒绝。 其方法是要求模型从五个队列中枚举，并为每个队列附一行描述，准确率由此从33/49提升至45/49。但该模型易受指令注入影响，只适合处理用户自己编写或可信的文本，不适合不可信输入；上下文窗口为4096个 token，第三方是否获准以这种方式使用 Apple 端侧模型仍不明确。
AI 根据报道生成 · 1 小时前更新
最新进展10月25日 11:33
NellWatson 实测 Apple 端侧 Foundation Model：49 条分类任务得 45 条，但易受指令注入影响报道时间线
沿着报道，了解事件的不同侧面。
10月25日
- AGI HuntApple 端侧 Foundation Model 分类实测及指令注入测试
NellWatson 在 SCADA 事件路由任务中实测 Apple 端侧 Foundation Model，49 条留出样本取得 45/49 的成绩。加入一行队列描述后，Jev 1.14 被植入答案带偏的比率从 7/20 降至 1/20。
- AGI HuntNellWatson 实测 Apple 端侧 Foundation Model：49 条分类任务得 45 条，但易受指令注入影响
NellWatson 用 SCADA 事件路由任务实测 Apple 端侧 Foundation Model，在 49 条新留出样本上得到 45/49 分，低于 Jev 1.14 的 49/49。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。