跳到正文
热点事件持续更新

Forge 0.2.1增强ANE大模型运行

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

ANEMLL Forge 0.2.1 支持 M6 Mac Mini 32GB 用户通过 Apple Neural Engine(ANE)以最高 192K 上下文运行 Qwen3.8-27B。 新版本引入较 FP16 内存减半的 INT8 K/V 缓存,以及与目标模型共享输出 head 的小型 drafter,共节省 0.86GB ANE 内存且据称不损失速度。首次完整编译 192K 约需2小时,但结果会缓存;使用 --ctx 仅导出所需条目后,16K 模型从下载到启动服务约需10分钟。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月25日
  1. AGI Hunt
    ANEMLL Forge 0.2.1 支持在 M6 Mac Mini 32GB 上以最高 192K 上下文运行 Qwen3.8-27B

    ANEMLL Forge 0.2.1 支持 M6 Mac Mini 32GB 用户通过 Apple Neural Engine 以最高 192K 上下文运行 Qwen3.8-27B。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。