跳到正文
热点事件持续更新

Leviathan 开源本地 LLM 推理套件

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

独立开发者 The-world-is-a-stage 开源了 Leviathan,这是一套完全在本地运行的 LLM 推理工具集:模型直接运行在 GPU 上,不依赖 server、llama.cpp 或 LM Studio。项目采用手写 CUDA 内核,支持多种量化及全精度模型变体,并整合 30 多种架构的合并工具,可在 GitHub 免费获取,同时提供 Hugging Face Space。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月25日
  1. AGI Hunt
    独立开发者开源 Leviathan 本地 LLM 推理套件

    一位独立开发者开源 Leviathan,这是一套纯本地运行的 LLM 推理工具集,模型直接在 GPU 上运行,不依赖 server、llama.cpp 或 LM Studio。项目手写 CUDA 内核,支持多种量化和全精度变体,并整合 30 多个架构及可预览合并结果的 merge 工具,已在 GitHub 发布并附带 Hugging Face Space。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。