跳到正文
热点事件持续更新

XLA Serving Engine开源支持C++部署

1 篇报道1 个报道来源42 分钟前更新

先了解这件事

AI 综述

XLA Serving Engine(XSE)以 Apache 2.0 协议开源,提出“Python 训练、C++ 服务”的推理部署方案。开发者可将 JAX 等框架的模型导出为 XLA SavedModel,再由原生 C++ 系统执行推理;官方称,该方案可使处理请求数提升2至5倍,CPU时间占用最多减少70%。

AI 根据报道生成 · 18 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月10日
  1. AGI Hunt
    XLA Serving Engine 开源,支持 Python 训练与 C++ 部署

    XLA Serving Engine(XSE)以 Apache 2.0 协议开源,提出「Python 训练、C++ 服务」的推理部署方案。开发者可将 JAX 等框架的模型导出为 XLA SavedModel,再由原生 C++ 系统执行推理;官方称其可处理请求数提升 2–5 倍,CPU 时间占用最多减少 70%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。