跳到正文
热点事件持续更新

8卡H200自托管与API成本打平点测算

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

一位GPU系统从业者测算,自托管8卡H200与API的成本打平点约为每月48亿tokens。以每月消耗50亿tokens计,自托管可能更具成本优势;这一结论基于特定硬件、定价和成本假设。 该测算假设8卡节点购置成本约32.9万美元,按48个月摊销,并计入每月约800美元电费和25%的运维开销,月固定成本约9600美元;API价格则按每百万tokens 2美元计算。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. AGI Hunt
    月耗 5B tokens 时,自托管 8 卡 H200 与 API 的成本对比

    一位 GPU 系统从业者测算,自托管 8 卡 H200 与 API 的成本打平点约为每月 4.8B tokens。8 卡节点约 $329k,按 48 个月摊销并计入每月约 $800 电费和 25% 运维开销后,月固定成本约 $9.6k,API 定价按每百万 tokens $2 计算。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。