LMSYS 解读 TITO 原则与 Miles 实现机制

LMSYS在Miles框架博客中阐述Token-In-Token-Out（TITO）原则，要求trainer评估的token序列与推理引擎在rollout中实际消费和产出的序列完全一致。