新发现
mattral/flashspec 0.3.2 — 按调用统计的接受率修正
FlashSpec 0.3.2 将 GenerationResult.acceptance_rate 改为单次调用的数值,修正了累计平均的错误,并更新了版本号与容器镜像标签。
FlashSpec 0.3.2 将 GenerationResult.acceptance_rate 改为单次调用的数值,修正了累计平均的错误,并更新了版本号与容器镜像标签。
GitHub 项目说明: Adaptive speculative-decoding inference engine with Triton-optimised verification and online bandit draft selection.
在 GitHub 查看 ↗FlashSpec 0.3.2 将 GenerationResult.acceptance_rate 改为单次调用的数值,修正了累计平均的错误,并更新了版本号与容器镜像标签。
没有符合条件的动态。