类库 › orthrus
chiennv2000

chiennv2000/orthrus

Orthrus是一个基于Python的LLM推理框架,采用双视图扩散解码技术。它在保证自回归模型严格无损生成的同时,显著提升并行Token生成速度(最高5.36倍)。适用于需要高效、高保真文本生成的场景,支持Qwen3系列模型。

chiennv2000/orthrus

截图

assets/orthrus.png
assets/acceptance_length.png
assets/long_context_benchmark.png
assets/math500_speed.png

评论

首页 - Wiki
Copyright © 2011-2026 iteam. Current version is 2.155.2. UTC+08:00, 2026-05-22 17:06
浙ICP备14020137号-1 $访客地图$