提出Universal YOCO(YOCO-U),将YOCO解码器-解码器架构与递归计算结合,在浅层高效注意力模块中实施参数共享的多次迭代,实现比单独使用YOCO或递归更优的能力-效率权衡,提升token利用率和推理可扩展性,同时保持线性预填充和单块KV缓存优势。
机构:Microsoft
来源:arXiv 2604.01220 | AI4Papers 论文推荐平台