DailyInfo Summary

提出虚拟头注意力机制，通过在标准多头注意力中引入可学习的虚拟头来动态重组注意力子空间，在不显著增加计算开销的情况下提升模型表示能力。

Original Source

摘要用于研究导航；结论、版本与引用信息请以原始来源为准。

阅读原文 （外部链接）

Added to DailyInfo

技术信息

Stable ID: arxiv-2610.17959
Canonical URL: https://iheadwater.github.io/dailyinfo-web/arxiv/arxiv-2610.17959/