DailyInfo Summary
通过集中式与弥散式注意力头丢弃实验,揭示自回归多步推理在关键注意力头受损时的崩溃机制及不同类型注意力头的作用差异。
Original Source
摘要用于研究导航;结论、版本与引用信息请以原始来源为准。
技术信息
Stable ID: arxiv-2611.14209
Canonical URL: https://iheadwater.github.io/dailyinfo-web/arxiv/arxiv-2611.14209/
2611.14209通过集中式与弥散式注意力头丢弃实验,揭示自回归多步推理在关键注意力头受损时的崩溃机制及不同类型注意力头的作用差异。
摘要用于研究导航;结论、版本与引用信息请以原始来源为准。
Stable ID: arxiv-2611.14209
Canonical URL: https://iheadwater.github.io/dailyinfo-web/arxiv/arxiv-2611.14209/