Tag: Orthogonal Subspace

All the articles with the tag "Orthogonal Subspace".

• Budget-Adaptive Adapter Tuning in Orthogonal Subspaces for Continual Learning in LLMs

  Published: 4 Jun, 2025 |  at  11:26 AM

  

  90.65 🤔

  本文提出OA-Adapter，一种用于大型语言模型持续学习的新型参数高效方法，通过单阶段端到端训练结合动态预算分配与正交子空间学习，在标准基准上实现更高准确率并减少58.5%的参数使用。