标签:子空间理论

仅微调0.02%参数,性能接近全量微调!上交大推出高效微调统一新范式

随着大模型应用的扩展,基础模型的参数数量不断增加,给训练带来了巨大负担。为了解决这一问题,研究者们开始关注高效微调(Parameter Efficient Fine-Tuning...