码农深度学习PEFT本页总览PEFT 大模型高效微调PEFT综述-从Adpter、PrefixTuning到LoRA 图解大模型微调系列之:大模型低秩适配器LoRA(原理篇) Adapter tuning Prompt tuning 在针对下游任务微调时,Prompt Tuning将冻结原始LLM的参数,只学习独立的prompt token参数(参数化的prompt token加上输入的token送入模型进行前向传播,反向传播只更新prompt token embedding的参数)。 Prefix tuning