训练方法预训练、微调与对齐技术

指令微调

用多样化指令数据训练模型,使其理解并执行各种任务描述。

指令微调让模型从「续写文本」变为「执行指令」:覆盖问答、摘要、翻译、代码等任务,是通用助手能力的关键。SFT 是执行指令微调的主要手段。

相关术语