什么是模型微调

一、 微调本质

模型微调是从英文翻译过来的词语，原英文是”Fine-tuning“。

模型微调就是：通过特定领域数据对预训练模型进行针对性优化，以提升其在特定任务上的性能。

用通俗比方解释就是就是，如果预训练模型是一个厨艺不错的厨师，它已经有了大量的烹饪经验，掌握了很多知识和技能，但可能并不擅长做某个菜系（如湘菜）的菜，而只是会一些普通的家常菜。此时我们这个厨师提供了专门做湘菜的教程与训练（一些特定任务的数据），让它针对性地学习做湘菜（调整它处理信息的方式）。经过这样的训练之后 ，它就成为了湘菜大厨，做出非常地道美味的湘菜（让它更擅长完成我们需要的任务）。