迁移学习与fine-tuneing有什么区别

答案:2 悬赏:80 手机版

解决时间 2021-01-22 19:12

提问者网友：美人性情
2021-01-22 15:18

最佳答案

五星知识达人网友：孤独的牧羊人
2021-01-22 16:34

迁移学习是一个idea，把一个预先训练好的模型的部分挪到一个类似的任务上使用。一方面这节省了训练的时间；另一方面对于某些任务我们可能有很大的dataset而对于另一些相似的任务并没有那么大的dataset，那么我们就可以拿在前者上训练好的模型抽掉最后几层（抽掉多少视后者有多大而定），在后者上只另外train最后几层。举个例子，在语音识别里我们有很多英语的数据，但却没有多少的葡萄牙语的数据，考虑到两者都深受拉丁语影响，我可以先拿英语的语音数据训练一个模型，在基于这个模型在葡萄牙语上训练模型的最后几层对最后几层参数进行微调。

fine-tuning 是一个trick，在迁移学习中有所涉及，但不仅仅出现在迁移学习中，指对参数进行微调。

全部回答

1楼网友：污到你湿
2021-01-22 17:11

fine-tune [英][faɪn tju:n][美][ˈfaɪnˈtun, -ˈtjun] vt.调整，使有规则; 对进行微调; 第三人称单数：fine-tunes过去分词：fine-tuned现在进行时：fine-tuning过去式：fine-tuned 以上结果来自金山词霸例句: 1. -amazon ( amzn): stick to your vision no matter what, but fine-tune it withdata. 亚马逊（amazon）：无论如何，坚持愿景，不过同时也要根据数据来调整愿景。 . ----------------------------------- 如有疑问欢迎追问！满意请点击右上方【选为满意回答】按钮

我要举报

如以上问答信息为低俗、色情、不良、暴力、侵权、涉及违法等信息，可以点下面链接进行举报！