迁移学习与fine-tuning有什么区别？ 第1页
1
he-zhi-yuan-16 网友的相关建议:
举个例子，假设今天老板给你一个新的数据集，让你做一下图片分类，这个数据集是关于Flowers的。问题是，数据集中flower的类别很少，数据集中的数据也不多，你发现从零训练开始训练CNN的效果很差，很容易过拟合。怎么办呢，于是你想到了使用Transfer Learning，用别人已经训练好的Imagenet的模型来做。
做的方法有很多：
- 把Alexnet里卷积层最后一层输出的特征拿出来，然后直接用SVM分类。这是Transfer Learning，因为你用到了Alexnet中已经学到了的“知识”。
- 把Vggnet卷积层最后的输出拿出来，用贝叶斯分类器分类。思想基本同上。
- 甚至你可以把Alexnet、Vggnet的输出拿出来进行组合，自己设计一个分类器分类。这个过程中你不仅用了Alexnet的“知识”，也用了Vggnet的“知识”。
- 最后，你也可以直接使用fine-tune这种方法，在Alexnet的基础上，重新加上全连接层，再去训练网络。
综上，Transfer Learning关心的问题是：什么是“知识”以及如何更好地运用之前得到的“知识”。这可以有很多方法和手段。而fine-tune只是其中的一种手段。
mufeili 网友的相关建议:
平心而论，乐视的构架，视频网站加影业加电视业务是靠谱的，可以挣钱的，有竞争力的，乐视体育经过调整之后也是靠谱的。
后面什么的汽车，手机，自行车全是瞎折腾，赶紧卖。
现在缺一个靠谱的掌舵人，靠谱的人来了。
所以我保持谨慎乐观。
不过孙宏斌也是矫情，什么房地产才是大买卖，比乐视生意大多了。现在清算房地产商的风头一天比一天紧。什么王石，宋卫平，王健林，迟早完璧归赵。
说什么赵钱孙理的，不知道现在赵钱轮到马理吗？没有乐视这个互联网概念和想象力，以后融创怎么走怎么拿地？
孙宏斌离开科技圈太久了，所以我觉得这个局可能需要引入BAT或者国家队、运营商层面的资源。
liu-zhao-yang-25-66 网友的相关建议:
平心而论，乐视的构架，视频网站加影业加电视业务是靠谱的，可以挣钱的，有竞争力的，乐视体育经过调整之后也是靠谱的。
后面什么的汽车，手机，自行车全是瞎折腾，赶紧卖。
现在缺一个靠谱的掌舵人，靠谱的人来了。
所以我保持谨慎乐观。
不过孙宏斌也是矫情，什么房地产才是大买卖，比乐视生意大多了。现在清算房地产商的风头一天比一天紧。什么王石，宋卫平，王健林，迟早完璧归赵。
说什么赵钱孙理的，不知道现在赵钱轮到马理吗？没有乐视这个互联网概念和想象力，以后融创怎么走怎么拿地？
孙宏斌离开科技圈太久了，所以我觉得这个局可能需要引入BAT或者国家队、运营商层面的资源。
1
相关话题
怎样计算两个服从高斯分布的向量乘积的期望？《人工智能训练师国家职业技能标准》发布，有哪些值得关注的信息？
如何评价基于游戏毁灭战士（Doom）的AI死亡竞赛大赛结果？
无人车为什么一定要用激光雷达做，双目视觉难道不行吗？
为什么都说神经网络是个黑箱？
如何评价移动端吊打一切万众期待的商汤深度学习推理框架PPL开源了却没有支持移动端？
如何看待多所 985 大学开设人工智能专业？
自学深度学习是怎样一种体验？
阿里的TDM树深度模型为什么很少有人用，是有哪些问题吗？
如何看待Geoffrey Hinton的言论，深度学习要另起炉灶，彻底抛弃反向传播？
前一个讨论
下一个讨论
相关的话题
为什么在SGD中使用L1正则化很难获得稀疏性？有哪些解决完之后让你拍案叫绝的算法问题？
NIPS 2018 有什么值得关注的亮点？
resnet（残差网络）的F（x）究竟长什么样子？
简单解释一下sparse autoencoder, sparse coding和restricted boltzmann machine的关系？
如何直观地解释 backpropagation 算法？
GAN生成的数据没有标签怎么用来训练分类模型？
现大二，准备做大学生创新创业项目计划 ，目前定的方向是深度学习+畜牧业／养殖业，有什么建议给我们吗？
简单解释一下sparse autoencoder, sparse coding和restricted boltzmann machine的关系？
有没有必要把机器学习算法自己实现一遍？
为什么deep lab v3起，输出不再接 DenseCRF了？
多任务学习中loss多次backward和loss加和后backward有区别吗？
神经网络中 warmup 策略为什么有效；有什么理论解释么？
神经网络中，bias有什么用，为什么要设置bias，当加权和大于某值时，激活才有意义？
反馈控制理论在优化、机器学习等领域有哪些应用？
CNN网络的pooling层有什么用？
人工智能可以为人类找寻他们心目中的另一半吗?
对神经网络某一层做了小改进，效果却提升显著，可以发论文吗？
把某人的 DNA 序列作为输入，正面照片作为输出，丢到深度神经网络里面学习，可行吗？
ICLR 2018 有什么值得关注的亮点？
在算力充沛，深度学习模型大行其道的今天，传统机器学习的未来在哪里？
为什么神经网络具有泛化能力？
迁移学习与fine-tuning有什么区别？
如何看待华为 4 月 25 日发布的盘古智能大模型？在这个行业处于什么水平？
GAN（对抗生成网络）可以被用于哪些（商业或潜在商业）实际问题？
你实践中学到的最重要的机器学习经验是什么？
如何评价通信工程很多导师都研究机器学习人工智能而不是传统的天线电磁场等方向?
能否使用神经网络来判断奇偶数？
计算商品embedding然后平均得到用户embedding，会不会存在这种问题？
GAN（对抗生成网络）可以被用于哪些（商业或潜在商业）实际问题？