迁移学习与fine-tuning有什么区别？ 第1页
1
he-zhi-yuan-16 网友的相关建议:
举个例子，假设今天老板给你一个新的数据集，让你做一下图片分类，这个数据集是关于Flowers的。问题是，数据集中flower的类别很少，数据集中的数据也不多，你发现从零训练开始训练CNN的效果很差，很容易过拟合。怎么办呢，于是你想到了使用Transfer Learning，用别人已经训练好的Imagenet的模型来做。
做的方法有很多：
- 把Alexnet里卷积层最后一层输出的特征拿出来，然后直接用SVM分类。这是Transfer Learning，因为你用到了Alexnet中已经学到了的“知识”。
- 把Vggnet卷积层最后的输出拿出来，用贝叶斯分类器分类。思想基本同上。
- 甚至你可以把Alexnet、Vggnet的输出拿出来进行组合，自己设计一个分类器分类。这个过程中你不仅用了Alexnet的“知识”，也用了Vggnet的“知识”。
- 最后，你也可以直接使用fine-tune这种方法，在Alexnet的基础上，重新加上全连接层，再去训练网络。
综上，Transfer Learning关心的问题是：什么是“知识”以及如何更好地运用之前得到的“知识”。这可以有很多方法和手段。而fine-tune只是其中的一种手段。
mufeili 网友的相关建议:
平心而论，乐视的构架，视频网站加影业加电视业务是靠谱的，可以挣钱的，有竞争力的，乐视体育经过调整之后也是靠谱的。
后面什么的汽车，手机，自行车全是瞎折腾，赶紧卖。
现在缺一个靠谱的掌舵人，靠谱的人来了。
所以我保持谨慎乐观。
不过孙宏斌也是矫情，什么房地产才是大买卖，比乐视生意大多了。现在清算房地产商的风头一天比一天紧。什么王石，宋卫平，王健林，迟早完璧归赵。
说什么赵钱孙理的，不知道现在赵钱轮到马理吗？没有乐视这个互联网概念和想象力，以后融创怎么走怎么拿地？
孙宏斌离开科技圈太久了，所以我觉得这个局可能需要引入BAT或者国家队、运营商层面的资源。
liu-zhao-yang-25-66 网友的相关建议:
平心而论，乐视的构架，视频网站加影业加电视业务是靠谱的，可以挣钱的，有竞争力的，乐视体育经过调整之后也是靠谱的。
后面什么的汽车，手机，自行车全是瞎折腾，赶紧卖。
现在缺一个靠谱的掌舵人，靠谱的人来了。
所以我保持谨慎乐观。
不过孙宏斌也是矫情，什么房地产才是大买卖，比乐视生意大多了。现在清算房地产商的风头一天比一天紧。什么王石，宋卫平，王健林，迟早完璧归赵。
说什么赵钱孙理的，不知道现在赵钱轮到马理吗？没有乐视这个互联网概念和想象力，以后融创怎么走怎么拿地？
孙宏斌离开科技圈太久了，所以我觉得这个局可能需要引入BAT或者国家队、运营商层面的资源。
1
相关话题
为什么要学习吴恩达的机器学习？如何评价 DeepMind 新提出的关系网络（Relation Network）？
为什么现在的CNN模型都是在GoogleNet、VGGNet或者AlexNet上调整的？
搞机器学习的生环化材是天坑吗？
如何评价CVPR2019程序主席Derek Hoiem的论点：计算机视觉只是记忆，不是智能？
如何看待李国杰院士在科学网发文称，国内 AI 研究「顶不了天、落不了地」，该想想了？
如何评价小米开源的移动端深度学习框架MACE？
如何评价 DeepMind 公布的可生成算法竞赛解题代码的 AlphaCode？
如何评价各种关联因素分析算法,尤其是在算法效果对比方面?
《人工智能训练师国家职业技能标准》发布，有哪些值得关注的信息？
前一个讨论
下一个讨论
相关的话题
如何看待 Alex Smola 加入 Amazon？为什么Bert中的CLS在未fine tune时作为sentence embedding性能非常糟糕？
如何评价Hinton组的新工作SimCLR?
2020-2021年NLP有什么核心技术的更迭吗？或者有什么推动领域发展的paper吗？
类似AlphaGo一样的人工智能什么时候才可以击败RTS（如星际）顶级选手？
如何看待Jeff Dean&Hinton投到ICLR17的MoE的工作？
如何看待MXNet在CVPR2017上公布的gluon接口？
三维重建怎么入门？
如何评价沐神他们写的《动手学深度学习》这本书？
请解释下variational inference？
机器学习能否用于综合评价？具体怎么操作？
机器学习的理论方向 PhD 是否真的会接触那么多现代数学（黎曼几何、代数拓扑之类）？
如何评价mixup: BEYOND EMPIRICAL RISK MINIMIZATION？
如何评价Hinton在加拿大多伦多大学关于用“capsule”作为下一代CNN的演讲？
如何评价 PyTorch 团队推出的推荐系统库 TorchRec？
学习机器学习有哪些好工具推荐？
MPI 在大规模机器学习领域的前景如何？
能否用具体的例子解释一下 (Model-based) Structural Estimation？
机器学习中有哪些形式简单却很巧妙的idea？
你见过最差的算法工程师能差到什么程度？
验证集loss上升，准确率却上升该如何理解？
能否使用区块链的算力来解决深度学习训练？
为什么做机器学习的很少使用假设检验？
如何看待AI伦理科学家Timnit Gebru在邮件控诉谷歌缺乏种族多样性后被Jeff Dean炒掉？
如何评价MSRA视觉组最新对spatial attention mechanism分析论文？
在中小学阶段设置人工智能相关课程对于培养人工智能人才具有哪些意义？如何推进会比较有效？
在NLP当中，不同的评价指标，BLEU, METEOR, ROUGE和CIDEr的逻辑意义？
如何判断两个Deep Learning 数据集的数据分布是否一致？
常用的机器学习算法比较？
深度神经网络（DNN）是否模拟了人类大脑皮层结构？