请问人工神经网络中的activation function的作用具体是什么？为什么ReLu要好过于tanh和sigmoid function? 第1页
1
jia-wei-97-19 网友的相关建议:
最近自学神经网络，一直不太明白activation的具体作用到底是干嘛的，不用activation又会有什么影响
wang-feng-98-82 网友的相关建议:
最近自学神经网络，一直不太明白activation的具体作用到底是干嘛的，不用activation又会有什么影响
1
相关话题
深度学习attention机制中的Q,K,V分别是从哪来的？如何评价微软亚洲研究院提出的LightRNN？
如何看待QQ邮箱翻译出他人的快递通知？
对于多指标评价，BP神经网络评价和TOPSIS有什么区别呢？
float类型的设计是否存在问题？
如何证明数据增强（Data Augmentation）有效性？
为什么小模型已经可以很好地拟合数据集了，换大模型效果却要比小模型好？
为什么谈论深度学习工具时，很少有人讨论matlab的神经网络工具包？
人工智能的意义和价值是什么？
土木真的没有 IT 行业有前途吗？
前一个讨论
国内研究生不小心跟了一个水货老师是什么样的体验？
相关的话题
老师给了一个神经网络的程序，他之前是跑通了的，但是我迭代几十次或者一百多次就报错。这个怎么解决?你遇见过什么当时很有潜力但是最终没有流行的深度学习算法?
2022 年初，你认为哪项成果代表了现在人工智能的最高水平？
未来 3~5 年内，哪个方向的机器学习人才最紧缺？
为什么中国有超级计算机，但是中国的 CPU 不行？
为什么说「动态类型一时爽，代码重构火葬场」？
计算机技术的进步与模拟运算，在未来真的可以解决磁约束核聚变技术中所有关键问题吗？
人脑有海量的神经元（参数），那么人脑有没有「过拟合」行为？
假如我穿越到2017年第一个提出了Transformer、BERT等模型，我可以保送到清华北大吗？
为什么IT书籍的翻译质量相比其他尤其被诟病？
一台 400W 的电脑在一个 15m² 的密闭房间内全功率工作，会对室温造成怎样的影响？
普通FPGA工程师怎样向人工智能靠拢？
新手如何实现个简单AutoML框架。有参考的github开源项目介绍吗？
有哪些比较好的元学习（meta learning）领域的学习资源？
attention跟一维卷积的区别是啥？
有谁给解释一下流形以及流形正则化？
想学计算机系却报错志愿进了数学系，该怎么办？
deepmind发表的neural processes(神经过程)，这个是怎么实现的呢？
深度学习应用在哪些领域让你觉得「我去，这也能行！」？
DeepMind 研发的围棋 AI AlphaGo 是如何下棋的？
已有大量编程基础，如何速成python用于学习机器学习？
怎样实现浮点数除以一个数再乘以这个数结果等于原值?
x86的8和6分别指什么？
一个没有喷子的互联网会是什么样的？
如何看待佛罗里达大学博士生自杀后其导师李涛被爆出鼓励造假，李涛发表声明要求澄清？
我这个数有葛立恒数的大吗？
现在人工智能的某些学派，是不是跟中医有些像？
人是如何做黑盒优化的？
卷积神经网络（CNN）的结构设计都有哪些思想？
学习机器学习应该看哪些书籍？