请问人工神经网络中的activation function的作用具体是什么？为什么ReLu要好过于tanh和sigmoid function? 第1页
1
jia-wei-97-19 网友的相关建议:
最近自学神经网络，一直不太明白activation的具体作用到底是干嘛的，不用activation又会有什么影响
wang-feng-98-82 网友的相关建议:
最近自学神经网络，一直不太明白activation的具体作用到底是干嘛的，不用activation又会有什么影响
1
相关话题
attention跟一维卷积的区别是啥？为什么CV能做到让一幅人脸图动了笑了，而NLP的text-style-transfer进展貌似一般？
如何理解今年发表在JMLR上随机森林算法SPORF？
当今最机智的大学生是不是选学金融+计算机双学位、双方向发展的人？
如何看待物理学家 Lee Phillips 对 Python 的批评?
为什么说 MD5 是不可逆的？
PyTorch中在反向传播前为什么要手动将梯度清零？
为什么ViT里的image patch要设计成不重叠？
怎么通俗地理解张量？
如何评价Google最新提出的gMLP：MLP模型在CV和NLP任务上均取得较好的效果？
前一个讨论
国内研究生不小心跟了一个水货老师是什么样的体验？
相关的话题
机器学习相关岗位面试中，有哪些加（zhuang）分（bi）项？为什么我们需要了解编程的历史？
如何评价Hinton组的新工作SimCLR?
二分类问题，应该选择sigmoid还是softmax？
在洛桑联邦理工学院（EPFL）就读是怎么样的体验？
在计算资源有限的情况下，有什么深度学习的选题可以推荐/避免？
scikit-learn, tensorflow, pytorch真的只需要查下API，不需要学吗?
为什么操作系统没有前端和后端，而计算机很多其他领域却分前后端?
AAAI 2022有哪些值得关注的方向？
Dirichlet Processes 是一个什么样的随机过程？
中科院某所研一新生，小样本学习、数据融合、强化学习、图神经网络、资源受限的计算这几个方向选哪个更好？
普通FPGA工程师怎样向人工智能靠拢？
量子计算机的工作原理如何解释？
有哪些深度学习效果不如传统方法的经典案例？
如何评价周志华教授新提出的 Deep Forest 模型，它会取代当前火热的深度学习 DNN 吗？
机器学习小白来提问：关于联邦学习FedAVG和FedSGD的问题？
全连接层的作用是什么？
程序员在十年后还会有今天的收入吗？
在中文 NLP 等论文中，应该如何翻译 token 这个词？
请问进大学前后自学计算机有哪些书目或方法？
什么是meta-learning?
在NLP上，CNN、RNN（认为LSTM等变体也是RNN）、最简单全连结MLP，三者相比，各有何优劣?
当前人工智能特别是深度学习最前沿的研究方向是什么？
人工「神经网络」技术在信息处理上有何特点，工作原理是什么？
如何开始用 C++ 写一个光栅化渲染器？
人工智能被高估了吗？
编写基于机器学习的程序，有哪些编写和调试的经验和窍门？
深度学习图像处理什么时候用到GPU？
为什么操作系统不能屏蔽底层的架构（arm，x86,mips），为应用软件提供一个统一的运行环境呢？
为什么机器学习解决网络安全问题总是失败?