神经网络，分类和回归问题，在网络结构上的区别是什么？分类比回归多一层softmax吗？诚心求教？ 第1页
1
huo-hua-de-41 网友的相关建议:
感觉现在已有的回答还没说到点上。例如，0-1的回归，我把0-1分成100个bin，每0.01当作一个类，然后用变成100类的分类任务，是不是就只是精度差异呢？进一步可以衍生几个问题：
- 为什么回归任务常使用mse作为损失函数？
- 为什么分类任务常用交叉熵作为损失函数?
首先，我们要知道，使用特定损失函数的前提是我们对标签的分布进行了某种假设。
二分类问题的常见假设就是标签服从伯努利分布，多分类问题背后的假设是多项分布（Multinomial Distribution）。根据数据分布，结合最大似然估计，就可以推导出交叉墒的公式。
同样的，回归问题背后的假设是标签服从正态分布，这时候根据数据分布，结合最大似然估计，就可以推导出mse的公式。
然后实际问题中，我们遇到的标签不一定真的服从正态分布。根据样本分布不同，大家还提出了tweedie loss、possion loss等损失函数替代mse。我说这么多，只是抛砖引玉，详细的推到大家可以看看 @马东什么 的文章
1
相关话题
CNN（卷积神经网络）、RNN（循环神经网络）、DNN（深度神经网络）的内部网络结构有什么区别？为什么相比于计算机视觉(cv)，自然语言处理(nlp)领域的发展要缓慢？
有哪些深度学习效果不如传统方法的经典案例？
如何评价「神经网络本质不过是初中生都会的复合函数」？
如何评价Hinton在加拿大多伦多大学关于用“capsule”作为下一代CNN的演讲？
国内 top2 高校研一在读，为什么感觉深度学习越学越懵?
深度学习attention机制中的Q,K,V分别是从哪来的？
神经网络中，bias有什么用，为什么要设置bias，当加权和大于某值时，激活才有意义？
有哪些优秀的深度学习入门书籍？需要先学习机器学习吗？
如何看待Hinton的论文《Dynamic Routing Between Capsules》？
相关的话题
算法工程师的落地能力具体指的是什么？机器学习中如何识别图片中的手是手背还是手心？
DL/ML 模型如何部署到生产环境中？
请问人工神经网络中的activation function的作用具体是什么？为什么ReLu要好过于tanh和sigmoid function?
如何看待与评价 AAAI 2022 的录用结果？
如何看待 Deepmind 宣称最新版 AlphaGo 能让李世乭版本 AlphaGo 三子？
有尝试用多层自组织特征神经网络（MLSOM）来代替层次分析法（AHP）的吗？会有哪些问题需要注意？
人工智能技术会不会最终赶上微积分的历史地位？
在CV/NLP/DL领域中，有哪些修改一行代码或者几行代码提升性能的算法？
为何中国人迷恋吴恩达的机器学习课？
自然语言处理怎么最快入门？
如何简单形象又有趣地讲解神经网络是什么？
AI在网络安全领域（尤其是威胁检测领域），有什么好的应用场景？
用 TensorFlow 可以做什么有意思的事情？
为什么交叉熵（cross-entropy）可以用于计算代价？
如何系统学习机器学习？
如何通俗易懂地介绍 Gaussian Process？
把某人的 DNA 序列作为输入，正面照片作为输出，丢到深度神经网络里面学习，可行吗？
时间序列数据上可以抽取哪些频域特征？
如何评价余凯在朋友圈发表呼吁大家用 caffe、mxnet 等框架，避免使用 TensorFlow？
国内目前的量化交易是否很少涉及到机器学习？
如何评价 2018 清华大学特等奖学金计算机大类（贵系、软院、姚班）无人通过一轮筛选？
机器学习该怎么入门？
为什么我学过微积分、线性代数和概率论，还是看不懂机器学习？
word2vec有什么应用？
Yoshua Bengio为什么能跟Hinton、LeCun相提并论？？
如何评价谷歌刚推出的Cloud AutoML？
深度学习领域有哪些瓶颈？
神经网络，人工智能这块怎么入门？
为什么softmax很少会出现[0.5，0.5]？