如何评价FAIR提出的MaskFormer，在语义分割ADE20K上达到SOTA：55.6 mIoU？ 第1页
1
xiaohuzc 网友的相关建议:
之前大部分的语义分割都是用pixel classification，这篇工作的创新之处是看成了一个instance mask prediction，思路挺新奇的。
一点额外想说的是，语义分割本身是没有instance区分的，标注也没有区分instance，那么如果看成instance mask预测的话，就只能简单地根据类别生成K个不同的mask，即各个类别的mask，这里也不区分类内的instance。这个instance mask prediction中的instance就是相对同一类的了，预测的mask也是固定为K，此时N queries其实也可以简化为K queries。
如果再往前的话，K queries可以固定为每个类别的queries，那么训练的loss就可以变成简单的K个sigmoid loss，即区分图像中是不是含有这个类别。每个类别的query和全局特征结合得到该类别的mask prediction。和论文里面说的fixed match基本类似。
而论文提出的方案更通用化，毕竟可以用于全景分割上。
1
相关话题
如何评价李开复称「ICO 是最大的泡沫，可能导致 AI 泡沫破裂」?如何评价mixup: BEYOND EMPIRICAL RISK MINIMIZATION？
你看好哪些人工智能的应用场景？
人工智能会产生真正的感情吗？
如何评价谷歌刚推出的Cloud AutoML？
人工智能（AI）真的会带来大规模失业吗？
BERT中，multi-head 768*64*12与直接使用768*768矩阵统一计算，有什么区别？
如何看待NIPS2017图灵奖得主贝叶斯网络之父Judea Pearl讲座无人问津？
如何评价扎克伯格自己写的 Jarvis AI？
如何看待 NIPS 2018 submission达到近 5000 篇？
相关的话题
为什么图形学的会议siggraph的论文代码很少会开源？好像视觉如CVPR、ICCV开源的更多一些。如何看待阿里巴巴成立阿里全球研究院「达摩院」，3 年投资 1000 亿引进顶级人才？
为什么Bert中的CLS在未fine tune时作为sentence embedding性能非常糟糕？
《人工智能训练师国家职业技能标准》发布，有哪些值得关注的信息？
2021 年了，TensorFlow 和 PyTorch 两个深度学习框架地位又有什么变化吗？
人工智能就业前景越来越严峻了，你还在坚持吗？
如何看待AI伦理科学家Timnit Gebru在邮件控诉谷歌缺乏种族多样性后被Jeff Dean炒掉？
如何评价 DeepMind 发表在 Nature 上的使用深度强化学习对托卡马克等离子体进行磁控制？
人工智能要有自主意识有创造力，才能全面超越人类，这个时候人工智能才可怕，这话对吗？
如何看待MXNet在CVPR2017上公布的gluon接口？
心理咨询师会被人工智能取代吗？
在数据分析、挖掘方面，有哪些好书值得推荐？
旷视(Face++)完成C轮1亿美元融资，是否说明旷视已经进入独角兽阵营？
如何看待0.5元可买到身份匹配的人脸数据？如何才能避免信息泄露？
有哪些对未来看似不靠谱的预测，如今竟然实现了？
如何看待Scale AI这样的创业公司？
如何评价PyTorch 0.4.0？
类似AlphaGo一样的人工智能什么时候才可以击败RTS（如星际）顶级选手？
要装修房子，有什么好用的智能设备推荐吗？
用生成模型做数据增强data augmentation时，如何从合成数据中筛选出质量较好的样本？
旷视(Face++)完成C轮1亿美元融资，是否说明旷视已经进入独角兽阵营？
Meta 继续重组架构，人工智能团队合并至 AR/VR 部门，这样做的原因有哪些？会带来哪些影响？
能否把一个人的所有物理数据输入在一个模型里，然后计算他接下来的状态变化？
如何评价各种关联因素分析算法,尤其是在算法效果对比方面?
计算机视觉（cv）方向今年招聘情况怎么样?是否已经人才过剩?
研一，在学机器学习和深度学习，为什么感觉越学越不会，怎么解决这个问题？
目前 AI 在疾病的诊断和治疗上，有哪些成功的应用？
当前人工智能特别是深度学习最前沿的研究方向是什么？
2021年人工智能领域有哪些关键性进展和突破？
如何评价百度收购渡鸦科技？