如何评价FAIR提出的MaskFormer，在语义分割ADE20K上达到SOTA：55.6 mIoU？ 第1页
1
xiaohuzc 网友的相关建议:
之前大部分的语义分割都是用pixel classification，这篇工作的创新之处是看成了一个instance mask prediction，思路挺新奇的。
一点额外想说的是，语义分割本身是没有instance区分的，标注也没有区分instance，那么如果看成instance mask预测的话，就只能简单地根据类别生成K个不同的mask，即各个类别的mask，这里也不区分类内的instance。这个instance mask prediction中的instance就是相对同一类的了，预测的mask也是固定为K，此时N queries其实也可以简化为K queries。
如果再往前的话，K queries可以固定为每个类别的queries，那么训练的loss就可以变成简单的K个sigmoid loss，即区分图像中是不是含有这个类别。每个类别的query和全局特征结合得到该类别的mask prediction。和论文里面说的fixed match基本类似。
而论文提出的方案更通用化，毕竟可以用于全景分割上。
1
相关话题
自动驾驶问题很多，未来前景如何？如果人类自身的智慧水平最后被人工智能（AI）超过，算是进化么？
2021年，作为算法工程师的你们会在CV业务落地上用Transformer吗？
如何评价Yann LeCun 说的「要研究机器学习，本科应尽量多学物理和数学课」？
如何评价FAIR提出的MaskFeat：一种适用图像和视频分类的自监督学习方法？
能否对卷积神经网络工作原理做一个直观的解释？
“意识上传”是否可以实现，以什么技术方式实现？
如何看待「原谅宝」？
能分享你收藏的国外AI talk, seminar平台或网站吗？
中国人工智能图像识别技术的开创者是谁？
相关的话题
如何评价 马毅教授 的 NeurIPS 2020 中稿文章 MCR2 及 自称弄明白深度学习了？如何评价最新的Octave Convolution？
为什么学习深度学习感觉无法入门？
如何看待国务院印发的 2 万多字人工智能发展规划？
哪些人工智能领域已经或者未来1-2年会实现盈利？
AlphaGo 与李世石的第五局比赛中有哪些值得关注之处？
如何评价 Kaiming 团队新作 Masked Autoencoders (MAE)？
LSTM如何来避免梯度弥散和梯度爆炸？
如何看待多所 985 大学开设人工智能专业？
请问人工智能到底是什么？
机器人操作同样的电脑同人类对战星际争霸 2，与机器人与人进行围棋比赛，哪个难度更低？
现代人工神经网络是不是一个死胡同？这个技术是不是骗人的？
2021 年了，机器/深度学习还有哪些坑比较好挖？
2022 年初，你认为哪项成果代表了现在人工智能的最高水平？
人工智能可以为人类找寻他们心目中的另一半吗?
如何评价通信工程很多导师都研究机器学习人工智能而不是传统的天线电磁场等方向?
现在的AI能自动编写另一个AI代码吗？
如何看待 Google 围棋 AI AlphaGo 击败欧洲围棋冠军？
如何看待华为 4 月 25 日发布的盘古智能大模型？在这个行业处于什么水平？
在计算机视觉任务中，运用Transformer和Non-local有何本质区别？
现在什么职业最容易被人工智能取代？
USC 大学教授、Pinscreen CEO Hao Li 是否存在论文造假、产品虚假宣传等问题？
当人工智能复杂到超出任何人类的理解能力时应该如何管理？
如何评价最近火热的对比学习，会引领预训练模型新的范式嘛?
AI（或者说神经网络/深度学习）能够实现科学（尤其是物理学）研究中提出假设这一步嘛？
大数定律具体是个什么概念？
如何看待华大基因董事长汪建称「未来 5-10 年就可以化学合成任何生命，进展可能比人工智能还快」？
NLP文本匹配问题的本质是不是 对于要预测的句子，遍历候选句子 从训练数据集里寻找最相似的pair？
即将到来的2020，商汤、旷视、依图、云从、图森、地平线、寒武纪等几大AI独角兽公司会死掉一部分吗？
如何看待 Facebook 首席 AI 科学家 Yann LeCun 被群骂？