如何评价FAIR提出的MaskFormer，在语义分割ADE20K上达到SOTA：55.6 mIoU？ 第1页
1
xiaohuzc 网友的相关建议:
之前大部分的语义分割都是用pixel classification，这篇工作的创新之处是看成了一个instance mask prediction，思路挺新奇的。
一点额外想说的是，语义分割本身是没有instance区分的，标注也没有区分instance，那么如果看成instance mask预测的话，就只能简单地根据类别生成K个不同的mask，即各个类别的mask，这里也不区分类内的instance。这个instance mask prediction中的instance就是相对同一类的了，预测的mask也是固定为K，此时N queries其实也可以简化为K queries。
如果再往前的话，K queries可以固定为每个类别的queries，那么训练的loss就可以变成简单的K个sigmoid loss，即区分图像中是不是含有这个类别。每个类别的query和全局特征结合得到该类别的mask prediction。和论文里面说的fixed match基本类似。
而论文提出的方案更通用化，毕竟可以用于全景分割上。
1
相关话题
如何评价何恺明、Ross Girshick组的自监督时空表征学习新作？如何评价谷歌刚推出的Cloud AutoML？
《人工智能训练师国家职业技能标准》发布，有哪些值得关注的信息？
基于计算机视觉从一张图片重建人体的三维网格，能否获取腰围、胸围、臂长、腿长等数据？
如何评价Deepmind自监督新作BYOL？
「绝艺」成为中国国家围棋队指定训练 AI 后会有哪些影响？
如何理解链接预测（link prediction）？
如何看待NVIDIA 即将开源的DLA？
如何评价清华大学「天机芯」登上 Nature 封面，清华施路平团队发布全球首款异构融合类脑芯片？
视觉Transformer如何优雅地避开位置编码？
相关的话题
李飞飞为何卸任 Google 首席 AI 科学家？中国开发一个主流的手机系统到底能有多难？
为什么 Stephen Hawking（史蒂芬·霍金）认为「人工智能或导致人类灭绝，应加以控制」？
如果所有人类都变成资本家，把机器人当作剥削对象，会发生什么？
如何评价李飞飞和李佳加盟谷歌？
如何激怒一个科研工作者？
未来十年，电脑数码领域的哪些技术变革给行业和日常生活带来重大改变？
如何以「一觉醒来，我变成了一台人工智能机器」为开头写一个故事？
如何看待 Larrabee 之父 Tom Forsyth 重加入 Intel？英特尔为何下注独立显卡？
第三次世界大战是否有可能是阶级战争？
如何看待李国杰院士在科学网发文称，国内 AI 研究「顶不了天、落不了地」，该想想了？
这样是不是就可以把人类的所有图像内容穷举出来了?
Resnet到底在解决一个什么问题呢？
如果人类自身的智慧水平最后被人工智能（AI）超过，算是进化么？
人工智能就业前景越来越严峻了，你还在坚持吗？
新智元提问：如何看待李飞飞高徒Karpathy加入特斯拉，主管人工智能部门？
如果一个行业大佬向你说了一件幼稚的事情，你会觉得这话是另有玄机，还是大佬自己就没整明白呢？
中国人工智能图像识别技术的开创者是谁？
请问怎么看待大学开设“法学（人工智能方向）”这个专业的？
为何感觉“知识蒸馏”这几年没有什么成果？
计算流体力学（CFD）里应用注意力机制（attention）是否可行？
领域自适应需要用到测试集数据，这样的方法有啥意义呢？
算法工程师的落地能力具体指的是什么？
深度学习领域，你心目中 idea 最惊艳的论文是哪篇？
如何评价余凯创立的horizon robotics？
视觉算法的工业部署及落地方面的技术知识，怎么学？
如何看待 AlphaFold 在蛋白质结构预测领域的成功？
在NLP上，CNN、RNN（认为LSTM等变体也是RNN）、最简单全连结MLP，三者相比，各有何优劣?
如何看待swin transformer成为ICCV2021的 best paper？
2022 年初，你认为哪项成果代表了现在人工智能的最高水平？