Transformer在工业界的应用瓶颈如何突破？ 第1页
1
pi-qia-che-70 网友的相关建议:
回答问题：工业界+蛋白质领域，Alphafold2的trunk部分用的就是transformer。同时facebook的MSA transformer在无监督提取蛋白质接触图谱上有了大的突破。
问题之外：我觉得大家不要过分只关注transformer，transformer只是一种特殊形式的GNN。在图神经网络上有更大的空间。Relational inductive biases, deep learning, and graph networks
1
相关话题
如何评价 NVIDIA 最新技术 5 秒训练 NERF？人工智能发展之后会不会带来共产主义。？
计算机视觉有多少分支？
学习python中的pandas有没有好的教程推荐？
2017 年最令你震惊、悚然的数据是什么？
高考填志愿，计算机，计科，人工智能，软工，大数据，物联网，网络工程该怎么选？
你实践中学到的最重要的机器学习经验是什么？
如何理解深度学习中的deconvolution networks？
你曾经都被哪些黑科技「电」到？
如何看待swin transformer成为ICCV2021的 best paper？
前一个讨论
杭州空气是不是很差？如果是，为什么那么差？
下一个讨论
导师要抢我的一作，我该怎么办？
相关的话题
大家推荐一下，哪些学校的导师有在做量化交易、股票预测的？历史上由于技术进步而被淘汰的职业，都是如何处理失业率、社会稳定 与 再就业问题的？
自动驾驶什么时候才会凉凉，估计还要多久？
“大数据”已经过时了吗？
为什么有些学数学的看不惯甚至鄙视 Deep Learning？
为什么现在的CNN模型都是在GoogleNet、VGGNet或者AlexNet上调整的？
如何看待在某度搜不到megengine官网？
围棋中什么叫最善的下法？
Transformer中的Mask矩阵已经有顺序了，能去掉position embedding吗?
如何评价 AI 仅用 5.4 秒就能设计出和文献相同的化学反应途径，堪称化学界「AlphaGo」？
现代人工神经网络是不是一个死胡同？这个技术是不是骗人的？
为什么都说神经网络是个黑箱？
脑机接口离实际应用还有多远？未来能否帮助障碍人士恢复生活能力？
如何评价2020年计算机视觉顶会CVPR投稿量破万的现象？
赵泠是不是人工智能？
从今年校招来看，机器学习等算法岗位应届生超多，竞争激烈，未来 3-5 年机器学习相关就业会达到饱和吗？
如何评价马云的无人超市？
如果学习从零开始学习Pytorch,有优秀的开源项目可以推荐吗？
如何看待2019世界人工智能大会马云与埃隆马斯克的对话？
TensorFlow的自动求导具体是在哪部分代码里实现的？
人工智能会有宗教信仰吗？
如何评价 MXNet 被 Amazon AWS 选为官方深度学习平台？
Evidential deep learning里一般怎么估计多标签分类的Uncertainty？
你遇见过什么当时很有潜力但是最终没有流行的深度学习算法?
如何看待韩国棋院院长回应棋手用AI作弊参赛？
为什么柯洁会宣布 2018 再战 AI？
能否把一个人的所有物理数据输入在一个模型里，然后计算他接下来的状态变化？
如何评价新Nature子刊Nature Machine Intelligence的出现？
目前手势识别发展到什么水平了？
如何看待AI伦理科学家Timnit Gebru在邮件控诉谷歌缺乏种族多样性后被Jeff Dean炒掉？