下一代 AI 框架长什么样？ 第1页
1
yuan-dong-39 网友的相关建议:
先简要回答一下吧
AI框架领域最近两年已发生的最大的一个事件是PyTorch以eager模式的优势超越TensorFlow；
AI框架领域最近两年已显现的一个最大需求是大规模预训练模型，进而提出的复杂的并行模式的支持（数据，模型，流水，专家等并行），主流框架还不能原生支持这些需求，都需要通过定制的wrapper或plugin才可以，一些新兴的深度学习框架（譬如OneFlow) 在这方面具有比较明显的领先优势，原生就可以支持这些复杂的并行模式。
一个肉眼可见的事情是“自动placement和自动并行”很快就会被完全解决了，将真正实现单卡代码不需要任何改动就可以扩展到任意多的计算资源上去，分布式并行方面的痛点将不复存在。
所以可以预期，未来的主流框架将继承PyTorch在单卡易用性方面的优点，同时在分布式易用性、分布式效率方面也会非常突出，当然也会解决掉PyTorch今天遇到的部署方面的麻烦（也就是训练推理一体化）。
这是一个比较近期的预测，应该在一年内发生。
更远一点，深度学习编译器领域也会发生一些有趣的事情。
1
相关话题
想做机器人，有什么好的发展方向？attention跟一维卷积的区别是啥？
现在tensorflow和mxnet很火，是否还有必要学习scikit-learn等框架？
如何看待 Google 既可以作 Inference，又可以作 Training 的新一代 TPU？
如何看待Hinton的论文《Dynamic Routing Between Capsules》？
wav2vec中的30ms是怎么得来的?
数据挖掘、机器学习、自然语言处理这三者是什么关系？这几个怎么入门啊？
验证集loss上升，准确率却上升该如何理解？
如何评价微软的人工智能部门成立仅 1 年，现在有 8000 多员工？
历史上有哪些曾经社会地位很高的职业由于科技的进步被淘汰？淘汰后的失业人员又是何去何从呢？
前一个讨论
在「理想汽车」工作或实习是一种怎样的体验？
下一个讨论
怎么拍出稚晖君一样的视频？
相关的话题
如何看待AI杀入斗地主领域，快手DouZero击败344个AI排名第一？未来人类斗地主能斗过AI吗？Jupyter Notebook 有哪些奇技淫巧？
经过足够长的时间， AlphaGo 的棋谱能收敛到一张上吗？
有谁照着论文把 AlphaGo 重现出来了？
为什么要压缩模型，而不是直接训练一个小的CNN？
如何看待李徐（业余 6 段）在现实比赛中以超高 AI 吻合度击败张涛（职业七段）？
如何评价Kaiming He团队的MoCo v3？
GPT-3 到底花了多少钱？为什么有的网站显示 1200 万美元，有的显示 460 万美元呢？
我们真的那么需要隐私吗？
如何评价支付宝在IEEE成功立项“生物特征识别多模态融合”国际标准？有什么长远意义？
最先会被机器人代替的几个职业将会是什么？
把围棋棋盘上下边和左右边连起来，变成面包圈，下棋策略会有什么变化？
NTIRE2017夺冠的EDSR去掉了Batch Normalization层就获得了提高为什么？
CVPR 2018 有什么值得关注的亮点？
Batch Normalization 训练的时候为什么不使用 moving statistics？
当前农业机械化都尚未普及的中国，未来可不可能跨级实现农业AI化？
如何评价 AI 仅用 5.4 秒就能设计出和文献相同的化学反应途径，堪称化学界「AlphaGo」？
你心目中的ALPHAGO拟人是怎样的性格?
如何看待 TI7 上与 Dendi solo 的 OpenAI？
哪些统计方法可以用于判断因果关系？
scikit-learn, tensorflow, pytorch真的只需要查下API，不需要学吗?
与其让计算机拥有人类的模糊思考，为什么不想办法让人类拥有计算机的高速计算能力？
国内 top2 高校研一在读，为什么感觉深度学习越学越懵?
2021年深度学习在哪些应用上有实质进展？
计算机行业是不是自砸饭碗的行业？
数据分析是不是比数据挖掘含金量低不少，并且职业前景和钱景远远不如数据挖掘？
Batch Normalization 训练的时候为什么不使用 moving statistics？
有哪些人工智能上的事实，没有一定人工智能知识的人不会相信？
如何看待 Google 围棋 AI AlphaGo 击败欧洲围棋冠军？
AMD的CPU是否适合搭建深度学习主机？