在中文 NLP 等论文中，应该如何翻译 token 这个词？ 第1页
1
zibuyu9 网友的相关建议:
在语言学特定语境下，一般会将 word type 和 word token 做比对，这时候，翻译为 词形 和 词例 比较合适。word type指的是词表中互不相同的单词形态，而word token则是指文本中具体出现的单词。很多NLP论文中说token的时候，大致是指的文本序列中具体出现的那些词，即word token。
1
相关话题
2021年人工智能领域有哪些关键性进展和突破？Yann LeCun、Geoffrey Hinton或Yoshua Bengio能得图灵奖吗？
正负样本极不平衡的问题？
把某人的 DNA 序列作为输入，正面照片作为输出，丢到深度神经网络里面学习，可行吗？
微软小冰测颜值是否比较准？为什么？
双非小硕一枚 能否从事机器学习?
transformer中的Q,K,V到底是什么？
t-sne数据可视化算法的作用是啥？为了降维还是认识数据？
现在的人工智能是否走上了数学的极端？
如何评价2020年计算机视觉顶会CVPR投稿量破万的现象？
相关的话题
如何评价CVPR2019程序主席Derek Hoiem的论点：计算机视觉只是记忆，不是智能？什么是无监督学习？
什么是无监督学习？
如何评价第一局比赛 AlphaGo 战胜李世石？
怎么通俗地理解张量？
这一波人工智能泡沫将会怎么破灭？
谷歌翻译原理是什么，从语言A到B，中间是否要翻译成中介语言C（如英语）？
GAN 真的创造了新的信息吗？
怎么通俗地理解张量？
如何看待MXNet获得amazon官方支持首位？
如何看待 Larrabee 之父 Tom Forsyth 重加入 Intel？英特尔为何下注独立显卡？
如何看待 Richard Sutton 说的「人工智能中利用算力才是王道」？
如何看待Geoffrey Hinton的言论，深度学习要另起炉灶，彻底抛弃反向传播？
在你做推荐系统的过程中都遇到过什么坑？
常用的机器学习算法比较？
请问刘知远老师提供的网易新闻标注数据集开源吗？
如何看待SQuAD比赛中，阿里、MSRA机器阅读理解准确率超越人类？
人类大脑的聪慧程度以 IQ 为标准，那么人工智能的水平用什么指标来衡量呢？
神经网络中的能量函数是如何定义的？
如何激怒一位人工智能（机器学习、深度学习、强化学习等）爱好者？
为什么 Non-Convex Optimization 受到了越来越大的关注？
如何评价B站UP主未明子宣称“知乎搞机器学习模拟拉康的程序员”具备“头脑上的悲剧”？
机器学习里面的流形都是怎么用的？
如何评价MXNet发布的1.0版本？
CVPR 2019 有哪些值得关注的亮点？
计量经济学是不是过时了？
算法研究属于数学专业还是计算机专业？
2021 年了，机器/深度学习还有哪些坑比较好挖？
为什么Bert中的CLS在未fine tune时作为sentence embedding性能非常糟糕？
共轭是指 ‘先验分布与后验分布共轭“ ，还是指 "先验分布与似然函数共轭“？