在中文 NLP 等论文中，应该如何翻译 token 这个词？ 第1页
1
zibuyu9 网友的相关建议:
在语言学特定语境下，一般会将 word type 和 word token 做比对，这时候，翻译为 词形 和 词例 比较合适。word type指的是词表中互不相同的单词形态，而word token则是指文本中具体出现的单词。很多NLP论文中说token的时候，大致是指的文本序列中具体出现的那些词，即word token。
1
相关话题
为什么在SGD中使用L1正则化很难获得稀疏性？知识图谱+nlp，有什么适合硕士独自研究的方向？
什么是迁移学习 (Transfer Learning)？这个领域历史发展前景如何？
参加kaggle竞赛是怎样一种体验？
有人说「真正的人工智能至少还要几百年才能实现」，真的是这样吗？
AI在网络安全领域（尤其是威胁检测领域），有什么好的应用场景？
为何以范剑青老师的 Sure Independence Screening 为代表的筛选法没有流行呢？
未来五年，数据科学家（Data Scientist）的岗位需求会如何变化？
为什么我用相同的模型，数据，超参，随机种子，在两台服务器会得到不同的结果？
神经网络中如果一个重要特征C等于特征A+特征B（算数意义上的相加），选特征的时候还有必要选特征C吗?
相关的话题
算法岗位真的需要顶会才能入场吗？实体提取任务中使用BERT-CRF时，CRF根据数据统计可以得到转移概率，为啥还要训练呢？
基于深度学习的自然语言处理在 2016 年有哪些值得期待的发展？
为什么现在的CNN模型都是在GoogleNet、VGGNet或者AlexNet上调整的？
在机器学习中，L2正则化为什么能够缓过拟合？
什么是反事实分析呀？
刷leetcode使用python还是c++？
graph convolutional network有什么比较好的应用task？
金融学及金融从业者如何应对人工智能和大数据？
2017年1月18日Facebook发行的PyTorch相比TensorFlow、MXNet有何优势？
机器学习包含哪些学习思想？
为什么做stacking之后，准确率反而降低了？
如何看待与评价 AAAI 2022 的录用结果？
微软小冰测颜值是否比较准？为什么？
为什么nlp没有像cv四小龙一样的创业公司？
AI领域的灌水之风如何破局？
为什么deep lab v3起，输出不再接 DenseCRF了？
word2vec 相比之前的 Word Embedding 方法好在什么地方？
有哪些深度学习效果不如传统方法的经典案例？
为什么nn的较大问题是会陷入局部最优时，不选用凸函数作为激活函数？
插值和拟合最根本的区别是什么？机器学习为啥用拟合？？
如何评价Google发布的第二代深度学习系统TensorFlow?
能否介绍一下强化学习（Reinforcement Learning），以及与监督学习的不同？
深度学习如何入门？
如何看待 ICLR2021 的拒稿被评为 ACL2021 的 Best Paper?
如何通俗的解释交叉熵与相对熵？
国内外厂商发布的各类 AI 智能音箱，优缺点分别是什么？
超越人类的人工智能 (AI) 是否能够实现？
为什么CV能做到让一幅人脸图动了笑了，而NLP的text-style-transfer进展貌似一般？
有哪些深度学习效果不如传统方法的经典案例？