在中文 NLP 等论文中，应该如何翻译 token 这个词？ 第1页
1
zibuyu9 网友的相关建议:
在语言学特定语境下，一般会将 word type 和 word token 做比对，这时候，翻译为 词形 和 词例 比较合适。word type指的是词表中互不相同的单词形态，而word token则是指文本中具体出现的单词。很多NLP论文中说token的时候，大致是指的文本序列中具体出现的那些词，即word token。
1
相关话题
隐私计算、计算机视觉、自然语言处理三者中，哪个研究起来更有前途？cv/nlp等方向的就业困难是全球性的吗？
有哪些关于机器学习的真相还鲜为人知？
是不是机器学习的框架都偏向 Python ？如果是，为什么？
机器学习中的PR曲线一定会过（1，0）这个点吗？
如何看待微软小冰写的诗？
如何系统学习机器学习？
微软小冰测颜值是否比较准？为什么？
如果有一天人类被AI取代，他们将以什么样的方式生活，娱乐，工作？
2020年，多标签学习（multi-label）有了哪些新的进展？
相关的话题
国内外有哪些做小样本学习(Few-Shot Learning)的优秀团队？为什么在实际的kaggle比赛中，GBDT和Random Forest效果非常好？
没有顶会的CV/NLP方向的博士生毕业出路在哪里？
如何评价中国人民大学高瓴人工智能学院教授的薪酬标准？
如果 2台 alphago 不断对战，是否会不断的强大？
神经网络中，bias有什么用，为什么要设置bias，当加权和大于某值时，激活才有意义？
word2vec 相比之前的 Word Embedding 方法好在什么地方？
如何看待亚马逊的无人超市产品 Amazon Go?
有什么算法能对一个长短不一的时间序列进行分类预测?
从人工智能技术的角度如何评价 Google home、Amazon Echo、Rokid 这三款产品？
2021 年，深度学习方面取得了哪些关键性进展？
为什么现在的CNN模型都是在GoogleNet、VGGNet或者AlexNet上调整的？
如何判断两个Deep Learning 数据集的数据分布是否一致？
对神经网络某一层做了小改进，效果却提升显著，可以发论文吗？
语音识别中，声学模型与语言模型扮演什么角色？或者说是怎么通过两个模型进行语音识别的?
在NLP上，CNN、RNN（认为LSTM等变体也是RNN）、最简单全连结MLP，三者相比，各有何优劣?
如何评价周志华教授新提出的 Deep Forest 模型，它会取代当前火热的深度学习 DNN 吗？
能识别情绪的机器人可以算做有情感的机器人吗？
除了深度学习，机器学习领域近年来还有什么热点吗？
如何评价华为天才少年钟钊团队成功开启了 AutoML 大规模商用的先河？什么是 AutoML？
深度学习中Attention与全连接层的区别何在？
有没有哪些人工的工作是无法被机器替代的？
有哪些深度学习效果不如传统方法的经典案例？
为什么 Bert 的三个 Embedding 可以进行相加？
如何用简单易懂的例子解释隐马尔可夫模型？
机器学习专家与统计学家观点上有哪些不同？
使用强化学习解决实际问题时常常避不开环境模拟或者使用离线强化学习算法，两者分别有什么优缺点？
Facebook 的人工智能实验室 (FAIR) 有哪些厉害的大牛和技术积累？
为什么编程语言语法的设计不往缩小与自然语言的差别的方向发展，或者说在这个方向发展得这么慢呢？
如何评价B站UP主未明子宣称“知乎搞机器学习模拟拉康的程序员”具备“头脑上的悲剧”？