在中文 NLP 等论文中，应该如何翻译 token 这个词？ 第1页
1
zibuyu9 网友的相关建议:
在语言学特定语境下，一般会将 word type 和 word token 做比对，这时候，翻译为 词形 和 词例 比较合适。word type指的是词表中互不相同的单词形态，而word token则是指文本中具体出现的单词。很多NLP论文中说token的时候，大致是指的文本序列中具体出现的那些词，即word token。
1
相关话题
word2vec有什么应用？如何看待 Richard Sutton 说的「人工智能中利用算力才是王道」？
目前强化学习在控制领域的应用有哪些？
2020年，多标签学习（multi-label）有了哪些新的进展？
数据挖掘、机器学习、自然语言处理这三者是什么关系？这几个怎么入门啊？
ICLR 2021 有什么值得关注的投稿？
未来 3~5 年内，哪个方向的机器学习人才最紧缺？
如果你是面试官，你怎么去判断一个面试者的深度学习水平？
现有的编程语言当中，哪些和自然语言更接近？
机器学习中如何识别图片中的手是手背还是手心？
相关的话题
为什么相比于计算机视觉(cv)，自然语言处理(nlp)领域的发展要缓慢？ICML 2018 有哪些值得关注的亮点?
深度学习（机器学习）的下一步如何发展？
2019年NeurIPS有哪些糟糕的论文？
学习python中的pandas有没有好的教程推荐？
如何看待斯坦福博士生2prime陆一平关于新冠起源的一系列言论？
如何评价论文「Stochastic Training is Not Necessary ...」?
NLP 方向在国内清北读博还是国外？
从人工智能技术的角度如何评价 Google home、Amazon Echo、Rokid 这三款产品？
做底层 AI 框架和做上层 AI 应用，哪个对自己的学术水平（或综合能力）促进更大？
如何评价《Science》封面文章《通过概率规划归纳的人类层次概念学习》?
如何看待NLP领域最近比较火的prompt，能否借鉴到CV领域？
如何比较Keras, TensorLayer, TFLearn ？
求通俗解释下bandit老虎机到底是个什么东西？
如何评价陈天奇团队新开源的TVM？
机器学习门下，有哪些在工业界应用较多，前景较好的小方向？
如何理解 inductive learning 与 transductive learning?
为什么熵值最大的分布状态是正态分布而不是均匀分布？
自监督学习（Self-supervised Learning）有什么比较新的思路？
NLP领域，你推荐哪些综述性的文章？
如何评价 DeepMind 在星际中的失利，以及 OpenAI 在 Dota 上的成功？
为什么相比于计算机视觉(cv)，自然语言处理(nlp)领域的发展要缓慢？
深度学习底层开发对数学有哪些要求？
如何评价通信工程很多导师都研究机器学习人工智能而不是传统的天线电磁场等方向?
CVPR 2015 有什么值得关注的亮点？
共轭是指 ‘先验分布与后验分布共轭“ ，还是指 "先验分布与似然函数共轭“？
有没有必要把机器学习算法自己实现一遍？
数据挖掘与数据分析的主要区别是什么？
有哪些职业容易被人工智能替代？
验证集loss上升，准确率却上升该如何理解？