在中文 NLP 等论文中，应该如何翻译 token 这个词？ 第1页
1
zibuyu9 网友的相关建议:
在语言学特定语境下，一般会将 word type 和 word token 做比对，这时候，翻译为 词形 和 词例 比较合适。word type指的是词表中互不相同的单词形态，而word token则是指文本中具体出现的单词。很多NLP论文中说token的时候，大致是指的文本序列中具体出现的那些词，即word token。
1
相关话题
如何看待KDD'21的文章，异质图神经网络的效果不如简单的GCN、GAT？精确率、召回率、F1 值、ROC、AUC 各自的优缺点是什么？
如何评价 2015 版的 Magi 搜索引擎？
CTR预估中怎样加入图片特征？图片特征怎么提取？
为什么中文 NLP 数据集这么少？
机器学习里面的流形都是怎么用的？
推荐系统应该如何保障推荐的多样性？
即时战略游戏（比如 WAR3）的 AI 是怎样实现的？
为什么现在的CNN模型都是在GoogleNet、VGGNet或者AlexNet上调整的？
如何看待在某度搜不到megengine官网？
相关的话题
《人工智能训练师国家职业技能标准》发布，有哪些值得关注的信息？有哪些定理在高维情况下与三维情况下培养出来的直觉不符？
有没有必要把机器学习算法自己实现一遍？
主动学习（Active Learning）近几年的研究有哪些进展，现在有哪些代表性成果？
计算商品embedding然后平均得到用户embedding，会不会存在这种问题？
看完麻省理工博士胡渊鸣用代码实现「冰雪奇缘」后，自己陷入了深深的自卑，如何排解这种情绪？
机器学习中非均衡数据集的处理方法？
国内较强的NLP高校实验室有哪些？
如何评价余凯创立的horizon robotics？
什么是反事实分析呀？
如何看待 Richard Sutton 说的「人工智能中利用算力才是王道」？
如何评价深度学习之父Hinton发布的Capsule论文？
机器学习专家与统计学家观点上有哪些不同？
为什么计算注意力机制的时候不加偏置项？
对神经网络某一层做了小改进，效果却提升显著，可以发论文吗？
机器学习相关岗位面试中，有哪些加（zhuang）分（bi）项？
如何简单理解贝叶斯决策理论（Bayes Decision Theory）？
怎么在家学习一些关于机器学习的知识?
如何理解压缩感知(compressive sensing)？
自监督学习（Self-supervised Learning）有什么比较新的思路？
如何看待李国杰院士在科学网发文称，国内 AI 研究「顶不了天、落不了地」，该想想了？
多任务学习成功的原因是引入了别的数据库还是多任务框架本身呢？
AI领域的灌水之风如何破局？
有哪些LSTM(Long Short Term Memory)和RNN(Recurrent)网络的教程？
如何看待Capsule Network在NLP领域的潜力？
主动学习(Active learning)算法的原理是什么，有哪些比较具体的应用？
深度学习到底是「实验科学」还是「理论科学」？能否称为「算法」？
Pytorch有什么节省显存的小技巧？
国内做NLP业务的香侬科技值得去吗？
机器学习里面的流形都是怎么用的？