百科问答小站 logo
百科问答小站 font logo



如何看待Capsule Network在NLP领域的潜力? 第1页

  

user avatar   su-jian-lin-22 网友的相关建议: 
      

个人认为,Capsule在NLP中的应用事实上比CV更自然。

Capsule用向量来表示一个特征,使得特征表达更丰富,这其实对应了NLP中用词向量来代替one hot来表示一个词的方案。

事实上,在Word Embedding之后,接一个参数共享版的Capsule Layer用来做文本分类,效果往往还能比肩LSTM/CNN的分类模型。

Capsule退热的原因,不是Capsule真的要衰落了,而是:1、理解Capsule本身就有难度,这个门槛已经筛掉一大批所谓的做深度学习的人了;2、Capsule本身有很多细节没想清楚,比如目前是引入了聚类思路来对特征进行抽象,那如何引入自适应的聚类方法呢?做Capsule的人可能都去想这些问题了。也许解决了这些问题,就是Capsule遍地开花的时候了。


硬广告:

揭开迷雾,来一顿美味的Capsule盛宴 - 科学空间|Scientific Spaces

再来一顿贺岁宴:从K-Means到Capsule - 科学空间|Scientific Spaces

三味Capsule:矩阵Capsule与EM路由 - 科学空间|Scientific Spaces




  

相关话题

  经过足够长的时间, AlphaGo 的棋谱能收敛到一张上吗? 
  科学的发展能否完全掌握人类的脑行为,并最终用人工智能技术实现人类的全部意识活动? 
  如何评价陈天奇团队新开源的TVM? 
  transformer 为什么使用 layer normalization,而不是其他的归一化方法? 
  你见过最差的算法工程师能差到什么程度? 
  ai将来可以熟练运用公式解应用题吗?那为什么我还要起早贪黑地学解公式,而不是研究怎么搞这个ai? 
  OpenAI 发布文字生成图像工具 DALL·E 2,它的画作水平如何?从技术角度如何评价它的能力? 
  TensorFlow 中 padding 的 SAME 和 VALID 两种方式有何异同? 
  你爱上了一个人,你们俩一起游玩,一起逛街,最后发现你爱的只是一个高级智能机器人,你怎么想? 
  新基建来了,可能会给普通人的生活带来哪些影响或提升? 

前一个讨论
有哪些「人不可貌相」的事情?
下一个讨论
为什么现在的人很轻松就能掌握几百几千年前顶尖数学家才能掌握的知识?





© 2025-04-17 - tinynew.org. All Rights Reserved.
© 2025-04-17 - tinynew.org. 保留所有权利