百科问答小站 logo
百科问答小站 font logo



如果记忆无上限,为何会有“遗忘”这个系统存在? 第1页

  

user avatar   yinfupai 网友的相关建议: 
      

因为遗忘能够提升人的解析能力,当然遗忘过头了,变成记性太差,也是不行的。

不采用遗忘机制,这个实际上有对应的计算机模型研究,一种个最典型的模型便是关于LSTM(Long short term memory,长短时记忆网络)的研究

论文地址:bioinf.jku.at/publicati

这个模型,根据时间的上一刻作为输入,然后推断下一刻的输出,如果不吻合,则调整内部的数据让它变得近似,然后再用下一刻的作为输入,再推断下下一刻,以此类推。

并且作者发现,如果其中采用遗忘机制,也就是能够一定概率的抹除上一刻的信息,那么将会获取到更好的结果。

前些年深度学习用于人工智能写诗,或是写句子,大多是采用这样的模型。

但遗忘机制仅仅这样说明,仍然是不够深入,更重要的一个概念就是注意力机制。

如果你留意过那些天才,会发现大部分天才都在自己的专属领域能够表现得非常厉害,但是领域以外,大多会表现得甚至不如常人。

很显然这个是注意力引起的,这就需要谈到注意力机制了。

近年来机器学习方面关于最大的进步就是发现了注意力机制,当采用注意力机制后,机器力对于语言特征的提取与识别成功率也大幅度上升。

典型的就是Bert(arxiv.org/pdf/1810.0480)采用的方法,机器学习时,将学习的语句随机进行遮盖,并且并不是只遮盖一个单词,而是整个句子的15%甚至更多。

不过这些只是初步的推测,因为人类在记忆遗忘这件事上,仍然有很多难以解释的谜团,比如有的时候人会突然回忆起几十年前的某件小事,让记忆这回事显得很扑朔迷离。

不过人类大脑要更加复杂得多,但也可以据此推测,也许是拥有了遗忘能力,才导致人不得不停思考外部的世界,保持对外界的的认知,然后这个过程又反过来进一步加深了的人类对外部的理解。




  

相关话题

  病毒体内为什么只会含有一种核酸? 
  决定群落演替的根本因素是什么? 
  人造生物圈有必要发展吗? 
  被可乐杯压住的蟑螂会在想什么? 
  可能研制出不酸的柠檬吗? 
  为什么大多数鱼不需要眨眼睛? 
  即将入坑的生科人? 
  被小动物印随是怎样的体验? 
  生物跟机器到底有什么区别? 
  人类是如何利用微生物来抵御微生物危害的? 

前一个讨论
黄帝内经说:"地有九州,人又九窍",现在中国有34个省,所以人有多少窍?
下一个讨论
如何理解「宇宙出现前时间不存在」?





© 2024-05-13 - tinynew.org. All Rights Reserved.
© 2024-05-13 - tinynew.org. 保留所有权利