百科问答小站 logo
百科问答小站 font logo



如果记忆无上限,为何会有“遗忘”这个系统存在? 第1页

  

user avatar   yinfupai 网友的相关建议: 
      

因为遗忘能够提升人的解析能力,当然遗忘过头了,变成记性太差,也是不行的。

不采用遗忘机制,这个实际上有对应的计算机模型研究,一种个最典型的模型便是关于LSTM(Long short term memory,长短时记忆网络)的研究

论文地址:bioinf.jku.at/publicati

这个模型,根据时间的上一刻作为输入,然后推断下一刻的输出,如果不吻合,则调整内部的数据让它变得近似,然后再用下一刻的作为输入,再推断下下一刻,以此类推。

并且作者发现,如果其中采用遗忘机制,也就是能够一定概率的抹除上一刻的信息,那么将会获取到更好的结果。

前些年深度学习用于人工智能写诗,或是写句子,大多是采用这样的模型。

但遗忘机制仅仅这样说明,仍然是不够深入,更重要的一个概念就是注意力机制。

如果你留意过那些天才,会发现大部分天才都在自己的专属领域能够表现得非常厉害,但是领域以外,大多会表现得甚至不如常人。

很显然这个是注意力引起的,这就需要谈到注意力机制了。

近年来机器学习方面关于最大的进步就是发现了注意力机制,当采用注意力机制后,机器力对于语言特征的提取与识别成功率也大幅度上升。

典型的就是Bert(arxiv.org/pdf/1810.0480)采用的方法,机器学习时,将学习的语句随机进行遮盖,并且并不是只遮盖一个单词,而是整个句子的15%甚至更多。

不过这些只是初步的推测,因为人类在记忆遗忘这件事上,仍然有很多难以解释的谜团,比如有的时候人会突然回忆起几十年前的某件小事,让记忆这回事显得很扑朔迷离。

不过人类大脑要更加复杂得多,但也可以据此推测,也许是拥有了遗忘能力,才导致人不得不停思考外部的世界,保持对外界的的认知,然后这个过程又反过来进一步加深了的人类对外部的理解。




  

相关话题

  病毒和细胞生物差别那么大,是否是外星物种? 
  为什么狮子的尾巴末梢有一团突出、蓬松的毛,而其他猫科动物都没有? 
  地球上所有的碳基生物联合到一起,能否摧毁地球? 
  出现反常脱衣现象以后还有救吗? 
  只考虑生物大小,人类的体格一定是成为智慧生物的最佳选择吗? 
  有什么方法能通过训练提升人脑的工作记忆(短期同时记忆多件相对复杂的事)? 
  人为什么能成为地球上优势生物,从生理结构上分析人是怎样进化为智慧生物? 
  宇宙中有没有可能存在高熵的生命体? 
  过去一百年间,有哪些生物的器官明显退化了? 
  为什么贝类肚子里那么多屎,还有人吃? 

前一个讨论
黄帝内经说:"地有九州,人又九窍",现在中国有34个省,所以人有多少窍?
下一个讨论
如何理解「宇宙出现前时间不存在」?





© 2025-04-03 - tinynew.org. All Rights Reserved.
© 2025-04-03 - tinynew.org. 保留所有权利