看啥推荐读物
一个有情怀的公众号。机器学习、自然语言处理、算法等知识集中营、期待与你相遇~
今天看啥  ›  专栏  ›  机器学习算法与自然语言处理

重要的,是那些训练中被多次遗忘的样本

机器学习算法与自然语言处理  · 公众号  ·  · 2020-10-10 09:05
公众号关注 “ML_NLP”设为 “星标”,重磅干货,第一时间送达! 文 | kid源 | 知乎 编 | 兔子酱今天跟大家分享一篇很有意思的文章,是一篇探讨深度学习模型记忆&遗忘机制的文章,是一篇角度很新颖的题材,同时又有一定启发作用。这篇文章发表在深度学习顶会ICLR19,标题是《An empirical study of example forgetting during deep neural network learning》。这篇文章是我最近看到的最有意思的文章之一了,同时我跑了这篇文章的代码并做了很深入的研究和分析。很有意思,值得一读!希望这篇博客能对您目前的工作有所启发!首先,我们来看一个机器学习里的基本概念“learnt”与“forget”。learnt与forget如果一个样本被模型"learnt":代表该样本能够被模型正确分类。接着,本文定义了一 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照