真正的神经网络，敢于不学习权重

机器之心报道机器之心编辑部难道神经网络不用学权重也能完成各种任务？难道我们以为 CNN 学习到的图像特征只是我们以为？神经网络只不过是函数的排列组合，没有其它意义？从这篇论文来看，这些答案似乎都是肯定的。昨天，谷歌大脑 David Ha 等人一篇名为《Weight Agnostic Neural Networks》的论文引爆了机器学习圈。其「颠覆性」的理论让人惊呼：「到头来我们对神经网络一无所知？」Reddit 上有一些研究者认为，《Weight Agnostic Neural Networks》这篇论文更有趣的意义在于，它也宣告了深度学习分层编码特征这一解释寿终正寝。通常情况下，权重被认为会被训练成 MNIST 中边角、圆弧这类直观特征，而如果论文中的算法可以处理 MNIST，那么它们就不是特征，而是函数序列/组合 ………………………………