在WAIC现场，全球首个拥有「原生记忆力」的大模型亮相，但不是Transformer

主要观点总结

这篇文章介绍了RockAI推出的基于Yan架构的非Transformer模型在WAIC世界人工智能大会上的展示，包括其拥有原生记忆能力的特点，以及与Transformer架构相比的优势。文章还提到RockAI坚持技术路线的长期主义精神和对未来技术发展的展望。

关键观点总结

关键观点1: RockAI推出的Yan 2.0架构拥有原生记忆能力，可以在离线设备上运行并且拥有时间维度和个性化特征的智能积累。

Yan 2.0架构使用一个可微的神经网络记忆单元实现记忆的存储、检索和遗忘，不同于传统外挂方式帮助大模型加长记忆，更接近生物的记忆方式。

关键观点2: RockAI选择非Transformer架构进行研发，具有显著优势。

与传统的Transformer架构相比，Yan架构在生成、理解以及推理等多个关键指标上都有不错的优势，具有更高的效率。

关键观点3: RockAI的主要使命是“让世界上每一台设备拥有自己的智能”，追求离线智能，只使用本地设备的算力。

离线智能模式下，模型能够实现自主学习，每台设备都具备自主学习能力，最终实现知识共享、协同进化。

免责声明