Ilya Sutskever 认为因缺少数据大模型的预训练将走向终结

文章预览

OpenAI 前首席科学家、Safe Superintelligence 公司联合创始人伊利亚（Ilya Sutskever）在温哥华神经信息处理系统大会（NeurIPS）上表示，虽然计算在增长，但数据却没有增长，预训练毫无疑问会结束；并预测未来的人工智能系统将能够以更类似于思考的方式逐步解决问题，具有推理能力的人工智能将更难以预测。所谓“预训练”，即使用大量未标记数据来训练人工智能模型以理解语言模式和结构的阶段。伊利亚表示，虽然计算在增长，但数据却没有增长，因为我们只有一个互联网。“我们已经达到了数据峰值，不会再有了。”他预测，下一代模型将“以一种真正的方式实现代理化（agentic）”，未来的系统除了具有自主性，还具有推理能力。 https://www.thepaper.cn/newsDetail_forward_29659857  NVIDIA AI 课程免费学，还有机会获得NVIDIA培训证书 https://developer.nvidia.cn/l ………………………………