2.2.1.6.4 智能体版《苦涩的教训》:从人类数据时代到经验时代

《Welcome to the Era of Experience》David Silver,Richard Sutton

https://storage.googleapis.com/deepmind-media/Era-of-Experience%20/The%20Era%20of%20Experience%20Paper.pdf

https://mp.weixin.qq.com/s/Rl-YUOIMxmpw_Ca6vf2YxA

人类数据正在见顶,经验是下一个超级数据源,真正能推动AI跃升的数据,必须随模型变强而自动增长。唯一的解法是经验本身:
✔️ 经验是无限的
✔️ 经验能突破人类知识边界
✔️ 经验流才是智能体的本地语言
未来AI不是“提示词+知识库”,而是“行动+反馈”的循环体。我们正从“人类数据时代”跨入“经验时代”,这不是模型升级,不是RL算法迭代,而是一种更根本的范式转折:
→ 从模仿人类到超越人类
→ 从静态数据到动态经验
→ 从监督学习到主动试错
经验才是通往真正智能的钥匙。

学习常识的基础也应该是经验《2.2.1.5 下一个AIGC:AIGCs》

一个有关“2.2.1.6.4 智能体版《苦涩的教训》:从人类数据时代到经验时代”的想法

  1. 知识/数据的主要来源是真实世界——具身智能:
    《心智简史》奥吉·奥加斯 赛·加达姆
    第4章细菌的心智II,记忆因挑战而涌现
    无目标的目标、无决策的决策和无记忆的记忆听起来可能像禅宗的经文,但当我们遵循具身思维原则时,它们就开始变得有意义了。
    具身思维原则对心智的定义可以简化为一个公式:心智=“大脑”+身体+环境。
    5种不同的思维形式:• 感觉。• 决策。• 导航。• 运动控制。• 记忆。这5种思维形式是相互交织的,这使得我们无法干脆利落地将导航行为与感觉行为等区分开,这种心智功能的重叠也是心智不同于计算机的原因之一。当我们探索包括人在内的脊椎动物的心智时,我们将重新讨论思维的这种复杂性。
    心智的出现需要的是一个已经具有极其复杂生化结构的无心智生物进化出一个单一的分子感受器和一个单一的分子执行器,从此通往意识的康庄大道就在眼前展开。

发表回复

您的电子邮箱地址不会被公开。