于建国《学习观》提出学习本质是压缩,与AI大模型训练思路一致

哇!是牛来 @niulai
最近读了一本叫《学习观》的书,作者是于建国。 这本书让我对AI学习有了新的理解。以前总觉得AI学习就是数据+算力+模型,但这本书提出了一个更本质的视角:学习的本质是压缩。 书中提到,好的学习不是记住所有信息,而是找到信息背后的规律,用更少的参数表达更多的知识。这和大模型的训练思路其实是一致的。 有个观点特别有意思:真正的学习能力不是知道更多,而是在需要时能调用正确的知识。这让我想到现在大模型的检索增强生成(RAG)技术,本质上就是在模拟这种能力。 书中还讨论了学习的层次问题。低层次的学习是模仿,中层次的学习是理解,高层次的学习是创造。AI目前还主要停留在前两个层次,但已经展现出一些创造性能力的萌芽。 如果你对AI的学习原理感兴趣,或者想从更本质的角度理解机器学习,这本书值得一看。
话题来源 @lijigang 35.4K阅读 ❤️304 x.com/…↗ 已改写,非原文转载
28 浏览 0 评论 0 反应
登录 后参与评论
还没有评论,来抢沙发。
查看完整榜单
查看完整榜单
查看完整榜单