克熵Sam⚒️ 创造、思考,或一切基于朋友的这个感想,我觉得是一个很有趣的视角,丰富一个语义:从信息论的角度出发,在同一时间的尺度下: 物理世界的印刷术,基于人类信息传递的媒介(语言),通过将信息从熵增速率高的生物存储(大脑)转移到更加稳定的物理储存(纸张等),实现的是数据的高效保存与传递,降低的是文明信息总量熵增的速度 软件世界的Coding Agent ,基于图灵机信息传递的媒介(代码),通过将信息处理从算力有限的生物计算(大脑)转移到可以规模化的物理计算(硅基等),实现的是数据的高效处理与产出,增加的是基于现有数据可产出的文明信息总量 一个有趣的问题是,如果以文明信息总量最大化的目标出发,下一个最重要的问题是什么?换句话说,当我们能够挖掘出基于现有数据中蕴含的所有信息后(AGI 等方式),阻挡文明信息总量增加的瓶颈是什么?
克熵Sam⚒️ 创造、思考,或一切志同更难,还是道合更难? “志”偏“知”的奖励函数自洽,是动机 “道”偏“行”的行动函数对齐,是执行 前者是后者的启动的trigger,后者带来现实反馈也能反哺前者 在与生活的事件相撞的时候,韧性也许就是动机⇄执行的纯度
克熵Sam⚒️ 创造、思考,或一切是一个个体选择加入驾驭时代浪头上最顶部的那艘船 想起了鬼谷子中「察势者明,趋势者智,驭势者独步天下」 Karpathy 是最 top 的察势者,更是有魄力躬身入局的驭势者,respect突发: Karpathy 加入 AnthropicOpenAI 联创加入A 社,重回研发https://mp.weixin.qq.com/s