October 28, 2025 · JustSayAI

更新于

强化学习烂透了,我们离AGI还要十年?|带你解读AI大神Karpathy重磅访谈

强化学习烂透了,我们离AGI还要十年?|带你解读AI大神Karpathy重磅访谈

我们现在谈论的 AI Agent,90%是在假勤奋?

为什么 Andrej Karpathy最近那两个多小时、信息密度高到撑爆上下文窗口的访谈 如此重要?因为它给整个行业泼了一盆冷水:AGI 至少还要十年 。

这个判断不是空穴来风,而是基于他最熟悉的自动驾驶领域 。十年前,Waymo 看起来“再有两三年就行了” ;十年后的今天,我们发现它离真正的无人驾驶还差得远 。

AI 行业最大的幻觉,就是把 Demo 的成功错当成产品的胜利 。

99.9%的绝望:你永远看不了那部电影

Karpathy提出了一个“9 的难题” (The problem of nines) 。一个产品能用(Demo),和这个产品可靠(Product),是两个世界。99% 的可靠性,和 99.99999% 的可靠性,差异是天壤之别 。要真正替代人类,比如自动驾驶,你需要的是“九个 9”的稳定性 。

这个差距就像我们下载一部电影,进度条卡在 99.9% 。你觉得马上就能看了,但没有最后那 0.01%,这部电影你就永远看不了 。

他宁愿现在的模型“不联网” 。因为大模型的核心机制是给你一个“最高概率的答案” ,它很难“知道自己不知道什么” 。当一个“高概率”的垃圾信源进来时,灾难就发生了。

吃垃圾:AI 现在的实现方式很“傻”

我们对 AI 技术的认知也有两个巨大的反常识误区。

第一个是“垃圾”。我们总觉得模型越大越好,动辄万亿参数。但Karpathy认为,现在的大模型都“太大了” 。它们之所以这么臃肿,是因为被迫吃进去了海量的“互联网垃圾数据” 。他甚至判断,一个真正足够智能的模型,可能只需要 100 亿(10B)参数就够了 。

第二个是“吸管”。我们都以为强化学习是 AI 的灵丹妙药。Karpathy的观点是:“强化学习其实很糟” (Reinforcement Learning is actually terrible) 。那为什么大家都在用?因为“其他东西更糟” 。他用了一个绝妙的比喻:现在的强化学习,就像“用一根吸管去吸取监督信号” (using a straw to suck a supervision signal) 。你试图用一种极其低效、带宽极窄的方式,去获取一个极其庞大、复杂的世界模型。

所以,别看现在的 AI 编码工具很热闹,Karpathy直言,这些工具对他这种大神来说“根本不可用” 。因为他的代码“过度抽象简洁”,而 AI 只会用网上学来的“生产规范”和“垃圾代码”来污染它 。

智能的本质是“遗忘”,不是记忆

这就引出了最核心的观点:我们对“智能”的定义可能从一开始就错了。我们总以为,智能是“记得多”。AI 把所有数据都记住了,就是智能。错了!

当前 AI 的实现方式是“傻”的,是“力大砖飞”。真正的智能,是“遗忘” 。

现在的模型“记忆力”太好了,能一字不差地背诵文章。这种对海量知识的“模糊回忆”(hazy recollection)反而成为一种负担。人类的遗忘反而是一种“特性优势”(feature not a bug),它逼迫我们去泛化。就像我们的大脑处理信息,靠的是“压缩”和“遗忘” 。你不会记得小学每天发生的琐事 ;几十年后,你记住的只是“一个美好的小学阶段”,或者“初恋的味道” 。大脑把细节全部遗忘,只留下了高度压缩的“经验”和“感觉” 。

这才是智能。

举个不恰当的例子。很多小孩背书快,靠的不是逐字记忆,而是“图片记忆法” 。我把整页课文当成一张“快照” (snapshot) 拍下来,记住的是它的结构、段落分布 ,而不是文字本身。

这恰好引出了Karpathy盛赞 DeepSeek OCR 的原因 。DeepSeek OCR 做的不是简单的文字识别,它做的是“压缩” 。它用处理图像的方式,把 1000 个文字 Token 压缩成了极少数的图像 Token,同时保留了 97% 的信息准确度 。这才是“一图胜千言” 。这也让Karpathy得出一个推论:也许我们未来的模型,应该彻底转向“用纯图像来训练”,而不是现在的纯文本 。

召唤“幽灵”,而非制造“智能”

所以,Karpathy的“幽灵论”到底是什么意思?

他说,我们不是在“制造一只动物”(Animal),而是在“召唤一个幽灵”(Ghost)。我理解“Animal”是某种硅基生物,是能独立演化的物种 。而“幽灵”,是对人类已有知识和智能的一种“映射”和“复制” 。我们现在做的所有事——用垃圾数据喂它、用吸管训练它、用蛮力堆参数——都是在试图复刻这个幽灵。

但这也许不是终点。我更倾向于认为,这个“幽灵”真正的价值,在于它在映射人类智能的过程中,能够“涌现”出我们人类自己都不具备的智能 。

讽刺的是,大模型被训练出来寻找“最高概率的答案” ,但它自己却很难“知道自己不知道什么” 。或许Karpathy是对的,我们早就该把模型的网线拔了 。

真正的智能,是压缩和遗忘。

【订阅JustSayAI早晚报】

🌈新朋友!订阅「JustSayAI早晚报」· 每日两封 · 一键听报 

🌟老朋友!加入会员获取JustSayAI早晚报+深度研报+文字专栏

【主播小红书】:

📕叫我小苏就好啊

AI 逆向把软件又杀了一遍?聊聊REA和软件已死
BLOG

AI 逆向把软件又杀了一遍?聊聊REA和软件已死

最近科技圈被所谓“AI 逆向工程”吓惨了。各大自媒体哀嚎“软件已死”、“SaaS 灭顶之灾”,真把我笑喷了。怎么着?就凭某个小哥不满月费复刻了 Adobe 全家桶,凭几个 PS5 游戏被移植,还是凭韩国某银行被一个 DeepSeek V4-Flash 摸进内网,底裤就吓湿了? 到底在惊慌什么?软件已死?早在 20 年前,中国老板们就宣判软件死透了!那时候谁买正版 license?直接用盗版!到了 SaaS 时代,更是直接把团队薅过来驻场定制,一次性买断!20 年前就被判死刑的东西,现在轮得到 AI 逆向出来装大尾巴狼? 逆向一切?不过是个打包了 126 个工具的猜谜游戏! 全网疯传一个叫 REA 的神器,号称“逆向一切”,仿佛装上它就能随意踢开大厂铁门。但把底裤扒下来,它算个什么黑客魔法?无非是把业内早就存在的 126 个开源工具打包成了工具箱而已! 逆向工程到底是什么?说白了就是一场“猜测的艺术”(Guessing Game)!它是在已知运行结果的前提下,瞎猜背后的源码怎么写。现在的 AI 确实聪明,能把简单的混淆和加密猜出来,可这能代表自主研发吗? 这就像你去

小苏·2026年10月20日
Personal Agent这个“伪需求”,大厂到底在抢什么?
BLOG

Personal Agent这个“伪需求”,大厂到底在抢什么?

所谓“人手一个无所不能的Personal Agent”,绝对是今年科技圈最大的弥天大谎。 从Muse、GrokBot到Dots,所有人都在狂吹“智能体时代已来”。但只要你真掏真金白银用过,就会发现这玩意儿脆弱到了极点,根本不可持续! Why? 云端配电脑是大坑 先拿OpenAI的ChatGPT Dots开刀。 为尝鲜这个“顶级助理”,我特意找了个每月上百美金的高级席位。官方吹嘘背后跑着最聪明的Astra模型,可我用了几天,我还以为是Luna呢!奥特曼听到估计当场委屈哭。 更灾难的是它那套“在云端给Agent配电脑”的设计,简直是滑稽至极的脱裤子放屁!普通人用电脑都知道,系统会宕机、堆垃圾、误删文件。搬到云端,Agent照样把系统折腾瘫痪!我想让它跑个工作,把自研MCP装在云端,结果服务器动不动自动重启刷新,甚至把关键代码直接抹掉!业务脆得不能再脆了!深更半夜,我不得不像苦逼运维一样开着SSH敲命令帮它排错。 我当场气笑了:既然还得老子动手擦屁股,那我还要你有何用?我自己会敲命令早就升天了好不好!这种架构性错误,就算把模型迭代到GPT-

小苏·2026年10月9日
扎克用 Muse,踹开美国互联网的大门|个人Agent怎么就火了呢?
BLOG

扎克用 Muse,踹开美国互联网的大门|个人Agent怎么就火了呢?

Meta 刚把 Muse 甩在全网脸上的时候,是真的把我给看傻了。小扎这次彻底破防,直接扒了西装、光着膀子去踹大厂防盗门!什么叫个人 Agent?什么叫代客上网?扒掉这层黑话,本质到底是个啥?扎克伯格就是想在北美荒原上,砸出一个美国版“微信”! 过去十年小扎受了多大窝囊气?苦苹果久矣,苦谷歌久矣!堂堂万亿巨头,手里没手机入口、没操作系统,连个生态都没有!在硅谷体面人眼里,小扎算个什么东西?无非是个倒腾信息流、赚散碎广告费的土豪。川总闭门宴不带他,国会问责买单第一个叫他,分肉时又一脚踢开。这十来年他憋的屈辱,布洛芬都不知道他有多痛!这次搞 Muse 连亚马逊祖坟都敢刨,这就是藏不住的滔天野心。 谁还讨论基模拉胯?扯下遮羞布直接“代客上网”! 很多朋友问我:为什么 Muse 能在北美疯火?难道 Meta 的大模型突然开挂了? 开什么玩笑!Meta 基模拉胯成什么德行,圈里谁没点数?你去大街上问问,谁还在讨论小扎的模型参数?根本没人理!所有人全在喊:Muse 太香了!只要能把事办妥,谁管你后端挂的是开源模型,还是偷偷接了神秘东方力量? 秘密到底在哪?就

小苏·2026年9月30日