12 月 23
Luke FanAIGC Abstract World Models, Advanced Machine Intelligence, AGI, AI Startup, AI创业, AI未来, AMI, Autonomous Driving, Deep Learning Limitations, Dog Intelligence, Future of AI, Intelligent Agents, JEPA, LLM Dead End, LLMs, Meta AI, Minimum Cost, Open Source AI, Physical AI, Physics & Planning, Robotics, Safety Alignment, Spatial Intelligence, System 2 Reasoning, World Models, Yann LeCun, 世界模型, 大模型死胡同, 大语言模型, 开源AI, 抽象世界模型, 智能体, 最小消耗, 机器人技术, 杨乐坤, 深度学习局限, 物理AI, 物理与规划, 狗的智能, 空间智能, 系统2推理, 联合嵌入预测架构, 自动驾驶, 通用人工智能
杨乐坤“暴论”:大语言模型是扯淡,连狗都不如?解读他的世界模型与新创业项目AMI
“我认为这完全是扯淡,这条路根本就不可能成功。”这是杨乐坤在最新的访谈中对大语言模型路线的评价。这是语不惊人死不休的这种暴论吗?还是说他真的有一些什么事情想做?
大家好,欢迎收听老范讲故事的YouTube频道。
12月15日,杨乐坤发布了他最新的访谈。访谈是在一个叫做“信息瓶颈”的播客中进行的,位置应该是在纽约大学。杨乐坤当时还在Meta站好最后一班岗,三周以后会正式离职。访谈接近两个小时,我尽量讲一些里边有意思的部分。
现在的大语言模型还无法跟狗的智能相比,这个也是其中比较有趣的一点。到底杨乐坤想做的世界模型,以及他的JEPA是如何工作的?对于我这个讲述者和各位听众来说,都是一个挑战。请耐心听到最后,然后告诉我,我到底讲明白了没有?你们到底听懂了没有?杨乐坤要去做的AMI,也就是创业要做的这个新公司,到底是干什么的?怎么挣钱?咱们今天就讲这几块。
第一块:杨乐坤为什么觉得大语言模型完全是扯淡?
这里头要讲到的最核心的观点叫“序列化”。大语言模型工作的方式,是把整个世界的这些语言进行序列化。所谓序列化是什么?就是把所有的语言变成TOKEN,然后把这些TOKEN离散掉,谁跟谁之间都没有关系,再通过把全世界的语言搁在一起进行统计、进行训练,重新建立起这些TOKEN与TOKEN之间的关系。它是这样来工作的。
而且要注意一点,语言这个东西本身就是一个世界映射,语言只能表达世界中的很少一部分。哪怕是同样的语言,你用不同的语气语调来说,都会表达不同的意思。而不同的语气语调,你在语言中是完全无法看到的。所以语言只是真实世界的一个稀疏映射,大量的信息被错漏了。所以在TOKEN化的这个过程中,大语言模型其实把大量世界本身相关的信息都扔掉了,特别是那种连续的信息。
因为大语言模型通常能干的事是什么?就是预测下一个词应该说什么,哪个词是最好的。但是在这个过程中,它对于让世界演变这些连续事件,它是没有办法去进行预测的,因为它在序列化的过程中就把所有这些关联全扔了。
More
11 月 21
Luke FanAIGC, Meta的故事 Advanced Machine Intelligence, AI pioneer, AI research, AI Startup, AI strategy, AI商业化, AI教父, AI科学家, Alexander Wang, chief AI scientist, Facebook AI, FAIR, godfather of AI, JEPA, launch startup, Llama大模型, machine intelligence, Meta, Meta AI, Meta AI战略, PyTorch, world model, Yann LeCun, Yann LeCun leaves Meta, 世界模型, 人工智能, 具身智能, 图灵奖得主, 大语言模型, 扎克伯格, 李飞飞, 杨乐坤, 杨乐坤离职, 非生成式AI
杨乐坤出走Meta:一场关于战略、用人和未来的博弈
大家好,欢迎收听老范讲故事的YouTube频道。
这一天还是来了。前面我们已经猜测了很久,说杨立昆到底什么时候会离开,因为所有人都眼睁睁地看着Meta的AI战略转换方向。亚历山大·汪进入Meta,一个28岁的辍学生,在管理65岁的大学教授和图灵奖得主,这个事一定不能长久。而且前面还对杨立昆手下的FAIR部门进行了600人的裁员。
靴子落地:杨乐坤宣布离职
现在靴子终于落地了。2025年11月19日,当地时间13:20,杨立昆发了一个长文宣布离职了。在这个文章里边,他回顾了一下在Meta待了12年,感谢了小扎和一堆高管,然后准备要去做他的AMI。他这个AMI呢,叫做“高级机器智能”,说:“我在Meta期间就一直在干这件事,现在呢我准备出去了以后接着干。”而且新公司呢,Meta依然还有参与,具体的情况后续再公布。他呢,也终于可以不受Meta的限制,去研究自己的世界模型了。
杨立昆也要去做世界模型,跟李飞飞有些相近。最后咱们再说一下,他的世界模型跟李飞飞的世界模型到底有什么差别。
Meta呢,应该在这个里边还是给了钱的。你请这样的一位大神出去,而且大神在发文的时候还感谢了扎克伯格,那一定还是要给钱的。所以杨立昆未来的公司里头,Meta应该还是一位重要的股东。但是到底给了多少钱,占了多少股份,可能还要等未来Meta的官宣,现在应该公司还在注册过程中吧。
More
4 月 26
Luke FanAIGC AI Company, AI Market, AI Startup, AI Technology, AI公司, AI创业, AI創業, AI市场, AI市場, AI技术, AI技術, Automotive Chip, CloudWalk, Copying vs Innovation, Google, GrinStone, HKEX IPO, IPO Challenges, Megvii, Mobvoi, SenseTime, Smart Device, Speaker, Video Recognition, Voice Interaction, Voice Recognition, Yitu Technology, 上市挑战, 上市挑戰, 云从科技, 依图科技, 依圖科技, 出门问问, 商汤科技, 商湯科技, 抄袭与创新, 抄襲與創新, 揚聲器, 旷世科技, 智能硬件, 格林申同, 港交所上市, 科大訊飛, 科大讯飞, 視頻識別, 视频识别, 語音交互, 語音識別, 语音交互, 语音识别, 谷歌, 車機芯片, 车机芯片, 雲從科技, 音箱, 香港上市
大家好!
欢迎收听老范讲故事YouTube频道。今天来给大家讲一讲抄错了作业,也终于熬到上市的出门问问。出门问问,我看国内很多媒体把它评价为了中国AI界的活化石,2024年4月24日终于在港交所上市了。当然了,上市即破发,上去以后就直接跌破发行价了。这是真正的一个活化石。
为什么呢?2012年就创立了,咱们现在讲的AI都是AIGC或者叫AI 2.0,基本上是在2022年以后创建的这些公司。而上一代的呢,就是2012年,你像他为别人早了十年创立了,到现在也上市了。但是他自己发的文章很漂亮,叫港股的AI GC第一股,我是按照新的AI公司的方式去上市的。但其实呢,是上一代的公司。
中国的AI之路其实是非常坎坷的。虽然我们在AI这个领域里头投入了非常非常多的钱,也做出了很多的成就,但是单纯的AI公司其实走的都不好。这个里面讲的是什么?就是阿里、字节跳动、百度这样的公司呢,他们也做AI,包括腾讯,都去做AI。但是呢,他们是综合业务公司。你说我就是纯AI公司,我就是要靠AI把自己做大的,这些公司路途都很坎坷。包括今天咱们讲这个出门问问。
现在我们讲中国AI公司里头,首先是视频领域里头的AI四小龙:第一个商汤科技,这个呢算是熬到上市了,港交所上市,但是呢,盈利也很困难。旷世科技,也是做视频识别的,现在应该也还在努力争取上市。云从科技、依图科技现在都在争取上市。另外还有格林申同,在这个四小龙之外,日子都很难过。为什么在争取上市?他不挣钱呀,甭管从收入上还是从利润上,那个报表没法看。
More