本期节目是 Geoffrey Hinton 理论的阐述,旨在说明人工智能与人类心智之间并无本质区别。
本期节目由重轻主持。
以下为相关参考链接: Geoffrey Hinton 演讲What Is Understanding? (IASEAI 2025) AI 觉察到自己正在被测试Anthropic's Claude 3 causes stir by seeming to realize when it was being tested AI 威胁工作人员以避免被关停AI system resorts to blackmail if told it will be removed 乔姆斯基Noam Chomsky 普遍语法Universal Grammar 刺激贫乏理论Poverty of the Stimulus 通过反向传播误差学习表征Learning Representations by Back-Propagating Errors 注意力机制Attention (machine learning) 学习概念的分布式表征Learning Distributed Representations of Concepts ChatGPT 在做什么,它又为何奏效?What Is ChatGPT Doing … and Why Does It Work? John Dean 记忆案例John Dean's Memory: A Case Study N-Gram 语言模型Word n-gram Language Model 印刷英语的预测与熵Prediction and Entropy of Printed English 知识蒸馏Knowledge Distillation
封面图片由重轻拍摄。
《诗梳风》节目由汉洋和重轻共同主持,联系邮箱为 [email protected]。
时间戳内容: 00:00:07 节目介绍 Hinton 的演讲《何为理解》的背景信息。 00:01:41 节目将详细复述 Hinton 的这场演讲。 00:03:24 探讨 AI 风险的讨论需要先证明 AI 的能力和动机。 00:09:20 讨论何种证据能够证明 AI 实现了“真正理解”。 00:11:55 介绍 AI 领域的两大主要派别:逻辑派和连接派。 00:13:39 连接派的核心观点是智能的本质在于学习。 00:17:03 引入乔姆斯基提出的“刺激贫乏”理论。 00:19:59 Hinton 对乔姆斯基理论的批评,指出其缺乏对含义的建模。 00:23:09 以猫狗性别为例,说明底层特征向量如何揭示关联性。 00:26:39 回顾 1985 年的家谱模型,将其视为大语言模型的早期雏形。 00:31:06 使用乐高积木的比喻来解释“理解”的含义。 00:35:33 引用“机器放不进行李箱”的例子进行说明。 00:41:30 强调大语言模型并不仅仅是简单的自动补全功能。 00:44:29 建议将 AI 的“幻觉”现象更准确地称为“虚构”。 00:50:14 总结理解即是建模,而学习则需要借鉴不同的事物。