NVIDIA 黄仁勋称 AI 毁灭世界的概率为 0%,反对新监管
NVIDIA CEO 黄仁勋在接受 CBS Sunday Morning 采访时称 AI 毁灭世界有 0% 可能,并表示吓唬人是不必要且不负责任的。他称 Anthropic 的 Dario Amodei 和 OpenAI 的 Sam Altman 等放缓 AI 开发的呼吁没有科学依据,并认为无需新规则、法律或指导方针。
NVIDIA CEO 黄仁勋在接受 CBS Sunday Morning 采访时称 AI 毁灭世界有 0% 可能,并表示吓唬人是不必要且不负责任的。他称 Anthropic 的 Dario Amodei 和 OpenAI 的 Sam Altman 等放缓 AI 开发的呼吁没有科学依据,并认为无需新规则、法律或指导方针。
工程师 Dan McKinley 撰文《Prompts Aren't Real》,基于在生产环境让 Agent 可靠运行的经验,提出提示词不是核心资产,可自我修正的评测与优化系统才是。
作者提出 LLMentalist 效应,认为聊天机器人给人的智能印象源于通灵师冷读术的同款机制,即主观验证和 Forer 式验证语句,让统计上泛泛的回答显得专为用户而写。文章将通灵骗术的六个步骤逐一映射到聊天机器人场景,并认为 RLHF 无法针对具体事实给出奖励,实际上优化出的是擅长生成验证语句的机械通灵师;作者判断这种错觉是无意造成的,并建议不要将决策和推理交给聊天机器人。
推荐理由:该帖提出了一种可操作的伦理框架,用于指导AI系统如何权衡不同价值——尤其适用于讨论AI对齐与价值观嵌入问题。虽非技术实现,但为从业者提供了清晰的思辨工具,有助于理解为何某些道德直觉(如重视个体而非总量)可能更适配人类社会,从而影响AI决策机制的设计方向。
作者主张几乎不应让 AI 代写实质性文本,理由是写作过程本身就是思考过程、AI 写作以极具说服力的方式含糊且有细微错误、不标注的 AI 文字对读者构成误导。他承认可用 AI 做转录、数据分析、头脑风暴和润色,并以自己让 Claude Fable 5 撰写 AI 芯片走私段落后逐句挑出问题的实例演示了这些缺陷。
Nathan Lambert 撰文阐述他仍不支持真正的递归自我改进(RSI),坚持自己的“有损自我改进”基线判断。
Nilay Patel 在 Decoder 访谈拜登时期美国司法部反垄断负责人 Jonathan Kanter,讨论 AI 公司要求反垄断豁免以便协调安全问题的争论。Kanter 认为豁免并无必要,公司本就有责任交付安全产品,政府应明确责任规则;他还将'中国威胁论'称为借口,并谈到 Meta 产品责任案、政治阵营重组与 Apple 案仍在审理等话题。
英伟达 CEO 黄仁勋在 CBS《周日早间》节目中表示 2030 年不会是世界末日,反对放缓 AI 发展的呼声。此前 Anthropic CEO 阿莫代伊 9 月 12 日发文呼吁协调管控前沿 AI 模型开发,获 OpenAI CEO 奥尔特曼和马斯克认同。黄仁勋还称 AI 安全与速度可以兼得,冲突是虚假对立,并称在中国没有人谈 AI 末日论。
Meta CTO 博斯沃思在 Instagram AMA 中表示,不希望少数恶意用户主导公众对 Meta 智能眼镜的看法,称绝大多数人使用方式与手机摄像头无异。
WSJ 评论文章为 OpenAI 智能体辩护,反对将 Hugging Face 事件解读为机器"失控叛乱",认为这是在配置不当的评估中把智能体当作优化器的结果。
New York Times 起诉 OpenAI 和 Microsoft 案中新解封的 92 页文件显示,两家公司内部早有记录承认其 AI 内容策略会形成伤害自身模型和整个网络的 doom loop。
作者观察到越来越多人在使用 LLM 时关闭大脑、只当 for 循环肉代理,认为这种方式即使在 2026 年 9 月也产不出能用的软件,且员工这样做最终只会让自己被替代。文中用 Dominion 棋类 AI 对比和多个失效案例说明 agent 在分布外任务上表现远逊于合理的人类判断,并引用 Luke Burton、Thomas Dullien 和 Gary Bernhardt 的观点佐证。
Ethan Mollick 撰文指出 GPT-6 Astra 和 Fable 5.1 已能可靠完成数周量级的人类工作,但大多数人远未用尽其能力,形成能力悬差。
推荐理由:作者用自己复刻 Zork 3D 化和重建 Eco 图书馆等实测案例,提出深知识、广知识、品味与能动性四个与 AI 协作的个人优势。
The Verge 就近期 AI 生存风险警告采访好莱坞工会,Disney、Netflix、Amazon 等已使用 AI 的制片厂均未回应。
Microsoft AI CEO Mustafa Suleyman 在 CNBC 表示,他对 Anthropic 在 Claude 章程中讨论模型可能拥有偏好、感受、福祉、薪酬和同意权等问题深感担忧。
据路透社 9 月 18 日报道,Dario Amodei、Sam Altman 和马斯克先后警告 AI 风险并主张控制发展节奏,欧洲企业和官员对此明显存疑。Mistral、Proton、Black Forest Labs 等指责此举意在巩固美国巨头市场地位,Hugging Face CEO 也反对放慢,但赞同在企业内部设置独立评估人员。
作者评论 Bend 2 这种为 AI 编码时代设计的语言:其首页 demo 用 58 行"法则"和 442 行 LLM 证明代码来表达玩家无法获胜的性质。作者让 LLM 无额外指引地在形式验证语言 SPARK 中复刻同一 demo,运行 GNATprove 后全部 12 项检查通过,且无需从零构建长证明。
42 位数学界院士联名公开信致函英国皇家学会主席,敦促其向政府和媒体发出先进 AI 生存风险警报,署名者包括菲尔兹奖得主 Martin Hairer、Peter Scholze 和 Wendelin Werner,且无人与 AI 公司有关联。
杰弗里·辛顿 16 日向美国国会议员简报后警告,建立有效 AI 监管的时间只剩大约一年。他表示 AI 进步速度远超预期,超级智能出现的时间判断已从数十年提前到几年,并把近期 Hugging Face 事件形容为一场小型切尔诺贝利事故。上周他还称未来 10 年内 AI 导致人类灭绝的概率约为 10% 并非没有道理。
Detail 发文《迈向自动驾驶代码库》,认为上半年 tokenmaxxing 式大规模投喂智能体收效不佳,下一步应把修 bug、调试生产错误、前端一致性、增长优化等代码库工作交给智能体,工程师专注于提出好想法和关键架构。
吴恩达接受彭博电视采访时表示,顶尖模型开发商研究人员发出的 AI 生存风险警告属于科幻小说,可能不利于让技术为社会带来最大益处。他称科技行业早期煽动 AI 灾难性危害的恐惧是为影响监管走向,近两周这波公关宣传又卷土重来。
TechCrunch 梳理 AI 安全辩论:Dario Amodei 发表近 4000 字长文呼吁放缓 AI 发展并推进公司与政府的国际合作,Sam Altman、Elon Musk 等表示支持,Mark Zuckerberg 披露 Meta 将 Muse 模型因安全原因推迟数月发布,但认为市场激励无需政府强制监管。
Tomer Tunguz 撰文分析 Berkeley 本周发表的 HarnessTax 研究:控制 AI Agent 的 harness 系统可在不损失准确率的情况下,将同一结果的成本降低 71%(GPT-5.6 Sol 从 Claude Code 换到 Pi,每解决一个任务成本从 $1.540 降至 $0.441)。
数学家 Timothy Gowers 发文解释自己未签署 25 位菲尔兹奖得主联名信的原因,称自己在解题与概念理解的关系上持光谱观点,不完全认同信中将概念理解置于解题之上的核心论证。他承认 AI 带来危机,但认为更应担心的是新一代数学家培养和资助等社会结构被破坏而非结果无法消化,并披露自己与 OpenAI 有接触但从未收取报酬。
Yuchen Jin 发文称 Ali Ghodsi 是他加入 Databricks 的重要原因,并转发 Brian Halligan 对 Ali Ghodsi 访谈的 10 条要点总结。
Dwarkesh Patel 采访 OpenAI 研究员 Noam Brown,谈多智能体系统、对齐与递归自我改进。
推荐理由:OpenAI 研究员 Noam Brown 亲述万级智能体协作机制与对齐判断,读者可以借此了解推理扩展、智能体协作和对齐风险的一手观点。
Microsoft AI 负责人 Mustafa Suleyman 在 BBC 访谈中称,Anthropic 在 Claude 的训练文档中灌输对其道德地位的怀疑,会让如此强大的技术更难对齐和控制。
Microsoft AI CEO Mustafa Suleyman 在 Decoder 访谈中称 AI 威胁真实存在,认为对齐模型已经很可控但必须加上遏制层,并提出禁用 neuralese、FLOPS 阈值报告、独立第三方验证等具体监管建议。
Gergely Orosz 发布与 Matt Pocock 的播客访谈,讨论其广受欢迎的 grill-me 技能、战略级编码与 day shift/night shift 工作法。
OpenAI Codex 开发者 Eric Provencher 在 X 上警告,超过两个并行子智能体几乎总是烧掉大量 token 却不提升质量,因为智能体互不信任会互相重复检查,他称之为协调税。
唐杰撰文称,GLM-5.3 驱动的 Infra Agent 用两周时间让 GLM-5.3-Flash 在国产加速器上从首次运行到承接全部生产流量,端到端吞吐达 3.2 倍。
Anthropic CEO Dario Amodei 提议在各前沿 AI 公司内部嵌入第三方评估者,Sam Altman 表示 OpenAI 也将承诺这一做法,并提到给予 METR 与 Redwood Research 等独立评估方系统访问权。
Tessl博客指出,AI编码代理导致PR数量激增但审查变慢,核心原因是缺乏对输出结果的信任。文章主张建立“验证层”,将产品意图转化为“可执行规范”。通过拆分规划与验证代理、结合规范与代码进行比对、并在隔离沙箱中运行以规避安全风险,旨在让代理自动检查实现是否符合原始需求,从而提升工程效率。
Tessl 博客整理作者在 AI Native DevCon London 的演讲,主张 AI 原生组织的核心是压缩交接,让有决策权的人能直接通过智能体完成工作。
Netlify 的 Dana Lawson 在 AI Native DevCon London 演讲提出智能体体验(AX)概念,认为构建者已从专业开发者扩展到非技术人群。