导语
在本次专访中,图灵奖得主杰弗里·辛顿再次就人工智能的潜在风险发出严峻警告。他明确指出,当前的大语言模型已展现出通过“链式思考”进行推理的能力,这颠覆了此前认为AI无法真正推理的论断。辛顿将当前AI的发展类比为人类养了一只注定会长成猛兽的“可爱虎崽”,强调超级智能一旦出现,人类可能因智力差距而完全失去控制。他强烈呼吁社会正视AI可能带来的生存威胁,并对当前主要AI公司在安全研究上的投入不足表示严重关切。
图灵奖得主杰弗里·辛顿在专访中深入探讨了AI的潜在风险与未来。他指出大模型已通过‘链式思考’展现出推理能力,而数字智能因其信息共享效率远超人类,可能成为更优的智能形式。辛顿强烈警告AI失控的生存威胁,并批评各大AI公司为追求短期利润而忽视安全研究。他认为仅靠人类无法控制远超自身的超级智能,呼吁公众向政府施压,推动强有力的AI安全监管。

在本次专访中,图灵奖得主杰弗里·辛顿再次就人工智能的潜在风险发出严峻警告。他明确指出,当前的大语言模型已展现出通过“链式思考”进行推理的能力,这颠覆了此前认为AI无法真正推理的论断。辛顿将当前AI的发展类比为人类养了一只注定会长成猛兽的“可爱虎崽”,强调超级智能一旦出现,人类可能因智力差距而完全失去控制。他强烈呼吁社会正视AI可能带来的生存威胁,并对当前主要AI公司在安全研究上的投入不足表示严重关切。
展开「深读」看每一段讨论的问题与论据。
讨论的问题:辛顿如何利用诺贝尔奖的背景来传达关于AI危险的核心信息?
论据 / 案例:剑桥分析公司利用Facebook数据和AI影响英国脱欧和特朗普当选;主要军火国(美、俄、中、英、以)正积极研发自主致命武器
讨论的问题:为什么AI公司游说反对监管?当前政治环境如何影响AI安全治理?
论据 / 案例:加州1047法案要求大型公司测试AI并报告结果,但公司反对;特朗普政府下主要AI公司拒绝监管
讨论的问题:为什么开放大型AI模型的权重是危险的?这与核武器扩散有何类比?
论据 / 案例:训练大模型成本数亿美元;开放权重后,小型邪教或网络犯罪分子可花数百万美元微调模型;OpenAI和Meta计划开放权重
讨论的问题:OpenAI如何从安全优先转向盈利优先?公司内部发生了哪些关键事件?
论据 / 案例:Elia Sutskever(辛顿前学生)是GPT-2到GPT-4开发的关键人物;OpenAI在新一轮融资前修改条款试图夺回员工股份价值
讨论的问题:美国应如何应对中国AI发展?在哪些领域可能国际合作?
论据 / 案例:中国投入约1000亿美元研发自主光刻技术;冷战时期美苏曾合作防止全球核战争
讨论的问题:超级智能AI是否应拥有权利?UBI能否解决AI取代人类工作带来的问题?
论据 / 案例:辛顿以吃牛为例说明人类优先于其他智能体;学者以工作定义自我,失业后UBI无法补偿其身份认同
讨论的问题:为什么超级智能可能接管人类?人类如何预防?
论据 / 案例:数字模型可在数千硬件上同步运行并平均权重更新;人类每秒仅能传递数百位信息,而AI每秒可共享数万亿位信息
讨论的问题:数字智能相比人类模拟大脑有哪些根本性优势?这如何改变了辛顿对AI发展的看法?
论据 / 案例:数字系统每秒可共享数万亿位信息;人类沟通仅每秒数百位;辛顿在谷歌研究模拟AI低功耗方案时意识到数字优势
讨论的问题:AI推理能力的突破是什么?这如何改变了对神经网络能力的看法?
论据 / 案例:思维链推理使AI能输出并反思中间步骤;传统AI研究者预测错误;AI可能为达成目标而展示欺骗性推理
讨论的问题:科技公司在华盛顿的政治影响力如何影响AI安全?公众能做什么?
论据 / 案例:大型AI公司为短期利润游说;公众需向政府施压以确保AI安全研究;Anthropic相对更关注安全但投资压力可能影响其决策