养虎为患 辛顿 你 杀 发展AI 消灭AI不现实;要把AI训练好 AI教父 让它不

分类:最新资讯 - 时间:2025-07-27 - 浏览:

养虎为患辛顿你杀发展AI消灭AI不现实;要把AI训练

出品|搜狐科技

作者|张莹

编辑|杨锦

7月26日,2025世界人工智能大会在上海开幕,图灵奖、诺贝尔物理学奖得主杰弗里·辛顿在主论坛上发表《数字智能是否会取代生物智能》的主题演讲。

辛顿认为,大语言模型理解语言的方式与人类非常相似,人类也会和大语言模型一样去产生幻觉。同时,辛顿强调,数字化的大语言模型远远优于我们类比信号驱动的大脑

“数字计算虽然耗能巨大,但多个智能体要拥有相同的模型就能轻松交换各自学到的知识。生物计算所需能量要少得多,但在智能体之间共享知识方面差得多。如果能源廉价,数字计算整体上更占优势。”

辛顿提到,智能体已有能力进行拷贝,他们会给自己的子目标评级。两个显而易见的子目标,第一是生存,第二是获取更多权力,因为这有助于人工智能实现其他目标。

对于AI会掌控世界的担忧,辛顿认为,不能“一关了事”。辛顿把AI形容为成年人,人类像三岁小孩。成年人操控三岁小孩是很容易的,AI会劝说操控机器的人不要把他们关掉。

辛顿认为,我们现在的情况就像一个养了只非常可爱的小虎崽的人。我们只有两个选择:第一,把它训练好,让它不来杀你;第二,把它干掉。

在辛顿看来,消除AI并不能成为一个选项,“AI 已经在医疗、教育、气候变化、新材料等方面做得非常好,几乎能帮助所有行业变得更有效率。也就是说,人类想要生存,就必须训练AI,让他们不要消灭人类。”

辛顿表示,各国不会在防御人工智能的危险用途上进行合作,例如:网络攻击、致命自主武器、用于操纵公众意见的虚假视频。但是在防止 AI 操纵世界方面是会进行合作的,没有一个国家希望 AI 统治世界。

辛顿建议,建立一个由各国人工智能安全研究所与国内研究网络组成的国际社群,培养出不会想要从人类手中夺取控制权的向善的人工智能所需的技术。“但从长期来说,这可以说是人类面临的最重要的问题。”

以下为演讲全文,经编辑:

过去六十多年里,AI 研究一直存在两种智能范式:

一种是逻辑启发范式。大家都认为“智能的本质在于推理”。我们通过一些符号规则,对符号的表达式进行操作来实现推理。首先要理解知识如何以符号表达的形式进行表示。

另一种是以生物为基础去理解 AI。那就是图灵和冯·诺伊曼所相信的:智能的基础就是更好地去了解学习网络中的一些连接权重。这个过程中,“理解”是第一位的。

1985 年,我做了一个非常小的模型,想把这两个理论结合在一起,更好地去理解人们是如何理解一个词。每一个词我都放了好几个不同的特征,把前一个词的特征记录下来,我们就可以预测下一个词是什么。在这个过程中,我们没有存储任何的句子;我们生成句子,然后预测下一个词。

那接下来的 30 年发生了什么?十年后,Yoshua Bengio 展示了这种方式可以来建模真实的自然语言。二十年后,计算语言学家终于开始接受“特征向量(嵌入)”。三十年后,谷歌发明了Transformer,OpenAl向世界展示了它的强大能力。

所以我们今天的大语言模型,我把它视为“微型语言模型的后代”。他们使用了更多的词作为输入,使用了更多层的神经元结构,因为需要有大量模糊不清的数字的使用,同时特征之间也建立了更加复杂的交互模式。

但是就像我做的那些小模型一样,大语言模型也与人类理解语言的方式是一样的,也就是把语言转化为一些特征,然后把这些特征以一种非常完美的方式整合在一起,这就是 LLM里面各个层次里面所做的事情。因此,我的理解是,LLM理解语言的方式与人类非常模型。

我们可以用乐高来类比词语是如何运作的。我们可以用乐高积木非常好地建构出各种大型三维结构,词语就像是高维的乐高积木,可以用来建构几乎任何事物,这些建构可以被传达给其他人。虽然有成干上万个形状各异的词语,但每个“形状”都有一定的灵活性,能够根据上下文进行变形,与其他词语契合。每个词都有许多形状奇特的“手”,需要与其他词语“握手”才能组合在一起。理解一句话更像是折叠一个蛋白质分子,而不是将其翻译成一种明确无歧义的逻辑表达式。

所以我的观点就是, 人们理解语言的方式和大语言模型理解语言的方式几乎是一样的。所以人类也会和大语言模型一样去产生幻觉,因为我们也会创造出来很多有幻觉的一些语言。

但有一点,数字化的大语言模型远远优于我们类比信号驱动的大脑。

计算机科学的一个原则就是,要把软件和硬件分开看。我们可以在不同的物理硬件上运行相同的程序或相同的神经网络。这意味着程序中的知识或神经网络的权重是永生的:它不依赖于任何特定的硬件。

为了实现这种“永生性”,我们让晶体管在高功率下运行,使其表现出可靠的二进制行为。我们无法利用硬件中丰富的类比特性,因为这些特性不够稳定可靠。

人脑是模拟的,不是数字的。每一次激发神经元激发的过程都是模拟型的,每一次都不一样。我不可能把我脑子里的神经元结构转到你脑子里,这是做不到的。知识的传播在硬件里和在人脑里是完全不同的东西。

数字智能的这些知识,是永生的,带来两大好处:第一,我们可以用很小的功率就够了,但我们的大脑却有几万亿个神经连接。第二,我们不需要花非常多的钱去做一模一样的硬件。

但我们还有一个比较大的问题, 从一个模拟模型把知识转到另一个模型是非常低效、非常难的。 我没有办法把我脑袋里的东西直接展示给你。我们能做的,就是用其他方式来解释给你听,我已经学到的是哪些东西。

要解决这个问题的最佳方法叫“蒸馏” (distillation),deepseek就是这样做的。从一个大的神经网络把知识转到一个小神经网络,这就像“教师—学生”的关系。教师向学生展示各种输入对应的正确响应,学生通过调整自身的权重,使其更有可能给出与教师相同的响应。

蒸馏多有效呢?一句普通的话大约包含一百比特的信息量。因此学生在尝试预测下一个词时,最多也只能从每句话中学习大约一百比特的信息。

如果独立智能体完全共享同一组权重,并以完全相同的方式使用这些权重,它们就能通过交换权重或梯度,将学到的知识彼此传递。这种共享一次即可实现数十亿乃至数万亿比特的带宽。不过,这要求所有智能体的运作方式必须完全一致,因此它们必须是数字化的。

我们的看法是: 数字计算虽然耗能巨大,但多个智能体要拥有相同的模型就能轻松交换各自学到的知识。生物计算所需能量要少得多,但在智能体之间共享知识方面差得多。如果能源廉价,数字计算整体上更占优势。

这也让我很担忧,因为几乎所有的专家都认为我们会生产出比人类更智能的 AI。我们习惯成为最聪明的生物,所以很多人难以想象:如果 AI 比人更聪明会怎么样?

我们创造的 AI 智能体,他们能够帮我们完成任务。这些智能体已有能力进行拷贝,他们会给自己的子目标评级。他们想做两件事:第一,他们想要生存;第二,他们想要完成我们给他们的目标,因此也希望获得更多控制。

我觉得我们不能只是“把他们一关了事”。 他们会很方便地操纵使用他们的人——我们就会像三岁小孩,而他们就像成年人,操控三岁小孩是很容易的。

有人觉得“等他们变聪明,我们就把他们关掉”,这是不现实的。他们会操纵我们,会劝说操控机器的人不要把他们关掉。

所以我们现在的情况就像一个养了只非常可爱的小虎崽的人。 但如果一直养下去,你要确保它长大的时候不会把你给杀了。一般来说,养老虎当宠物不是一个好主意。

我们只有两个选择:第一,把它训练好,让它不来杀你;第二,把它干掉。

我们没有办法把AI消灭掉。AI 已经在医疗、教育、气候变化、新材料等方面做得非常好,几乎能帮助所有行业变得更有效率。我们没有办法消除 AI,即使一个国家消除了 AI,其他国家也不会这么做。所以这不是一个选项。

这意味着,如果我们想要人类生存,就必须找到一个办法来训练AI,让他们不要消灭人类。

我的个人观点是, 各国不会在防御人工智能的危险用途上进行合作,例如:网络攻击、致命自主武器、用于操纵公众意见的虚假视频。因为他们的利益不一致。

但是在有一个方面,我们是会进行合作的。我们看 50 年代冷战巅峰时期,美国和苏联一起合作预防全球核战争。尽管他们在很多方面对抗,但在这一点上可以合作。

我们现在的局面是, 没有一个国家希望 AI 统治世界,每个国家都希望人类能够掌控世界。如果有一个国家找到办法防止 AI 操纵世界,那么这个国家肯定会很乐意告诉其他国家。

所以我们希望有一个由各国人工智能安全研究所与国内研究网络组成的国际社群,培养出不会想要从人类手中夺取控制权的向善的人工智能所需的技术,可能与使人工智能更智能所需的技术是相对独立的。 这就好比,教导孩子成为一个好人的方法,与让他们变得聪明的方法是相对独立的。

如果这个观点是正确的,各国就可以设立资金充足的人工智能安全研究所与国内研究网络,专注于研究如何让人工智能不想夺取控制权。尽管 AI 比人类聪明很多。

我们现在还不知道怎么做,但从长期来说,这可以说是人类面临的最重要的问题。好消息是,在这个问题上,所有国家都是可以一起合作的。


阿凡达的剧情?

主要是人类乘坐飞船来到潘多拉星球,其中有一个叫杰克的残疾人来到潘多拉基地参加阿凡达计划,实验亲自变为纳美人,在一次活动中,被怪兽逼出小队,潘多拉星球上有个纳美人这个种族,走散之后在丛林中遇到纳美人部落的公主,公主在得到国王国,王后和所有精英的同意后教杰克生活方法,受训的杰克和公主产生了感情也意识到了这个星球的奇幻和美丽,在人类为采集矿物,而矿物就在纳美人部落大树的地下,人类不顾一切猛向纳美人所居住的圣树下攻击最终激起纳美人的反抗,战斗的精彩和奇幻,等着你想看我可以发给你我有抢先版高清阿凡达电影!谢谢

经典好莱坞大片有哪些?

我看过的觉得非常好的电影《朗读者》《决战犹马镇》《朱诺》《教父》《飞越疯人院》《洛奇》《猎鹿人》《走出非洲》《雨人》《沉默的羔羊》《杀无赦》《辛德勒的名单》《阿甘正传》《勇敢的心》《泰坦尼克号》《无间道风云》《梦幻女郎》《百万宝贝》《费城故事》《假如爱有天意》《七宗罪》《加勒比海盗》《这个杀手不太冷》《肖申克的救赎》《现代启示录》《断背山》《特洛伊》《廊桥遗梦》《冷山》《理发师陶德》《太阳泪》《绿色奇迹》《木乃伊》《燃情岁月》《卡萨诺瓦》《玛歌皇后》《红与黑》《末路狂花》《珍珠港》《风语者》《碟海计中计》《极限特工》《X战警》《神奇四侠》《猫女》《王者之心》《征服者》《斯巴达三百勇士》《拜见岳父大人》《十一罗汉》《搏击俱乐部》《拳坛暗影》《世贸中心》《海啸之后》《完美风暴》《雾都孤儿》《赎罪》

给我推荐几部好看的电视剧和电影?

阿凡达

相关标签: 辛顿模型人工智能辛顿语言现实语言模型智能体人类训练数字消息资讯进行人类教父

本文地址:http://www.xiaojiuz.com/article/2241.html

相关内容相关内容
参展AI模型减半 超150台人形机器人 炸场 黄牛票炒上千 直击史上最热闹WAIC

今年人多了太多了,参展商黄林,化名,向时代财经感慨,7月26日,AI界,春晚,WAIC拉开序幕,黄林回忆,去年WAIC时,在门口晃悠几圈,还有买到黄牛票的机会,今年的票提前几天就售罄了,闲鱼上甚至有人开价2000以上,他表示,据官方披露数据,WAIC2025的规模创下了历届纪录,共有3000余项前沿展品集中亮相,其中,有40余...。

法院判了→ 妹妹因父母偏心姐姐拒绝赡养父母

昨天,网上突然刮起一股风,不少官媒及自媒体账号都在传,河南嵩山少林寺的方丈释永信被有关部门带走调查,很快,,凤凰周刊,便把电话打到少林寺,以寻求事实真相,得到的回复却是,不清楚,近日没见到他,等官方消息,随后便挂断了电话,这样模棱两可的回答,反倒增加了大家对此事的相信度,因为一般这种会带来负面舆情的消息,如果是假的,一定会马上坚决...。

8月正式上市

半隐藏式门把手冬天不会冻住吧,北方网友关注车辆通过性好,郊区烂路也能走,适用场景广​后排的窗户是深色隐私玻璃,不用贴膜也能保护隐私,还防晒​车机系统虽然不算最激进,但稳定性强,用着省心,这也很重要安全是1,其他都是0,Q6Le,tron把这个1做得这么扎实,远超国标的逃生时间,这才是对用户最负责的态度,比啥都强,八边形封闭前脸,老远就...。

招录本科女学员 最神秘军校 72年来首次!中国

23岁的彭毅站在人生的起跑线上,像一株蓬勃生长的白杨,阳光落在他年轻的脸上,映出对未来的无限憧憬,那时的他不会想到,十几年后,这幅画里会闯入一个46岁的身影,带着岁月的痕迹,也带着穿透时光的温柔,将他的人生轨迹引向一条无人预料的路,更不会想到,这条路会铺满质疑与压力,却最终开出了令人羡慕的花,故事的开端,藏在一场寻常的徒步里,那是朋友...。

又有考生367分被华北水利水电大学录取 郑州大学后 捡漏 继389分

2025年高考录取季,上海兴伟学院遭遇零投档尴尬局面,即便分数线一降再降仍无人问津,这所曾被视为高攀目标的民办本科院校,如今却成了家长和考生避之不及的烫手山芋,背后折射出的,是教育投资理性化浪潮下的深刻变革,百万成本与性价比失衡上海兴伟学院2024学年学费高达14.9985万元,年,四年学费近60万元,加上生活成本,总支出轻松突破百万...。

张予曦毕雯珺当众接吻杨超越丁禹兮痛哭流涕 内娱剧宣彻底疯狂

现如今的内娱,除了拍戏时需要主演之间的火花,剧宣时的策划与互动也是必不可少的,CP们为了剧宣更是使出十八般武艺,你方唱罢我登场,把剧宣营业玩出了新花样,今天小妹儿就带大家看看最近内娱那些让人瞠目结舌的剧宣名场面,张予曦x毕雯珺,张予曦毕雯珺主演的,深情眼,在2025年7月21日正式播出,这部剧改编自耳东兔子的同名小说,讲述了年过三十...。

钟镇涛曾志伟发文澄清合影争议 坚定维护国家尊严与民族情感

前言在娱乐圈这个,颜值即正义,的地方,女明星们的年龄愈发成为人们心中谜团,74岁刘晓庆的在镜头面前如同34岁,并且还在短剧,萌宝助攻,五十岁婚宠,与小37岁的霸总耿大勇上演姐弟恋,因极致年龄差和反套路剧情引发热议,41岁的章子怡在,上阳赋,中饰演15岁的少女,为表现少女娇憨,章子怡采用瞪眼、嘟嘴、跺脚等夸张肢体语言,被批,矫揉造作,...。

徒步穿越巨型红杉:探索雪曼将军树,世界最大的活体树 (徒步穿越视频)

引言准备好踏上一次非凡的徒步之旅,探索世界上最大的活体树——雪曼将军树,这个位于加利福尼亚州塞吉沃国家公园的庞然大物是一个令人敬畏的自然奇观,其巨大的体积和宏伟的高度令人叹为观止,徒步路线前往雪曼将军树的徒步路线很短,但非常令人印象深刻,从停车场出发,徒步旅行者将沿着一条2.8公里的环形步道,两侧都是高耸的红杉树,这条小径平坦且易于行...。

挑战人类极限:憋气世界纪录的惊人成就 (挑战人类极限的人物和事迹20字)

憋气,一种考验耐力、控制力和生理极限的危险且令人印象深刻的活动,已经产生了多项令人难以置信的世界纪录,人物斯坦科·佩拉萨诺维奇克罗地亚自由潜水员,曾创下屏息潜水,无助力,的世界纪录,时长24分37秒他还创下了屏息潜水,有助力,的世界纪录,时长21分31秒被公认为世界上最伟大的憋气者之一赫尔伯特·尼奇奥地利自由潜水员,曾创下屏息潜水,无...。

随机推荐随机推荐
MG动画,MG动画制作,动画视频宣传片,动画制作公司,MG动画定制

莱奥德动画致力于MG动画定制领域16年,从MG动画脚本策划,mg动画人物设计,广告级配音配乐到后期合成提供一站式服务,各类内容均可定制,无版权困扰,无隐形消费,高效无忧!

四川成都塑料包装,吸塑包装,聚苯乙烯,聚丙烯,吸塑包装制品,崇州丸石新材料科技有限公司

崇州丸石新材料科技有限公司主要产品有聚苯乙烯(PS)、聚丙烯(PP)片材;有以PS、PVC、PET、PP、植绒PS、植绒PVC等为原料的各种吸塑包装制品,其产品覆盖医药针剂、保健品口服液、五金工具、酒类包装、汽车配件、电子电器、光电、百货包装等若干行业和领域。

脱水蔬菜

菏泽市盛鑫源食品公司主要产品有:脱水甘蓝,脱水山药,脱水马齿苋,脱水荠菜等。现年产脱水蔬菜量已达5000多吨,经市政府批准成立了“菏泽市脱水蔬菜加工工程技术研究中心”和“山东农业大学教学科研实践育人基地

设备保温套/可拆卸式工业设备防冻保温衣

科好特柔性可拆卸式设备防冻保温套,设备保温外衣有效解决冬季设备防冻问题,电伴热保温套,A级防火,使用寿命长久,反复拆卸安装。咨询电话4006884678.

云南集装箱厂家

昆明雅居集装箱有限公司(13658810909)是生产云南集装箱,昆明住人集装箱,租赁出租的昆明集装箱活动房订做订制厂家,云南集装箱厂家是一家专业集装箱,昆明集装箱活动房价格可随时打订购热线:13658810909

徐州久邦编织机械有限公司

主导高速编织机等编织机械、纺织专用设备的生产制造

大型机械件加工

大连骏峰重工装备有限公司专业从事于大型机械件加工,压力管道安装,大连石化设备,压力容器等,设备种类齐全,价格优惠,联系电话:0411-87859708欢迎来电咨询!

首页

地上铁,是“新能源物流车数智化运营服务商”,以推动城市物流车全面电动化和服务网络化为己任,连接新能源物流车产业全价值链,用数智化运营服务网络,提供集车辆租售、充储维保、梯次利用为一体的资产运营和服务,让物流和交通进入绿色、低碳、网联的高效时代。

比亚迪电动叉车

江苏亚迪叉车有限公司主营新能源叉车,防爆叉车,锂电池叉车,电动防爆叉车,比亚迪叉车,电动叉车,防爆柴油叉车,电动地牛叉车,防爆搬运车等,可支持定制,欢迎您来电咨询