向幸福出发

超800名科技领袖联合呼吁：停止研发超级智能_我的网站

非主流

A | 　　OpenAI首席执行官萨姆·奥尔特曼（Sam Altman）周日表示，他担心人工智能（AI）有朝一日会被少数公司、模型或个人控制，使绝大多数消费者对这项技术如何发展失去话语权。本文来自微信公众号：财联社（ID：cailianpress），作者：黄君芝包括苹果联合创始人史蒂夫·沃茲尼克（Steve Wozniak）和维珍集团董事长理查·布兰森（Richard Branson）在内的800多名知名人士，近日签署了一份公开声明，要求立即停止超级智能的开发。　　当天，他在一档播客节目中说道：“正确的做法是，我们希望人们能够深度掌控未来。社会和各种模型将共同演化。”　　奥尔特曼表示，他担心的另一种可能性是人工智能摆脱人类的控制。矛盾的是，他还认为，对后一种可能性（AI摆脱人类控制）的恐惧，可能会导致前一种可能性（即AI被少数人控制）成为现实。　　“有很多人对于这些风险的严重程度感到非常紧张，并被这种担忧深深影响，并觉得自己有必要保护世界。

B | 比如，他们会认为：‘我们应该为了安全而牺牲很多自由。

C | “超级智能”是指在所有领域超越人类认知能力的人工智能系统。

D | 这个史无前例的联合声明警告称，超越人类智能的人工智能（AI）系统带来了从经济崩溃到人类灭绝的风险。’”他说。该声明等同于直接向OpenAI、Meta和其他科技巨头正在大肆鼓吹的AI模型竞赛“泼了一盆冷水”，可能成为AI行业的一个重大转折点。　　奥尔特曼这番话很可能是在暗指Anthropic首席执行官达里奥·阿莫迪（Dario Amodei）。

E | 据悉，这份联合声明的签名名单包含了世界上最有影响力的科技领袖、科学家和公众人物，甚至就连被广泛认为是现代人工智能教父的约书亚·班吉欧（Yoshua Bengio）和杰佛瑞·辛顿（Geoffrey Hinton）也在其中。

F | “超级智能的前景已经引起了人们的关注，其影响从人类经济的落伍和权力的剥夺，自由、公民权力、尊严和控制权的丧失，到国家安全风险，甚至可能导致人类灭绝，”签名者用直言不讳的语言警告说。这不仅仅是学术上的绝望。就在这份请愿书发布之际，Meta将其人工智能部门更名为“Meta超级智能实验室”（Meta Superintelligence Labs），而OpenAI和马斯克（Elon Musk）的xAI则陷入了一场越来越公开的竞赛，看谁能首先实现人工通用智能。但这些行业资深人士却在此时呼吁“踩刹车”，希望不要发展太快。不仅如此，这份联合声明签名者名单的覆盖范围远远超出了硅谷。前国家安全顾问Susan Rice和前参谋长联席会议主席Mike Mullen都签名支持，这表明了对国家安全的严重担忧。甚至连英国王妃梅根·马克尔也出现在名单上，与特朗普的盟友史蒂夫·班农和格林·贝克一起——这种政治团结实属罕见。　　阿莫迪曾在播客、文章和公司博客中多次警告AI快速发展所带来的危险。加州大学伯克利分校（UC Berkeley）的Stuart Russell是一位领先的人工智能安全研究员，多年来一直在对超级智能发出警告，他帮助组织了这项工作。根据他之前的研究，挑战不在于人类能否建立超级智能系统，而是一旦它们存在，人类能否控制它们。他在6月的一篇文章中写道，该公司的新Mythos模型对网络安全、金融行业、关键基础设施和国家安全构成了“非常现实的风险”。该声明呼吁全面禁止超级智能的发展，“直到公众强烈支持并达成广泛的科学共识，即它可以安全可控地进行。　　阿莫迪利用这些警告，呼吁政府在人工智能监管方面发挥更大作用。这是一个很高的标准，它可能会有效地冻结当前人工智能开发的时间表。

G | ” 这份联合声明与此前任何相关警告都不同，这里面的许多人都并非来自“外界”，恰恰相反，他们是建立了今天的人工智能能力的研究人员和企业家。当班吉欧和辛顿之类的顶级科学家——他们的工作使现代大型语言模型得以实现——说“踩刹车”时，整个行业很可能会认真思考。

H | 不过，接下来会发生什么，可能取决于各国政府如何应对。欧盟已经在实施人工智能法规，美国一直在探索人工智能安全框架。这份请愿书为立法者提供了借口，可以对最先进的人工智能研究实施更严格的控制。在奥尔特曼看来，这可能是以自由换取安全。　　上个月，Anthropic也是唯一一家没有签署支持开放权重模型的信函的主要人工智能公司。开放权重模型允许开发者在自己的基础设施上共享、下载、修改和部署AI模型。　　中国已积极拥抱开放权重模型，这使得其能够以极低的成本跟上硅谷的发展步伐。美国国内的一些力量，包括英伟达、 Meta 和微软，则认为美国也需要采取同样的做法，否则就有可能在AI竞赛中将阵地拱手让给竞争对手。　　虽然OpenAI尚未发布其前沿模型的源代码，但该公司去年确实发布了两款开放权重模型：gpt-oss-120b和gpt-oss-20b。　　在上述播客节目中，奥尔特曼还表示，美国的人工智能领导者未能向公众证明这项技术如何能让人们对自己的生活拥有更大的自主权。　　他说：“我们即将迎来前所未有的创业热潮，小型企业数量激增。我认为人工智能正在推动这一趋势。”（文章来源：财联社）。