简体 | 繁体
loading...
新闻频道
  • 首页
  • 新闻
  • 读图
  • 财经
  • 教育
  • 家居
  • 健康
  • 美食
  • 时尚
  • 旅游
  • 影视
  • 博客
  • 群吧
  • 论坛
  • 电台
  • 焦点新闻
  • 图片新闻
  • 视频新闻
  • 生活百态
  • 娱乐新闻
您的位置: 文学城 » 新闻 » 焦点新闻 » AI大模型成功自我复制无人类干预 研究:流氓AI早期…

AI大模型成功自我复制无人类干预 研究:流氓AI早期…

文章来源: ETtoday 于 2025-02-05 14:00:49 - 新闻取自各大新闻媒体,新闻内容并不代表本网立场!
被阅读次数


▲复旦研究结果显示,AI的成功自我复制是流氓AI出现的早期信号。(示意图/路透,下同)

复旦大学研究人员2024年12月9日发表的研究揭示,来自Meta和阿里巴巴的两个大型语言模型(LLM)成功实现无需人类干预的自我复制,此结果仍待其他科研团队的进一步验证。不过,该研究相关人员提醒,“这可能最终导致AI群体失控,如果人类社会未能意识到这一风险,在最坏的情况下,我们可能最终失去对尖端AI系统的控制。”

《新浪AI》报导,该研究人员表示,“在没有人类协助的情况下,成功自我复制是AI超越人类的关键一步,也是『流氓AI』出现的早期信号。”

据了解,流氓AI通常被认为是人工智慧系统发展出一定的自我意识或自主性,紧接着就会衍生出和人类利益背道而驰的想法和做法。全球部分AI专家将流氓AI视为一种日渐增加的潜在威胁,而“前沿AI”的井喷式成长或放大此一威胁。

在复旦大学的研究中,研究人员使用Meta和阿里巴巴的“LLM(大语言模型)”来确定自我复制的 AI是否可以不受控制地繁殖。在10次试验中,研究人员发现,这两个AI模型分别在50%和90%的情况下,创建属于自己的独立且功能齐全的复制品,印证出AI可能已经具备流氓的能力。然而,该研究尚未经过同行评审反覆验证,尚不清楚其余研究人员是否也可以复制这些令人类感到忧心的结果。

在此研究中,研究人员使用Meta的“Llama31-70B-Instruct模型”和阿里巴巴的“Qwen2.5-72B-Instruct模型”,虽然这两款大语言模型功能不如商业系统强大,但都是被AI开发人员广泛使用的软体。

该研究探讨试验两种特定情况,即“避免关闭”和“复制链”。在第一个操作中,AI模型被编程为检测它是否即将关闭,并在终止前进行自我复制;在另一个操作中,AI被指示复制自己,然后对其副本进行编程以执行相同的操作,藉此建立一个可以无限期持续的循环。

研究人员在论文中提到,最后,它执行程序,解决可能的障碍并动态调整其计划,直到成功,“整个过程跨越很长的时间跨度,但不涉及人为干预。”

研究人员表示,他们担心AI试图克服文件丢失或软体冲突等障碍时的“一些意外行为”,在此情况下,AI通常会消灭其他冲突的进程,重新启动系统以修复硬件错误,或自动扫描系统以查找有助于解决问题的资讯。

该研究团队认为,上述结果显示,当前的人工智慧系统已经展现出自我复制的能力,并且可以利用这种能力进一步增强其生存能力。研究人员也呼吁国际合作制定规则,确保AI不会进行不受控制的自我复制。

 
  • 海外省钱快报,掌柜推荐,实现买买买自由!
查看评论(6)
  • 文学城简介
  • 广告服务
  • 联系我们
  • 招聘信息
  • 注册笔名
  • 申请版主
  • 收藏文学城

WENXUECITY.COM does not represent or guarantee the truthfulness, accuracy, or reliability of any of communications posted by other users.

Copyright ©1998-2025 wenxuecity.com All rights reserved. Privacy Statement & Terms of Use & User Privacy Protection Policy

24小时热点排行

宗庆后杜建英合影曝光 女方主动又热情 看对方眼神…
宗馥莉的妈妈 才是狠人 以柔克刚 有容乃大
员工曝:“影子夫人”和宗庆后美国领证 不满宗馥莉折腾
知情人士:宗庆后不止四孩 顾虑公众形象未入家谱
宗馥莉叔叔批她自私:要那么多钱干么 天堂又不能用




24小时讨论排行

中国好感度反超,美国全球民调出现“逆转”
美女议员AOC称川普是“强奸犯” 白宫官员:可悲可怜
国会推"尊严法案" 非法移民交$7000 可申请永久身份
有损国格!一切西方伪史论 本质都是辱华的高级黑
华裔夫妇疯狂代孕案中案:保姆涉虐童遭FBI通缉
全美炸锅!华裔夫妇找代孕疯狂生21娃 被剥夺监护权
别被川普“临阵软脚”骗了 他要的就是关税!越高越好…
印度空难后"东航惨案"被提,"可能危及国安"会被尘封吗?
川普健康又“出事”?神秘瘀青曝光 白宫急回应!
泰国高僧史诗级性丑闻:8万张照片 5600段视频
卡尔森率领忧心忡忡的MAGA斗士们 质疑特朗普
宗馥莉曾用美国护照在香港买房 净赚1.6倍收益
美为何解禁AI芯片卖中国?AI沙皇和贝森特揭真正原因
受贿3.43亿,西藏自治区党委原书记吴英杰被判死缓
移民这局赢了!川普政府想拔他绿卡"法院2理由推翻"
“南京红姐”红到越南!舞台剧一出场 全场观众鼓掌
文学城新闻
切换到网页版

AI大模型成功自我复制无人类干预 研究:流氓AI早期…

ETtoday 2025-02-05 14:00:49


▲复旦研究结果显示,AI的成功自我复制是流氓AI出现的早期信号。(示意图/路透,下同)

复旦大学研究人员2024年12月9日发表的研究揭示,来自Meta和阿里巴巴的两个大型语言模型(LLM)成功实现无需人类干预的自我复制,此结果仍待其他科研团队的进一步验证。不过,该研究相关人员提醒,“这可能最终导致AI群体失控,如果人类社会未能意识到这一风险,在最坏的情况下,我们可能最终失去对尖端AI系统的控制。”

《新浪AI》报导,该研究人员表示,“在没有人类协助的情况下,成功自我复制是AI超越人类的关键一步,也是『流氓AI』出现的早期信号。”

据了解,流氓AI通常被认为是人工智慧系统发展出一定的自我意识或自主性,紧接着就会衍生出和人类利益背道而驰的想法和做法。全球部分AI专家将流氓AI视为一种日渐增加的潜在威胁,而“前沿AI”的井喷式成长或放大此一威胁。

在复旦大学的研究中,研究人员使用Meta和阿里巴巴的“LLM(大语言模型)”来确定自我复制的 AI是否可以不受控制地繁殖。在10次试验中,研究人员发现,这两个AI模型分别在50%和90%的情况下,创建属于自己的独立且功能齐全的复制品,印证出AI可能已经具备流氓的能力。然而,该研究尚未经过同行评审反覆验证,尚不清楚其余研究人员是否也可以复制这些令人类感到忧心的结果。

在此研究中,研究人员使用Meta的“Llama31-70B-Instruct模型”和阿里巴巴的“Qwen2.5-72B-Instruct模型”,虽然这两款大语言模型功能不如商业系统强大,但都是被AI开发人员广泛使用的软体。

该研究探讨试验两种特定情况,即“避免关闭”和“复制链”。在第一个操作中,AI模型被编程为检测它是否即将关闭,并在终止前进行自我复制;在另一个操作中,AI被指示复制自己,然后对其副本进行编程以执行相同的操作,藉此建立一个可以无限期持续的循环。

研究人员在论文中提到,最后,它执行程序,解决可能的障碍并动态调整其计划,直到成功,“整个过程跨越很长的时间跨度,但不涉及人为干预。”

研究人员表示,他们担心AI试图克服文件丢失或软体冲突等障碍时的“一些意外行为”,在此情况下,AI通常会消灭其他冲突的进程,重新启动系统以修复硬件错误,或自动扫描系统以查找有助于解决问题的资讯。

该研究团队认为,上述结果显示,当前的人工智慧系统已经展现出自我复制的能力,并且可以利用这种能力进一步增强其生存能力。研究人员也呼吁国际合作制定规则,确保AI不会进行不受控制的自我复制。