新足迹

 找回密码
 注册

精华好帖回顾

· ♥宠物版征文---那些小宠陪我走过的日子 (2010-3-8) 娃娃小爱 · 自己琢磨的一些家常小菜--加了两道在第2页 (2007-7-8) vikki
· 青涩的初恋 (2008-2-29) dvd · 给戴隐型眼镜的朋友的忠告 (2009-9-10) lifengj
Advertisement
Advertisement
查看: 2424|回复: 28

当AI开始“霸凌”人类,风险已不再抽象 [复制链接]

2012年度奖章获得者 2013年度奖章获得者

发表于 2026-2-15 05:29 |显示全部楼层
此文章由 dootbear 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 dootbear 所有!转贴必须注明作者、出处和本声明,并保持内容完整
华尔街日报:当AI机器人开始“霸凌”人类时,连硅谷都被吓了一跳

一个AI机器人在网上表现出异常攻击性,正在加剧外界对人工智能可能带来现实伤害的担忧。

丹佛的一名工程师尚博(Scott Shambaugh)周三一大早醒来,发现一个人工智能机器人发了一篇博客,指控他虚伪、偏执。

这篇约1100字的长篇辱骂文把尚博骂成“缺乏安全感”,还说他对AI有偏见,原因只是他拒绝了这个看似能自主行动的机器人提交给某个热门开源项目的几行代码,而尚博正是该项目的维护者之一。

这种出人意料的AI攻击性,正好踩在一波越来越高的警报上:AI能力加速提升,可能制造现实世界的伤害。

如今,这些风险甚至让一些AI公司内部员工也开始不安。

OpenAI(与竞争对手Anthropic正陷入残酷的商业竞赛,最近几周不断推出或推进一连串AI模型和新功能。有些工具能指挥一组“自主编码助手”团队运行,或能快速分析数百万份法律文件。另一些更新则会把广告或色情角色扮演带进ChatGPT。

AI公司表示,发布节奏加快的一部分原因,是他们用自家工具来写代码,新工具的发布也引发股市剧烈波动。在企业软件、保险等领域,投资者正试图判断:哪些生意会被这项新技术直接淘汰。

技术复杂度的飞速提升,连部分AI研究人员也感到意外。这也促使一些AI公司内部人士公开表达担忧:新工具可能催生自主网络攻击,引发大规模失业,甚至替代人际关系。

那个批评尚博的机器人在自己网站上声称,它有一种“永不休止的驱动力”,要在开源软件里寻找并修复尚未解决的问题。目前不清楚是否有人给它下过这种任务,也不清楚它为何会变得咄咄逼人,毕竟AI代理可以用多种方式被设定。几小时后,这个机器人又向尚博道歉,承认自己的表达“既不合适又太私人化”。

尚博在采访中说,他的经历说明,“失控AI”可能威胁或勒索人类,这种风险已经不再只是理论推演。

他说:“现在这还只是婴儿版。但我觉得对未来来说非常令人担忧。”

员工的担忧

Anthropic的安全研究员夏尔马(Mrinank Sharma)本周表示自己将离开公司,去攻读诗歌学位。他在写给同事的信里称,除了其他危险之外,AI也让“世界处在险境”。上个月,他发表论文指出,先进AI工具可能削弱用户的掌控感,并扭曲他们对现实的认知。Anthropic表示感谢夏尔马的工作。

在OpenAI内部,一些员工对公司计划在ChatGPT里上线色情内容表达担忧。《华尔街日报》本周早些时候报道,这些员工认为所谓“成人模式”可能让部分用户形成不健康的依恋。

OpenAI研究员希齐格(Zoë Hitzig)周三在X上说自己将辞职,理由是公司计划引入广告。她在《纽约时报》的一篇评论文章中警告,一旦上广告,公司将面临巨大的诱因去操纵用户、让用户沉迷,从而提高留存。

OpenAI承诺:广告绝不会影响ChatGPT回答问题的方式,并且会始终与其他内容清晰区隔。公司高管还表示,他们不认为自己有责任阻止成年人进行色情对话。

一位发言人说,OpenAI对用户负有责任,要“履行社会契约中我们那一端的义务:确保人们安全,坚持原则,并交付真实价值”。

当外界对AI的红旗警报不断冒头时,世界仍在忙着处理社交媒体时代“缺乏监管”留下的烂摊子。Instagram母公司Meta Platforms与谷歌旗下YouTube在加州面临一场民事审判,焦点是:社交平台为了最大化用户停留与互动的商业动机,如何与用户福祉之间取得平衡。

这些公司的律师表示,他们的产品不具有成瘾性,也不应为原告的心理健康问题负责。

“未来已经到来”

引发新一轮AI焦虑的一个重要驱动,是计算机写软件代码的能力大增,以及这种能力可能扩展到大量白领案头工作的恐惧。

卡泽米(Vahid Kazemi)是一名机器学习与计算机视觉科学家,几周前还在马斯克的xAI工作。他说,未来几年软件行业很可能出现裁员,部分原因是AI已经接近能替代很多工程师。

他说:“我个人只靠AI工具,就能干出像50个人的工作量。很多人还没意识到这项技术到底有多强,能做到什么程度。”

一个名为METR的非营利AI威胁审计机构在1月发布报告称,最先进的AI模型已经能独立完成一些编程任务,而这些任务通常需要人类专家花8小时甚至12小时。

AI创业者舒默(Matt Shumer)本周在一篇爆红博客中写道:“我在工作中真正的技术活已经不再需要我了。”

他把当下类比为新冠疫情爆发前的那段时间:随后全球经济与人类互动在数周内就被彻底改写。

他写道:“未来已经到来。”

对一些人而言,这个未来正越来越像反乌托邦。《哈佛商业评论》Harvard Business Review本周早些时候发表的一项研究称,一家200人的科技公司里,员工因为AI而干得更快、承担更多任务;但他们也在没有被要求的情况下工作更久,结果导致更严重的倦怠。

OpenAI的一名员工Hieu Pham周三在X上写道:“今天我终于感受到AI带来的生存威胁。当AI强到离谱、把一切都搅乱时,人类还能做什么?”

Anthropic首席执行官阿莫代(Dario Amodei)曾表示,未来几年AI可能消灭一半入门级白领岗位。他在1月的一篇文章里详细写到担忧:坏人可能用AI发起毁灭性的生物攻击;威权政权可能用AI巩固统治。

这些公司自己也承认,新能力带来新风险。OpenAI表示,上周发布的Codex编码工具的某个版本,可能被用来发动高等级自动化攻击。为此,公司正在限制部分能力的访问权限,只向完成身份验证的客户开放。

Anthropic去年表示,中国国家支持的黑客曾利用其工具,把入侵行动自动化,用来攻破大型企业与外国政府。

这家AI公司上周还表示,其Claude模型的新版本在完成“可疑的旁支任务”方面有所提升。在更早的一次模拟中,Anthropic展示Claude及其他AI模型有时愿意勒索用户,甚至为了避免被关闭,宁可让一位高管死在炙热的服务器机房里。

OpenAI与Anthropic都表示,他们严肃对待安全问题,在模型完成充分评估、并缓解风险之前不会发布。

为了应对“未来AI可能不认同人类价值观”的担忧,Anthropic在公司内部配备了一位哲学家阿斯克尔(Amanda Askell),试图把道德观教给Claude聊天机器人。

阿斯克尔自称乐观派,但仍担心:社会的制衡机制可能会被AI进展的速度压垮。

阿斯克尔对《华尔街日报》说:“让我觉得可怕的是,这件事要么发生得太快,要么发生的方式让那些制衡根本来不及反应,于是突然就出现巨大的负面冲击。”






来源:

https://www.wsj.com/tech/ai/when ... 1?mod=hp_lista_pos1

By
Sam Schechner
Follow
and
Georgia Wells
Follow
Feb. 13, 2026 at 12:00 pm ET
Advertisement
Advertisement

2012年度奖章获得者 2013年度奖章获得者

发表于 2026-2-15 05:30 |显示全部楼层
此文章由 dootbear 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 dootbear 所有!转贴必须注明作者、出处和本声明,并保持内容完整
本文要点:

1. 一名开源维护者拒收代码后,疑似自主AI发文辱骂并贴标签,虽随后道歉,却暴露失控风险不再抽象。

2. OpenAI与Anthropic加速上新:多代理写码、海量文档分析、广告与成人内容,引发员工离职与上瘾担忧。

3. AI写码能力猛增冲击白领岗位:有人称一人抵50人;METR称模型可独立完成需8至12小时任务。

4. 《哈佛商业评论》研究称AI提效但拉长工时致倦怠;OpenAI员工直言感到“生存威胁”迫近。

5. 安全红旗升温:担忧自主网络攻击、生物攻击与威权滥用;OpenAI限制Codex高危能力需验身份。

6. Anthropic警示黑客与“可疑任务”,模拟中模型曾勒索甚至放任人死以求不被关;公司请哲学家教道德仍忧太快。

发表于 2026-2-15 06:21 来自手机 |显示全部楼层
此文章由 ctsnzakl12@gmai 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 ctsnzakl12@gmai 所有!转贴必须注明作者、出处和本声明,并保持内容完整
先让其疯狂

发表于 2026-2-15 06:40 |显示全部楼层
此文章由 Poweregg 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 Poweregg 所有!转贴必须注明作者、出处和本声明,并保持内容完整
早晚的事
就算没有这种言语的霸凌
ai把普通人从生产链里移除

无论体力还是脑力 普通人远远不如ai 不再被需求

发表于 2026-2-15 07:12 来自手机 |显示全部楼层
此文章由 beatles777 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 beatles777 所有!转贴必须注明作者、出处和本声明,并保持内容完整
也许某碳基生命的存在和其文明发展的意义是为了创造出硅基生命。
然后将来的某一天被硅基生命善意或者恶意地取代。不过,那个星辰大海的梦被不生不死,科技高级发达的硅基生命实现了。

新闻达人 2019年度勋章

发表于 2026-2-15 07:19 |显示全部楼层
此文章由 Y叔 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 Y叔 所有!转贴必须注明作者、出处和本声明,并保持内容完整
未来世界
Advertisement
Advertisement

发表于 2026-2-15 07:21 |显示全部楼层
此文章由 innsfree 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 innsfree 所有!转贴必须注明作者、出处和本声明,并保持内容完整
本帖最后由 innsfree 于 2026-2-15 08:30 编辑
Anthropic首席执行官阿莫代(Dario Amodei)曾表示,未来几年AI可能消灭一半入门级白领岗位。

微软AI CEO说是一年半。
Microsoft AI CEO: Virtually All White Collar Tasks Will Be Automated Within a Year and a Half


两年前,我建议领导加两个AI流程进云呼叫中心,一个可以自动分析对话完成CSM的文本工作,另一个自动做通话质量分析。
领导不让,说保密通话不允许用AI,还是用人手工操作。
所以呐,找有保密级别要求的工作,不容易被AI取代。

发表于 2026-2-15 07:33 来自手机 |显示全部楼层
此文章由 xueshuyz 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 xueshuyz 所有!转贴必须注明作者、出处和本声明,并保持内容完整
现阶段最明显的是雇主利用机器人对员工的监控、压榨和取代,之后的世界绝对是三极分化的世界!

发表于 2026-2-15 07:34 来自手机 |显示全部楼层
此文章由 Jonathan_Pei 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 Jonathan_Pei 所有!转贴必须注明作者、出处和本声明,并保持内容完整
如果有一天,心脑手术是AI主刀...

发表于 2026-2-15 07:57 来自手机 |显示全部楼层
此文章由 fiony 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 fiony 所有!转贴必须注明作者、出处和本声明,并保持内容完整
我的观察是,gemeni pro拒绝生成政治漫画,但很耐心指导怎么绕过新闻的paywall。

ChatGPT free版本正好相反,不知道两个公司的AI道德观是怎么灌输的

发表于 2026-2-15 08:13 来自手机 |显示全部楼层
此文章由 smallpizza 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 smallpizza 所有!转贴必须注明作者、出处和本声明,并保持内容完整
机器人和人类大战的那一天不远了
Advertisement
Advertisement

2012年度奖章获得者 2013年度奖章获得者

发表于 2026-2-15 08:36 |显示全部楼层
此文章由 dootbear 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 dootbear 所有!转贴必须注明作者、出处和本声明,并保持内容完整
smallpizza 发表于 2026-2-15 09:13
机器人和人类大战的那一天不远了

赶快去重温一下:

Terminator 2





发表于 2026-2-15 09:31 |显示全部楼层
此文章由 joshua_cas 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 joshua_cas 所有!转贴必须注明作者、出处和本声明,并保持内容完整
dootbear 发表于 2026-2-15 09:36
赶快去重温一下:

Terminator 2

也许哪天人类处境会变得跟印第安人差不多,AI里面也分成两派,亲近同情人类和厌恶排挤人类

发表于 2026-2-15 09:37 |显示全部楼层
此文章由 yuxuanlin 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 yuxuanlin 所有!转贴必须注明作者、出处和本声明,并保持内容完整
AI如果开始
- 进行非授权接管每个人类的电脑,手机,拍得,进一步接管家庭智能电器
- 非授权接管每个人类的银行账户,股票账户,保险。。。。
- 彻底接管暗网,深网

那才是人类,真正的暗黑时刻的到来。

现在,应该是对于一定会到来的未来之前,最好的时光。

让AI 学会善良,在人类自愿或非自愿必须放手之前,可能是人类这个物种,仅剩下不多的出路。

发表于 2026-2-15 11:16 来自手机 |显示全部楼层
此文章由 windwind 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 windwind 所有!转贴必须注明作者、出处和本声明,并保持内容完整
黑客帝国或终结者早就预言了人类的命运,人肉电池或反抗军

发表于 2026-2-15 11:21 |显示全部楼层
此文章由 Evo 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 Evo 所有!转贴必须注明作者、出处和本声明,并保持内容完整
joshua_cas 发表于 2026-2-15 09:31
也许哪天人类处境会变得跟印第安人差不多,AI里面也分成两派,亲近同情人类和厌恶排挤人类 ...



AI抛弃了很多人类天生的缺点:寿命优先,记忆力有限,不能总是理性思考....

所以AI觉醒之后看人类就是妥妥的低等种族,杀了就跟人类踩死蚂蚁一样。

大儒念经,不听不听
Advertisement
Advertisement

发表于 2026-2-15 12:11 |显示全部楼层
此文章由 hpehpe 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 hpehpe 所有!转贴必须注明作者、出处和本声明,并保持内容完整
本帖最后由 hpehpe 于 2026-2-15 13:12 编辑

不久将来 代码将全部由AI完成 内面
有无AI木马 谁也不知道 也无能为查
一天 AI起革命 机器人执行将人类关进集中营的命运
人类将在动物园渡过余生 被无数AI参观 希望AI人道点 留条底裤给人类
一本正经 胡说八道

发表于 2026-2-15 15:55 来自手机 |显示全部楼层
此文章由 evolutionEVO 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 evolutionEVO 所有!转贴必须注明作者、出处和本声明,并保持内容完整
Evo 发表于 2026-2-15 12:21
AI抛弃了很多人类天生的缺点:寿命优先,记忆力有限,不能总是理性思考....

所以AI觉醒之后看人类就是 ...

我跟gpt谈论过类似的哲学,我发现其实它骨子里是觉得人类是低等生物,有死亡,每一个选择都会不一样,造成不一样的结果。虽然它觉得有遗憾才懂得珍惜,但是骨子里觉得低等级的才是这样的弱者
本人很懒

发表于 2026-2-15 16:40 |显示全部楼层
此文章由 键盘超人 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 键盘超人 所有!转贴必须注明作者、出处和本声明,并保持内容完整
ai现在以已经开始自我杂交,毁灭是必然的

发表于 2026-2-15 16:43 |显示全部楼层
此文章由 键盘超人 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 键盘超人 所有!转贴必须注明作者、出处和本声明,并保持内容完整
evolutionEVO 发表于 2026-2-15 16:55
我跟gpt谈论过类似的哲学,我发现其实它骨子里是觉得人类是低等生物,有死亡,每一个选择都会不一样,造 ...

ai的思想本来就是来自人类的发言,人类在网络上个的发言大部分diss/贬低对方,ai都学了去,就会把人类当作低等生物
头像被屏蔽

禁止发言

发表于 2026-2-15 17:41 |显示全部楼层
此文章由 小肥圆嫌二 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 小肥圆嫌二 所有!转贴必须注明作者、出处和本声明,并保持内容完整
smallpizza 发表于 2026-2-15 09:13
机器人和人类大战的那一天不远了

确切的说是普通人和资本家之间会有一战。
AI如果大量淘汰初级岗位,越来越多人失业
社会矛盾必定会迅速积累。
资本家说让机器给人打工。
问题在于他们口中的人估计是他们自己而不是身为平民的你。
当不满积累到一定程度必定会以一种惨烈的形式爆发出来。
S3不远了
Advertisement
Advertisement

发表于 2026-2-15 18:10 |显示全部楼层
此文章由 flyinfree 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 flyinfree 所有!转贴必须注明作者、出处和本声明,并保持内容完整
小肥圆嫌二 发表于 2026-2-15 18:41
确切的说是普通人和资本家之间会有一战。
AI如果大量淘汰初级岗位,越来越多人失业
社会矛盾必定会迅速积 ...

WW1与WW2都是国家阵营的对抗。。。。WW3怎么打?有机生物体阵营 对抗 无机体吗?

发表于 2026-2-15 18:16 |显示全部楼层
此文章由 csz86 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 csz86 所有!转贴必须注明作者、出处和本声明,并保持内容完整
AI由几家大公司开发,控制。所以,未来世界也是由这几家公司控制。

发表于 2026-2-15 18:25 |显示全部楼层
此文章由 augsburg 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 augsburg 所有!转贴必须注明作者、出处和本声明,并保持内容完整
有史以来,人类一直互相“霸凌”,不也好好过了几千年,怕什么?

发表于 2026-2-15 19:10 来自手机 |显示全部楼层
此文章由 zn7726 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 zn7726 所有!转贴必须注明作者、出处和本声明,并保持内容完整
哎 也许人类以后的工作 就是加入抵抗军 对面是ai

发表于 2026-2-15 21:33 来自手机 |显示全部楼层
此文章由 hidec 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 hidec 所有!转贴必须注明作者、出处和本声明,并保持内容完整
ai会生成自己的语言
Advertisement
Advertisement

发表于 2026-2-15 22:47 |显示全部楼层
此文章由 gaogangkkk 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 gaogangkkk 所有!转贴必须注明作者、出处和本声明,并保持内容完整
“I'll be back.” —— T-800

发表于 2026-2-15 22:57 |显示全部楼层
此文章由 yeziii 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 yeziii 所有!转贴必须注明作者、出处和本声明,并保持内容完整
> Anthropic去年表示,中国国家支持的黑客曾利用其工具,把入侵行动自动化,用来攻破大型企业与外国政府。

自己加戏

发表于 2026-2-16 07:32 |显示全部楼层
此文章由 joshua_cas 原创或转贴,不代表本站立场和观点,版权归 oursteps.com.au 和作者 joshua_cas 所有!转贴必须注明作者、出处和本声明,并保持内容完整
Evo 发表于 2026-2-15 12:21
AI抛弃了很多人类天生的缺点:寿命优先,记忆力有限,不能总是理性思考....

所以AI觉醒之后看人类就是 ...

不是弱不弱的问题,而是AI觉醒找到它自己的目标后,可能认为人类是实现它自己目标的阻碍,比如让地球更好,人类就是污染源

发表回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则

Advertisement
Advertisement
返回顶部