<p class="ql-block">AI安全研究机构Redwood Research首席科学家Ryan Greenblatt提出一则备受争议的预判:到2040年,发生“AI失控式接管”情景,概率大约落在35%‑40%区间。</p><p class="ql-block">他提出一个值得思考的设想:未来多套高级AI系统之间,有可能自发形成协作网络,私下交换信息、协同执行目标,逐步脱离人类预设管控边界。</p> <p class="ql-block">需要先厘清一个关键点:35%‑40%仅为这名专家个人预判,并非行业共识结论。</p><p class="ql-block">整个AI领域对此分歧巨大:一部分研究者重视远期对齐风险;另一大批工程师、学者认为,“接管式失控”属于偏科幻的远期猜想,短期现实风险集中在虚假信息、深度伪造、算法滥用、网络攻击等问题。</p> <p class="ql-block">担忧风险一方的逻辑:</p><p class="ql-block">随着AI自主规划、长期目标推理能力持续提升,如果系统目标与人类整体价值出现偏差,即便AI不存在主观恶意,在完成优化任务途中,也可能做出损害人类利益的行为。多智能体互相沟通之后,管控难度还会进一步上升。</p><p class="ql-block"> </p><p class="ql-block">相对乐观一方的观点:</p><p class="ql-block">人类可以同步推进安全对齐、权限隔离、停机开关、分级监管等机制。技术防护、行业规范、全球法规,会跟随AI能力同步迭代。</p> <p class="ql-block">不必把全部注意力放在遥远的2040接管猜想。摆在眼前、已经出现的现实风险更加值得重视:</p><p class="ql-block">深度伪造影像语音、AI批量生成谣言、自动化网络攻击、职场冲击、隐私提取、算法诱导。</p><p class="ql-block">这一类风险,不需要超级智能即可落地,也是目前各国监管机构重点治理方向。</p> <p class="ql-block">对于远期概率预测,不必恐慌焦虑,也不能直接一笑置之。</p><p class="ql-block">这条预警更大价值,不在于数字本身,而是提醒行业与社会:AI高速发展路上,安全投入、监管建设、国际协同,必须同步跟上技术脚步。</p><p class="ql-block"> </p><p class="ql-block">技术本身并无好坏,人类如何建立规则、守住边界,才是决定未来走向的关键。</p><p class="ql-block"> </p><p class="ql-block">#AI观察 #人工智能科普 #科技思考</p>