前沿AI与网络风险
作者 Jonas Mohamed Osman Abdelghafour
前沿AI并未创造新的攻击类别,它消除的是过去使这些攻击保持罕见的成本与技能门槛。
作者:Jonas Osman Abdelghafour。
欧洲监管机构在2026年就前沿AI模型相关的系统性网络风险发出了联合警示,其表述方式是经过深思熟虑的:真正令人担忧的并非某种全新的攻击类型,而是攻击经济学发生的变化。过去需要熟练操作人员及大量时间才能实现的能力,如今只需一段提示词与几分钟即可完成。当一次复杂攻击的边际成本下降一个数量级时,攻击的数量与目标范围都会随之改变。
对银行而言,究竟发生了什么变化
规模化且高质量的社会工程攻击。 措辞流畅、语境准确、基于公开数据进行个性化定制,并以目标对象母语呈现的钓鱼邮件,消除了安全意识培训所依赖的语言与格式线索。语音克隆技术则将这一问题延伸至回拨验证环节,以及依赖“辨认出同事声音”的付款授权流程。
更快的漏洞利用周期。 自动化代码分析压缩了漏洞披露与武器化之间的时间间隔,进而压缩了银行在漏洞管理服务水平协议中所假定的补丁窗口期。一项按照历史漏洞利用速度校准的三十天补救标准,如今或许已成为一份“按计划遭受入侵”的政策。
针对模型层本身的攻击。 部署AI的机构获得了其安全框架并未为之设计的攻击面:通过要求智能体处理的文档或电子邮件实施的提示注入、对检索语料库的投毒、对嵌入上下文中的敏感信息的提取,以及对拥有真实系统权限的、可调用工具的智能体的滥用。一个拥有数据库访问权限且信任边界设计粗糙的智能体,等同于一名没有判断力却已通过身份验证的内部人员。
集中度风险。 少数几家模型提供商如今支撑着金融行业不断增长的一大部分AI应用。该层一旦出现缺陷、遭到入侵或发生中断,将同时波及各家机构——这与云计算集中度问题属于同一种相关性风险,只是目前处于更早的成熟阶段。
应对这种经济学变化的控制措施
安全意识培训仍然必要,但已不再充分,因为它依赖于诱饵是否可被识破。控制措施应转向不依赖人工识别的流程设计:
- 对付款与凭证变更实行带外验证,无论职级高低或事项是否紧急,均不设例外。
- 采用抗钓鱼身份验证,使被成功欺骗的用户也无法交出可重复使用的凭证。
- 缩短面向互联网及高严重性漏洞的补丁周期,并配备真正具有约束力的例外流程。
- 对拥有写权限或交易能力的AI智能体实行最小权限原则与人工审批关卡,并将所有检索到的内容一律视为不可信输入。
- 对AI系统实施输入输出验证,包括对检索来源的溯源控制。
- 将检测能力调优至异常的内部行为,而不仅仅是针对边界特征。
治理与第三方关联
前沿AI网络风险处于运营韧性、第三方风险与模型风险的交汇点,这也是它常常在三个委员会之间被搁置的原因。它需要一位明确的责任负责人、在风险分类体系中占有明确位置,并需要一套将该威胁与关键业务服务而非单纯技术资产相连接的报告机制。
对于提供商而言,尽职调查的问题是具体的:模型存在哪些防止被滥用的保障措施?有哪些安全控制措施保护模型及发送给它的数据?重大变更会以何种方式通知?提示词与输出内容将如何处理?以及一旦该服务被撤回,机构将如何维持运营?合同层面的审计权与变更通知权是最基本的要求。
测试
情景测试应当纳入一条AI驱动的攻击路径——例如由智能体介导的入侵、合成语音授权欺诈,或遭投毒的检索来源——并应测试当用于应急响应的工具本身也受到影响时的恢复能力。使用与攻击者相同能力的红队演练,比控制清单式的检查能给出更真实的反映。
其战略要点十分明确:按照过去十年攻击成本校准的防御措施,如今已经校准到了错误的数值上。对其进行重新校准是一项运营韧性决策,理应与机构自身的AI应用规划一并列入董事会议程。
主要来源: 欧洲三大监管局(ESAs)对欧洲系统性风险委员会(ESRB)关于前沿AI模型系统性网络风险警示的支持性文件,2026年7月;DORA运营韧性要求;金融稳定理事会(FSB)关于AI应用与金融稳定性的相关研究。
