1. 这条民调数字背后,普通人在担心什么
73% 这个数字一出来,我朋友圈里做 AI 产品的、做数据合规的、还有几个在传统行业做风控的老朋友,几乎同时转了同一条消息。大家讨论的角度不太一样,但核心情绪是共通的:公众对 AI 公司的信任赤字,已经大到没法用“技术还在早期”这种话糊弄过去了。
先把这条民调本身说清楚。路透社和益普索联合做的这项调查,核心结论是大约 73% 的美国受访者认为,AI 公司在“防止 AI 造成灾难性后果”这件事上做得不够。注意这里的措辞,不是“AI 技术本身危险”,也不是“AI 会抢走工作”,而是把矛头指向了公司这个主体——你们这些造 AI、卖 AI、部署 AI 的机构,在安全防护上的投入和透明度,没达到公众期待的水平。
这个指向性非常关键。它意味着公众的焦虑已经从“技术恐惧”升级成了“治理不信任”。技术恐惧可以靠科普缓解,但治理不信任只能靠制度、流程和可验证的行动来修复。我做过几年企业级软件的安全合规咨询,见过太多团队在“技术能力”上很强,但在“让外部相信我们做了该做的事”这件事上几乎零投入。AI 行业现在整体就处在这个状态。
这篇文章我想聊的不是这条民调的政治含义,而是把它当成一个信号,拆解一下:AI 公司在安全防护上到底应该做什么、公众在担心哪些具体场景、以及一个普通从业者或团队负责人能从这条新闻里拿走什么可落地的东西。不管你是做模型的、做应用的、还是做企业采购决策的,这条民调都值得你花二十分钟认真对待。
适合读这篇的人:AI 产品经理、技术负责人、安全合规岗、企业 IT 采购、以及任何想把 AI 用在自己业务里但心里没底的人。我会尽量少讲空话,多讲能直接对照检查的清单和判断标准。
2. 拆解“防止灾难”这四个字:公众到底在怕什么
2.1 灾难不是科幻片,是四个具体的失效场景
很多人一听到“AI 灾难”就想到终结者,这其实是把问题娱乐化了。我在实际做风险评估的时候,会把“灾难性后果”拆成四个层级,从近到远分别是:
第一层:个体级伤害。比如 AI 给出的医疗建议导致误诊、AI 招聘系统系统性歧视某一类候选人、AI 客服在用户情绪危机时给出错误引导。这类事件每天都在发生,只是大多数没上新闻。
第二层:组织级失控。比如企业把核心决策交给 AI 但缺乏人工复核,导致大规模错误放贷、错误拒保、错误裁员。这类事件的破坏力是批量化的。
第三层:基础设施级风险。比如 AI 系统被恶意利用来生成大规模钓鱼内容、自动化攻击脚本、深度伪造的欺诈素材。这已经不是单个公司的问题,而是整个数字生态的问题。
第四层:长期系统性风险。比如模型能力集中在极少数机构手里、训练数据不可追溯、评估标准不统一,导致整个行业在“没人能独立验证安全性”的状态下狂奔。
公众说的“防止灾难措施不够”,大概率指的是前三层,尤其是第一层和第二层——因为这些是他们能感知到的。第四层是从业者才关心的,但恰恰是第四层决定了前三层的天花板。
2.2 为什么公众把责任归给“公司”而不是“技术”
这里有个很微妙的心理机制。技术是中性的这个说法,在公众那里已经失效了。原因很简单:技术不会自己部署自己,是公司决定把它部署到哪里、给谁用、用什么防护级别。
我举个实际例子。同一个大语言模型,用在内部知识库检索和用在面向公众的医疗咨询,风险等级完全不同。前者出错最多是员工查不到资料,后者出错可能耽误治疗。但很多公司在两个场景用的是同一套防护策略,甚至根本没有场景分级。公众虽然不懂技术细节,但他们能感觉到“你们没认真对待不同场景的差异”。
所以这条民调的本质,是公众在要求 AI 公司展示场景化的安全投入,而不是笼统地说“我们很重视安全”。重视是态度,投入是证据。
2.3 73% 这个比例意味着什么
我查了一下这类调查的历史数据做对比。在自动驾驶、基因编辑、核能这些领域,公众对“企业安全措施是否足够”的怀疑比例通常在 50% 到 65% 之间波动。73% 是一个相当高的数字,说明 AI 行业的信任度比这些传统高风险行业还要低。
更值得注意的是,这个数字在不同人群中的分布。根据我看到的公开分析,年轻群体和高学历群体的怀疑比例并不比整体低多少。这打破了一个常见假设——“懂技术的人会更信任 AI 公司”。实际情况是,越了解技术边界的人,越清楚当前防护措施的薄弱环节在哪里。
这对 AI 公司的启示很直接:你不能靠“教育用户”来解决信任问题,因为最该被教育的那批人恰恰是最不信任你的那批人。你只能靠可验证的行动。
3. AI 公司现在实际做了哪些防护,缺口在哪
3.1 当前主流的安全投入清单
我在过去两年接触过十几家不同规模的 AI 公司,从几十人的初创到几千人的大厂团队。把他们的安全投入归归类,大致是这么几块:
| 防护类型 | 典型做法 | 覆盖比例(我的观察) | 主要缺口 |
|---|---|---|---|
| 模型层防护 | 红队测试、对抗训练、输出过滤 | 较高,大厂基本都有 | 测试标准不统一,结果不公开 |
| 应用层防护 | 内容审核、人工复核、限流 | 中等,取决于产品形态 | 场景分级粗糙,复核流于形式 |
| 数据层防护 | 数据溯源、隐私脱敏、授权管理 | 偏低,尤其初创 | 训练数据来源不透明 |
| 组织层防护 | 安全委员会、伦理审查、外部审计 | 很低,多数是摆设 | 没有独立否决权 |
| 披露层防护 | 模型卡、系统卡、事件报告 | 极低 | 出了事基本不主动说 |
这张表里最扎眼的是最后两行。组织层和披露层的投入,恰恰是公众最在意、也最容易验证的部分,但也是行业做得最差的部分。模型层和应用层的技术防护,外人看不懂;但“你们有没有一个能否决产品上线的安全委员会”“出了事故多久披露”,这些是公众能理解的。
3.2 为什么技术防护做得再多,公众还是不买账
这里有个认知错位。技术团队觉得“我们做了这么多红队测试、加了这么多过滤规则”,但公众看到的是“你们连最基本的透明度都没有”。
我打个比方。这就像一家餐厅,后厨装了一堆高级消毒设备,但从不允许顾客看后厨,也不公布食材来源。顾客的怀疑不会因为你说“设备很高级”而消除,反而会觉得“你这么遮遮掩掩,是不是设备根本没在用”。
AI 公司现在普遍处在这个状态。技术防护是“后厨设备”,披露和治理是“明厨亮灶”。73% 的不信任,很大程度上不是对技术能力的怀疑,而是对“你们愿不愿意让我看见”的怀疑。
3.3 一个被忽视的缺口:中小 AI 公司的安全能力
大厂好歹有资源做安全团队,真正的问题在中小公司。我见过不少十几人的 AI 创业团队,产品已经服务几十万用户了,但安全防护就是创始人兼着看一眼,没有任何系统化流程。
这不是他们不负责任,而是安全投入在早期没有直接商业回报,很容易被无限期推迟。但公众不会区分你是大厂还是初创,出了事都是“AI 公司”的锅。所以这条民调的压力,最终会通过监管和舆论传导到每一个从业者身上。
4. 从这条民调能拿走的可落地动作
4.1 给 AI 产品团队的场景分级自查表
如果你在做 AI 产品,不管规模大小,我建议你先做一件事:把你们所有的 AI 功能按风险等级分个类。不用很复杂,就三档:
- 高风险:输出直接影响人身安全、财产、法律权益、心理健康。比如医疗建议、金融决策、招聘筛选、危机干预。
- 中风险:输出影响用户体验但可逆。比如内容推荐、客服应答、代码补全。
- 低风险:输出仅作参考、有明确人工兜底。比如内部检索、草稿生成。
分完类之后,对照检查:高风险功能有没有人工复核环节?有没有输出边界限制?有没有异常情况的熔断机制?如果高风险和中风险用的是同一套防护,那你的缺口就很大。
提示:场景分级不是做一次就完事,产品每加一个新功能都要重新过一遍。我见过太多团队在早期分了级,后来功能越加越多,分级表再也没更新过。
4.2 透明度建设的最小可行方案
公众要的透明度,不是让你公开模型权重和训练数据,那既不现实也没必要。最小可行的透明度是让外部知道你的安全流程存在且在被执行。
具体可以做这几件事,成本都不高:
- 发布简版系统卡:一页纸说明这个 AI 系统能做什么、不能做什么、已知的失败模式是什么。不用很学术,说人话就行。
- 建立事件披露机制:明确什么级别的事故会在多长时间内对外说明。哪怕只是承诺“重大安全事件 72 小时内发布初步说明”,都能大幅提升信任。
- 引入外部视角:哪怕请一两个外部顾问参与安全评审,也比纯内部闭环强。外部人的价值不在于技术多强,而在于“有人能从外面看”。
- 定期发布安全投入摘要:不用很详细,说清楚这季度做了哪些测试、发现了哪些问题、怎么修的。
这些事加起来,一个两三个人的团队一两周就能搭起框架。关键是愿不愿意做。
4.3 给企业采购方的判断清单
如果你是在企业里负责采购 AI 服务的人,这条民调对你是个提醒:你不能只看功能演示和报价,得看供应商的安全治理成熟度。
我整理了一个简单的判断清单,采购时可以直接问:
- 你们有没有独立于产品团队的安全评审流程?谁有否决权?
- 过去一年有没有发生过安全事件?怎么处理的?有没有对外披露?
- 你们的模型训练数据来源能不能追溯?有没有版权和隐私审查?
- 如果我这个场景属于高风险,你们能提供什么额外的防护配置?
- 出了事故,责任怎么划分?有没有明确的 SLA 和赔偿机制?
供应商如果对这些问题的回答含糊其辞,那风险就要你自己扛了。
5. 常见问题与实操避坑
5.1 小团队资源有限,安全投入怎么排优先级
这是我最常被问到的问题。我的建议是先做“防大错”的事,再做“防小错”的事。
防大错指的是:高风险场景的人工兜底、输出内容的硬性边界(比如医疗场景不能给具体用药剂量)、异常情况的自动熔断。这些不需要很多资源,但能挡住最严重的后果。
防小错指的是:更精细的内容过滤、更全面的红队测试、更复杂的对抗训练。这些可以随着业务增长逐步补。
很多团队的误区是反过来,先花大力气做精细过滤,但高风险场景连人工复核都没有。这是典型的“用战术勤奋掩盖战略懒惰”。
5.2 怎么判断自己的安全措施“够了”
没有绝对的标准,但有一个实用的判断方法:假设你的 AI 系统明天出了一个严重错误,你能不能拿出一套完整的记录,证明你在上线前做了合理的防护、在上线后做了持续的监控。
如果能,那你的措施在“尽职”层面是够的。如果不能,那不管技术多先进,你都是裸奔。
这个判断方法来自法律上的“合理注意义务”概念。公众和监管不会要求你做到完美,但会要求你证明你认真对待了。记录和流程,就是你的证据。
5.3 透明度会不会带来额外的法律风险
这是很多法务和老板的顾虑:主动披露问题,会不会被抓住把柄?
我的观察是,主动披露的风险远小于被动曝光的风险。主动披露时,你掌握叙事主动权,可以说明背景、原因、改进措施。被动曝光时,你只能被动挨打,而且公众会默认你之前一直在隐瞒。
当然,披露要有策略。不是所有细节都要公开,但“发生了什么类型的问题、影响范围多大、我们怎么处理的”这个框架要有。具体的技术细节和用户数据当然要保护。
5.4 这条民调会不会只是一阵风
不会。我判断这类公众情绪有几个特征:一旦形成,很难逆转;会通过监管和采购行为逐步落地;对行业的实际影响有滞后但持续。
具体到 AI 行业,我预计未来一两年会看到几个变化:安全治理岗位的需求上升、第三方安全评估服务兴起、企业采购时安全条款权重提高、以及针对 AI 事故披露的行业规范逐步形成。这些变化对认真做安全的团队是利好,对糊弄的团队是压力。
6. 我个人在实际操作中的几点体会
做了几年 AI 相关的安全合规工作,我最大的体会是:安全这件事,技术只占三成,流程和意愿占七成。
我见过技术能力很强的团队,因为老板觉得“安全拖慢进度”而把防护做得形同虚设;也见过技术一般的小团队,因为负责人认真,用很朴素的方法把风险控制得不错。公众感受到的“措施不够”,大多数时候不是技术不够,而是意愿不够。
另一个体会是,透明度建设越早做越省事。早期产品简单,披露框架搭起来很容易。等产品复杂了、用户多了、出过事了再补,成本和难度都翻倍。我建议任何做 AI 产品的团队,在第一个版本上线前就把系统卡和事件披露机制的基本框架定下来,哪怕内容很粗糙。
最后一个很实际的建议:别把安全当成一个项目,当成一个习惯。每次迭代、每次加功能、每次换模型,都花十分钟过一遍风险清单。这十分钟的投入,长期看能省掉无数麻烦。73% 这个数字不是要吓唬谁,它只是在提醒我们,公众的耐心是有限的,而信任一旦失去,重建的成本高得惊人。