AI治理新范式:为何异议权与执行权必须分离?
在绝大多数重大组织事故的复盘报告中,我们常看到一句令人深思的话:“其实早就有人提醒过。”工程师在测试数据中捕捉到的异常曲线,安全团队提交的风险评估,一线员工反馈的流程漏洞,以及审计人员发现的报表差异,这些信息从未缺席。然而,真正缺失的是一种能让这些异常持续停留在组织视野中的机制。这种现象被称为“组织沉默”,它不需要任何人撒谎或下达封口令,只需每个个体基于自身利益做出看似合理的选择,风险便会在会议纪要的边缘、管理层注意力的盲区以及集体记忆的淡化中悄然消失。
更隐蔽且危险的机制随之而来,即“偏差正常化”。当某个偏差长期存在却未引发即时严重后果时,人类心理会自动寻求一致性,组织倾向于重新定义“正常”而非纠正偏差。最初被判定为必须立即修复的缺陷,逐渐演变为“已知问题”,进而成为“历史遗留”,最终固化为“标准流程”。社会学家戴安娜·沃恩在研究挑战者号航天飞机事故时指出,NASA对O型密封圈异常的容忍度,正是在一次次侥幸成功的发射中被逐步扩大的。每一次“这次没出事”都成为了下一次放行的证据,规则虽写在文件里,但执行的边界已在现实中悄悄移动。
在此背景下,引入AI的价值不应仅局限于提升效率,更在于其作为“持续异议者”的结构性优势。人类难以成为长期的异议者,因为判断不仅基于信息,还深受职级、绩效、人际关系及未来预期的影响。下属难以反复反驳上级,项目成员不愿拖累进度,安全团队在多次资源申请无果后措辞会自动软化。此外,异议是有成本的,且随次数递增,人类很难在十几次无视后仍坚持发声。相比之下,AI具备不疲惫、不站队、不遗忘的特质。它没有绩效考核的压力,不会因会议气氛紧张而下调风险等级,也不会因提出方是高层而调整措辞。
AI的核心能力体现在跨时间连接、标准漂移度量及组织记忆保管上。它能将分散的微小偏差连成线,指出某项仅允许出现一次的例外在过去半年已发生十七次;它能识别出文件标准未变但实际执行标准已连续下滑十八个月的隐蔽漂移;它还能在人员流动后,将被遗忘的历史工单和搁置报告重新放回决策上下文。AI的任务不是反对一切,而是不断将“这已非孤立事件”、“风险未被解决仅被延期”、“过去无事仅是运气未耗尽”等事实摆回桌面。
然而,必须警惕的是,AI并非天然代表理性,它学习的是包含大量已正常化偏差的历史数据。若过去的违规操作未造成可见损失,模型可能将其识别为“高效实践”;若组织长期奖励速度,模型会主动寻找规则边缘。更危险的是,AI能为偏差生成比人类更具说服力的解释。过去人为不合规辩护时理由单薄,如今AI能在几秒内生成结构完整、引用充分、语言专业的论证材料,大幅抬高反驳门槛。一旦AI同时掌握分析、建议与执行权,它可能变成将偏差高效转化为现实结果的机器,使偏差通过算法表达被系统化。
因此,成熟的AI治理必须遵循“发现权与执行权分离”的核心原则。AI应拥有分析风险、提出反对意见、识别异常模式、要求补充证据及建议暂停操作的权力,且反对意见必须留痕且不可删除。但“是否允许在现实中执行”的权力不能仅依赖AI判断。这是因为AI输出受数据错误、目标函数偏差及模型局限影响,且其本质是概率性解释,而现实执行往往是一次性且不可逆的。概率性的输入不应直接驱动不可逆的输出,正如一笔资金转出或权限授予后,事后的“模型误判”无法挽回损失。
为实现这一原则,需落实五条可工程化的设计准则。首先,异议留痕且默认不可删除,确保事后追责有据可依,打破“当时不知道”的借口。其次,为例外设置计数器而非单次审批,当同类例外达到阈值时触发流程重审,因为反复发生的例外意味着规则本身需修改。第三,按可逆性而非风险等级分级授权,可逆操作可由AI自主执行,半可逆需人类确认,不可逆操作必须经过独立于模型的确定性校验。第四,强制AI论证反方,若其能为放行生成完美报告,必须同时生成同等质量的反对报告,以双向说服力支持决策。最后,定期审计AI自身的漂移,检验其对“正常”的定义是否随数据更新而发生不合理偏移,防止偏差正常化换上更精确的算法面孔。
未来真正成熟的组织,不会追求AI永远正确,也不会将其视为新的管理权威。相反,它们会让AI持续提出问题,让人类理解复杂情境,让独立机制验证必要条件,并让现实执行只发生在明确、有限、可验证的边界之内。不要问AI能否被信任,而要问当其出错时,组织能否收回结果。AI帮助组织看见异常,但系统必须决定异常能否进入现实。这种将AI定位为异议者而非最终决策者的治理架构,或许是应对算法时代组织风险最关键的设计原则。