Synth Daily

AI不是来签字的

该内容探讨了人工智能(AI)在高风险专业领域(如国土空间规划和灾害预警)中的正确应用方式。核心论点是,AI 不应被视为替代人类专家的“决策者”,因为其“幻觉”风险在这些场景中是不可接受的。相反,AI 的真正价值在于扮演“模型审计员”“证据链构建者”的角色。它应当通过核查数据、参数、流程和多重情景,将传统工作流程中隐蔽的“黑箱”过程透明化,从而增强决策的可追溯性、可复核性和安全性。最终结论是,政府 AI 成功的关键不在于模型本身有多智能,而在于打通数据、规则、工具和权限的流程,让 AI 照亮决策前的过程,而非直接替人决策。

我们讨论的是同一个 AI 吗?

专家们担心 AI 在国土空间审批、水利工程、山洪预警等场景中出错,这完全可以理解。在这些领域,一个参数的错误就可能导致巨大的损失。

国土空间审批、水利工程、山洪预警,哪一样能让大模型拍脑袋决定?

然而,这种担忧可能源于对 AI 角色的误解。

  • 专家脑中的 AI: 一个试图模仿专家,直接看图、读政策、然后盖章决策的“电子局长”。这种模式充满了幻觉风险。
  • 更现实的 AI: 一个永不疲倦的审查员。它不签字,不拍板,不承担最终责任。它的任务是检查、验证、对比和记录。

真正的问题不是 AI 能否替代专家,而是 AI 能否将专家过去依赖经验、直觉和手工操作的判断过程,转变为一条可复核的证据链

专家真正害怕的是什么?

专家警惕 AI,表面上是害怕其不可预测的“幻觉”,但更深层次的原因是对传统工程世界底线感的维护。

传统 GIS 模型(如水文、地质模型)之所以被信任,并非因为它“老”,而是因为它在理论上是可复现、可检验、可追责的。专家的真正担忧是,一个缺乏约束的 AI 可能会随意颠覆这套有共识、有责任体系的流程。

但这里存在一个反转:传统流程本身并非完美无瑕。

  • 同一个项目,更换工程师、项目组或软件版本,都可能导致 DEM 预处理方式、参数解释、工具链发生变化。
  • 历史数据可能未及时更新,但模型仍在沿用旧的阈值。

这些问题虽然不叫“幻觉”,但它们同样会制造风险,并且由于披着“传统流程”的外衣而更难被察觉。AI 真正要挑战的,正是这些隐藏在手工流程中的不可见过程

科学不是按钮。科学是可证伪、可追溯。

AI 该做什么:成为模型审计员

要让 AI 在高风险领域发挥作用,不应追求让它“发明”比专家更聪明的模型,而应让它成为一个模型审计员,去追问现有模型是否被正确调用。

AI 的首要任务是学会尊重并审查已有模型:

  • 数据来源: 这次分析用的 DEM 分辨率是多少?土地利用数据是不是最新的?
  • 模型与参数: 调用的是哪个审定模型?参数来自哪份规范?
  • 情景与对比: 降雨情景是几年一遇?与上次运行结果相比,差异是什么原因造成的?
  • 过程记录: 整个分析过程是否留下了完整的记录,而不是只存在于专家的个人经验里?

通过这种方式,AI 将专家过去零散、隐性的工作过程显性化。它负责检查数据缺口、记录参数版本、运行多种情景、比较结果差异,最终将“稳定结论”“需人工判断的边界情形”清晰地分开呈现。

专家仍然是最终的决策者,但他们看到的不再是一张孤立的图,而是一个包含假设、参数、版本和不确定性分析的证据包

案例:国土空间规划“一张图”审批

在“一张图”审批中,AI 的角色不是直接说“这个项目可以批”,而是输出一份详尽的审查报告:

  • 项目范围与永久基本农田交集为 0
  • 与生态保护红线交集为 236.4 平方米,涉及图斑编号 X、Y、Z。
  • 最近红线距离为 8.6 米,建议做缓冲复核
  • 项目西南角疑似与已批供地范围重叠,引用政策条款如下……
  • 图层版本如下……
  • 需人工复核事项如下……

AI 的价值在于“比人更不容易漏掉机械性检查”。人会疲劳,会忘记叠某个图层,会因时间紧迫只做一个方案。而 AI 可以不知疲倦地按清单检查,可以快速运行多组情景对比,并把所有过程写入日志。

“空间审批不可出错”这句话,推不出“不要 AI”。它只能推出:越是不可出错,越不能只靠人眼、人脑和手工流程。

政府 AI 的真正难题

政府 AI 落地最大的障碍,并非模型不够聪明,而是政府内部的系统性问题:

  • 数据权威性: 当三调数据、年度变更、专项规划数据不一致时,以哪个为准?
  • 规则可执行性: “原则上不得占用”这类模糊语言,如何翻译成机器可以执行的硬性规则?
  • 责任划分: AI 生成报告,人员签字,厂商提供工具。一旦出错,责任链如何界定?
  • 系统打通: 如果无法打通审批、监测、档案、地图等多个系统,AI 最终只能停留在聊天窗口里写材料。

真正的解决方案是把权威数据、业务规则、模型工具、权限审计和人工签批重新连接起来,构建一个完整的证据链。

AI 不是来签字的,是来照亮过程的

AI 的使命不是取代专家去盖章,而是照亮盖章前那段黑暗、模糊的过程。它将决策前的检查、对比和分析过程变得透明、可追溯。

专家依然是决策的核心。但未来,他们面前的将是一条由 AI 构建的清晰证据链,上面列明了数据来源、模型参数、风险点和不确定性。专家不再需要把 AI 当成一个越权的挑战者,AI 也不必假装无所不能。

AI 不是来替人负责的。它是来让责任终于有迹可循。

AI 会提前把所有该检查的地方都检查一遍,把可能的风险都摆到桌上。然后,专家审阅这份详尽的报告,做出最终判断。这就够了。