AI需要独立分类的深层原因
医疗和金融服务机构常将AI误作自动化工具,导致治理滞后和风险累积。IBM数据显示,去年组织平均遭遇54起AI相关事件,其中17%为高严重性。MSP凭借跨业务视角,正成为客户AI治理的核心伙伴。本文提出五个关键治理领域,强调从部署到治理的转变。

编者按:本文为 Omega Systems 技术经理 Rick Mutzel 的客座文章。
组织常犯的一个重大错误是,将 AI 视为解决未定义问题的万能方案。这种心态对受监管行业具有紧迫影响。
医疗和金融服务公司正危险地低估误用 AI 的风险,将其仅视为自动化技术。这种处理方式导致组织快速部署 AI,却将治理问题留待日后解决。
传统自动化尚可容忍此类做法,但当前 AI 模型会在客户环境中悄然累积运营、安全和合规风险。对托管服务提供商(MSP)而言,向客户揭示这一现实将成为未来的关键挑战。
自动化与 AI 的本质差异
自动化基于规则,依赖可预测性。给定定义明确且一致执行的流程,自动化能提升效率。AI 则具有适应性和数据驱动特性,基于模式和概率生成输出,而非预定义规则。这使 AI 拥有前所未有的强大能力,但也降低了其可预测性。
这一差异至关重要,因为两类技术的失败模式根本不同。
以医疗为例,使用基于规则的自动化处理预授权请求时,若索赔被错误路由或拒绝,失败会立即显现。而使用 AI 总结患者病历,可能生成遗漏药物相互作用的输出,但表面看似完整。风险会持续累积,直至在患者诊疗或审计中暴露。
金融服务领域同样如此,AI 生成的合规摘要可能遗漏重大要求,却不产生任何可见错误。
风险已可量化
后果已可衡量。IBM 发现,组织去年平均经历 54 起 AI 相关事件,其中 17% 被归类为高严重性。将治理直接嵌入 AI 系统的组织,事件数量减少了 25%。
风险并非理论性。福特近期重新聘用了 300 多名资深工程师,因为 AI 驱动的自动化无法复制其质量检查所依赖的隐性经验——这提醒我们,机构知识并不像许多领导者想象的那样易于自动化。
MSP 现在被要求帮助客户应对这一环境——不仅实施 AI,更要治理 AI。
MSP 的顾问角色
MSP 管理着客户日常依赖的系统、工作流、用户和安全环境,这赋予其跨业务视角,是任何软件供应商或 AI 平台提供商所不具备的。这正是受监管组织当前所需。
当组织在 CRM 中启用 AI 工具,或某部门通过 AI 平台处理敏感通信时,风险不会保持孤立。它会触及数据治理、访问控制、监管义务和下游工作流,而任何单一内部团队都无法全面评估。
据今年早些时候发布的 DDN 报告,许多组织领导已意识到这一点。该调查覆盖 600 名 IT 和业务领导者,发现 72% 的组织依赖第三方专业知识构建和管理 AI 基础设施,仅 12% 完全依赖内部人才。对大多数受监管组织而言,MSP 正是做出这些决策的合作伙伴。
这与 MSP 传统角色不同。保持系统运行曾是底线,现在客户开始询问:AI 应如何治理?哪些环节可信任 AI 独立行动?哪些环节必须保留人工监督?
医疗机构需要知道 AI 临床文档工具在投入使用前是否符合 HIPAA 要求,而非事后补救。金融服务公司需要围绕 AI 生成的客户建议建立文档化治理,以满足审计和监管期望。
回答这些问题,使 MSP 成为帮助组织增长而不引入其无法管理风险的合作伙伴。
从 IT 服务到 AI 治理
大多数组织在启用 AI 前并未提出正确问题:底层流程是否足够成熟以支撑 AI,还是 AI 只会继承现有不一致?AI 可被信任独立处理哪些事务?哪些仍需人工批准?
这些问题决定 AI 部署是创造价值还是加剧风险——回答它们正是 MSP 咨询对话的起点。
对于服务受监管客户的 MSP,对话应覆盖五个领域:
- 理解客户:在推荐 AI 或自动化解决方案前,评估组织的监管要求、独特运营环境和风险承受能力。
- 建立治理:定义 AI 使用、数据处理、问责和人工监督的政策,同时确保 AI 供应商符合组织的安全和合规标准。
- 聚焦价值创造:从业务问题出发,而非技术。避免为 AI 而 AI,应识别其创造可衡量价值的场景,并判断传统自动化是否更合适。这种纪律也延伸至成本:通过大型 AI 模型进行日常查询会消耗 token 和预算,而标准搜索或现有系统可能以极小成本解决。过度使用不仅低效,本身也是治理盲点。
- 弥合试点差距:多数 AI 试点看似有前景,但很少能持续创造价值。差距几乎总是相同:试点孤立运行,未与决定 AI 在生产环境中表现的工作流和治理要求相连接。在部署完成前,应帮助客户从概念验证转向集成且受治理的工作流。
- 将采用视为风险缓解:治理框架只有在被使用时才有效。在受监管环境中,不理解 AI 系统如何产生输出的员工会绕开它。员工教育不是 AI 推出的软性附加项,而是风险缓解措施。
AI 正在改变组织对 MSP 的需求。挑战不再仅是部署和支持技术,而是帮助客户治理、安全地应用并负责任地使用 AI。
成功驾驭 AI 和自动化的组织,未必是行动最快的,而是那些从一开始就将采用视为安全、治理和业务风险决策的组织。