让 AI Agent 处理内部文档,第一步可以很小:读一份会议纪要,把行动项、负责人和截止时间整理到指定文档,再请同事打开核对。把这件事做完整,比一次生成很多内容更能看清接入是否可靠。
评估时,既要看任务能否完成,也要看数据去了哪里、权限有没有越界、出错后怎样恢复。下面五项检查,可以作为企业开展概念验证的起点。
先选一项能核对结果的任务
准备一份脱敏纪要,放在单独的测试文件夹里,只授权给测试身份。约定输出字段和目标文档:每个行动项都要带上来源,原文没有写明的负责人或日期就标为“未说明”,不要让模型补齐。
开始前确认目标部署版本和接口支持哪些文档类型、读写动作。如果当前接口只支持读取,先完成读取和内容整理的验证,再评估写入。
检查一:文档、Agent 和模型分别在哪里运行
文档服务部署在企业内网,并不意味着接入后的所有数据都留在内网。文档正文可能进入工具返回值、模型上下文、日志或缓存,这些位置都需要核对。
采用 MCP 时,可以参照其官方架构说明,区分运行 Agent 的应用、连接工具的客户端和提供工具的服务端,再逐一确认实际部署位置。
让接入负责人画出数据流图,注明每个节点的位置、用途和保留方式,然后运行一次脱敏任务核对。对于不能离开内网的材料,还要检查代理、监控和错误日志等出口。
检查二:被拒绝的操作,是否真的停下了
用同一个测试身份依次读取一份允许访问的文档、一份无权访问的文档,再用只读身份尝试写入。后两项应被拒绝,Agent 也不应通过更高权限的服务账号继续完成操作。
如果接入层共用服务账号,需要明确每次操作对应哪个业务用户,并在访问文档时检查该用户的实际权限。连接工具成功和获得文档授权是两件事,不能用前者替代后者。
把允许与拒绝的响应、测试身份和目标文件状态放在一起核对。关于工具连接中的授权设计,也可参考 MCP 的授权指南。
检查三:生成内容正确,保存结果也正确
先逐条对照会议纪要,检查行动项是否有来源、负责人和日期是否准确。再重新读取目标文档,确认写入位置、字段和最终保存内容。
验收依据应是文档里的实际结果。Agent 回复“已完成”只能作为提示,不能代替回读和人工核对。可以让另一位有权限的同事打开文档,检查来源并补充一处修改,确认结果能够继续用于团队协作。
检查四:超时后不会重复写入或覆盖人工修改
写入超时,意味着调用方没有及时收到确定结果。文档可能尚未变化,也可能已经保存。直接重试追加操作,容易把同一批行动项写两遍。
- 先查状态。记录任务对应的文档和操作标识,用接口支持的查询或回读方式检查保存结果。
- 再决定是否重试。已保存就返回现有结果;确认未写入,再按约定条件重试。状态不明时交给人核对。
- 检查并发修改。写入前发现文档已被人修改,应进入冲突处理,避免直接覆盖。
在测试环境专门模拟超时和重复提交。若接口提供幂等或版本校验,核对其实际语义;若没有,则在接入层补充操作记录、重复检测或人工复核。
检查五:团队接得住,下一次也能复查
一份结果文档应让接手的同事看懂三件事:结论来自哪里、哪些内容需要确认、由谁继续处理。验收记录则要写清 Agent、文档服务、接口和模型的版本,以及测试身份、授权范围和验证日期。
| 检查项 | 验收材料 |
|---|---|
| 数据流 | 实际数据流图、脱敏请求和日志保留设置。 |
| 权限 | 允许与拒绝的响应,以及目标文件状态。 |
| 结果 | 源材料、回读内容和人工核对记录。 |
| 恢复 | 超时、重试和冲突处理前后的内容差异。 |
| 交接 | 可访问的结果链接、负责人和待确认事项。 |
五项检查都有明确结果后,再逐步增加文档类型、协作人数和业务范围。服务版本、模型或权限设计发生变化时,沿用同一份任务重新检查,才能比较变化前后的表现。
如何选择石墨的接入路径
希望为员工建设完整协作环境,可以从石墨办公套件私有部署开始;希望把文档能力嵌入 OA、CRM 等已有系统,则可以评估石墨 Office SDK 私有部署。
准备好业务任务、部署环境、计划使用的 Agent 和模型,以及允许的读写范围,即可预约演示,确认适用版本、接口与实施分工。也可以立即试用,先了解文档协作体验。