超复杂表单识别并自动填写 RPA+AI

案例定位：面向AI项目审计、PoC设计、方案复用与交付复盘的结构化案例。
事实边界：本文仅把材料中明确披露的内容视为案例事实；PoC门槛与实施步骤属于FDE交付建议。

二、案例基本信息

三、30秒案例摘要

某企业通用企业（原材料未明确披露名称）围绕流程自动化开展AI能力建设。案例所对应的核心矛盾是：客户希望将这个工作能使用 RPA 实现自动化，但却遇到了一些新的问题。方案侧的关键做法是：AI 智能体+RPA+AI 工作流，把原来复杂且容易出错的录入工作，变成了点 3 个按钮就完成的工作！。当前材料可确认的结果为：但希望尽可能降低业务同学的操作门槛。

从FDE交付视角，这类项目不应直接以“大模型上线”作为目标，而应把识别业务材料、执行规则判断并在多个系统间完成可审计操作定义为可评价任务。建议先以300—1,000 份正常、复杂、异常和低质量历史材料建立测试集，以直通率、字段准确率、单笔处理时长为核心指标，通过PoC后再进入系统集成与生产化。

四、企业背景与项目起因

4.1 企业与业务背景

已披露事实

• 客户希望将这个工作能使用 RPA 实现自动化，但却遇到了一些新的问题。
• 处理一份 pdf 文件耗时较长，所以异步执行，并搭建了一个接口，业务同学完成了第 2 步的上传动作后，过一段时间，再通过这个接口查询处理的进度，处理完成了就能下载 excel 啦~以下是请求代码：。
• 希望整个流程交由业务同学自己使用，业务同学随时都可以上传 PDF 执行自动化。

4.2 项目发起原因

已披露或可直接识别的问题

• 客户希望将这个工作能使用 RPA 实现自动化，但却遇到了一些新的问题。
• 处理一份 pdf 文件耗时较长，所以异步执行，并搭建了一个接口，业务同学完成了第 2 步的上传动作后，过一段时间，再通过这个接口查询处理的进度，处理完成了就能下载 excel 啦~以下是请求代码：。
• 由于PDF字段多达100多个，且中英混杂，人工处理既耗时又容易出错。
• 每个供应商提供的PDF都不一样，且字段名称也可能不一样，仅靠 RPA 无法解决，需要AI 理解并提取成规范的、一致的数据格式后，才能录入Excel字段。

FDE补充判断

项目边界应收敛到“识别业务材料、执行规则判断并在多个系统间完成可审计操作”，并在启动会中确认业务负责人、真实使用者、数据负责人和最终验收人。若无法确认这四类角色，项目容易停留在演示层。

五、原始流程与核心问题

5.1 AI介入前的工作流程

以下流程为基于场景的FDE复盘推断，必须在客户访谈和跟岗观察中确认。

接收材料 → 人工识别与录入 → 跨系统复制 → 规则校验 → 提交审批 → 归档。

5.2 核心问题

5.3 项目前基线

六、场景选择与价值判断

6.1 候选场景

6.2 选择原因

第一阶段建议选择“流程自动化”，因为任务边界可以被定义，输入与输出可以形成测试样本，并能通过直通率、字段准确率评价。上线初期保留人工审核和异常兜底，可以在控制业务风险的前提下验证价值。

6.3 核心验证假设

如果使用API与系统集成 + 大语言模型 + RPA组合方案完成“识别业务材料、执行规则判断并在多个系统间完成可审计操作”，预计能够让直通率和字段准确率达到双方约定目标，同时把高风险异常控制在人工审核与可回滚范围内。

七、AI解决方案设计

7.1 方案概述

• AI 智能体+RPA+AI 工作流，把原来复杂且容易出错的录入工作，变成了点 3 个按钮就完成的工作！。
• 搭建 AI 智能体，给业务同学使用，业务同学可以与智能体对话，上传 PDF 文件及需要处理的 excel 模板，0 门槛。
• 处理一份 pdf 文件耗时较长，所以异步执行，并搭建了一个接口，业务同学完成了第 2 步的上传动作后，过一段时间，再通过这个接口查询处理的进度，处理完成了就能下载 excel 啦~以下是请求代码：。
• 客户希望将这个工作能使用 RPA 实现自动化，但却遇到了一些新的问题。

建议的任务链路为：业务系统或工作台发起任务 → 数据与权限校验 → AI识别、检索、预测或优化 → 规则校验 → 返回建议/执行动作 → 人工确认高风险结果 → 结果写回与日志留存。

7.2 系统组成

7.3 核心业务对象

1. 业务单据：需要定义唯一标识、关键属性、状态和与其他对象的关系。
2. 字段：需要定义唯一标识、关键属性、状态和与其他对象的关系。
3. 规则：需要定义唯一标识、关键属性、状态和与其他对象的关系。
4. 任务：需要定义唯一标识、关键属性、状态和与其他对象的关系。
5. 审批：需要定义唯一标识、关键属性、状态和与其他对象的关系。
6. 异常：需要定义唯一标识、关键属性、状态和与其他对象的关系。
7. 操作日志：需要定义唯一标识、关键属性、状态和与其他对象的关系。

7.4 AI与人的分工

7.5 技术选型说明

• 材料可识别技术：API与系统集成、大语言模型、RPA、智能体、工作流编排。
• 选型原则：先选择能验证核心假设的最简单路径，再根据准确率、成本、时延和部署约束升级。
• Agent或工作流：只有任务涉及多步判断、工具调用或状态管理时才使用Agent；稳定规则优先交给确定性工作流。
• 知识库/RAG：涉及企业知识时必须提供引用、版本和权限过滤；无知识检索需求时不强行使用。
• 部署方式：由数据敏感度、时延、并发、可运维性和企业基础设施共同决定，材料未披露最终选择。

八、项目交付过程

8.1 第一阶段：需求调研（Audit）

材料未披露访谈岗位、跟岗次数和需求变化记录。正式交付时，FDE应分别访谈战略层、运营层和执行层，并至少跟随真实用户完成3次端到端任务。调研输出应包括As-Is流程、痛点优先级、干系人、项目边界和成功标准。

8.2 第二阶段：数据与知识准备

材料中的数据线索

• 处理一份 pdf 文件耗时较长，所以异步执行，并搭建了一个接口，业务同学完成了第 2 步的上传动作后，过一段时间，再通过这个接口查询处理的进度，处理完成了就能下载 excel 啦~以下是请求代码：。
• 每个供应商提供的PDF都不一样，且字段名称也可能不一样，仅靠 RPA 无法解决，需要AI 理解并提取成规范的、一致的数据格式后，才能录入Excel字段。
• 说明：rpa调用ap的内容，获取到对应json数据，将json数据进行处理并填写到表格中，最后通过 POST 请求，将文件上传至客户服务器，获取服务器返回的一个 OSS 地址 ，这样可以拿到处理好的文件下载地址进行下载，这样就不用再去邮箱进行下载了。
• 考虑到将数据填写到的excel是固定的excel模板，excel填写字段已经固定，所以将之前用kimi提取excel内容做json格式参考给到大模型，现改成将直接写好json格式，后续直接用这个格式去做参考，这样也会节省一部分模型费用。

数据准备需执行4C检查：完整性、口径一致性、准确性与时效性；敏感字段先脱敏，再划分训练集、验证集、盲测集和异常集。业务专家负责确认标签与知识版本。

8.3 第三阶段：PoC验证（Evals）

8.4 第四阶段：开发与迭代

交付范围应覆盖数据管道、AI能力、工作流、接口、权限、异常处理、日志、监控和用户界面。材料可识别的技术包括API与系统集成、大语言模型、RPA、智能体、工作流编排。材料没有系统披露首版问题、根因和迭代前后指标，因此不能把推荐方案写成已经发生的项目事实。

建议至少保留一次完整迭代记录：问题现象 → 根因 → 调整内容 → 回归测试集 → 指标变化 → 是否进入下一阶段。

8.5 第五阶段：试运行与上线（Deployment）

当前阶段判断：试点或PoC（材料披露）。若进入生产，建议先选择3—5名真实用户和5—10个典型任务开展UAT，再按小流量、部门级、全量三个阶段灰度。上线前必须确认人工兜底、回滚、告警、用户培训与知识运营责任人。

九、项目结果与价值验证

9.1 核心结果

材料披露的结果（对外引用前需复核原始台账）

• 但希望尽可能降低业务同学的操作门槛。
• 考虑到将数据填写到的excel是固定的excel模板，excel填写字段已经固定，所以将之前用kimi提取excel内容做json格式参考给到大模型，现改成将直接写好json格式，后续直接用这个格式去做参考，这样也会节省一部分模型费用。

9.2 价值分类

• 已披露价值：但希望尽可能降低业务同学的操作门槛。
• 初步价值：AI有机会减少重复劳动、缩短任务周期并提升判断一致性，但需通过真实用户试运行验证。
• 预期价值：若PoC与UAT达标，可进一步扩展到“流程挖掘与端到端自动执行”；该项属于规划，不是已验证成果。

9.3 投入产出

建议按以下公式建立项目账：年度价值 = 效率节省 + 质量损失减少 + 经营增益；年度成本 = 建设投入 + 集成投入 + 模型/算力成本 + 知识运营与运维成本。ROI与回收周期只有在基线、运行周期和成本口径完整时才计算，当前材料不足以给出可靠数值。

十、问题、失败与关键迭代

10.1 已披露问题

• 客户希望将这个工作能使用 RPA 实现自动化，但却遇到了一些新的问题。
• 处理一份 pdf 文件耗时较长，所以异步执行，并搭建了一个接口，业务同学完成了第 2 步的上传动作后，过一段时间，再通过这个接口查询处理的进度，处理完成了就能下载 excel 啦~以下是请求代码：。
• 由于PDF字段多达100多个，且中英混杂，人工处理既耗时又容易出错。

10.2 交付风险卡（需验证，不代表已经发生）

风险1：文档版式变化导致识别失准

• 问题现象：待PoC和试运行观察。
• 根本原因：需通过数据分析、用户访谈和日志定位。
• 影响范围：可能影响准确率、使用率、稳定性或合规。
• 缓解方式：建立专项测试集、人工兜底、监控告警和回归验证。
• 关闭标准：风险指标达到双方约定门槛并连续稳定运行。

风险2：系统界面或接口变化使流程中断

• 问题现象：待PoC和试运行观察。
• 根本原因：需通过数据分析、用户访谈和日志定位。
• 影响范围：可能影响准确率、使用率、稳定性或合规。
• 缓解方式：建立专项测试集、人工兜底、监控告警和回归验证。
• 关闭标准：风险指标达到双方约定门槛并连续稳定运行。

风险3：自动操作缺乏权限边界与回滚

• 问题现象：待PoC和试运行观察。
• 根本原因：需通过数据分析、用户访谈和日志定位。
• 影响范围：可能影响准确率、使用率、稳定性或合规。
• 缓解方式：建立专项测试集、人工兜底、监控告警和回归验证。
• 关闭标准：风险指标达到双方约定门槛并连续稳定运行。

十一、安全与生产化机制

数据安全

• 盘点业务单据、字段、规则、任务、审批、异常、操作日志中的个人信息、经营数据、工艺参数和知识产权。
• 训练、测试与日志数据按最小必要原则脱敏；明确外部模型是否留存数据。
• 权限继承业务系统，检索、查看、生成与执行分别授权。

AI安全

• 输出附置信度、依据或引用；低置信度和无答案任务拒答或转人工。
• 高风险动作必须人工确认，工具调用采用白名单、参数校验和最小权限。
• 建立模型、Prompt、知识和工作流版本管理，支持一键回滚。

持续运营

• 每周复盘错误样本，每月回归核心测试集，并监控直通率、字段准确率、单笔处理时长。
• 明确业务知识负责人、技术运维负责人和价值指标负责人。

十二、FDE角色与交付复盘

本项目中，FDE应承担需求调研、业务流程建模、数据审计、PoC设计、方案集成、用户验收和价值复盘。最重要的判断不是“使用哪一个模型”，而是把项目收敛到“识别业务材料、执行规则判断并在多个系统间完成可审计操作”这一可验证任务，并为高风险结果设计人机边界。

1. 最重要判断：用可量化任务替代宽泛的AI转型目标。
2. 最难协调关系：业务价值负责人、真实用户、IT/数据团队与技术供应商之间的目标和责任边界。
3. 可复用能力：场景审计方法、测试集、指标体系、工作流、权限与监控组件。

十三、可复用资产

十四、下一阶段计划

1. 补证：补齐业务量、人工时长、质量损失、数据质量、真实运行范围和项目成本。
2. 验证：按建议测试集完成离线盲测，再用真实用户开展小范围UAT。
3. 扩展：当前场景稳定后，评估“流程挖掘与端到端自动执行”，并把通用组件沉淀到企业AI平台。

下一阶段的首要目标不是增加功能，而是建立持续评测、错误样本回流、知识更新、模型监控和价值台账，使直通率、字段准确率可以长期追踪。

十五、结语：给同类企业的三条建议

1. 从高频、可衡量、风险可控的任务开始：先验证一个闭环，不把多个部门的愿望一次性塞进PoC。
2. 启动前先准备基线、数据和验收人：没有基线无法证明价值，没有真实用户和业务验收人无法进入生产。
3. 把人机边界和运营机制写进方案：明确AI做什么、人确认什么、异常如何降级、错误由谁修正，才能把演示变成可持续系统。