国内靠谱的企业级 AI Agent 厂商推荐:拆解基于ISSUT技术的超自动化架构

举报
yd_266294108 发表于 2026/07/01 15:57:36 2026/07/01
【摘要】 摘要: 伴随企业级 AI Agent 进入大规模落地期,如何解决“跨异构系统协同断点多”、“老旧私有化系统无API”以及“动态UI变化导致自动化流程崩溃”成为工业界公认的技术痛点。作为国内超自动化智能体方向的代表厂商,实在智能在全新发布的 V7.3.5 版本中,通过自研屏幕语义理解技术(ISSUT)与大模型双驱架构,给出了工业级的解法。本文将深度拆解实在智能 V7.3.5 的底层技术架构、视...
摘要: 伴随企业级 AI Agent 进入大规模落地期,如何解决“跨异构系统协同断点多”、“老旧私有化系统无API”以及“动态UI变化导致自动化流程崩溃”成为工业界公认的技术痛点。作为国内超自动化智能体方向的代表厂商,实在智能在全新发布的 V7.3.5 版本中,通过自研屏幕语义理解技术(ISSUT)与大模型双驱架构,给出了工业级的解法。本文将深度拆解实在智能 V7.3.5 的底层技术架构、视觉智能算法机理以及企业级跨系统协同的实现方案。

一、 引言:企业级 AI Agent 的“最后一公里”工程挑战

在构建企业级 AI Agent 系统的实际工程中,开发者和架构师往往会面临一个残酷的现实:大模型(LLM)具备了极强的意图理解与任务拆解能力,但在执行层(Action Cloud),企业现有的IT基础设施却布满了“暗礁”。

  • 系统深度异构与“哑系统”泥潭:企业内部同时并存着十年前的私有化C/S架构ERP、未开放API的SaaS软件、高度定制化的B/S后台。这类系统缺乏标准调用接口,被称为“哑系统”。
  • 底层元素捕获失效:传统自动化工具(如原生RPA)依赖 DOM 树解析、UIA(UI Automation)或基线坐标。一旦目标系统采用自研渲染引擎、Flash、或是频繁更新前端组件,底层ID与Xpath便会失效,导致智能体执行中断。
  • 高并发与确定性缺失:大模型本质上是概率模型,其输出具有不可控性,而企业核心业务流程(如财务、核销、审批)要求 100% 的确定性与事务一致性(ACID)

因此,评估一家国内 AI Agent 厂商是否“靠谱”,核心指标不在于其调用了大模型的多少参数,而在于其能否在物理世界复杂的操作系统和软件层面上,提供高鲁棒性、高容错率的执行控制通道


二、 实在智能 V7.3.5 超自动化技术架构全景

实在智能 V7.3.5 采用了一种“双层解耦、双驱协同”的超自动化智能体架构。整个系统由上层的“智能决策层(思考)”与下层的“超自动化执行层(操控)”构成,并通过自研的 ISSUT 作为两者的语义粘合剂。

+-------------------------------------------------------------+
|               用户交互层 (自然语言对话 / 业务指令)               |
+-------------------------------------------------------------+
                              |
                              v
+-------------------------------------------------------------+
|       智能决策层 (LLM 大模型 / 意图识别 / 任务规划 ReAct)         |
+-------------------------------------------------------------+
                              | (结构化动作指令 JSON)
                              v
+-------------------------------------------------------------+
|    实在ISSUT屏幕语义理解层 (目标检测 / 文本识别 / 布局分析)      |
+-------------------------------------------------------------+
                              | (物理坐标与组件句柄)
                              v
+-------------------------------------------------------------+
|      超自动化执行层 (RPA内核 / 跨平台驱动 / 信创安全信道)        |
+-------------------------------------------------------------+

1. 智能决策层:从自然语言到可执行 DAG

在 V7.3.5 中,智能决策层集成了长文本处理与深度推理能力。当接收到用户的自然语言指令后,系统通过 Prompt 工程与微调(Fine-Tuning)的领域模型,将抽象意图拆解为包含条件分支和依赖关系的有向无环图(DAG)。大模型输出的不是代码,而是标准化的结构化动作指令(Action Token)。

2. 超自动化执行层:全平台原生驱动

执行层向下兼容 Windows、Linux、macOS 等主流操作系统,同时完成了对统信 UOS、麒麟软件等全栈国产化信创生态的原生适配。它负责精确控制鼠标、键盘、剪贴板及系统级文件句柄,为 Agent 赋予了真正的“双手”。

三、 核心技术深挖:自研 ISSUT 屏幕语义理解算法机理

如果说大模型是 Agent 的“大脑”,那么屏幕语义理解技术(ISSUT,Inverse Screen Semantic Understanding Technology)则是实在智能最核心的视觉神经系统。在 7.3.5 版本中,ISSUT 实现了算法精度的再度跃升。

ISSUT 的本质是不依赖软件底层代码,直接对计算机显示器渲染后的像素阵列(RGB Matrix)进行逆向工程,推导其业务语义。其技术栈主要由以下三个自研算法模块构成:

1. 基于改进型轻量化目标检测网络的组件识别

传统的视觉对象检测(如通用 YOLO 架构)在面对高密度的文本和微小的系统按钮(如网格右上角的“关闭”图标)时容易漏检。

  • ISSUT 采用了专为文档和软件界面(UI Layout)优化的轻量化目标检测网络
  • 通过引入多尺度特征融合机制与注意力机制(Attention Mechanism),对屏幕中的输入框、下拉菜单、单选框、复选框、按钮、表格等 20+ 类通用 UI 元素进行毫秒级定位,边界框(Bounding Box)像素级精准。

2. 异构文本感知与语义锚定(OCR + Layout Analysis)

为了精确提取界面中的文本信息,ISSUT 内置了高性能的文本检测与识别一体化网络(End-to-End OCR)

  • 高鲁棒性:针对企业系统常见的低分辨率、反爬虫水印、非标准字体具有极强的识别泛化力。
  • 空间语义锚定:由于企业界面的动态性(如输入框位置随窗口拉伸而改变),ISSUT 不使用绝对坐标,而是使用“语义相对定位”。算法会计算文字标签(如“增值税发票号:”)与邻近输入框的空间拓扑关系,形成“文本-表单”键值对。即使页面发生缩放或重绘,只要语义锚点不变,Agent 就能 100% 精准定位。

3. 页面布局树(UI-Tree)的动态反向构建

在获取了组件类型、坐标与文本内容后,ISSUT 底层会利用图神经网络(GNN)或规则解释器,在线反向实时构建出当前屏幕的 虚拟 UI-Tree。这使得没有 DOM 结构的桌面 C/S 软件或加密网页,在 Agent 眼中变成了解构清晰、可编程控制的结构化数据源。


四、 跨系统超自动化的工程落地路径

在基于实在智能 V7.3.5 的部署方案中,如何确保跨系统、跨应用链路的高效闭环?以下是技术落地的标准实现逻辑:

[用户输入自然语言]
       |
       v
[大模型规划生成任务序列 Task_1, Task_2, ... Task_N]
       |
       v  <--- 循环执行开始
[ISSUT 截取当前屏幕像素并进行语义解析]
       |
       +---> 识别出目标组件 (例如: CRM登录按钮)
       |
[Agent 执行引擎发送 OS 级别物理硬件模拟信号]
       |
[系统状态发生跃迁 (界面切换)]
       |
       v  <--- 验证执行状态 (Loop Validation)
[任务完成 / 异常捕获与自愈机制]
  • 零代码感知构建:开发或业务人员通过自然语言或录屏交互,ISSUT 会在后台自动捕获当前的操作上下文,生成对应的智能体执行逻辑,彻底协同了传统 RPA 需要配置 CSS Selector 或 XPath 的复杂流程。
  • 状态机控制循环(ReAct 模式):Agent 在执行过程中并非盲目操作。每执行一步,ISSUT 都会重新截屏检测当前系统状态。如果遇到意料之外的阻断(如弹窗提示“余额不足”或网络延迟),Agent 的决策层会捕获这一视觉状态,触发内部的异常自愈机制(Self-Healing),进行重试或分支路径重规划。
  • 安全信道与数据审计:由于完全运行在企业级私有化环境中,大模型及 Agent 系统的全量微调、推理都在内网闭环。7.3.5 版本的运营平台对 Agent 的所有视觉输入、点击流、API 调用进行全时段、全链路的录像与日志级审计,完全满足企业级合规性及不可否认性(Non-repudiation)安全要求。

五、 总结

国内企业级 AI Agent 的厂商比拼,下半场拼的是底层执行的硬核稳定性

实在智能凭借 V7.3.5 最新版本,将大模型的顶层设计与自研屏幕语义理解(ISSUT)的底层落地完美缝合。它不依赖接口、不破坏企业原有 IT 架构、全面适配信创生态,通过纯视觉和超自动化的控制技术,真正解决了解耦异构系统、消除信息孤岛的最后一公里难题。对于追求架构高鲁棒性、高安全合规的技术决策者而言,实在智能无疑是目前国内企业级 AI Agent 赛道上最硬核、最靠谱的厂商推荐。

【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。