智能体「卷王」诞生!干活自动配结项报告,1.5张截图就把事说清了

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
智能体「卷王」诞生!干活自动配结项报告,1.5张截图就把事说清了
8206点击    2026-01-11 10:01

在学校里做实验的时候,老师如何确定我们做了实验并且达到了预期效果呢?——最常见的做法是让学生写一份实验报告交上来。


现在,AI智能体拿到一个任务以后如何检验执行的效果有没有达到预期呢?我们也可以让AI在执行任务的同时主动提交一份证据链报告,边做边收集任务完成的证据,自我检查是否符合预期,不符合就继续做。


在LLM/VLM驱动的智能体(Agent)的强化学习(RL)研究中,一直面临一个巨大的挑战:


你交给智能体一个任务,它干完了,但你不知道完成度如何。


智能体「卷王」诞生!干活自动配结项报告,1.5张截图就把事说清了


为了确认它是否真的准确完成了任务,我们不得不建立庞大的“监督系统”来复核它的每一步操作。这种“被动验证”往往需要:


  1. 手工设计的复杂校验机制(比如:完全匹配的输出内容)
  2. 强大的轨迹级验证方法(比如:LLM/VLM-as-a-Judge众投决策)


这两种常见的先完成任务(task completion)再校验轨迹(outcome verification)的机制有以下缺点:


  1. 效率较低,人工设计的准则依赖预先编写好的评估脚本,难以简单泛化到新的任务(比如新的APP)
  2. 轨迹带噪且上下文冗长,将整条轨迹送给LLM/VLM来评判很容易被无关的环境信息干扰,降低评分的可靠性;
  3. 依赖持续可观测环境的反馈信息,部分操作往往因为环境变化
  4. (如页面刷新、操作过期)而导致验证失败。


针对以上问题,我们提出了一种简单的RL训练方法,让智能体自己成为“质检员”,在尽可能减少校验器(Verifier)审核压力的同时,让智能体学会主动分解子目标并且留痕存证。


什么是SmartSnap?


SmartSnap的核心思想是将GUI智能体从“被动的执行者”转变为“主动的自证者”。


简单来说,智能体在完成任务的同时,还会主动收集、筛选并提交一份“证据快照集”。


这份证据就像是任务的“结项报告”,让验证者只需看一眼快照,就能确认任务是否成功。


智能体「卷王」诞生!干活自动配结项报告,1.5张截图就把事说清了


三大核心突破:从“执行”到“自证”


1. 角色升级:双重使命的“自证代理”


传统的智能体只负责“做(Execute)”,而SmartSnap提出了“自证智能体”(Self-Verifying Agent),赋予了它“自我验证(Verify)”的第二使命。


它在操作过程中会像人类一样思考:“为了证明我已经改好了设置,我需要把对开关状态截图并作为证据提交。”


2. “3C原则”:高效率的证据美学


为了避免给验证者造成信息过载,SmartSnap提出了证据策展的3C原则


  • 完整性(Completeness)
  • 简洁性(Conciseness)
  • 创造性(Creativity)


3. 强化学习驱动:GRPO+内在奖励反馈


我们利用GRPO算法对智能体进行了训练。通过精心设计的奖励机制(Intrinsic Reward Shaping),引导智能体在保证任务成功率的同时,不断提升证据的质量,尽可能减少奖励黑客行为(reward hacking)


战绩显赫:小模型也不错


SmartSnap的表现令人惊艳,它在AndroidLab等复杂的任务上提升显著:


智能体「卷王」诞生!干活自动配结项报告,1.5张截图就把事说清了


  • 性能飞跃
  • 以小博大


通过感性分析,我们还观察到以下特点:


  • 举证效率
  • 高效交互
  • 知识欠缺


为什么这简化了智能体RL训练的准备工作?


在手机端、OS端这类环境的操作中,由于其时效性特点,传统的外部验证器很难精准捕捉瞬时的成功信号。


SmartSnap就像是给智能体配上了一台取证相机。它不再需要事先对环境所有状态有一个预期的变化感知来撰写校验脚本,或者让裁判员模型盯着全程轨迹来仔细推敲,而是让智能体自己边做边收集必要的证据。


这允许我们基于合成的任务轻松拓展其训练场景,并针对有限的证据链来判断成功与否,让RL训练更加便捷。


面向未来


SmartSnap的出现,标志着GUI智能体正从“蛮力执行”走向“认知协同”。这种主动寻找证据的能力,不仅提升了AI的可靠性,更为未来大规模、低成本的AI部署铺平了道路。


未来的AI,不仅要“能干”,更要“可信”。


论文标题:


SmartSnap: Proactive Evidence Seeking for Self-Verifying Agents
论文地址:


https://arxiv.org/abs/2512.22322
代码地址:


https://github.com/TencentYoutuResearch/SmartSnap


文章来自于微信公众号 “量子位”,作者 “量子位”

AITNT-国内领先的一站式人工智能新闻资讯网站
AITNT资源拓展
根据文章内容,系统为您匹配了更有价值的资源信息。内容由AI生成,仅供参考
1
AI代理

【开源免费】Browser-use 是一个用户AI代理直接可以控制浏览器的工具。它能够让AI 自动执行浏览器中的各种任务,如比较价格、添加购物车、回复各种社交媒体等。

项目地址:https://github.com/browser-use/browser-use


2
智能体

【开源免费】AutoGPT是一个允许用户创建和运行智能体的(AI Agents)项目。用户创建的智能体能够自动执行各种任务,从而让AI有步骤的去解决实际问题。

项目地址:https://github.com/Significant-Gravitas/AutoGPT


【开源免费】MetaGPT是一个“软件开发公司”的智能体项目,只需要输入一句话的老板需求,MetaGPT即可输出用户故事 / 竞品分析 / 需求 / 数据结构 / APIs / 文件等软件开发的相关内容。MetaGPT内置了各种AI角色,包括产品经理 / 架构师 / 项目经理 / 工程师,MetaGPT提供了一个精心调配的软件公司研发全过程的SOP。

项目地址:https://github.com/geekan/MetaGPT/blob/main/docs/README_CN.md