理解网页任务
结合任务目标与当前页面,识别需要填写或查找的信息。
AGENT有些业务操作只能在网页上完成,步骤重复又容易漏填。这个方案把自然语言任务拆成页面上的操作,围绕识别、填写和结果核对形成执行路径。
结合任务目标与当前页面,识别需要填写或查找的信息。
围绕可见控件完成输入、选择与跨页面步骤。
检查字段与结果状态,将异常页面留给人工处理。
明确目标页面、要完成的动作及输入资料。
定位表单、按钮与必要的交互步骤。
填写与切换页面,在关键动作前核对内容。
记录页面回执,汇总未完成或需要接管的步骤。
以下为说明方案的输入与输出示例。
在测试表单中,根据一份商品资料填写名称、规格与描述,先核对字段,再按已确认的要求提交。
示例 · 非实测记录字段映射:商品资料与表单字段的对应关系。
操作摘要:已填写、已核对和未完成的步骤。
异常记录:无法识别的控件、缺失资料或需要人工接管的页面。