一个 GUI agent 的分数复现不出来,我把 WebHarbor 拆开看了看
上周末想把一个 GUI agent 的分数复现一遍,没跑通。不是模型的问题,是环境。 同一个站点,上午跑出来 41/50,下午同一个脚本跑出来 33/50。中间页面改版了,按钮挪了位置,我写死的那套选择器全废。剩下还能跑通的那一半,基本全是不用登录的浅层页面;
上周末想把一个 GUI agent 的分数复现一遍,没跑通。不是模型的问题,是环境。 同一个站点,上午跑出来 41/50,下午同一个脚本跑出来 33/50。中间页面改版了,按钮挪了位置,我写死的那套选择器全废。剩下还能跑通的那一半,基本全是不用登录的浅层页面;