11月25日消息,电脑动搞定崩据媒体报道,操控测评常还近日新加坡国立大学团队,完整在20多个场景下对Claude的全自电脑操控能力进行了全面测试。
结果显示,铁日AI不仅能自动完成手游日常任务,建炉还能执行复杂的电脑动搞定崩办公任务。
研究中选用了米哈游《崩坏:星穹铁道》,操控测评常还可以跟它说”帮我完成今天的完整模拟宇宙”,Claude就能自动完成各种任务,全自甚至包括启动自动战斗和等待战斗结束后退出,铁日操作行云流水。建炉
特别值得一提的电脑动搞定崩是,这并不是操控测评常还传统游戏外挂那样的机械操作,Claude还能智能理解游戏规则和目标,完整根据界面上不同的任务进行调整。
除了《崩坏:星穹铁道》,AI还能自动玩《炉石传说》,包括创建和重命名牌组、使用英雄技能等。
团队基于Claude Computer Use的API设计了一个自动化GUI框架,该框架包括系统提示、状态观察、推理范式等六个部分。
AI通过这个框架能够执行网页搜索、工作流程模型、办公生产力软件等日常办公场景下的任务。
例如,在Amazon和Apple官方网站上成功完成下单购物的任务,选择颜色配置、填写地址等操作。
虽然AI在复杂网页操作和办公软件中有部分任务失败,但整体表现已相当出色,团队还公开了所有测试用例的具体信息,供有兴趣的研究者和开发者进一步探索。
顶: 1踩: 4849
评论专区