AI电脑操控能力大考不仅能玩崩铁还能办公自动下单
新加坡国立大学的研究团队近期公布了一项令人瞩目的研究成果，他们针对Claude这一人工智能（AI）系统进行了广泛的能力测试，测试覆盖了超过20个不同的应用场景。
在测试中，Claude展现出了惊人的电脑操控能力，不仅能够轻松完成手机上的日常任务，还能够在复杂的办公环境中游刃有余。研究团队特别选择了热门手游《崩坏：星穹铁道》作为测试对象之一，通过简单的指令，如“帮我完成今天的模拟宇宙”，Claude便能自动执行游戏中的各项任务，包括启动战斗、等待结束并退出，整个过程流畅自如。
值得注意的是，Claude的操控并非简单的机械重复，而是基于对游戏规则和目标的深刻理解。它能够根据游戏界面的不同任务进行智能调整，展现出极高的灵活性和适应性。
除了在游戏领域的出色表现，Claude在办公场景中同样大放异彩。研究团队设计了一个基于Claude Computer Use API的自动化GUI框架，该框架涵盖了系统提示、状态观察、推理范式等多个模块。通过这个框架，Claude能够执行包括网页搜索、工作流程管理以及办公生产力软件操作等在内的多项日常办公任务。
例如，在Amazon和Apple的官方网站上，Claude能够成功完成下单购物的全过程，包括选择商品颜色、配置以及填写收货地址等步骤，无需人工干预。
尽管在复杂网页操作和办公软件使用中，Claude也遇到了部分挑战，但整体而言，其表现已经相当出色。研究团队还慷慨地公开了所有测试用例的具体信息，供其他研究者和开发者参考和进一步探索。这一举措无疑将推动AI技术在更多领域的应用和发展。
