Anthropic 升级版 Claude 3.5 Sonnet 模型，像人一样操控电脑？

在人工智能的创新之路上，Anthropic 公司再次成为焦点，其推出的升级版 Claude 3.5 Sonnet 模型引发了广泛关注与热议。一个核心问题摆在我们面前：它真的能够像人一样操控电脑吗？

一、模型发展与新特性亮相

Claude 3.5 Sonnet 模型有着清晰的发展脉络。2024 年 6 月 21 日首次推出时，它就凭借在编码、视觉和自然语言理解能力等方面的出色表现崭露头角，在基准测试中超越了诸多竞争对手。而 2024 年 10 月 22 日推出的升级版更是带来了令人期待的新特性。

其中最引人瞩目的当属“Computer Use”功能。这一功能的出现，使得 Claude 3.5 Sonnet 模型具备了前所未有的能力——可以像人类用户一样操作计算机。它能够理解并执行诸如移动光标、点击按钮、输入文本等操作指令，通过屏幕观察获取信息，进而与各种软件和应用进行交互。这意味着，理论上它可以帮助用户完成一系列复杂的电脑操作任务，从简单的数据录入到复杂的多步骤流程处理，如在线填写冗长的表格、精准搜索特定数据、提交格式规范的报告等。

二、编程能力与性能提升

在编程领域，升级版 Claude 3.5 Sonnet 模型展现出了强大的实力提升。在 SWE - Bench Verified 测试中，其性能从原来的 33.4%大幅跃升至 49.0%，成功超越了包括 OpenAI O1 - preview 等在内的所有公开可用模型。这一成绩的取得，不仅体现了模型在编码准确性上的进步，更预示着它在智能体编码、工具使用任务等方面将发挥更大的作用。

早期客户反馈也充分证实了这一提升的价值。GitLab 在针对 DevSecOps 任务的测试中发现，该模型推理能力显著增强（在不同用例中提升幅度高达 10%），且没有增加延迟，非常适合为多步骤软件开发流程提供支持。Cognition 利用其进行自主 AI 评估，在编码、规划和问题解决能力方面相比之前版本有了大幅改进。The Browser Company 在将该模型用于自动化基于网络的工作流程时，也指出 Claude 3.5 Sonnet 的表现超越了他们此前测试过的所有模型。

三、实际应用与行业探索

诸多企业已经敏锐地察觉到了 Claude 3.5 Sonnet 模型的潜力，并开始积极探索其应用可能性。Asana、Canva、Cognition、DoorDash、Replit 和 The Browser Company 等公司走在了前列。例如，Replit 正在利用 Claude 3.5 Sonnet 的电脑操控和 UI 导航能力，为其 Replit Agent 产品开发一项关键功能，该功能可在应用构建过程中对其进行评估。

然而，我们也必须清醒地认识到，尽管该模型具备了像人一样操控电脑的潜力，但目前其应用仍处于探索阶段，存在一定的局限性。在实际使用过程中，模型的操作速度和准确性还有待进一步提高。例如，它观察屏幕的方式类似于快速翻阅画册，通过连续截图并拼接来获取信息，而非像人类一样实时感知连续的视频流，这就可能导致它错过一些短暂出现的动作或通知，从而影响任务执行的准确性和效率。

四、安全性与可靠性考量

随着模型具备操控电脑的能力，安全性和可靠性成为了至关重要的问题。一方面，人们担心模型在访问个人电脑文件和使用网络浏览器时，可能会导致隐私泄露、数据安全受到威胁。另一方面，人工智能模型本身的可靠性也面临挑战，例如模型可能会出现错误的操作指令解读，进而引发系统故障或数据错误。

为了应对这些潜在风险，Anthropic 公司采取了一系列积极措施。他们开发了新的分类器，用于识别模型何时在进行电脑操控操作以及是否存在潜在危害。同时，在模型的开发过程中，也对其进行了针对灾难性风险的评估，确保其符合公司制定的负责任扩展政策中的 ASL - 2 标准。

五、模型的潜力与未来展望

尽管存在诸多挑战，但升级版 Claude 3.5 Sonnet 模型无疑为人工智能领域开辟了新的发展方向。它代表了人工智能从单纯的信息处理向与物理世界更深入交互的转变，为未来的智能办公、自动化流程处理等提供了新的想象空间。

随着技术的不断发展和改进，我们有理由相信，Claude 3.5 Sonnet 模型在电脑操控方面的能力将不断完善，其应用场景也将不断拓展。但在这个过程中，我们必须始终保持谨慎态度，在充分发挥其潜力的同时，确保其安全、可靠、可控，以实现人工智能与人类社会的和谐共生。未来，我们期待看到更多的创新应用从这个模型中诞生，同时也希望行业能够共同努力，制定出更加完善的规范和标准，引导人工智能技术朝着造福人类的方向稳健发展。

总之，Anthropic 升级版 Claude 3.5 Sonnet 模型在像人一样操控电脑方面已经迈出了重要的一步，但前方的道路依然充满挑战与机遇。我们将持续关注其发展动态，见证人工智能在这一领域的不断演进。

本文转载自​​小兵的AI视界​​，作者： 小兵 ​​​​