联系我们 Claude迎重磅升级，复古像东说念主一样操控筹画机：不仅不错稽查屏幕、挪动光标，还不错单机按钮、键入文本！
发布日期：2024-11-08 05:30 点击次数：127
当地时辰10月22日联系我们，Anthropic的Claude 3.5迎重磅升级！
Claude 3.5 Haiku 和升级款的 Claude 3.5 Sonnet 王人来了。Claude 3.5 Sonnet 不仅编程才调更强，还带来全新功能computer use（筹画机使用）， Claude 目下复古像东说念主类一样操作筹画机,不错征服用户的号令在筹画机屏幕上挪动光标，点击筹商位置，并通过凭空键盘输入信息，模拟东说念主们与我方筹画机的交互面目。
升级版 Claude 3.5 Sonnet 目下就不错使用了。computer use测试版也盛开使用。
进化后的Claude 3.5 Sonnet号称最强推理模子。它在各个方面得到了全面显赫的升迁，尤其是业界最初的编码才调。
以致，Claude目下简略像东说念主类一样操作筹画机，不仅不错稽查屏幕、挪动光标，还不错单机按钮、键入文本！
目下，Claude 在以与东说念主一样的面目使用筹画机的模子中处于起初进水平——也即是说，通过稽查屏幕并确认屏幕本色给与行径。在一个旨在测试征战东说念主员让模子使用筹画机的评估（OSWorld）中，Claude 目下取得了 14.9% 的分数。这远未达到东说念主类水平的妙技（常常为 70-75%），但远高于团结类别中名挨次二的 AI 模子取得的 7.7%。
Anthropic征战者关系阁下示意，筹画机使用是全新东说念主机交互范式的第一步。同期亦然，AI模子应该具备的全新基础才调。
为什么要考试AI操作电脑？Anthropic示意，在当年几年里，遍及的AI征战仍是达到了好多里程碑，比确乎践复杂逻辑推理，以及识别和交融图像的才调。而下一个冲破点，即是AI操作电脑了！若是模子无须通过挑升定制的器具进行交互，而是按相通就能使用通盘软件，这一定代表着将来的标的。
鄙人面这个demo中，Anthropic筹议员给Claude建议了一个极有难度的挑战：
我的一又友要来旧金山，我思来日早上和他一齐在金门大桥看日出。咱们将从太平洋高地动身。你能帮咱们找到一个绝佳的不雅赏地点，稽查一下开车时辰和日出时辰，然后安排一个日期行径，让咱们有弥漫的时辰到达那边吗？
小程序开发Claude自行掀开了Google，开动了搜索。
金门大桥和用户居住地有多远呢？Claude会我方掀开舆图查找距离。
征战者展示出Claude若何操控了我方的条记本电脑，丝滑地完成了一个网站编程任务。
早先，Claude在小哥的Chrome浏览器中导航到了Claude.ai，而况让Claude为我方创造了一个90年代主题的个东说念主主页。
只见它我方输中计址，键入指示，向另一个Claude发出申请。
假定咱们需要填写一份来自蚂蚁设立公司的供应商申请表，山西软件开发但需要填写的数据散布在电脑的各个边缘，Claude能帮咱们完成吗？
只见它开动截取操作家的屏幕截图，而况很快发现：蚂蚁设立公司并不在表格中。
这时，它坐窝切换到CRM系统中，去搜索这个公司。找到后，它开动逶迤页面，查找填表所需的通盘信息，然后提交了表格。这也就意味着，咱们使命中好多不得不作念的繁琐事项，王人不错交由Claude代劳了！
在各项行业基准测试中，升级版Claude 3.5 Sonnet性能得到了全地点升迁。非凡是，智能体编码、器具使用任务中取得显赫冲破。
在编码才调方面，它在SWE-bench Verified测试中，性能从33.4%大幅升迁至49.0%。
这卓绝了通盘公开可用的模子——包括OpenAI o1-preview等推理模子和专为智能体编码遐想的挑升系统。
凭借快速的搞定速率、变嫌的指示实践才和洽更准确的器具使用，Claude 3.5 Haiku绝顶相宜面向用户的居品、挑升的赞成任务，以及从海量数据中生成个性化体验。
AI操作电脑才调代表了一种全新的东说念主工智能征战次序。
迄今截止，LLM征战者一直在竭力于使器具适合模子，创造荒谬的环境，让AI使用挑升遐想的器具来完成各式任务。
诚然Claude仍是达到了面前的最高水平，但它的操作仍然相对缓缓且容易出错。咱们平淡使用电脑时的好多操作，如拖拽、缩放等，Claude王人还无法作念到。
此外，Claude目下不雅察屏幕的面目访佛于快速翻阅一册画册，通过集合截图并拼接在一齐，而不是不雅察集合的视频流。这意味着它可能会错过一些片时的行为或奉告。
周三050 欧洲杯 荷兰VS英格兰 2024-07-11 03:00
原理的是，Anthropic在录制Demo时，还遭遇了一些原理的小插曲。
比如，在一次演示中，Claude不注重点击住手了一个永劫辰运行的屏幕录制，导致通盘摄像王人付诸东流。
而在另一次编码演示中，Claude则已而「跑神」，开动饶有真理地浏览起黄石国度公园的像片。
总之，Claude如今的判辨让东说念主对将来充满期待：AI操作电脑的才调将神速逾越，那一天联系我们，软件征战小白王人能简易使用它。