AI Agent公司Cognosys AI的创始人Sully Omar发了一条长推特,批评目前很多公司开发actions models来与浏览器/电脑交互,我怀疑主要是在批评rabbit公司的LAM。
原文翻译:
我们开始看到许多公司建立actions models,它们可以像人类一样使用电脑,自主地为你执行操作。
然而,由于一些原因,它们似乎是错误的选择:
1) 浏览器和界面是为人类而设计的,不是为机器设计的。从根本上说,它们是为了通过人类而不是模型来实现操作性能的优化。
2) 用户不需要它们--看到的大多数演示都涉及 "预订航班 "或 "订餐"。
与我交谈过的大多数人都说他们对此没有需求。没有人希望通过AI来预订他们去年积攒的机票。
3) 最后,也是更重要的一点是,对于LLM 来说,API 的使用要容易得多,效率也高得多。
如果要求他们(编注:指的应该是action model)使用你在电脑/浏览器上的 "点击 "功能,你就是在给他们制造障碍。
而且无法利用其同时执行10个、100个、1000个任务的能力。人工智能可以比人类高效上千倍。
想象一下,要求一个action model阅读 1000 页的文本,或者遍历一个复杂的数据集,分析每一个项目。这将需要很长时间。
有了LLMs ,您就可以做到这一点。你可以教他们编写自己的代码,构建自己的基本单元,并为他们提供运行环境来执行代码。
这类 rpa (机器人流程自动化)风格的模型非常适合作为agent的单一工具,而不是整个agent运行环境。
OpenAI 构建了一个框架(助手 api),可以建立一个非常有用的智能体系统,并且不涉及计算机自动化。
API才是真正的层,因为它们更适合机器人。未来,它们将拥有自己的语言来操作数字世界。
目前,操纵浏览器是个不错的选择,但随着模型性能的提高,它们就会被淘汰。
原文翻译:
我们开始看到许多公司建立actions models,它们可以像人类一样使用电脑,自主地为你执行操作。
然而,由于一些原因,它们似乎是错误的选择:
1) 浏览器和界面是为人类而设计的,不是为机器设计的。从根本上说,它们是为了通过人类而不是模型来实现操作性能的优化。
2) 用户不需要它们--看到的大多数演示都涉及 "预订航班 "或 "订餐"。
与我交谈过的大多数人都说他们对此没有需求。没有人希望通过AI来预订他们去年积攒的机票。
3) 最后,也是更重要的一点是,对于LLM 来说,API 的使用要容易得多,效率也高得多。
如果要求他们(编注:指的应该是action model)使用你在电脑/浏览器上的 "点击 "功能,你就是在给他们制造障碍。
而且无法利用其同时执行10个、100个、1000个任务的能力。人工智能可以比人类高效上千倍。
想象一下,要求一个action model阅读 1000 页的文本,或者遍历一个复杂的数据集,分析每一个项目。这将需要很长时间。
有了LLMs ,您就可以做到这一点。你可以教他们编写自己的代码,构建自己的基本单元,并为他们提供运行环境来执行代码。
这类 rpa (机器人流程自动化)风格的模型非常适合作为agent的单一工具,而不是整个agent运行环境。
OpenAI 构建了一个框架(助手 api),可以建立一个非常有用的智能体系统,并且不涉及计算机自动化。
API才是真正的层,因为它们更适合机器人。未来,它们将拥有自己的语言来操作数字世界。
目前,操纵浏览器是个不错的选择,但随着模型性能的提高,它们就会被淘汰。
【iPhone 12 和 M2 MacBook Air 中确认 Apple GPU 存在安全漏洞】
Trail of Bits 的安全研究人员在 Apple、高通、AMD 和 Imagination 制造的多个图形处理器单元 (GPU) 中发现了一个漏洞。他们将该缺陷命名为 LeftoverLocals。
他们演示了一种漏洞利用方式,具有设备本地访问权限的攻击者可以读取 GPU 中早期处理留下的数据,因此得名。概念验证使他们能够准确读取人工智能聊天机器人查询的结果。
目前完整名单尚不清楚。研究人员已向 Apple 和其他受影响的公司报告了他们的发现,让他们有时间在漏洞公开之前发布安全补丁。
Trail of Bits 表示,Apple 修补了一些设备,包括运行 A17 和 M3 芯片的设备,但其他设备仍然容易受到攻击。
我们于 1 月 10 日重新测试了该漏洞,发现部分设备已修复,例如 iPad Air 3rd G (A12)。然而,该问题似乎还存在于 MacBook Air (M2) 上。此外,iPhone 15 并未像之前的机型那样受到影响。Apple 已确认 A17 和 M3 系列芯片包含修复程序,但我们尚未收到在设备上部署的具体补丁的通知。
Apple 已经确认 iPhone 12 和 M2 MacBook 仍然可以被成功攻击。Wired 表示其他 Apple 设备可能容易受到攻击。
Apple 发言人承认了 LeftoverLocals 的存在,并指出 Apple 已在 2023 年底发布的最新 M3 和 A17 芯片发布了修复程序。该漏洞可能存在于数百万台的前几代 Apple 芯片的现有 iPhone、iPad 和 MacBook 中。
所展示的漏洞需要对机型进行某种现有访问,它目前属于低风险类别。
尽管利用该漏洞需要对目标设备进行一定程度的现有访问,但考虑到积极主动的攻击者通常通过将多个漏洞链接在一起来进行黑客攻击,因此潜在的影响是重大的。此外,对于许多常见类型的数字攻击来说,建立对设备的初始访问已经是必要的。
Trail of Bits 的安全研究人员在 Apple、高通、AMD 和 Imagination 制造的多个图形处理器单元 (GPU) 中发现了一个漏洞。他们将该缺陷命名为 LeftoverLocals。
他们演示了一种漏洞利用方式,具有设备本地访问权限的攻击者可以读取 GPU 中早期处理留下的数据,因此得名。概念验证使他们能够准确读取人工智能聊天机器人查询的结果。
目前完整名单尚不清楚。研究人员已向 Apple 和其他受影响的公司报告了他们的发现,让他们有时间在漏洞公开之前发布安全补丁。
Trail of Bits 表示,Apple 修补了一些设备,包括运行 A17 和 M3 芯片的设备,但其他设备仍然容易受到攻击。
我们于 1 月 10 日重新测试了该漏洞,发现部分设备已修复,例如 iPad Air 3rd G (A12)。然而,该问题似乎还存在于 MacBook Air (M2) 上。此外,iPhone 15 并未像之前的机型那样受到影响。Apple 已确认 A17 和 M3 系列芯片包含修复程序,但我们尚未收到在设备上部署的具体补丁的通知。
Apple 已经确认 iPhone 12 和 M2 MacBook 仍然可以被成功攻击。Wired 表示其他 Apple 设备可能容易受到攻击。
Apple 发言人承认了 LeftoverLocals 的存在,并指出 Apple 已在 2023 年底发布的最新 M3 和 A17 芯片发布了修复程序。该漏洞可能存在于数百万台的前几代 Apple 芯片的现有 iPhone、iPad 和 MacBook 中。
所展示的漏洞需要对机型进行某种现有访问,它目前属于低风险类别。
尽管利用该漏洞需要对目标设备进行一定程度的现有访问,但考虑到积极主动的攻击者通常通过将多个漏洞链接在一起来进行黑客攻击,因此潜在的影响是重大的。此外,对于许多常见类型的数字攻击来说,建立对设备的初始访问已经是必要的。
2023年煤矿智能化重大进展发布会成功召开
2024年1月13日,2023年煤矿智能化重大进展发布会暨技术经验交流会在北京隆重召开。
发布会上发布了深部煤炭高效开发数字化和智能化关键技术与装备、10米超大采高智能化综采成套技术与装备、煤矿无人化智能开采控制技术装备与应用示范、综采工作面装备快速精准推移与超前联动控制技术研发、煤矿辅助作业机器人技术与集群应用、煤矿安全风险隐患综合一体化智能防控关键技术与装备、智能化煤矿运行与维护管理标准体系、大海则特大型煤矿全矿井智能化建设关键技术与应用、基于透明化地质保障系统的煤矿智能管控平台研发与应用、5G射频电磁波瓦斯引燃机理与功率安全阈值研究、基于全景视频拼接的自适应截割智能化工作面无人开采技术及应用11项2023年煤矿智能化建设重大进展成果。
2024年1月13日,2023年煤矿智能化重大进展发布会暨技术经验交流会在北京隆重召开。
发布会上发布了深部煤炭高效开发数字化和智能化关键技术与装备、10米超大采高智能化综采成套技术与装备、煤矿无人化智能开采控制技术装备与应用示范、综采工作面装备快速精准推移与超前联动控制技术研发、煤矿辅助作业机器人技术与集群应用、煤矿安全风险隐患综合一体化智能防控关键技术与装备、智能化煤矿运行与维护管理标准体系、大海则特大型煤矿全矿井智能化建设关键技术与应用、基于透明化地质保障系统的煤矿智能管控平台研发与应用、5G射频电磁波瓦斯引燃机理与功率安全阈值研究、基于全景视频拼接的自适应截割智能化工作面无人开采技术及应用11项2023年煤矿智能化建设重大进展成果。
✋热门推荐