分享好友 最新动态首页 最新动态分类 切换频道
OpenAI发布首个AI智能体,使用前你需要知道这些细节
2025-02-03 14:38

今天凌晨,OpenAI CEO Sam Altman宣布了两个重磅消息。


一个是ChatGPT用户不仅将获得o3-mini的免费试用机会,Plus付费订阅会员还将享有更多使用额度。



另一个则是备受期待的首个智能体产品——Operator研究预览版正式亮相。好消息是,它能帮你自动网购,但坏消息是,它可能比较容易“翻车”。



OpenAI总裁Greg Brockman在X平台发文称:“Operator——一种能够使用自己的浏览器为你执行任务的智能体。2025年将是智能体之年。”



OpenAI让AI学会“用电脑”了?这是迈向AGI的第一步


作为OpenAI首款真正模拟人类操作网页浏览器的AI助手,Operator能够自动完成预订旅行住宿、餐厅预约和在线购物等复杂任务。


用户可以在多个类别中选择不同的自动化任务,涵盖购物、配送、餐饮和旅行等领域。



这项功能将率先向订阅200美元Pro计划的美国用户开放,随后逐步扩展至Plus、Team和Enterprise级别用户。


API预计将在数周内推出。


用户可通过operator.chatgpt.com访问该服务,OpenAI计划后续将其整合到ChatGPT,不过,ChatGPT在今天凌晨又双叒叕崩了。



简单来说,当用户启用Operator时,系统会弹出一个小窗口,展示专用Web浏览器的操作界面,并实时说明正在执行的任务。在此期间,允许用户随时接管控制。


技术层面,Operator采用远程云端浏览器执行任务,无需依赖网站API。


它通过截图识别界面元素,规划后续动作,形成“观察-计划-执行”的闭环,直至完成任务。系统支持多任务并行处理,运行效率高,且能保持登录状态。



OpenAI已与DoorDash、Instacart、Priceline、StubHub和Uber等公司建立合作。


Instacart首席产品官Daniel Danker就指出“OpenAI的Operator是一项技术突破,它使订购杂货等流程变得异常简单。”


按照惯例,OpenAI也同期召开了一场发布会。Sam Altman与Yash Kumar、Casey Chu和Reiichiro Nakano一起介绍和演示Operator。


演示涵盖了多个实际应用场景,比如通过OpenTable为Beretta餐厅预订双人座位,原定7点档位不可用后改订7:45。



使用Instacart购物系统识别购物清单——鸡蛋、菠菜、蘑菇、鸡腿、薯片,并中途接管添加更多鸡蛋等商品。



在StubHub上试图搜索并选购预算500美元以下的勇士队比赛门票;预约清洁服务;以及计划通过DoorDash点餐,订购烧烤披萨等。



理想很美好,现实很骨感,Operator目前最大的问题还是不够稳定。刚开始演示时还算顺利,但中后期的演示过程中遭遇连环“翻车”,甚至未能成功加载相关网页。


或许是为了确保演示成功,眼瞅着演示人员输入的提示词是越来越长。


X平台大V@rowancheung也提前体验并分享了对Operator的观察。


比方说,Operator虽然在ChatGPT中运行,但功能完全不同,主要专注于网页操作(点击、滚动、输入)而非生成长文本。目前系统仍存在限制,包括部分网站会屏蔽AI访问,合作伙伴集成有限。



他指出Operator需要特定的使用方法来优化效果,就像GPT-4适合CoT提示一样,但目前对Operator的最佳使用方式研究还很初步。


不过,他还是挺看好这项技术能帮助人们自动化处理枯燥工作,从而将时间用于更有价值的事务。


此前有消息称,Operator在执行任务时使用的截图内容可能被恶意利用,导致“提示注入攻击”,存在严重的安全隐患。


因此,确保Operator的安全使用是首要任务。


根据官方博客,OpenAI主要是通过多层保护措施防止滥用并确保用户牢牢控制Operator。






此外,OpenAI针对Operator实施了全面的隐私和安全保护措施。在隐私管理方面,用户可以选择退出模型训练,一键删除浏览数据和历史对话,并注销所有网站。


为防范恶意网站的攻击,系统建立了多层防御机制,包括检测并忽略提示注入、监控可疑行为和建立威胁识别管道。同时,Operator设有审核系统来拒绝有害请求和不当内容,对违规行为发出警告或撤销访问权限。


“体验报告”公布,Operator背后的CUA技术有多强?


Computer-Using Agent(CUA)是支撑Operator的核心技术,它融合了GPT-4o的视觉识别能力和基于强化学习的高级推理功能。


CUA通过训练掌握了与图形用户界面(GUI)交互的能力,能像人类一样操作屏幕上的按钮、菜单和文本框,无需依赖特定的操作系统或网络API。


据悉,其创新之处在于采用通用界面方法,让AI能像人类般操作各类软件工具,突破了传统AI难以应对的众多细分应用场景。



不过OpenAI坦言,CUA还有许多需要改进的地方,比如目前就没法保证在所有场景下都能稳定运行。


OpenAI在Operator中部署的CUA系统展示了不同场景下的性能表现。比如它在基础网页操作和重复性任务方面表现出色,如搜索筛选、创建购物清单和音乐播放列表等任务的成功率达到10/10。


在电商网站搜索商品时也保持9/10的高成功率。但在处理复杂的房产搜索等任务时,成功率降至3/10。



测试还发现,提示词的质量会显著影响任务成功率,例如在场地预订任务中,添加具体时间和操作指引后,成功率从3/10提升至8/10。


系统在处理不熟悉的UI界面和文本编辑时表现欠佳,常出现试错和低效操作,文本编辑任务的成功率仅为4/10。


为了更好地量化Operator的性能指标,发布会上的演示人员也提到了OS World测试和Web Arena测试。


OS World用于评估AI智能体在Linux等操作系统上的导航能力,Operator得分38.1%,高于其他公开系统,但低于人类水平(72.4%)


Web Arena则是用于测试评估AI智能体在电商网站和社交论坛等网站的导航能力,Operator得分58.1%,同样超过其他公开AI系统,但未达人类水平。



安全方面,演示环节介绍了三个主要的安全考虑方向。首先是系统拒绝执行有害任务,使用审核模型和后续检测,并屏蔽特定网站。


其次对于模型可能存在的错误,系统在进行购买、预订等关键操作前必须获得用户确认,限制高风险任务如银行交易,并在敏感网站启用观察模式。


特别是针对网站对抗性攻击(如提示注入、越狱和钓鱼),系统设计了谨慎导航机制识别并忽略提示注入,实时监控模型检测可疑内容,并建立检测管道快速识别可疑访问模式。


最后系统设有注入监控器(prompt injection monitor),类似防病毒软件,实时监控模型检测可疑内容,发现可疑行为时会暂停执行。


考虑到无法预见所有安全隐患,OpenAI只能先从小规模部署开始,通过持续收集反馈来完善安全机制。



ChatGPT的崛起已经证明,伟大的产品往往诞生于无数次“不完美”的尝试。


OpenAI也坦然承认,目前由CUA支持的Operator只是一项早期技术,虽然在特定场景已证明有用,但仍需通过用户反馈持续改进。


并且,他们计划提高系统在不熟悉界面的适应能力,增强文本编辑精确度,优化对不同提示词的理解能力,并扩展可靠任务的范围。


Altman曾在月初的博客文章中表示,OpenAI已经有信心构建通用人工智能(AGI),并预测2025年第一批AI智能体将“加入劳动力大军”。



包括智谱昨天也宣布推出了GLM-PC。


这是基于智谱多模态大模型CogAgent,全球首个面向公众、回车即用的电脑智能体(agent)。它能像人类一样“观察”和“操作”计算机,协助用户高效完成各类电脑任务。


可预见的是,这些智能体在未来将具备强大的自主决策和任务执行能力,能够处理复杂任务,甚至在某些领域替代人类工作,并从根本上改变企业的生产方式和产出。


在OpenAI的五级AGI路线图中,智能体处于L3级别,其特点是不仅能思考,还能代表用户采取行动,执行复杂任务。


这样看来,Operator不仅是OpenAI智能体迈出的第一步,也将是迈向AGI的重要一步。


最新文章
红蝶沦为乾风的炉鼎,但却藏着一个伏笔,将成为红蝶复活的关键
哈喽,大家好,我是木子。《仙逆》动漫现在已经更新到了第84集,在这集中除了王林的剧情之外还有不少红蝶的剧情,在这个时候红蝶可以说是太惨了,因为她现在沦为了乾风的炉鼎,而且看样子乾风对她的控制欲也是非常的强,不过在这集播出之后
豹跃三晋 耀起未来|方程豹山西环耀豹驰旗舰店盛大开业!
豹跃三晋 耀起未来!2025年4月13日,山西环耀豹驰旗舰店正式启幕。作为旗下高端个性化新能源品牌,方程豹的入驻标志着山西汽车市场迈向“个性化电动时代”,环耀集团以全新服务体系赋能用户绿色出行梦想。小店区人民政府、小店区商务局、小
好玩的动作手游单机有哪些2024 高人气的动作单机游戏盘点格斗游戏单机手机版「好玩的动作手游单机有哪些2024 高人气的动作单机游戏盘点」
有单机游戏爱好者吗?给大家推荐一些好玩的动作类游戏,相对而言会比较简单,属于很多玩家的童年回忆,可以格斗冒险。以下就是关于好玩的动作手游单机有哪些2024的高人气排行榜,所有都是有非常好的品质,设定的背景也很丰富,可以用英雄来
港股午评:恒指跌1.73%,恒生科指跌3.06%,华润燃气跌超19%
金融界3月31日消息 港股恒生指数跌1.73%,报23022.05点,恒生科技指数跌3.06%,报5338.22点,国企指数跌1.47%,报8479.74点,红筹指数跌1.56%,报3790.99点。大型科技股中,跌3.59%,跌2.81%,跌3.04%,跌4.8%,跌0.06%,跌2.44%,快手-W跌
小米与华为手机深度对比:旗舰机型谁更胜一筹?手机配置对比「小米与华为手机深度对比:旗舰机型谁更胜一筹?」
在当今智能手机市场,竞争愈发激烈,小米和华为无疑是两大引人瞩目的品牌。从成立之初获得消费者青睐,到如今花样繁多的旗舰机型,二者的发展之路各有千秋。为了帮助消费者在小米14Pro、华为Pura70Pro等多款手机中做出更明智的选择,本文将
巨人的猎手2免费进击的巨人游戏手机版「巨人的猎手2免费」
巨人的猎手2免费基于热门进击的巨人改编的安卓游戏。玩家将扮演勇敢的巨人猎手,与庞大的巨人进行激烈的,保卫人类的空间。游戏提供多样化的武器和技能选择,让玩家能够自由搭配,制定独特的战斗。1. 巨人的猎手2免费拥有丰富的武器库,每
rmx3350是什么手机这是什么牌子的手机「rmx3350是什么手机」
rmx3350是realme GT Flash型号的手机;realme GT Flash配备了6.7英寸E4 sAMOLED显示屏,分辨率为QHD+,刷新率为120Hz;这款手机搭载骁龙888 Plus芯片组,搭配LPDDR5内存和UFS 3.1存储。本教程操作环境:realme UI 2.0系统,realme GT Flash
4月26日起,北京亦庄3条公交运营线路有调整
为方便北京经开区乘客的出行增加公交出行覆盖对所属3条运营线路(专183路、专188路、专231路)分别进行调整12025年4月26日起,调整专183路01专183路调整后首末站:鹿海园五里东门-兴盛街沿途设站:鹿海园五里东门、南海家园七里、四合路、
第二批保险资金长期投资改革试点迎来新进展
  第二批保险资金长期投资改革试点迎来新进展。记者从泰康保险集团获悉,泰康资产关于发起设立全资私募基金管理子公司泰康稳行私募基金管理有限公司的申请已获批。  据了解,2023年10月,金融监管总局批复保险资金长期投资改革试点首批
魅族官宣要发布跨世代AI硅基人 性能强大售价仅1999元
  【CNMO科技消息】4月1日,魅族官方发布了一则“重磅”消息,称将会在4月的发布会上带来一款跨世代AI硅基人战神Note 16号,并且还公布了新机器人详细的信息。战神Note 16号  根据介绍,战神Note 16号采用了黄金比例的环形能量设计,整
相关文章
推荐文章
发表评论
0评