去年12月,豆包手机助手技术预览版发布,它能响应用户需求,跨应用自动执行任务,无限接近人们对AI手机的遐想。今年9月14日,豆包手机助手消费者版本正式发布。豆包手机助手以豆包App为基础,与手机厂商在系统层面展开合作,围绕交互、任务执行、本地记忆及检索等核心体验,进一步探索AI在手机中的应用。据官方视频介绍,相较于去年底推出的技术预览版,这次的消费者版本更强调稳定性和日常可用性。
此前发布的技术预览版中备受关注的手机操作功能(GUI技术),此次以Beta版形式开放。豆包方面表示,图形界面智能体仍是一项快速发展的前沿能力,豆包手机助手期望与合作伙伴共同构建开放、规范的手机AI应用生态。
为此,豆包手机助手推出屏幕自动化操作声明协议(SAEP),并同步启动为期30天的规则公示。根据协议,第三方应用可自主声明操作边界,明确允许或拒绝AI助手在本应用内进行屏幕自动化操作。豆包手机助手方面表示,将充分尊重开发者意愿,对明确拒绝相关操作的第三方应用不会进行自动化操作。
围绕该协议,业内专家表示,豆包手机助手公布了SAEP三方应用接入协议并公示,以公开规则降低协作成本,并明确了尊重应用边界。此规则分类分级管理,有利于避免“一刀切”,并明确了安全机制和责任划分。在“AI+手机”创新发展的趋势下,该规则是一种现实、透明且可执行的治理方案探索路径。
豆包手机助手能做什么
9月14日,豆包手机助手消费者版本正式发布。豆包手机助手以豆包App为基础,与手机厂商在系统层面展开合作。交互体验是此次豆包手机助手消费者版本重点介绍的基础能力之一:它支持语音、AI键等多种唤醒方式,以适配不同使用场景。其中,专属AI键带有指纹鉴权能力,完成本人验证后无需二次解锁,即可调用助手执行相关任务。
另一项广为关注的功能,是手机助手的屏幕问答。用户无需额外截图或切换应用,即可让助手结合当前屏幕内容继续处理任务。
例如,在官方视频演示中,用户打开相机对准室内环境,说出“根据这个装修风格,帮我选一个1.2米以内、价格不超过一千元的柜子”,豆包便可结合画面信息和用户需求,在电商平台找到符合条件的商品推荐。
任务执行是豆包手机助手此次展示的另一项核心能力。以出行场景为例,用户说“帮我叫一辆去公司的车”,豆包即可确认常用地址、选择车型并发起下单。
第三方应用拥有允许和拒绝权
同时发布的还有豆包手机助手发布屏幕自动化操作声明协议(SAEP),并同步启动为期30天的规则公示。根据该协议,第三方应用可自主选择允许或拒绝AI助手在应用内执行屏幕自动化操作,也可进一步限制权限范围,例如禁止全部操作,或对截图、模拟输入、内容修改等特定操作单独设限。开发者可以通过接入SAEP协议或回复官方沟通邮件表达意愿。
据介绍,公示期内,豆包手机助手仅对系统自带应用、字节跳动旗下应用,以及已通过SAEP或邮件明确同意接入的第三方应用执行自动化操作,其余应用默认不操作。开发者可以通过两种方式表达态度:一是接入SAEP协议并声明接受或拒绝;二是回复官方发送的沟通邮件。两种方式效力相同,拒绝声明随时生效,被拒绝的应用会立即列入不可操作清单。
开发者提交拒绝声明后将生效,相关应用会被列入不可操作清单。公示期结束后,豆包手机助手将逐步扩大可操作范围,但明确表示拒绝的第三方应用始终不在操作范围内。
而接入SAEP后,第三方应用可以分类分级声明边界。例如,整个应用,意味着禁止AI在本应用内进行任何操作;指定操作,即限制内容修改、最终发布、删除,以及签到抽奖等权益领取等。
豆包手机助手也在发布视频中重点介绍了隐私与安全的相关工作。据介绍,豆包手机助手在数据收集和处理上遵循“合理必要”与“用户自主控制”原则,同时建立了Agent防护体系,对可操作范围进行分层、分级管理。发布视频还提到,用户可以前往豆包手机助手官网查看完整的隐私安全白皮书。
据悉,首个豆包手机助手消费者版本将搭载在努比亚NaviXUltra手机上,于9月16日正式发售。(李定洋)