豆包手机助手消费者版本正式发布。相比预览版,本次消费者版更强调稳定性、日常可用性,并主打交互体验。

语音、AI 键多方式唤醒,新增屏幕问答

据官方新闻稿,豆包手机助手支持语音、AI 键等多种唤醒方式以适配不同场景。其中专属 AI 键带有指纹鉴权能力,完成本人验证后无需二次解锁,即可调用助手执行任务;语音唤醒也针对远场、内噪和嘈杂环境等场景进行了优化。

本次新增的屏幕问答能力,让用户无需额外截图或切换应用,即可让助手结合当前屏幕内容继续处理任务。例如用户打开相机对准室内环境,说出“根据这个装修风格,帮我选一个一米二以内、价格不超过一千元的柜子”,豆包可结合画面与要求在电商平台找到符合条件的商品。

助手还为本地数据提供了搜索工具,可在需要时检索相册、短信、便签等信息——比如用户询问港澳通行证到期时间时,助手能从手机相关信息中找到答案。录音体验也得到升级,并接入飞书妙记能力,用户可直接追问“昨天用户访谈里提到的产品建议”这类具体内容。此外,用户可通过语音输入、三指上滑,或同时按住 AI 键和音量键等方式,手动保存当前屏幕内容,形成可在本地检索的记忆。

GUI 操作以 Beta 开放,30 天规则公示

豆包手机助手本次将以 Beta 形式开放“操作手机”功能。官方希望与合作伙伴共建开放、规范的手机 AI 应用生态,为此推出屏幕自动化操作声明协议(SAEP),并同步启动为期 30 天的规则公示。

根据协议,第三方应用可以自主声明操作边界,明确允许或拒绝 AI 助手在本应用内进行屏幕自动化操作;豆包手机助手将充分尊重开发者意愿,对明确拒绝相关操作的第三方应用不会进行自动化操作。在数据收集与处理上,助手遵循“合理必要”与“用户自主控制”原则,同时建立了 Agent 防护体系,对可操作范围进行分层、分级管理。

首个豆包手机助手消费者版本将在努比亚 NaviX Ultra 上搭载,该机目前已开启预约,9 月 16 日正式发售。