豆包手机帮手以豆包 App 为根本，取手机厂商正在系统层面展开合做，环绕交互、使命施行、当地回忆及检索等焦点体验，进一步摸索 AI 正在手机中的使用。据视频引见，比拟客岁底推出的手艺预览版，此次的消费者版本更强调不变性和日常可用性。交互体验是此次豆包手机帮手消费者版本沉点引见的根本能力之一。据引见，豆包手机帮手支撑语音、AI 键等多种体例，以适配分歧利用场景。此中，专属 AI 键带有指纹鉴权能力，完成本人验证后无需二次解锁，即可挪用帮手施行相关使命。语音方面，豆包手机帮手也针对远场、内噪和嘈杂等场景进行了优化。
此外，值得一提的是手机帮手的屏幕问答能力。用户无需额外截图或切换使用，即可让帮手连系当前屏幕内容继续处置使命。例如，正在视频演示中，用户打开相机瞄准室内，说出“按照这个拆修气概，帮我选一个一米二以内、价钱不跨越一千元的柜子”，豆包便可连系画面消息和用户要求，
雷同的屏幕上下文理解能力，此前也曾呈现正在苹果关于 Siri 和 Apple Intelligence 的演示中。这意味着，手机 AI 帮手正从纯真回覆问题，逐渐转向理解用户所处的具体场景和现实需求，并进一步完成响应使命。除交互能力外，小我 Context 取回忆能力也是手机帮手可否满脚好用户个性化需求的环节。据引见，豆包手机帮手为当地数据供给了搜刮东西，能够正在用户需要时检索相册、短信、便签等消息。例如，当用户扣问港澳通行证的到期时间时，帮手能够从手机中的相关消息里找到谜底。
环绕办公场景，消费者版本还升级了录音体验，并接入飞书妙记能力。连系当地搜刮东西，用户能够间接诘问具体内容，好比“今天用户里提到的产物”。此外，用户还能够通过语音输入、三指上滑，或同时按住 AI 键和音量键等体例，手动保留当前屏幕内容，构成可正在当地检索的回忆。使命施行是豆包手机帮手此次展现的另一项焦点能力。以出行场景为例，用户说“帮我叫一辆去公司的车”，豆包即可确认常用地址、选择车型并倡议下单。值得一提的是，手艺预览版发布后遭到普遍关心的“操做手机”功能，此次以 Beta 版形式。豆包方面暗示，图形界面智能体仍是一项快速成长的前沿能力，规范的手机AI使用生态。为此，豆包手机帮手推出屏幕从动化操出声明和谈（SAEP，Screen Automation Execution Protocol），并同步启动为期30天的法则公示。第三方使用能够自从声明操做鸿沟，明白答应或AI帮手正在本使用内进行屏幕从动化操做。豆包手机帮手方面暗示，将充实卑沉开辟者志愿，对明白相关操做的第三方使用不会进行从动化操做。同时，豆包手机帮手也正在发布视频中沉点引见了现私取平安的相关工做。豆包手机帮手正在数据收集和处置上遵照“合理需要”取“用户自从节制”准绳，同时成立了 Agent 防护系统，对可操做范畴进行分层、分级办理。发布视频还提到，用户能够前去豆包手机帮手官网查看完整的现私平安。据悉，首个豆包手机帮手消费者版本将搭载正在努比亚 NaviX Ultra 手机上，目前已预定，将于9月16日正式发售。
