豆包手機助手消費者版本正式發佈。相比預覽版,本次消費者版更強調穩定性、日常可用性,並主打交互體驗。

語音、AI 鍵多方式喚醒,新增屏幕問答

據官方新聞稿,豆包手機助手支持語音、AI 鍵等多種喚醒方式以適配不同場景。其中專屬 AI 鍵帶有指紋鑑權能力,完成本人驗證後無需二次解鎖,即可調用助手執行任務;語音喚醒也針對遠場、內噪和嘈雜環境等場景進行了優化。

本次新增的屏幕問答能力,讓用戶無需額外截圖或切換應用,即可讓助手結合當前屏幕內容繼續處理任務。例如用戶打開相機對準室內環境,說出“根據這個裝修風格,幫我選一個一米二以內、價格不超過一千元的櫃子”,豆包可結合畫面與要求在電商平臺找到符合條件的商品。

助手還爲本地數據提供了搜索工具,可在需要時檢索相冊、短信、便籤等信息——比如用戶詢問港澳通行證到期時間時,助手能從手機相關信息中找到答案。錄音體驗也得到升級,並接入飛書妙記能力,用戶可直接追問“昨天用戶訪談裏提到的產品建議”這類具體內容。此外,用戶可通過語音輸入、三指上滑,或同時按住 AI 鍵和音量鍵等方式,手動保存當前屏幕內容,形成可在本地檢索的記憶。

GUI 操作以 Beta 開放,30 天規則公示

豆包手機助手本次將以 Beta 形式開放“操作手機”功能。官方希望與合作伙伴共建開放、規範的手機 AI 應用生態,爲此推出屏幕自動化操作聲明協議(SAEP),並同步啓動爲期 30 天的規則公示。

根據協議,第三方應用可以自主聲明操作邊界,明確允許或拒絕 AI 助手在本應用內進行屏幕自動化操作;豆包手機助手將充分尊重開發者意願,對明確拒絕相關操作的第三方應用不會進行自動化操作。在數據收集與處理上,助手遵循“合理必要”與“用戶自主控制”原則,同時建立了 Agent 防護體系,對可操作範圍進行分層、分級管理。

首個豆包手機助手消費者版本將在努比亞 NaviX Ultra 上搭載,該機目前已開啓預約,9 月 16 日正式發售。