字节刚发布的「豆包手机助手」不仅是聊天机器人,而是直接嵌入底层 OS 的数字员工,真正实现了从“教你怎么做”到“替你做完”。
它的核心逻辑是用 VLM(视觉语言模型)识别屏幕 UI,配合模拟点击实现:
1️⃣ 全网比价闭环:对它说“买最便宜的某物”,它自动遍历淘宝/京东/PDD,领券比价并填好订单,你只需最后按指纹支付。
2️⃣ 工作流自动化:这是杀手锏。一键识别微信群杂乱文件 ➝ 按类型归档打包 ➝ 发送至企业微信。以前手动要半小时,现在仅需几秒。
3️⃣ 屏幕感知(Screen Awareness):按侧边键,它能读取当前聊天记录帮你拟定高情商回复,或者语音指挥相册修图,不用再记复杂的二级菜单。
⚠️ 目前首发于努比亚 M153(工程机),本质是利用 Android 无障碍权限(Accessibility),在隐私敏感度极高的当下,建议先观望其权限管理机制再主力使用。
#AIAgent #豆包手机助手 #自动化 #生产力工具