12月1日消息,今日,豆包团队发布了与手机厂商在操作系统层面展开深度合作的豆包手机助手技术预览版。
它凭借豆包大模型的技术支撑,推出了多维度的创新功能,重新定义了手机AI助手的使用体验。
在交互形式上,它打破了传统APP的限制,用户不仅可以打开豆包App,还能借助系统级语音唤醒、手机侧边AI按键、耳机对话等途径启动,甚至能够直接就屏幕内容进行询问,比如查询景点的具体位置和照片的拍摄角度,交互的便捷程度得到了显著提高。
同时,语音通话、视频通话与屏幕共享功能也被整合进来,只需双击AI键,就能启动双语绘本讲解等场景应用。
在功能创新层面,多模态生成技术与手机原生相册实现深度整合,可精准消除照片里的人物及杂物,留存纯粹的风景画面。
还支持全平台比价下单,能自动遍历淘宝、京东等购物软件,筛选出最低价格。最后还会提示用户完成支付,高敏感环节需要手动处理。
还可以为用户查询播客更新、开启特斯拉前备箱、预订餐厅、在钉钉上申请出差以及购买高铁票等。
在获得用户授权开启功能后,系统能够在本地记录相关信息并将其转化为文本形式,同时通过智能识别生成纪要总结以及关键日程对应的待办提醒,还可以迅速响应用户提出的“查询座位号”“回忆咖啡馆位置”等各类需求。
尽管当前还处于技术预览阶段,不过能够发现,豆包手机助手不单单简化了手机的操作步骤,更促进了AI与手机使用场景的深度结合,未来很有希望进一步提高用户在数字生活中的效率。