搭载大模型的华为小艺:我竟然试出了员工都不知道的新功能。。

本文原创于微信公众号:差评 作者:差评君

相信大家最近,一定都被华为的开发者大会狠狠刷屏了。

从全新发布的 HarmonyOS 4 系统,再到折叠屏标准,华为是一分钟一个惊喜。隔壁的好兄弟托尼,也是逐一给大家讲解了。


(资料图片仅供参考)

今天,差评君也想来跟大家唠唠这个开发者大会。不过这回我们不聊系统,而是聊华为另一个从未有人尝试过的操作。

华为给自己的小艺,上了一个超强 Buff :AI大模型,搬到了这个智慧助手里。

现在的小艺已经脱胎换骨,进化成首个搭载大模型的终端智慧助手。

不知道大家对于这一次升级是什么想法,差评君自己是相当兴奋的。

自从 2017 年上线后,小艺一直在稳步前进。也上线了很多让人惊艳的功能,比如 AI 字幕、智慧搜图等等。

输入模糊词,就能快速管理照片文件

尽管小艺花费了大量心血,但是业界的语音助手普遍都有通病,存在语义理解困难、回答机械化的问题。尤其是中文的语义理解,更是难上加难。

直到大语言模型的出现,让华为看到了超级智慧助手的希望。

而当差评君受邀来到华为开发者大会的现场,亲自上手体验了全新的小艺之后。我觉得华为,可能确实找到了通往超级智慧助手的路子了。

有了大模型撑腰,小艺各方面都成长成了我们没见过的样子。

当我点开对话框,和全新小艺简单互动几轮之后,就非常直观地感受到了变化:

小艺沟通起来,越来越像一个真正的朋友。

我们给出指令,不再需要用一些方便机器理解的表达方式。

比如想换上 HarmonyOS 4 里上线的实时全景天气壁纸。以前我必须得说:打开全景天气壁纸。

但现在,有了大语言模型的加持,再加上华为专门构建的语料库。我们可以像朋友聊天一样,和小艺沟通:怎么换成感应天气的壁纸?

虽然是个疑问句,但小艺能理解核心需求是:替换实时天气壁纸

不仅如此,更让人惊讶的是,你可以一次性下达一串复杂的指令。

这个能力,差评君还没在其他手机上见到过。因为大多数时候,理解一个指令都够呛了。

小艺到底能做到什么程度,大家看我下面的操作就知道了。

我先丢了几个基础的指令,让小艺试试手。比如在睡觉前,给手机设置免打扰,并定一个明天的 7 : 30的闹钟,还要在 9 点提醒我参加会议。

如果是以前,我们必须分成三次请求。但现在,小艺几乎是瞬间理解。

通过对话界面,能看到小艺准确地识别出需求,并把指令分步设定好了。

到这还不是它理解能力的极限,依托华为的智慧场景,我们还可以完成更复杂的需求组合。

比如对于很多打工人来说,上班再怎么兢兢业业,下班点一到,就一条工作消息都不想看到。

但为了保住这份工作,老板的电话又不敢不接。。

这个时候,你就可以向小艺下达指令。每天晚上 11 点,手机打开免打扰。当老板来电,关闭免打扰。

点在对话中的场景卡片,就可以很清楚地看到小艺连贯的推理过程。

每一个启动的条件和执行的命令,都非常清晰准确。

后续差评君又尝试了好几次不同的复杂指令,比如每天自动播报天气和日程,甚至是播放收藏夹里的音乐,小艺都能做到。

那以后小艺拓展到华为全屋场景中,我是不是甚至不用动手,只用对小艺说几句话,就能让它成为我的家居管家。

这样一步到位的事务安排,放以前根本想都不敢想。

但现在,我不光敢想,甚至开始乱想。。

这还仅仅只是小艺第一项更新,除了沟通能力突飞猛进之外,大模型能做到的其他功能,小艺也都不在话下。

各种类型的文本创作,是信手拈来。余承东的开发者大会邀请函,就是小艺帮写的。

除了文本生成之外,依托大模型的摘要能力,小艺也可以理解多种复杂的文本,并总结归纳。

比如我们丢一篇几千上万字的文档或者 pdf ,它能轻松地啃下来。

而且,为了更好地刁(ce)难( shi )小艺,我们特地给了一篇关于珠穆朗玛峰的纯英文文档。

小艺竟然能快速地用中文帮我总结摘要。我们还可以用中文,继续追问文档里的各种细节。

这样一来,就算是一部手机,也能成为我们吃透各种文件或者资料的办公工具。

老板在工作群里甩各种资讯,或者要你总结心得的时候,小艺可就是你的救星了。

从文档内容摘要能力能看出,小艺的大模型能力是稳扎稳打的。

不过,文档上传和处理,也有其他大模型能做到。想惊艳到差评君这种大模型的测试“老手”,小艺必须得做得更好。

所以,在图片测试的时候,我们特地给小艺上了点难度。

先是给了一张塞满了数据的表格图片给它。小艺识别图片后,给了一个【表格提取】的选项。说明它看出了,图片里有表格数据。

当我们选择表格提取,几秒钟,图片的数据就被整理成了一个 Excel 文档。

小艺的识别还是很精准的,就算文字密度很高,也没有被干扰。

测试到这还没完,为了试探出小艺的读图极限到底在哪。

差评君特地出了道难题,给它发送了张车的照片,还特地找了个后屁股的角度。

大家也可以猜一下,看看能不能比小艺准确

本来觉得这题应该够呛了吧,结果小艺直接反手把一个链接卡片,甩到了我的脸上。。

上面包括汽车型号、照片,甚至包括参考价和可信度。

肉眼可见,小艺已经不仅仅是简单的粗略识别,而可以精确到具体某款型号。并且,后续如果接入更多的服务,我们随手拍能获取的信息量就很惊人了。

看到这,小艺给我带来的惊喜已经满满当当了。

但华为除了提高对话理解、办公效率这些硬实力外,还想打造一个更贴心、更个性化的助手。

依靠不断增强的 AI 引擎技术,再通过理解用户的使用习惯和高频场景,小艺能做到提前感知你会需要的场景。

并通过桌面的【小艺建议】,及时为你推送各种一站到位的组合场景。

这样每个人的手机,都是一个专属于你自己的贴心助手。

就比如说,我们有一趟飞往纳米比亚的飞机,航班信息首先会被整合进组件里。

而这趟出行前所有可能的准备,都可以在这一个窗口里一步到位。

比如旅行攻略,以及出发的天气情况。而且,因为是出境航班,下方还推荐了华为的天际通和出境易,方便获取海外网络服务和 APP。

随着我们的行程变动,推荐应用也会随之改变。

如果你习惯在飞机上看小说,那么起飞后,就会推送小说入口。当飞机落地的时候,推荐又变成了行李转盘信息、当地的美食。

相关的数据和学习都是在端侧进行

大家不需要担心有隐私安全问题

上面这些,就是这次差评君在现场体验到的小艺的部分功能。

这个脱胎换骨的全新小艺,已经可以覆盖到日常、出行甚至是工作等所有场景,给我们带来实实在在的便利。

稳扎稳打的大模型能力,能帮你提高工作效率和生产力。平时耗时的琐碎工作,什么工作总结、资料分析,甩给小艺几分钟搞定。

工作结束之后,想要规划出行,小艺建议又能给你最贴心的推荐,帮你省去大量准备工作。

而上面这些复杂的功能,以及原先需要好几步才能完成的操作,现在都只要一次与小艺简单的交流。

这样的智慧助手,已经有点钢铁侠里贾维斯的影子了。

所有的命令和任务,都只需要一句话。

但如果我们往回看,小艺从诞生之初,就努力成为连接用户和服务的智慧助手。从0到 1 构建出基础唤醒、语音识别和语义理解的底子。

一步步让小艺从听得懂、理解对,再到现在可以做到无需精准指令,凭直觉表达出需求就能理解并执行;从手机里的助手,到上线到全屋中控屏、车机、电视。

一直以来,华为都在利用过硬的技术,给用户带来更好的体验。

现在,将大模型和智慧助手结合的这一尝试,华为又是最先做到的。并且还在不断打磨体验,尝试接入更多的服务和应用。

不过,也别担心和全新小艺见面的时间会太晚。

华为将在 8 月底开放邀请测试,并于晚些时候在搭载 HarmonyOS 4.0及以上的部分机型通过 OTA 升级体验,具体升级计划会在稍晚公布。

这样一个能够自如沟通、深度理解用户的智慧助手的出现,到底能把我们的生活变成什么样?

这个问题的答案,就留给你自己去小艺里寻找了。

图片、资料来源

华为官网、华为开发者大会

关键词: