随着搭载骁龙845的小米、OPPO纷纷推出新机,在AI芯片方面,华为、苹果、高通三位主要玩家的代表作都已经出现了。在本系列上一篇文章中,很多读者都很好奇:同样都是移动AI芯片,麒麟970、苹果A11和骁龙845之间的不同点究竟在哪?

从硬件角度来看,三者最大的区别在于对AI运算的实现方式上。我们知道,AI计算与以往手机上常见计算任务的区别,就在于实现机器学习、深度学习的推理需要在长时间内保持高速、大量的计算处理。峰值数据吞吐量的提高、计算时长的提高包括对计算速度要求的提高,都对AI芯片的算力做出了新的要求。

而这三种芯片的区别,就在于如何实现更强的算力上。


其中麒麟970采用的是“硬实现”的方式,在CPU、GPU等等传统计算单元之外加入了一个新的计算单元——嵌入式神经网络处理器NPU。就像GPU专用于图像运算一样,NPU也是专用于卷积神经网络的计算,从而实现机器学习的相关功能。同样的AI计算任务,在拥有NPU的前提下会比单纯的CPU运算提升约50倍能效和25倍性能——不仅速度更快,而且耗能更低,以免影响手机的正常应用。

与麒麟970的硬实现模式不同,苹果A11采用的是“软实现”模式,不设置独立的神经网络处理单元,但通过对自研GPU、自研ISP和DSP等等传统硬件模块进行AI配适调整,集成“神经网络引擎”极大的提升图片计算的处理速度。在AI任务中,很多都涉及到对图片内容的学习和推理,如AI美颜等等,提升了图像计算能力,自然也能提升AI计算的效率。


骁龙845推出的AI Engine(人工智能引擎)概念和苹果A11有些类似,同样是调整CPU、GPU、DSP等多个硬件模块,从而替代NPU的能力。

所以,芯片中的NPU单元真的可以被其他解决方案替代吗?

想要回答这个问题,首先我们要知道AI芯片到底能做到什么。

在拥有AI芯片之前,手机遇上AI任务时,大多数时候采取的云计算方式——把数据上传到云端,进行推理后下载结果到本地。这样一来一回的计算方式不仅效率低下,并且很容易造成应用卡顿。

但拥有了超高算力的AI芯片后,手机终于可以实现端侧AI。不管有没有网络连接云端,都可以在手机本地进行实时的、无条件的高速运算。


这样的端侧AI给手机带来了四项能力,分别是感知、认知、动力和安全。接下来我们可以从这四项能力的实现过程中,讨论有没有NPU究竟对手机AI产生了何种影响。

智能感知有多高效?瞬间抓拍笑容

手机是如何感知一切的?

在以往是通过触摸屏幕等输入方式,对用户的信息进行解码。同时通过GPS、陀螺仪等等软硬件两层的传感装置弄明白“我在哪、我与地面的距离”等等信息。

但随着计算能力的增加,一些原本存在于云端的算法正在进入终端,让手机感知到更多。比如在图像处理上,以往手机只是简单的拍摄照片,现在随着计算能力增加,手机本地也可以部署图像识别模型,在取景阶段手机就能知道镜头前的是宠物还是人类。

但有了NPU的存在,手机算力全面提高不再只限于对图像的处理能力,所能感知到的信息也就更为全面。

比如荣耀V10有一项智能音乐推荐功能,在AI算力的支持下,可以通过手机的体感能力实时监测到用户的运动频率,从而推荐旋律和运动频率相近的音乐。

就连现在应用最广的AI拍照方面,也存在很多区别。像小米Mix 2S和OPPO R15都提出了场景识别,分辨出拍摄的对象并进行相应的后期处理。但华为的P20系列却能在端侧实现表情识别,自动抓拍到拍摄对象的笑容。


原因就是,笑容、运动频率这种数据波动往往是转瞬即逝的,NPU作为独立运算单元专职负责AI计算,可以以最快速度调用资源完成处理。可CPU+GPU的解决模式要同时顾及手机上的所有计算任务,就有可能出现排队的状况,镜头前的人都笑完了,计算资源还没调度过来。

精准认知下,智慧识屏让服务直达用户

所谓认知,就是手机对信息的加工处理过程。

有了端侧AI的强算力,手机正在逐渐从处理数据走到处理知识。举个例子,以往iPhone的相册分区会按照拍摄地点、拍摄时间来区分,但现在已经能实现猫、海水这样以照片内容区分的方式。手机从以前只能理解时间、GPS定位这些结构化数据到可以理解猫狗花草这样非结构化的“知识”。

在EMUI中,我们还可以见到一项名为智慧识屏的功能。只要双指长按屏幕就可以实现对图片和文字的共同读取,并且通过AI理解图片与文字的语义,呈现出地址、电影购票、饭店大众点评等等服务卡牌。点击这些卡片,就可以直接跳转第三方App,极大的减少了App间的手动调度。


这一功能的出现,是因为NPU更强大的算力可以实现对信息的多维处理:不仅仅可以同时处理自然语音和图片,还可以通过对用户行为习惯的理解进行应用跳转这类主动服务。

动力指挥官,懂得用户才有智慧节电

一个普遍的认识是,大量的计算是非常耗电的。不然比特币矿工们也不会四处寻找低电价的城市了。但手机的动力系统上,AI计算反而可以发挥正向作用。

在上文提到,AI让手机拥有了更强大的认知能力,在拥有NPU的手机中,这种认知更是每时每刻的发生着,最终实现手机对用户个人行为习惯的一种深入理解。就拿电池续航来说,搭载上麒麟970之后,华为和荣耀所应用的EMUI都加入了智慧省电功能。即通过对个人用户对应用使用习惯的深度学习,记住哪些应用是经常使用的,预测到哪些场景下即将打开哪些应用。在这一制度下,再来进行资源调配,有了独立的计算单元,手机AI时时刻刻都在进行着学习和计算,“切断”了那些启用率低的App的供能,从而让手机获得更好的续航能力。

不光是电池续航,在安卓手机系统不流畅方面,同样的智慧资源调度也在发生着作用。在普通手机中,各个应用都在排队领取自己所需的运行资源,久而久之队列越来越长,效率也越来越差。而NPU就像一个指挥官,通过应用的日常表现判断它们到底需要多少资源,把排队领取变成实时的按需分配。

这样一来不仅手机应用对内存、计算资源的利用率提高,AI还可以定时向用户提醒,哪些应用出现了流量异动、哪些应用太久没有被启动。帮助用户更清晰的了解到手机内部的运行状况。以荣耀V10的数据看来,在这样的模式下系统调度性能提升了60%,操作流畅度提升了50%。从电力续航到内存,手机整体的动力系统效率都得到了提升。

安全壁垒永驻,

有端侧计算才敢把数据交给手机

在云计算时代,用户隐私问题就像一堵避不开的高墙;想要获取更好的服务,就需要把数据上传到云端进行处理,可是一旦数据上传到云端,就有被泄露的可能。但端侧AI的存在就完美避开了这一问题,计算都在本地进行,不存在将个人隐私暴露在公用的云空间中。

加入NPU后,更是可以在保证隐私的前提下为使用者提供更多服务,把对用户行为习惯的理解完全放在无网的封闭空间下进行,手机就可以更“懂你”。目前HUAWEI P20、荣耀V10都已经可以做到屏幕亮度、后台资源、碎片文件等等方面的智能调节,其实手机还知道你最常使用的驾车路线、接下来几天的行程、喜欢去哪些地方消费等等更多信息,这些信息放在云端上一定会让人感觉受了冒犯,但在端侧AI对信息安全的加持下,手机会成为一位合格的个人助理。

比如用户通过语音助手预约餐厅时,手机可以直接通过用户的出行习惯推荐适合的路线,甚至还可以帮用户推荐菜品。这样建立在安全感之上的智能体验,很有可能让用户不知不觉中对AI手机产生依赖。


看到这里我们会发现,NPU之于手机,不仅仅是简单的技术加成,而是通过感知、认知、动力、安全等等方面的细微之处提升用户对手机的使用感。用户或许不理解所谓的深度学习,但一定能感受到手机的续航能力越来越强、越来越符合自己的使用习惯。

如今移动AI还在刚刚起步阶段,用户很难对AI手机形成一个确切的认知。这时恰好就出现了一个窗口期,从红米的千元AI系列到OPPO的智能拍照,不管是否真正拥有AI能力的手机都可以打着AI的旗号“蹭热度”。

可当用户真正使用上这些手机时,除了感受到与美图秀秀无异的“AI滤镜”之外,完全不能体会到手机对于自己行为的学习、对于操作系统速度、电池续航能力的提升,AI不AI的,在使用感上毫无变化。对于手机这款产品而言,拍照效果、续航能力、操作便利等等这些使用感受才是永恒不变的货币体系,是消费者确认其价值的唯一参考。

窗口期永远是短暂的,博得一时的流量,不如把握住一项能真正改变产品体验的技术。


是否拥有NPU,会成为手机AI体验的赛点吗?|手机AI的真与假(二)相关推荐

  1. 能和机器划拳,猜中你的表情,百度开了一家超好玩的“AI体验店”

    12月26日,由百度.中关村创业大街联合打造的全国首家"百度大脑创新体验中心"在中关村创业大街揭幕启动. 海淀区区长助理上官伟.科技部火炬中心孵化器管理处处长陈晴.海淀园管委会常务 ...

  2. 哪里不知道“瞄”哪里,这项AI黑科技,打开手机就能体验

    乾明 发自 凹非寺 量子位 出品 | 公众号 QbitAI 哪里不懂,直接拿着手机对准哪里就行了. 比如柜子里的化妆品,到底哪个是哪个?对着扫一下就行了: 这是百度App中的黑科技,也是百度秀出的AI ...

  3. 鸿蒙os智慧屏体验,华为智慧屏首发体验!搭载鸿蒙OS+AI芯片,还有AI教你健身

    智东西9月19日消息,在今天的华为德国慕尼黑发布会上,华为除了发布年度旗舰手机Mate 30系列外,还正式推出了其65英寸版华为智慧屏. 这是继荣耀智慧屏后,华为集团推出的第二款智慧屏产品,同样搭载华 ...

  4. 阿里云视频云 Retina 多媒体 AI 体验馆开张啦!

    简介:带你体验视频更多可能 带你体验视频更多可能 海量视频管理难度大?翻库检索特定人物费时费力?视频内容剪辑效率低?您的得力助手"Retina多媒体AI"体验馆已上线.带你感受视频 ...

  5. 从AI到“连环计”:华为手机攻克苹果的战役始末

    本周科技圈大事不少,但华为手机销量超过苹果,绝对是最让中国科技众开心的事. 8月伊始,五家调研机构分别发布报告,称2018年第二季度全球智能手机出货量,华为手机首次超过苹果,成为全球第二大智能手机厂商 ...

  6. 实测荣耀V20:7折的价格,华为Mate 20一样的AI体验

    乾明 发自 凹非寺  量子位 报道 | 公众号 QbitAI 虽然相对更便宜,但体验一点都不差. 这是量子位先后测评了华为Mate 20 Pro和荣耀V20的之后的第一感觉. 2018年年末,华为家的 ...

  7. AI手机摄影的三个流派,其中藏了个假AI|AI手机的真与假(一)

    在咱们身边,有一个铁打的定律,那就是一个东西或者名称火了,马上就会群起而模仿之.久而久之,这种"微创新"甚至"不用创新"的方式,被国人冠名为"山寨文化 ...

  8. AI体验馆上线!集成业界领先NLP场景深度迁移学习框架EasyTransfer

    简介:2020年10月,阿里云正式开源了深度迁移学习框架EasyTransfer,这是业界首个面向NLP场景的深度迁移学习框架. 目前集合该能力的AI体验馆已正式上线,免费体验:https://wor ...

  9. rog live service是什么_双11手机怎么买?ROG游戏手机3“独一份”体验,值得剁手...

    对于追求极致的手游党来说,手机设备性能的强悍极为重要,毕竟时刻影响着流畅性与游戏体验.纵观当下手机厂商推出的游戏手机来看,ROG游戏手机3可以说是目前性能最强的游戏手机,在下半年发布的多款旗舰均没能领 ...

最新文章

  1. vue+ivew-admin开发项目,内存占用过大解决办法
  2. 周末,我打开《逆水寒》参加了一场AI学术会议
  3. 实验8.2 指针与字符串 7-2 字符串排序
  4. 重磅!阿里巴巴和全球最大奢侈品电商YNAP成立合资公司
  5. -bash: ulimit: pipe size: cannot modify limit: Invalid argument
  6. 类似ajax封装函数,JS 封装一个async式的AJAX函数
  7. Linux Vi的使用
  8. WordPress网站弹窗插件PopupPress插件
  9. opencv之在图像上绘制标记---drawMarker
  10. iOS 常用到的宏#define
  11. 支付宝、京东支付场景之策略模式实战
  12. 草图大师(2018)
  13. matlab做聚类分析瓶面柱状图,MATLAB聚类分析工具箱
  14. 重学Java 8新特性 | 第1讲——我们为什么要学习Java 8新特性?
  15. postgresql 数据库 Encoding、Collate、Ctype
  16. “香港一卡通” 內地見證開戶
  17. 有一个字符串,如11.2美元34人民币;如何将数字与单位分开,放入数组中呢,数组比如 attr[0]=11.2 attr[1]=美元 ,依次类推
  18. c++中怎么求二维数组的长度
  19. 看了 72 位图灵奖得主成就,才发现我对计算机一无所知
  20. ublox F9P 开发板使用指南

热门文章

  1. 管理类联考——逻辑——技巧篇——形式逻辑——秒杀思路
  2. 微信小程序:Component “页面路径“ does not have a method “ 方法名“ to handle event “tap“.
  3. warning: CALF wilL be replaced by LF in xxxx 问题解决办法
  4. 【Linux操作系统课堂笔记1】小白入手——环境配置安装
  5. linux文件分割命令性能,Linux系统下使用split命令分割大文件 (转载)
  6. 2018 软件测试人员的成长之路---必看!
  7. TP5.1 微信一键登录
  8. ArcGIS基础实验操作100例--实验9线要素的延伸与裁剪
  9. 什么是STM32的DMS
  10. 字符串倒序函数 java_编写将给定字符串倒序输出的函数[Java笔试题]