春节档电影《你好,李焕英》大火,截至目前实时总票房已突破 50 亿。这部电影除了为亿万观众带去了欢声笑语外,正如这部电影的译名《HI,MOM》所表达,大家也被影片中真挚的母女情所打动,小编更是在电影院哭湿了口罩。

女儿贾晓玲(贾玲 饰)意外穿越时空,与年轻时的妈妈李焕英(张小斐 饰)相遇,弥补了自己想让母亲更加快乐幸福的遗憾。而在科技飞速发展的今天,借助技术手段,这样的遗憾与思念不用只停留在想象与艺术作品中,贾晓玲无需回过去,就能帮助妈妈李焕英穿越未来,在2021年“重聚”。

那么,这样“跨越时空”的对话真能实现?这些背后又有怎样的技术支撑?影片中最为精彩的父女画面,到底得有多像?今天小编就为大家,揭开这层“未来”技术的神秘面纱。

跨越时空的对话:

智能语音技术带李焕英穿越未来

在《你好,李焕英》中,贾晓玲穿越时空,与年轻的母亲来了一场超时空对话。现如今,除了电话、语音、视频等通讯方式能拉近地域上的距离,跨越时空的对话也从某种意义上成为现实。

2020 年,一部韩国的纪录片《I Met You》就记录了这样一个“重聚”场景。一位失去女儿的母亲在VR技术的支持下,与自己曾经逝去的女儿“重逢”。为了力求真实可靠的数据,技术人员引入了AI语音合成技术,让这个虚拟人物能够发出和女儿曾经一样的声音,并能与母亲进行互动与交流。

以上这样的定制化语音交互系统,究竟是如何实现的呢?以京东语音合成声音定制服务 & 闲聊为例。首先,我们可以把这个场景拆分语音合成声音定制(让虚拟人物能发出女儿曾经一样的声音)与开放场景对话能力(虚拟女儿能与母亲进行互动与交流)。

通常智能对话能力的实现,主要由语音交互系统三个主要流程组成:

  • 语音识别:将原始的语音信号转换成文本信息(ASR),并将识别出来的文本信息转换为机器可以理解的语义表示(NLU)。简单来说,就是让机器可以听到人话;

  • 自然语言理解:基于语义表示出来的对话的状态,对对话进行理解(DM),判断系统应该采取什么系统动作。这里的动作可以理解为,机器需要向你表达什么意思;

  • 语音合成:将系统动作转变成自然语言文本(NLG),并将其变成语音输出给用户(TTS)。

上图所示为语音交互系统的整体流程,大家能更清晰地看到每个模块的输入输出,以及各模块之间的协作关系。其中,NLU 是非常重要的模块之一。NLU 的目标是将文本信息转换为可被机器处理的语义表示。其涵盖领域非常广泛,包括句子检测,分词,词性标注,句法分析,文本分类/聚类,文字角度,信息抽取/自动摘要,机器翻译,自动问答,文本生成等多个领域。

但和基于规则的 NLU 相比,人类对话与对话系统一个重要区别是它是否与现实相结合。基于京东NLP引擎能力、数据运算能力和千亿级互联网语料数据的支持,京东闲聊集成了较强的开放场景对话能力,分析并理解用户对于开放场景的提问,可通过结合外部知识库来弥补对话系统与人类之间背景知识差距的方法,生成流畅且个性化的回复,实现用户语音交流的需求。

然而,智能语音对话的“身体”有了,定制化声音的“灵魂”又该如何实现?

语音合成声音定制简单来看主要分为三步:上传指定内容语音文件;进行语音合成模型训练;使用模型进行语音合成。

从下图的 AI 的架构来理解,首先通过基础层语音信号的采集、降噪等预处理;其次在技术层通过对原始语音信号的特征进行抽取,由原始的语音得到语音向量。再使用声学模型和字典、语言模型对语音向量进行解码搜索;最后,对识别结果进行应用层的输出。

京东语音合成声音定制服务,就可基于深度学习技术,仅需上传少量音频数据,即可实现专属语音音色的合成,快速赋予产品个性化声音形象,在智能客服、有声阅读、有声导航等场景上应用普遍。

目前,京东的语音合成技术已经在京东读书,京东京鱼座 AI 音箱等产品,以及语音智能客服机器人等更加复杂的场景落地。小编一直记得这样一个事例中的一句话:“一下吃完一整瓶还能活着吗?”这是来自 2020 年初,一位用户在京东上咨询智能情感客服时留下了这样的话。

2020 年初,一位用户在京东购买药品在线咨询时触发了京东云智能情感客服的预警,缘由是内容含有极端情绪化的因素,预警发了危机专员的介入,结合该用户购买的药品剂量,推断其存在轻生倾向,通过危机专员妥善处理,避免了悲剧的发生。这是一场因科技完成的拯救行动,主导整个行动的是京东云的智能情感客服。作为业界首个大规模商用的情感机器人,这支科技“生命通道”也避免了多次悲剧的发生,用科技的温暖挽救了一个个鲜活的生命和家庭。

到底跟谁最像?

FastReID揭秘贾玲与父母的相似度

(小编友情提醒:以下内容涉及剧透,请“谨慎”观看哟)

电影《你好,李焕英》中贾晓玲穿越到了 1981 年,在妈妈还是个少女的年代里,贾晓玲本想凭借自己的努力让妈妈改变命运,希望帮助妈妈嫁给体面人,过上体面又骄傲的生活。但最终,李焕英因为对女儿的爱,依然选择了与贾晓玲的父亲结婚,未来仍能成为贾晓玲的妈妈。

不过,大家确实都没有想到,影片最大的亮点莫过于贾晓玲的爸爸扮演者乔杉的出现。相信坐在电影院里看《你好,李焕英》的观众朋友们都发出了“哇”的惊叹,小编当时也跟着笑弯了腰,心里 OS:“咋能这么像哈哈哈,太会选演员了吧!”

尽管乔杉在整部影片里就像最后彩蛋一样只出现了很短的镜头,但是大家还是能够感受到他和贾玲两个人之间眉眼间的神似感觉,特别是眯着眼笑的时候。但回归现实,贾玲到底更像爸爸还是更像妈妈呢?

小编求助了京东 AI 研究院通用目标重识别开源库FastReID的研发小哥哥,想从技术严谨的角度来对比贾玲与父母的相似度,返回结果如下:

从返回的计算结果看来,贾玲和妈妈的相似度为 63%,跟爸爸的相似度为 15%,果然贾玲跟妈妈还是要更像一些!

这时你或许想问,跟乔杉的相似度...哦不,这个相似度的结果到底是如何计算的?这背后的技术还是要归功于 FastReID 强大的特征分析能力。

FastReID 训练框架为相似度计算模型的快速训练和部署提供了强大后盾,模型整体的高效实现能够帮助我们在收集的数据集上,进行快速的训练和调参,并获得一个可以直接部署的模型。通过后续的自动部署管线,可以将模型部署到一个 web service 上。这时,我们只需将贾玲与其父母的人物图片送到训练好的网络当中,对人物特征进行提取和分析。获取人物特征之后,通过特征之前的余弦相似度,就可以得知贾玲到底像谁了。

至于贾玲与乔杉的相似度嘛,可以给大家留个悬念,感兴趣的朋友可以在我们 FastReID 开源库上部署模型进行计算。

*GitHub链接:

https://github.com/JDAI-CV/fast-reid

那么,上述结果的“幕后功臣” FastReID 究竟是啥?FastReID 是京东 AI 研究院,于 2020 年 6 月发布的基于 PyTorch 的通用目标重识别(ReID)开源库。

现如今,ReID(通用目标重识别)技术往往被应用到不同规模的特定目标轨迹分析上,这就会导致系统处理的数据规模快速成倍的增长,模型的推理速度变慢,最终使得 ReID 算法的性能不能被完全发挥。此外,ReID 领域中的学术研究与工程模型部署存在着较大的差距,代码对齐问题使得学术研究成果很难直接转化为可落地的产品,限制其在大规模商业化场景中的应用。

基于此,参照 Detectron2 的整体概念和设计哲学,FastReID 设计成了一个高度模块化和可拓展的架构,从而可以让研究人员快速的实现新的 idea;更重要的是,该框架友好的管理系统配置和工程部署函数可以让工程师快速的部署它。FastReID 开源库可针对 ReID 任务提供完整的工具箱,包括模型训练、模型评估、模型部署等模块,并且实现了在多个任务中性能领先的模型。

此外,FastReID 还广泛应用于行人/车辆重识别、野生动物保护、拍照购物、无人超市等应用中。其中包括许多人们日常接触的应用,比如搜索电视剧中感兴趣的演员的视频、从监控视频中搜索商场中走失的孩子、从城市监控系统中搜索可疑车辆的视频、商品溯源防伪等,甚至在生态环境保护领域中还可用户东北虎保护等野生濒危动物的保护的应用。

结语

无论是完成自己心愿的贾晓玲,还是默默守护的李焕英,孝心可鉴,母爱伟大。今天我们用 AI 技术把“李焕英”带回 2021 感受科技温度,而京东科技在坚持科技引领,助力全球产业数字化升级,并推动实体经济高质量发展的使命的同时,始终坚信科技力量能够塑造更温暖、更美好的世界!

最后,在这个特殊的日子里,祝全国姐妹们节日快乐,永远爱你们!❤️

今天,我们用爱把“李焕英”带回了 2021......相关推荐

  1. 北京文化:目前《你好李焕英》贡献营收约6000万至6500万元

    2月19日消息,北京文化发布公告称,公司参与制作.发行的电影<你好,李焕英>于2021年2月12日起在中国大陆地区公映.根据国家电影专资办数据,截至2021年2月17日24时,影片在中国大 ...

  2. 互联网日报 | 3月7日 星期日 | 《你好,李焕英》成中国影史票房亚军;丰巢新增智能存包柜业务;特斯拉推出内部社交平台...

    今日看点 ✦ Counterpoint Research:中国手机市场1月份OPPO销量超越华为称冠 ✦ Realme:全球用户突破7000万,14个市场排名前5 ✦ 电影<你好,李焕英> ...

  3. 火爆全网的《李焕英》通过 AI 还原“复活”了

    春节期间<你好李焕英>电影以 42 亿票房,火遍全球,赚足了我们的眼泪,各位宝宝们都默默在心里保证:我一定要听妈妈的话两天,哦不,一周.<(罒 ω 罒)> <你好,李焕英 ...

  4. 《李焕英》票房反超,全靠《唐探3》衬托?

    来源 | 深燃 ID | shenrancaijing 作者 | 魏婕 编辑 | 黎明 春节假期过去了,电影春节档的热度依然不减.<唐人街探案3>和<你好,李焕英>一路缠斗,按 ...

  5. 后起之秀,《你好,李焕英》,票房已过十个亿和唐探三哪个好?

    两部电影我都看过了,说一说我的感受! <唐人街探案3>凭借着1和2积攒下来的的口碑,从预售开始就一骑绝尘,抢走了6成票房.我最先选择看的就是这部电影,也是冲着1和2的惊艳去的!但是看完电影 ...

  6. “李焕英效应”将长期主宰中国影视股投资逻辑

    来源|锦缎 编辑|新月 代表匠心精神的古人说"酒香不怕巷子深",推崇营销包装的今人又说"酒香也怕巷子深". 而当前整个文娱产业,已经进入"没有深巷,只 ...

  7. 《李焕英》爆火背后,世界正在奖励那些诚实的人

    富兰克林曾经说过一句话:诚实是最好的策略. 原因有二:人类社会从长期看会奖励诚实的人:数字社会从技术上会惩罚不诚实的人. 今天分享的这篇文章的作者认为,温顺的人,必将继承这个世界.而温顺背后的逻辑,是 ...

  8. 用代码生成炫酷的词云图—《你好,李焕英》

    最近比较火的电影<你好,李焕英>莫名戳中了大家的泪点,应用评论中的一句"妈妈永远比想象中的要爱我们" 虽然我没哭,但看大家都哭了,说明电影不在于多有深意,而是能引起大家 ...

  9. 对不起!《唐人街探案3》和《你好,李焕英》相比,我更推荐《你好,李焕英》!

    作者: 锋小刀 微信搜索[Python与Excel之交]关注我的公众号查看更多内容 hi~大家好! 自春节以来,<唐人街探案3>和<你好,李焕英>两部电影的热搜就没有停过,&q ...

最新文章

  1. 干货 | 转型人工智能,你需要掌握的八大神经网络
  2. SAX解析XML文件
  3. 优化SQL步骤——查看SQL执行频率 || 定位低效率执行SQL
  4. php首尾空格,php去除头尾空格的2种方法_PHP教程
  5. mysql读写分离的含义_MySQL 主从复制与读写分离概念及架构分析
  6. 求矩阵特征值的方法和性质
  7. myeclipse 实现框架 spring+springmvc+springsecurity+myibatis+mysql用户认证和人员增删改查
  8. [PYTHON]python 基础笔记(1)
  9. u盘读写测试_aigo U395固态U盘评测,速度可能会吓到你,价格很良心
  10. oracle中t,Oracle中如何用T
  11. 35家中资上榜全球500大资产管理机构
  12. 系统辨识与自适应控制matlab程序_杂志精选 | 自适应声反馈抑制技术及其应用
  13. 一年级语文四季心田花开专项练习题
  14. aardio获取数据乱码问题
  15. 2022钉钉发布会|云钉低代码新模式、新能力、新机遇
  16. 华为ax3怎么接光纤sc接口_华为路由器AX3怎么设置?
  17. HTML .CSS实现购物车(cart)
  18. 文盲确定为不能用计算机,最初人们把文盲定义为 “不识字的人”;后来又把文盲确定为“看不懂现代信息符号、图表的人”;而现在联合国把文盲确定为“不能用计算机交流的人”。从哲学上看,这表明...
  19. 给大家推荐一个进阶直播课,免费的!
  20. ZYNQ-IO模拟HDMI输出图像

热门文章

  1. windows下 强行格式化
  2. 【EasyRL学习笔记】第六章 DQN 深度Q网络(基本概念)
  3. 2023-4 新一代智能测绘遥感科学试验卫星珞珈三号01星 (笔记)
  4. 编译原理——语法分析(递归下降)
  5. ASP.NET Web程序设计——FileUpload文件上传控件
  6. Excel文件保护和解除锁定
  7. laravel 几种第三方接口
  8. 编写一个内外网切换的脚本
  9. Online Subsystem Steam 在线子系统Steam (虚幻引擎UE4 联网)
  10. 快速替换jar包中.class、.html、.yml格式的文件