“这是天猫双11的第13个年头，轮回之后，新启之年。Let's go to happiness是今年双11的主题，我们不仅希望为消费者带来购物的快乐，消费体验持续升级的同时，与生态伙伴、客户一起搭建绿色可持续的商业生态。淘系技术推动电商技术不断迭代和持续突破的同时，投入发展More fun、More valuable、More future的硬核科技。” 汤兴说。

左一 汤兴（平畴）

阿里巴巴副总裁 淘系产品技术&平台生态业务负责人

伴随着今年双11的正式落幕，来跟着小编了解下今年淘系双11最新最快的核心技术解读吧~

探索前沿技术，让双11更好逛更好玩

今年天猫双11的消费体验创新再次升级，淘系技术基于全球首个影视级扩展现实的云拍摄技术打造了3D沉浸式直播间，与此同时利用先进的3D建模技术，将海量线下商品在线上实现3D化呈现，为消费者带来数字空间的新消费交互体验；在拍立淘中首次应用超大规模多模态学习的新范式，大幅提升商品搜索的同款率；基于淘系技术多年的AR技术储备，推出国内首款AR试表产品，双11期间超过20家手表头部品牌旗舰店上线AR试表商品...

▐  淘宝3D沉浸式直播间，打造沉浸式消费新体验

今年双11期间，微软、FILA等不同行业的品牌使用了淘宝直播3D沉浸式直播间进行直播。淘系技术基于全球首个影视级扩展现实的云拍摄技术，打造了3D沉浸式直播间，突破了以往影视级XR直播拍摄中云渲染、AI、复杂光影模拟、云3D资产库等关键技术，支持主播仅用普通绿幕就可虚拟出上千平米的直播会场、近千盏舞台灯光、特种摄像设备的直播效果，成为首个具有低成本、可复用、低碳环保等优势的商家自播影视级拍摄解决方案。

小编体验3D直播间，视频中只有小姐姐是真实的哦

与此同时，淘宝直播不仅利用先进的3D建模技术，将海量线下商品在线上实现3D化呈现，更在大数据与多模态技术的支持下，让直播间里的虚拟主播根据商家全量多模态商品介绍剧本，在直播过程中图文并貌地进行商品的讲解，为消费者带来数字空间消费新交互体验。未来，淘宝直播将基于3D XR、多模态、端智能等技术，为消费者和商家带来电商体验持续创新。

▐  淘宝拍照：多模态技术提升商品同款率和搜索体验

淘宝拍照以图搜图系统，经过多年技术和产品打磨，已成为淘宝每天数千万DAU的核心产品，沉淀业界领先图搜算法。伴随业务复杂度不断提升，比如，同种药品会因产家不同，包装盒千差万别；同型号iPhone手机外观完全一样，但内存可能不同。这对以精准同款搜索为核心能力的淘宝拍照提出更高的要求，而如何有效地融合商品图文多模态信息至关重要。针对淘系海量商品图文数据，淘系技术首次采用并成功验证基于margin分类的超大规模多模态学习新范式，实现可规模化多模态算法模型的升级，大幅提升商品搜索的同款率。同时，多模态技术能提升药品/截图/图书等垂直场景同款搜索。日常很多药品存在名称长、生僻字多、外文难理解等情况，给老年人找药增加障碍，影响购药体验。淘系技术采用OCR算法，实现Query图文多模态理解，提升药品搜索同款率。今年重阳节，正式上线拍照买药功能，结合银发族日常购药需求，有针对性地扫除障碍。

Better than better，每天让技术更好一点

伴随业务的快速发展，淘系的平台技术能力也在不断的迭代和突破。我们构建了云+端一体的视频编辑互动平台，JIT机审+智能派单机制实现了5分钟时效的全链路内容审核机制，GRTN再次升级，精细化智能化地实现直播间的带宽控制和1秒内低延时保障。

▐  智能调度系统再次升级，GRTN保障主播、消费者、平台三位一体

基于全球实时传输网络GRTN，淘宝直播在今年双11实现了全链路RTC，端到端100%实现了1秒内延时，进一步提升了主播与观众的互动体验。百秒卡顿次数降低了24%，观众能够更快更流畅地看到更清晰的内容。

GRTN的智能调度系统，基于灵敏的预测在线人数及带宽的算法，以及秒级的调控通道，不仅可以宏观地调整所有或者单个直播间，还支持对单个直播间的不同播放进行精细化调整，实现了对带宽的精准控制，提升用户体验的同时保障了双11直播的稳定性。

▐  淘宝内容审核基地，成就5分钟全链路时效的最佳实践

JIT机审基于深度学习网络和卡尔曼滤波算法，以最少的特征计算量快速的识别出不满足审核规则的内容，实现机审时效的提速和成本的降低，将机审时长从原来的1分钟降低到10秒内，特征计算次数减少了40%。同时，在内容人审环节，采用分布式优先级队列精确控制的智能派单机制，通过智能分配策略，把待审内容高效的分配给审核人员，既实现审核优先级的可配置化定义，也兼顾派单的灵活性和公平性，为淘宝内容审核打造了5分钟全链路时效的最佳实践。未来将进一步优化，给每条待审内容智能匹配最优审核人员，为不同业务、为同一业务的不同发展阶段提供“时效优先”、“成本优先”、“动态平衡优化”的派单服务。

美好科技，让双11化为温暖的绿色

科技的进步催化商业发展的同事，我们也致力于让好科技有更多可能。今年9月，阿里巴巴在”2021世界互联网大会“宣布阿里推出社会责任的两大全新战略——ESG（环境、社会、公司治理）和助力共同富裕，和客户、合作伙伴一起搭建绿色可持续的商业生态。

▐  低碳AI，降低50%算力成本

深度神经网络因其精准的预测效果，已经成为业界搜索、推荐、广告领域应用最广泛的模型。但深度网络巨大的计算消耗也成为了业界一大难题，淘系的算法工程师一直在探索和应用更绿色更低碳的深度模型压缩技术，来实现同样的预测效果。自2019年，淘系通过不断升级的深度模型量化技术，将单台服务器模型计算吞吐量提升至原来的3倍，从而减少一半以上的计算服务器数量。去年开始，提出了“两极化剪枝”的方法，通过剪除神经网络中冗余的神经元，在保证预测效果不变的情况下，极大地减少神经网络的计算消耗。淘系技术发表的“两极化剪枝”论文被人工智能顶级会议NeurIPS 2020收录。

同时，该技术在淘宝、天猫、AliExpress、Lazada的搜索推荐业务场景中，取得了非常好的效果。该技术上线后，每天节省电能14.4万度，两年累计节省电能1亿度以上。

▐  数字化支持中小企业，助力社会共同富裕

互联网和数字技术不仅为中小企业开辟了新的销售路径，而且深刻推动了营销方式、消费者运营模式和商品生产方式的变革。以往中小商家常常会受限于其自身销售规模、研发能力和市场宣传等方面的不足，使得他们的优质商品难以在有海量商品中被用户充分发掘并得到充足的成长，因此如何通过数字化帮助中小商家实现商品成长过程的降本提效一直是电商市场机制优化的核心难题，也是电商平台助力社会共同富裕的基础所在。

为了进一步通过数字化帮助中小商家降本提效，淘系技术针对中小商家的优质商品打造了专属的经营成长通路：首先，通过AI大数据算法整合挖掘行业趋势动向，发现满足市场需求的潜在优质新品；进而，通过智能化AI算法与商家动作进行在线协同，从而推动优质新品在平台全域进行测款、试销、打爆全流程的提效；最后，通过对商家运营的智能化诊断+ISV的方式，从而提升中小商家商品经营的确定性，降低试错成本。在今年的双11过程中，淘系技术服务10万中小商家超50万的商品，推动新发商品成功率提升100%以上，带动了数十亿的成交。

▐  科技普惠，为银发族保驾护航

随着老年人群的规模和消费空间日渐庞大，淘宝在双11前正式上线了“长辈模式”，让银发族也能无障碍地网购。长辈模式的改造覆盖了购物全链路。既包括“首页”和“我的淘宝”等一级页面，也包括搜索、商品详情页、订单确认页等适老化改造“深水区”，尽可能避免“打开是长辈版，再点击没改变”的情况。

除了视觉上的改造之外，淘宝长辈模式专门推出了智能助手“淘小宝”，以拟人化NPC的形式为用户提供语音搜索商品、联系官方客服等功能，帮助老年人解决"不会搜"的核心痛点问题。作为适老化改造中重要的一部分，淘系技术有能力有信心来做成和做好这件科技普惠的事。我们通过大量的模型训练，成功的将识别率提高到90%以上，并结合淘系自身沉淀的商品搜索算法能力，成功的从一段文字中匹配出想要搜索的商品，大大简化了老年人搜索商品的过程。

过去10年，淘宝陆续上线了多个为银发族日常生活提供便捷的功能，让科技更好地服务他们。在适老化改革后的首个双11，智能手机超越羽绒服、毛呢外套成为银发族网购消费排名第一的商品，不禁感叹一句“姜还是老的辣”，原来爷爷奶奶也是数码潮流的驱动力。

汤兴表示，好科技是基础，淘系未来会持续加大在多模态、3D XR、音视频、认知计算与知识图谱等技术领域的投入，让技术像暖流一样浸润到客户日常使用中的每一个环节，可触摸、可享受、可亲近。

✿  双11更多精彩推荐

作者|淘系技术

编辑|橙子君

出品|阿里巴巴淘系技术