【新技术发布】基于深度神经网络的激光雷达物体识别系统及其嵌入式平台部署

激光雷达可以完成三维空间的测量,具有抗干扰能力强、信息丰富等优点,但受限于数据量大、不规则等难点,基于深度神经网络的激光雷达物体识别技术一直难以在嵌入式平台上实时运行。

经纬恒润经过潜心研发,攻克了深度神经网络在嵌入式平台部署所面临的算子定制与加速、量化策略、模型压缩等难题,率先实现了高性能激光检测神经网络并成功地在嵌入式平台(德州仪TI TDA4系列)上完成部署。

系统功能

目前该系统:
• 支持接入禾赛Pandar 40和Ouster OS1-Gen2 64线等激光雷达
• 可完成激光点云中的多种车辆、行人、摩托车等识别,并输出位置、姿态、3D外形尺寸、速度等信息
• 处理速度达到13帧/秒
• 识别性能与国际上主流的先进网络性能相当,如下表:

*表中数值为3D检测性能指标: Average precision (AP) (in %)

该成果大幅降低了激光雷达物体识别系统部署所需的成本与电源功耗,提高了系统的可靠性,进而推进激光雷达在自动驾驶等各类场景下的应用。

激光雷达

禾赛Pandar 40是禾赛科技推出的一款混合固态 40 线激光雷达,体积小巧,有效距离150 米,专为自动驾驶优化的线束分布让最小角分辨率达到了 0.33°。

Ouster OS1-Gen2 是Ouster公司推出的一款采用VCSEL和SPADS技术的高分辨率中距雷达,最高可达128线,水平分辨率2048,测距范围120米,精度±1.5 – 5 cm ,具有10年以上使用寿命设计。

德州仪器TI TDA4系列芯片

TI公司的TDA4VM具有强大的片上数据分析的能力,并与感知预处理加速器相结合,从而使得系统性能更优。深度学习矩阵乘法加速器(MMA),算力高达8 TOPS,具有两个64位 Arm® Cortex®-A72微处理器子系统,工作频率高达1.8GHz;功耗仅5到20W。

人工智能研究所

经纬恒润AI研究所致力于人工智能技术研发及其在汽车电子领域的落地,为解决自动驾驶在复杂的现实环境中的感知、定位、规划决策等难题提供解决方案。从数据、平台、算法等方面进行技术攻关。技术成果应用在园区、港口和开放道路等多个行业板块。

【新技术发布】基于深度神经网络的激光雷达物体识别系统及其嵌入式平台部署相关推荐

  1. 基于深度神经网络的图像分类与训练系统(MATLAB GUI版,代码+图文详解)

    摘要:本博客详细介绍了基于深度神经网络的图像分类与训练系统的MATLAB实现代码,包括GUI界面和数据集,可选择模型进行图片分类,支持一键训练神经网络.首先介绍了基于GoogleNet.ResNet进 ...

  2. 基于深度神经网络的遮挡人脸识别算法的研究(小白初学)

    基于深度神经网络的遮挡人脸识别算法的研究(小白初学) 研究背景 在自然条件下人脸面部的光照变化.角度变化.表情变化以及存在遮挡物,使得采集到的人脸图像存在人脸特征的损失.因此研究遮挡人脸识别算法提高识 ...

  3. 基于深度学习的农作物病虫害识别系统

    1 简介 今天向大家介绍一个帮助往届学生完成的毕业设计项目,基于深度学习的农作物病虫害识别系统. ABSTRACT 及时.准确地诊断植物病害,对于防止农业生产的损失和农产品的损失或减少具有重要作用.为 ...

  4. 基于深度学习的人脸性别识别系统(含UI界面,Python代码)

    摘要:人脸性别识别是人脸识别领域的一个热门方向,本文详细介绍基于深度学习的人脸性别识别系统,在介绍算法原理的同时,给出Python的实现代码以及PyQt的UI界面.在界面中可以选择人脸图片.视频进行检 ...

  5. 一种基于深度学习的增值税发票影像识别系统

    一种基于深度学习的增值税发票影像识别系统-专利技术交底书 缩略语和关键术语定义 1.卷积神经网络(Convolutional Neural Networks, CNN)是一类包含卷积计算且具有深度结构 ...

  6. opencv交通标志识别_教你从零开始做一个基于深度学习的交通标志识别系统

    教你从零开始做一个基于深度学习的交通标志识别系统 基于Yolo v3的交通标志识别系统及源码 自动驾驶之--交通标志识别 在本文章你可以学习到如何训练自己采集的数据集,生成模型,并用yolo v3算法 ...

  7. 基于深度学习的单人步态识别系统

    基于深度学习的单人步态识别系统(目前数据集大小15人,准确率100%) 一.数据预处理 a.步态轮廓图 b.头部轮廓图 实现方式: 核心代码: c.骨架图 二.提取步态特征 a.角度特征 b.下肢特征 ...

  8. 毕业设计-基于深度学习的智能车牌识别系统

    目录 前言 课题背景和意义 实现技术思路 一.车牌识别的一般流程 二.智能车牌识别系统的设计思路 三.基于深度学习的智能车牌识别系统的实现 四.智能车牌识别系统的训练与测试 五.总结 实现效果图样例 ...

  9. 【毕业设计】基于卷积神经网络的植物花卉识别系统

    系统演示视频: [毕业设计]基于卷积神经网络的植物花卉分类系统 本项目使用到的技术包括:卷积神经网络(CNN)算法,Django框架搭建网站,CNN模型调优. 项目包括四部分: 1.数据集 2.模型训 ...

最新文章

  1. 【玩转Golang】 通过组合嵌入实现代码复用
  2. BM惊爆:EOS一周年工作KPI
  3. TCP之深入浅出send和recv
  4. 做创业者的老婆,一定要注意股权分配的3个坑
  5. 2019牛客暑期多校训练营(第七场)
  6. 几个.net开发中常用的工具下载
  7. 计算机语法分析,电子科技大学-计算机学院-编译原理实验-语法分析.pdf
  8. 前端工程师如何摆脱舒适区,持续精进?
  9. Bootstrap按钮的状态
  10. centos7共享网络盘_实验08:局域网文件和互联网文件的共享
  11. perl lwp 超时问题
  12. 98 年“后浪”科学家,首次挑战图片翻转不变性假设,一作拿下 CVPR 最佳论文提名​...
  13. 互联网大厂的薪资和职级一览
  14. 嵌入式 Linux 按键驱动
  15. 【STM32笔记】HAL库低功耗模式配置(ADC唤醒无法使用、低功耗模式无法烧录解决方案)
  16. 一文详解工业视觉中的光源及应用
  17. Mac电脑调用自带的命令行窗口
  18. redis 三种集群模式详解
  19. 上班人员必读:“五险一金”详解!
  20. Python日记——柿子要捡软的捏,记第一只小爬虫

热门文章

  1. MDaemon Server 8.15 英文版发布
  2. HTML5小游戏贪吃蛇分析与实现
  3. java asq_Java并发:AQS原理
  4. AttSum: Joint Learning of Focusing and Summarization with...
  5. 中国美女模特体验日本
  6. IDEA 2021 自动生成serialVersionUID
  7. android xml文件用记事本打开文件格式不正常,XML 文件用记事本打开换行与不换行问题...
  8. 神经网络-感知机(8)[matlab]
  9. 三维地图和双维地图的区别(基于edushi和mapbar)
  10. 嗅探的介绍极其原理、作用