用于自动驾驶的实时联合目标检测和语义分割网络
欢迎关注微信公众号【计算机视觉联盟】 获取更多前沿AI、CV资讯
【全文下载方式】：
关注【计算机视觉联盟】公众号后台回复关键词：
2019012001
卷积神经网络（CNN）成功地用于各种视觉感知任务，包括边界框对象检测，语义分割，光流，深度估计和视觉SLAM。通常，这些任务是独立探索和建模的。在本文中，我们提出了一个用于学习对象检测和语义分割的联合多任务网络设计。主要动机是通过共享两个任务的编码器来实现低功耗嵌入式SOC的实时性能。我们使用类似编码器的小型ResNet10构建了一个高效的架构，这两个编码器共享两个解码器。对象检测使用YOLO v2之类的解码器，语义分割使用FCN8之类的解码器。我们在两个公共数据集（KITTI，Cityscapes）和我们的私人鱼眼摄像机数据集中评估建议的网络，并证明联合网络提供与单独网络相同的精度。我们进一步优化网络，为1280x384分辨率图像实现30 fps。
在本文中，讨论了多任务学习在联合语义分割和对象检测任务的自动驾驶设置中的应用。 首先，需要完成这两项任务而不仅仅是语义分段。 然后我们讨论了使用多任务方法的优缺点。 通过仔细选择编码器和解码器构建了一个高效的联合网络，并进一步优化它以在低功耗嵌入式系统上实现30 fps。 在三个数据集上分享了实验结果，证明了联合网络的效率。 在未来的工作中，我们计划探索视觉感知任务的增加，如深度估计，流量估计和Visual SLAM。
【全文下载方式】
关注【计算机视觉联盟】公众号后台回复关键词：
2019012001
2018年12月精选文章目录一览
亲身经历2019年校招8个大厂心得体会，纯干货分享（大疆、百度...）
重磅！图森王乃岩团队最新工作—TridentNet：处理目标检测中尺度变化新思路
GANs最新综述论文: 生成式对抗网络及其变种如何有用【附pdf下载】
算法岗百里挑一热爆了，全球AI大厂薪酬大起底
史上最全！计算机科学领域顶会最佳论文大合集：微软研究院最多，清华排24
【资源下载】512页IBM沃森研究员Charu最新2018著作《神经网络与深度学习》（附下载链接）
人工智能相关领域的国际顶尖会议介绍
用于自动驾驶的实时联合目标检测和语义分割网络相关推荐
- 【NIPS2018】实时联合目标检测与语义分割网络
本文发表于第32届神经信息处理系统会议(NIPS 2018),是法国汽车零部件供应商法雷奥集团(Valeo)研究提出的一种用于自动驾驶领域的多任务神经网络,可同时执行目标检测与语义分割任务. 代码开源 ...
- 联合目标检测和语义分割——学习笔记
联合目标检测和语义分割 目标检测 目标检测是一种与计算机视觉和图像处理相关的计算机技术,用于检测数字图像和视频中特定类别的语义对象(例如人,建筑物或汽车)的实例.然而现实中物体的尺寸.姿态.位置都有很 ...
- 用于自动驾驶的实时车道线检测和智能告警
点击上方"小白学视觉",选择加"星标"或"置顶"重磅干货,第一时间送达 本文转自:计算机视觉life 导读 车道线检测 + 距离告警 + 转 ...
- 自动驾驶深度多模态目标检测和语义分割:数据集、方法和挑战
自动驾驶深度多模态目标检测和语义分割:数据集.方法和挑战 原文地址:https://arxiv.org/pdf/1902.07830.pdf Deep Multi-Modal Object Detec ...
- 用于自动驾驶的实时 YUV 多任务 CNN
作者 | AI 修炼之路 来源 | AI 修炼之路 摘要 本文提出了一种针对低功耗车用SoC优化的多任务卷积神经网络(CNN)结构.我们介绍了一个基于统一架构的网络,其中编码器由检测和分割两个任务共享 ...
- FlyAI小课堂：深度学习论文翻译解析（3）：丰富的特征层次结构，可实现准确的目标检测和语义分割
论文标题:Rich feature hierarchies for accurate object detection and semantic segmentation 标题翻译:丰富的特征层次结构 ...
- 2021-01-24过去十年十大AI研究热点，分别为深度神经网络、特征抽取、图像分类、目标检测、语义分割、表示学习、生成对抗网络、语义网络、协同过滤和机器翻译。
专利申请量全球第一!清华人工智能发展报告:国内215所高校成立相关本科专业 发布时间:01-2415:20万象大会年度获奖创作者,东方财富网官方帐号 1月20日,清华大学人工智能研究院.清华-中国工程 ...
- 分类，目标检测，语义分割，实例分割
Classification 简单地说,图像分类是一种用于对图像中特定对象的类别进行分类或预测的技术,该技术的主要目的是准确识别图像中的特征.就是说输入一张图片然后输出图片中含有的分类 Object ...
- 图像分类、目标检测、语义分割、实例分割和全景分割的区别
1.Image Classification(图像分类) 图像分类(下图左)就是对图像判断出所属的分类,比如在学习分类中数据集有人(person).羊(sheep).狗(dog)和猫(cat)四种,图 ...
- Keras之Mask R-CNN:《极限挑战》第四季第2期助力高考—使用Mask R-CNN代替Photoshop抠图、颜色填充框出目标检测/图像分割/语义分割
Keras之Mask R-CNN:<极限挑战>第四季第2期助力高考-使用Mask R-CNN代替Photoshop抠图.颜色填充框出目标检测/图像分割/语义分割 导读 没有伞的孩子只能努力 ...
最新文章
- Leetcode 116. 填充每个节点的下一个右侧节点指针 解题思路及C++实现
- 超强包管理器：Anaconda 安装
- SQL注入（1）--判断是否存在SQL注入漏洞
- WebApi client 的面向切面编程
- OpenCore 的代码结构
- Google 已将“xxxx”标记为恶意扩展程序并阻止安装，解决方案
- spring mybatis 项目源码
- linux反编译java_linux系统上如何反编译.class文件
- 网易云音乐 网络错误 linux,解决ubuntu安装网易云音乐失败的方法
- CFA一级知识点总结
- 极客日报第 35 期：国外运营商拒为小米 10T Pro 启用双卡；苹果明年 9 月或发布电动汽车；谷歌被指与 Facebook 密谋垄断
- CNN手写汉字识别参数调整
- Python学习笔记（六） python-nmap下载及搭建
- flexbox的基本概念
- yxc_第一章 基础算法（二）_高精度
- 牛客网暑期ACM多校训练营（第八场）
- 启信宝发布植树节产业洞察：超2000家绿色造纸企业，造纸业迭代落后产能
- P3956 [NOIP2017 普及组] 棋盘
- mac 系统下android源码下载以及使用（总结）
- 【稳定性day11】微信春节红包的高可用架构 - 十亿流量的挑战