18cm三轮摄像头图像处理

  • 开源代码
  • 前言
  • 比赛规则
  • 设备简述
  • 一、扫线方式(八领域)
    • 1.寻找赛道
      • 1)种子寻找
      • 2)八领域寻线
      • 3)在赛道轮廓中提取边线[^1]
      • 4)计算中值
    • 2.赛道信息提取
      • 1)边界生长方向信息
      • 2)拐点的寻找
        • ①直角型拐点
        • ②圆弧形拐点
      • 3)边界的方差(或绝对值)计算
      • 4)边界的斜率
  • 二、赛道元素判断及处理
    • 1.十字元素
      • 正入十字
        • 1)判断条件
        • 2)拉线处理
      • 斜入十字(举一种情况)
        • 1)判断条件
        • 2)拉线处理
    • 2.环岛元素
      • 1)判断条件
      • 2)拉线处理
    • 3.车库元素
      • 入车库
        • 1)判断条件
        • 2)拉线处理
      • 出车库
        • 1)判断条件
        • 2)拉线处理(以右出库为例)
    • 4.坡道元素
      • 1)判断条件
      • 2)状态判断
      • 3)拉线处理
    • 5.会车
      • 1)判断条件
      • 2)拉线处理
    • 6.弯道
      • 1)小弯道
      • 2)大弯道
    • 7.长直道
  • 三、反光判断
  • 四、结语

开源代码

图像处理部分已开源(无上位机),见github,有问题可以在issue提出,觉得不错可以点颗星哦

前言

或许是有幸,参加了第十五届智能车竞赛,在这一年里,经历了很多,少有满意,认识了很多人,感谢相识。
比赛将要结束,我也将离智能车越来越远。但毕竟也曾热爱、付出过,希望能把我的一些经验写下来,至少留下一个痕迹,也能给一些准备比赛或像参加比赛的选手提供一些帮助。

比赛规则

第十五届全国大学生智能汽车竞赛竞速赛规则
可能由于疫情原因,比赛不仅提前了,而且准备时间还相比之前减少了很多,因此第十五届智能车竞速赛的赛道元素相比去年删去了一些,而仅仅新加了一个车库元素。因此,在图像方面,负担减轻了很多。

设备简述

F车
130°普通无畸变摄像头
摄像头镜面中心高度18.5cm
前瞻2.5-3m

一、扫线方式(八领域)

感谢聪聪在八领域方面的帮助@zcc
八领域实现原理在网上可以很容易找到,不再赘述。
主要讲一讲我是如何使用八领域的。

1.寻找赛道

1)种子寻找


定一个底行初始位置,从中间分别向两边寻找赛道轮廓的种子

2)八领域寻线

利用八领域,由种子生长出完整轮廓。

3)在赛道轮廓中提取边线1

通过遍历八领域得到的赛道轮廓,提取出用于计算中值的边线。

图中,左边蓝线与右边绿线为每行的边线,下图为分离图

4)计算中值

2.赛道信息提取

1)边界生长方向信息


可以把领域的生长方向记录下来,作为边界的特征之一

2)拐点的寻找

①直角型拐点

直角型拐点的特征较为明显,边界在直角的顶点会急剧转向接近90°的另一个方向,常出现在十字中。
拿十字举例
二值图:

边界:

可以通过边界生长方向的变化来寻找

或者通过斜率的突变来寻找

②圆弧形拐点

因为赛道弯曲形成的拐点,回拐的程度较小,常出现在弯道或环岛中。
拿小弯举例
二值图:

边界:


拐点:

拐点出现在边界像素点横坐标的局部极大值或极小值处。

3)边界的方差(或绝对值)计算

①最小二乘法
这里使用最简单的拟合一次函数曲线的最小二乘法,网上很多教程与实例,不再赘述。
②用最小二乘法拟合出的直线计算与边界像素点的方差(或绝对值)

如图所示,可以直观看出像素点偏移直线程度。

4)边界的斜率

由最小二乘法得到的一次函数得到边界的总体斜率

二、赛道元素判断及处理

1.十字元素

正入十字

1)判断条件

二值图:

边界图:

①找到左前拐点
②左边线向左横向生长像素点较多
③找到右前拐点
④右边线向右横向生长像素点较多

2)拉线处理

①十字前
分别将左右前后两个拐点相连

②十字中
找到两个后拐点,利用最小二乘法前拉边线

斜入十字(举一种情况)

1)判断条件

二值图:

边界图:

①找到右前拐点
②右前边界向右横向生长的点数较多
③找到右后拐点
④找到左后拐点

2)拉线处理

①将右边两个拐点相连
②利用最小二乘法前拉左后拐点高行的直线

2.环岛元素

1)判断条件

以左环岛为例
二值图:

边界:

①左拐点
②左前边线横向生长的点较多
③右边界从底行到高行为直线,方差很小

判断条件较为简单,如果不放心,可以再提取左上圆环特征

2)拉线处理

整个环岛处理为一个状态机,大致拉线如下:
①左前直角型拐点与左后圆弧形拐点相连

②左后圆弧形拐点拉线

③入环拐点拉到右边低行

④环内正常边线

⑤开始出环先拉右线

⑥左后拐点与左前边线起始处相连

⑦二乘法将左后拐点拟线前拉

3.车库元素

入车库

1)判断条件

二值图:

边界图:

①找到左前拐点
②右边界为直线,方差较小
③扫到斑马线
④横向生长的点数较多(或左前拐点后的边界斜率很小很小)

2)拉线处理

①将左后拐点拉到左前拐点纵坐标位置的右边线

②将左后边线的起始位置拉到右下角

③当左后拐点小于一定行数,利用最小二乘法将左后拐点的线拟合到右下角

④进入车库,正常扫线

出车库

1)判断条件

无需判断,手动预设

2)拉线处理(以右出库为例)

①在库内,拉直线

②左前拐点小于某行或丢失,开始拉线

③避开斑马线进行扫线,直接拉到左下角

④出库基本完成,正常扫线

4.坡道元素

二值图:

边线图:

1)判断条件


①高行行间距变小
②高行与低行都是直线,方差很小

2)状态判断

①上坡前,边线延伸至顶行,行间距较大

②上坡时,边线顶端只能够到达中间行

③下坡时,边线又延伸至顶端,高行行间距变小

④下到坡底,行间距变宽

⑤坡道结束,回到正常赛道

3)拉线处理

①在坡顶时,只处理低行中线,减少因坡顶的视野太远导致的误扫边界的影响

②其他时候正常扫线

5.会车

1)判断条件

二值图:

边界图:

在道路中间由下往上找种子,找到后车车模并扫线

①找到车的四个拐点

②拐点前后边界的生长特征

③两个前拐点之间的距离符合正常后车长度

2)拉线处理

①将两个拐点中间的像素点作为后车中点

②将中点与最低行中点拉线

6.弯道

1)小弯道

①多处圆弧型拐点
②边界存在一定的方差
③边界的斜率一定范围内

2)大弯道

①一处圆弧拐点
②边线方差较大
③边界的斜率超出一定范围

7.长直道

①不存在圆弧拐点
②边线方差很小
③边界的斜率稳定在很小范围之内

三、反光判断

利用生长方向的异常来判断是否反光
二值图:

边界:

可以看到左边界尽头突然急剧折返,可以认为异常,判断为反光,停止扫线,减少一些误判或增强图像在反光时的鲁棒性。

四、结语

智能车让我学到了很多


  1. 赛道轮廓为八领域生长出的连续像素点,一般每一行再取一个像素点作为边线。 ↩︎

第十五届全国大学生智能汽车竞赛-双车组三轮图像处理总结(已开源)相关推荐

  1. 第十五届全国大学生智能汽车竞赛中小学生赛题组获奖队伍信息

    第十五届全国大学生智能汽车竞赛 中小学生赛题组获奖信息 序号 学校 队伍 组别 奖项 姓名 类别 1 青岛创新学校 - 高中 一等奖 孙彬航 参赛学生 2 国科大(青岛)附属学校 - 高中 一等奖 侯 ...

  2. 第十五届全国大学生智能汽车竞赛山东赛区国赛获奖队伍详细信息

    第十五届全国大学生智能汽车竞赛 山东赛区国赛获奖队伍详细信息 序号 学校 队伍 组别 奖项 姓名 类别 1 山东大学(威海) Lekima Storm 基础四轮组 一等奖 崔凌 参赛学生 2 山东大学 ...

  3. 关于2020年第十五届全国大学生智能汽车竞赛山东赛区技术答辩的相关规则

    关于2020年第十五届全国大学生智能汽车竞赛 山东赛区技术答辩的相关规则 作者:卓晴博士,清华大学自动化系 更新时间:2020-09-01 Tuesday 1.参加人员 被答辩人:进入国赛的参赛队所有 ...

  4. 第十五届全国大学生智能汽车竞赛各分赛区国赛预选队伍成绩认定一览表

    01背景介绍 在第十五届全国大学生智能车竞赛中,由于新冠疫情影响没有进行全国总决赛.进入全国总决赛的队伍数量将根据 第十五届全国大学生智能汽车竞赛各分赛区成绩汇总 来确定.进入各分赛区的名额在比赛之前 ...

  5. 第十五届全国大学生智能汽车竞赛各分赛区国赛获奖信息

    01国赛奖项 根据 第十五届全国大学生智能汽车竞赛各分赛区成绩汇总 信息,确定了各分赛区进入国赛的最终队伍数量.由于第十五届全国大学生智能汽车竞赛没有举行线下总决赛,每个赛区进入国赛的预选队伍在各分赛 ...

  6. 第十五届全国大学生智能汽车竞赛各分赛区成绩汇总

    作者:卓晴博士,清华大学自动化系 更新时间:2020-08-27 Thursday 第十五届全国智能车竞赛 到8月27日为止,除了安徽赛区之外,其他七个分赛区(省赛区)均已比赛完毕.本文给出了各个分赛 ...

  7. 第十五届全国大学生智能汽车竞赛华东区赛程

    第十五届全国大学生智能汽车竞赛 华东赛区赛程 ▲ 华东赛区赛程安排 1.附件一 区赛场地安排(体育馆一楼平面图) ▲ 赛场安排 2.附件二 国赛场地安排(体育馆一楼平面图) ▲ 国赛赛场安排

  8. 第十五届全国大学生智能汽车竞赛青少年组获奖名单

    作者:卓晴博士,清华大学自动化系 更新时间:2020-08-28 Friday 2020年8月23日,第十五届全国大学生智能汽车竞赛青少年组的决赛在线上进行.经过各赛区的选拔推荐,来自北京.上海.湖南 ...

  9. 第十五届全国大学生智能汽车竞赛全国总决赛提交技术报告通知

    第十五届全国大学生智能汽车竞赛 获得全国总决赛资格和创意比赛队伍 提交技术报告的通知 参加全国总决赛的竞速赛和创意赛的每支队伍必须提交竞赛车模制作技术报告. 这两个文档应在2019年8月27日前通过邮 ...

最新文章

  1. 最大公约数 最小公倍数
  2. 手把手玩转协同编辑(1):AST (Address Space Transformation)地址空间转换算法 基本介绍...
  3. Exchange 2010 数据库副本加载后复制状态一直是失败并搁置故障分析
  4. windows相关知识点分析
  5. RedAlert简介
  6. media jquery 适配ios不同手机
  7. oracle 创建一揽子协议,Oracle PO - 模块一揽子采购协议小结
  8. 用ExtJs+Linq+Wcf打造简单grid
  9. Inside-out追踪技术浅析
  10. 电子科技大学计算机专业考什么,2015年电子科技大学081203计算机应用技术考研专业目录及考试科目...
  11. 大数据智能算法及测评技术(二)
  12. startup_LPC17XX.s 启动文件分析
  13. 什么是JAVA中的强制类型转换
  14. CCC3.0学习笔记_SCP03安全通道
  15. rgw bucket sync
  16. android 使用SAF框架操作外置sd卡
  17. vue2、vue3中使用swiper
  18. 华南主板超频设置图解_实用至上,微星B550 TOMAHAWK主板开箱拆解+测试
  19. 百度地图离线_高德地图与百度地图有啥区别?功能只是其次,定位才是重点
  20. 稻城亚丁6日游之准备

热门文章

  1. FEM Classical Books
  2. U盘启动安装mac正版OSX EI系统系统
  3. 桥梁防船撞水上安全预警装置系统|喜讯科技
  4. OSError: image file is truncated与PIL.UnidentifiedImageError: cannot identify image file的解决方案
  5. canvas 绘制动态雷达图
  6. c语言计算器结题报告,【2018年最新整理】单片机结题报告.doc
  7. 超融合和虚拟化的区别
  8. 电容耦合(磁场耦合)的抗干扰措施
  9. mac做电影特效用什么软件?NUKE 11 for mac版11.3v4激活版最火的特效软件
  10. Carsim与不同版本MATLAB联合仿真设置——个人积累