卷积神经网络新方向：Three-column CNN实现无参考立体图像评估

Three-column CNN模型通过同时处理立体图像中包含的平面图像信息，以及差分图像所包含的深度信息，构造了一类新的无参考立体图像质量评估方法，突破了传统的处理思想，有效地将平面信息与深度信息统一的运用到质量评估算法。

模式识别领域国际权威期刊《Pattern Recognition》在2016年1月发表了山东大学视觉传感与智能系统实验室与华为诺亚方舟实验室的研究成果《Learning Structure of Stereoscopic Image for No-Reference Quality Assessment with Convolutional Neural Network》，该文章首次将卷积神经网络（CNN）用于无参考立体图像的质量评估领域，提出了新的研究方法。

随着以立体视频为主的立体信息的广泛推广，为了满足人们的视觉需求，使立体技术得到更加广泛的应用，如何准确评估立体图像的失真程度，并设计出一套能够对立体图像系统各个环节进行质量评估的系统成为图像处理和分析领域中的研究热点和重点。立体图像质量评估由于自身结构原因，与平面图像质量评估相比具有更高的挑战性。立体图像包含平面信息以及深度信息，因此不仅需要分析平面图像质量，同时考虑深度感知质量，因此如何将两者结合起来，特别是在复杂深度场景中，将对立体图像质量度量尤为重要。此外，立体图像质量的计算必须符合人眼的视觉结构特点，如何建立人眼立体视觉机制与立体图像感知评价的统一是当前问题所在，而目前对人类视觉特性不够透彻，准确地模拟人类视觉系统存在较大的困难，因此对质量评估算法有很大的阻碍。

无参考图像质量评估算法Three-column CNN模型

山大视觉传感与智能系统实验室与华为诺亚方舟实验室都致力于深度学习方向研究，研究领域覆盖环境感知、表情识别、图像质量评估等方向。在立体图像质量评估领域，实验室尝试使用卷积神经网络模型（CNN）进行处理，尽管卷积神经网络已成功应用于人脸识别、语音识别等领域，但在图像质量分析方面属于创新性的应用。山大和华为合作构造了一组“Three-column CNN”的结构学习模型，使用多输入的意义在于同时处理平面信息以及深度信息：卷积网络一方面通过处理平面图片，获取平面信息中如图形结构、光影等人类视觉敏感的感知信息；另一方面网络同时处理立体图像对应的差分图像，有效提取复杂环境下的深度信息，从而有效的模仿了人眼立体机制对图像进行感知。在此之外，该网络根据平面图像与立体图像中差分图像的结构相似性，利用平面图像数据库对网络预学习，从而有效解决了立体图像数据不足的问题，进一步提升了网络的学习能力。研究人员表示，该Three-column CNN模型在无参考立体图像质量评估的性能达到了业界领先水平，并已接近全参考算法水平。

如今伴随着立体视频在生活中的快速推广应用，面向立体图像的质量评价的研究也会获得更多来自工业界和学术界的关注，山大张伟博士和华为马林博士表示，将在当前研究基础上继续深入工作以期获得更优秀的结果。

2016年5月13日-15日，由CSDN重磅打造的2016中国云计算技术大会（CCTC 2016）将于5月13日-15日在北京举办，今年大会特设“中国Spark技术峰会”、“Container技术峰会”、“OpenStack技术峰会”、“大数据核心技术与应用实战峰会”四大技术主题峰会，以及“云计算核心技术架构”、“云计算平台构建与实践”等专场技术论坛。大会讲师阵容囊括Intel、微软、IBM、AWS、Hortonworks、Databricks、Elastic、百度、阿里、腾讯、华为、乐视、京东、小米、微博、迅雷、国家电网、中国移动、长安汽车、广发证券、民生银行、国家超级计算广州中心等60+顶级技术讲师，CCTC必将是中国云计算技术开发者的顶级盛会。详情访问CCTC 2016官网。

卷积神经网络新方向：Three-column CNN实现无参考立体图像评估相关推荐

【卷积神经网络】卷积神经网络（Convolutional Neural Networks, CNN）基础
卷积神经网络(Convolutional Neural Networks, CNN),是一种针对图像的特殊的神经网络. 卷积神经网络概述 Why not DNN? 图像数据的维数很高,比如 1, ...
关于卷积神经网络的思考：将CNN视作泛函拟合
点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达本文转自:深度学习这件小图像本身可以被理解成一种二维平面上的分布 ...
卷积神经网络五之典型的CNN网络
一.典型的CNN网络 1.开山之作:LeNet-5 1998 LeNet-5 是一个非常成功的神经网络模型. 基于 LeNet-5 的手写数字识别系统在 90 年代被美国很多银行使用,用来识别支票上面 ...
基于Java机器学习自学笔记（第81-87天：CNN卷积神经网络的入门到全代码编写）
注意:本篇为50天后的Java自学笔记扩充,内容不再是基础数据结构内容而是机器学习中的各种经典算法.这部分博客更侧重于笔记以方便自己的理解,自我知识的输出明显减少,若有错误欢迎指正! 目录 1. CN ...
深度学习：应用于机器视觉领域的卷积神经网络(CNN)简介
1 背景介绍深度学习是近几年的热门研究话题.深度学习受到神经学的启示,模拟人脑的认知与表达过程,通过低层信号到高层特征的函数映射,来建立学习数据内部隐含关系的逻辑层次模型.深度学习相比于一般的浅层模 ...
大话卷积神经网络CNN，小白也能看懂的深度学习算法教程，全程干货建议收藏！...
来源 | 程序员管小亮本文创作的主要目的,是对时下最火最流行的深度学习算法的基础知识做一个简介,作者看过许多教程,感觉对小白不是特别友好,尤其是在踩过好多坑之后,于是便有了写这篇文章的想法. 由于文 ...
基于卷积神经网络 CNN 的猫狗识别详细过程
目录一.卷积神经网络(CNN) 1.1 卷积 1.2 前馈神经网络 1.3 卷积神经网络(CNN) 二.配置环境三.猫狗数据分类建模 3.1 猫狗图像预处理 3.2 猫狗分类的实例--基准模型 3 ...
卷积神经网络 CNN 学习
什么是神经网络人工神经网络(artificial neural network,ANN),简称神经网络(neural network,NN),是一种模仿生物神经网络的结构和功能的数学模型或计算模型. ...
深度学习之CNN卷积神经网络
详解卷积神经网络(CNN) 卷积神经网络(Convolutional Neural Network, CNN)是一种前馈神经网络,它的人工神经元可以响应一部分覆盖范围内的周围单元,对于大型图像处理有出 ...

卷积神经网络新方向：Three-column CNN实现无参考立体图像评估

卷积神经网络新方向：Three-column CNN实现无参考立体图像评估相关推荐

最新文章

热门文章