Weather GAN：实现晴、阴、雾、雨、雪之间的天气状况自由迁移

分享一篇今天新出的有意思的论文：

Weather GAN: Multi-Domain Weather Translation Using Generative Adversarial Networks

在该文中，作者提出一个新任务：Weather Translation，就是将图像中的天气状况从一个类别迁移到另一个类别中。这对于摄影风格迁移是一项很重要的技术。

由于天气条件具有丰富的类别和高度复杂的语义结构，以往许多传统的图像翻译方法并不能用于处理多类别的天气翻译任务。

针对上述问题，作者提出基于 GAN 的多域天气翻译方法：Weather GAN，可以实现晴天、阴天、大雾、雨天和雪天之间的天气状况迁移。

具体来说，作者认为图像中的天气状况是由各种 weather-cues （天气线索）决定的，如云、蓝天、湿地等。因此，天气翻译须将主要注意力集中在 weather-cues 上。为此，Weather GAN 的生成器由初始翻译模块、注意力模块和 weather-cues 分割模块组成。

初始翻译模块在生成过程中进行全局翻译。

weather-cues 分割模块识别天气线索的结构和准确分布。

注意力模块学习关注图像中需要重点关注的区域，同时保持其他区域不变。

最终生成的结果是由这三个部分合成的。

这种方法抑制了天气转换引起的变形和扭曲，作者也通过大量实验评估证明该方法优于SOTA。

作者 | Xuelong Li, Kai Kou, Bin Zhao

单位 | 西北工业大学；

论文地址 | https://arxiv.org/abs/2103.05422

目前还未发现该文有开源代码。

END

备注：增强

图像增强与质量评价交流群

图像增强、去雾、去雨、图像修补、图像恢复等技术，

若已为CV君其他账号好友请直接私信。

Weather GAN：实现晴、阴、雾、雨、雪之间的天气状况自由迁移相关推荐

学习笔记：Controllable Artistic Text Style Transfer via Shape-Matching GAN 基于形状匹配生成对抗网络的可控艺术文本风格迁移
[ICCV-2019] Controllable Artistic Text Style Transfer via Shape-Matching GAN 基于形状匹配生成对抗网络的可控艺术文本风格迁移 ...
cesium实现晴，雨，雾，雪等效果
晴 viewer.shadows = true; //阴影viewer.shadowMap.enabled = true;viewer.shadowMap.size = 2048*2;viewer.s ...
读飘零雾雨版css3.0版本笔记
一.Css中的属性继承分析: 1.不具备继承特点的有 :定位.布局.弹性盒模型 .尺寸 .外补白内补白.边框.背景.多栏.2D变换.过度.动画.打印.媒体查询模块儿 2.具有继承特性的有: 颜色 c ...
Transformer 杀疯了，图像去雨、人脸幻构、风格迁移、语义分割等通通上分
前段时间 Transformer 已席卷计算机视觉领域,并获得大量好评,如『基于Swin-Transformer』.『美团提出具有「位置编码」的Transformer,性能优于ViT和DeiT』.『L ...
树莓派 java 驱动 4.2寸微雪墨水屏天气预报
结果展示我做的这个很简陋,需要插电,自己玩玩还行,效果见下: B站视频指导视频指导:视频地址 https://www.bilibili.com/video/BV1bQ4y1Z7xL 实现说明我一 ...
voc数据集和标签同时增强，增加下雪、下雨、加雾天气状况扩充数据集，附其他博主yolo和voc格式互相转换
效果下雪.下雨和雾化可以根据参数自行调整在博主原有的基础上,考虑自身数据集实际情况,对其添加了天气状况,增强数据集鲁棒性核心已注释 voc和yolo转换直接抄某博主的,找不到链接,见谅数据 ...
DevExpress皮肤样式
[时间] 2016-02-15 11:41:11 天气晴没有雾霾难得的好天气!!! [工具] (1)Visual Studio 2015 (2)DevExpress15.2.3 [感言] 一直以来都 ...
DevExpress自学笔记—整体修改窗体及控件的皮肤样式1
[时间] 2016-02-15 11:41:11 天气晴没有雾霾难得的好天气!!! [工具] (1)Visual Studio 2015 (2)DevExpress15.2.3 [感言] 一直以来都 ...
科沃斯擦窗机器人向上走不动_科沃斯擦窗机器人使用攻略
智能家庭服务机器人概念随着"互联网+"时代的发展已经席卷而来,其中扫地机器人逐渐为越来越多的家庭主妇所青睐,然而玻璃窗的清理一直是诸多家庭面临的难题.年关将近,哪怕平时再不爱清理窗 ...

Weather GAN：实现晴、阴、雾、雨、雪之间的天气状况自由迁移

Weather GAN：实现晴、阴、雾、雨、雪之间的天气状况自由迁移相关推荐

最新文章

热门文章