介绍两篇比较新的低光照图像增强的论文

2020 年 1 月 29 日 CVer

点击上方“CVer”,选择加"星标"或“置顶”

重磅干货,第一时间送达

作者:木瓜子

https://zhuanlan.zhihu.com/p/103988862

本文已由原作者授权,不得擅自二次转载

这篇论文主要介绍两篇基于深度学习的低光照图像增强的文章。

Progressive Retinex: Mutually Reinforced Illumination-Noise Perception Network for Low Light Image Enhancement(ACMMM2019)

基于Retinex的低光照图像增强包含对比度增强和噪声抑制两个任务,并存在一定的耦合关系,若忽略两者之间的关系可能会导致过度/欠平滑的结果。为了解决这一问题,本文提出了一种改进的Retinex框架,其中,低光照图像的噪声和亮度以一种互相增强的方式感知,来实现基于retinex的图像增强。本文设计了两个“逐点式”(即1*1的滤波器)的卷积神经网络分别用于建模环境光和图像噪声的统计规律,并利用它们作为约束来处理共同学习的过程,两个模型渐进地处理直到获得稳定的结果。网络结果图如下:


用网络学习得到的关于照度和噪声的有代表性像素的结果如下:


网络的训练采用MSEloss,要优化的目标函数分为两个子任务,对比度增强和噪声抑制,其表达式如下:


此外,本文还提出了一种构造数据集的方法,并模拟了与亮度有关的噪声分布,


部分实验结果如下:


但这种方法存在一个较大的局限性,由于只考虑像素空间的统计分布而忽略了结构性质,1*1的卷积核感受野比较小,导致卷积的时候没有邻域信息。

EEMEFN: Low-Light Image Enhancement via Edge-Enhanced Multi-Exposure Fusion Network (AAAI2020)

现有的低光照图像增强算法存在三个问题:①现有的方法往往很难从极度暗/亮的图像中复原细节信息;②由于没有正常曝光的图像信息,现有的模型中存在色彩畸变;③基于像素点的损失会带来模糊等。了解决上述问题,本文提出了一个双阶段的模型为边缘增强的多曝光图像融合。第一阶段的多曝光融合模块通过生成和融合不同光照条件下的多曝光图像,恢复出良好的曝光图像细节,降低噪声方差和颜色偏差。值得注意的是,这里的多曝光图像是由原图乘上对应的比例得到的。第二阶段的边缘增强模块通过融合低光照图像和边缘信息生成高质量的图像。其网络结构如下:


其中,融合模块如下:


给出部分其在SID数据集上的结果:

---End---

想要了解最新最快最好的CV/DL/ML论文速递、优质开源项目、学习教程和实战训练等资料,欢迎加入CVer学术交流群。涉及图像分类、目标检测、图像分割、人脸检测&识别、目标跟踪、GANs、Re-ID、医学影像分析、姿态估计、OCR、SLAM、场景文字检测&识别、PyTorch和TensorFlow等方向。


扫码进群


▲长按关注我们

麻烦给我一个在看!

登录查看更多
4

相关内容

【ICML2020-浙江大学】对抗性互信息的文本生成
专知会员服务
43+阅读 · 2020年7月4日
【CVPR 2020-商汤】8比特数值也能训练卷积神经网络模型
专知会员服务
25+阅读 · 2020年5月7日
CVPR2020 | 商汤-港中文等提出PV-RCNN:3D目标检测新网络
专知会员服务
43+阅读 · 2020年4月17日
近期必读的7篇 CVPR 2019【视觉问答】相关论文和代码
专知会员服务
34+阅读 · 2020年1月10日
必读的10篇 CVPR 2019【生成对抗网络】相关论文和代码
专知会员服务
31+阅读 · 2020年1月10日
八篇 ICCV 2019 【图神经网络(GNN)+CV】相关论文
专知会员服务
29+阅读 · 2020年1月10日
Deformable Kernels,用于图像/视频去噪,即将开源
极市平台
13+阅读 · 2019年8月29日
CVPR 2018 论文解读 | 基于GAN和CNN的图像盲去噪
PaperWeekly
13+阅读 · 2019年1月22日
已删除
将门创投
12+阅读 · 2018年6月25日
SRGAN论文笔记
统计学习与视觉计算组
109+阅读 · 2018年4月12日
Neural Image Captioning
Arxiv
5+阅读 · 2019年7月2日
Arxiv
3+阅读 · 2019年3月29日
Arxiv
30+阅读 · 2019年3月13日
Area Attention
Arxiv
5+阅读 · 2019年2月5日
Arxiv
6+阅读 · 2018年4月3日
VIP会员
相关资讯
Deformable Kernels,用于图像/视频去噪,即将开源
极市平台
13+阅读 · 2019年8月29日
CVPR 2018 论文解读 | 基于GAN和CNN的图像盲去噪
PaperWeekly
13+阅读 · 2019年1月22日
已删除
将门创投
12+阅读 · 2018年6月25日
SRGAN论文笔记
统计学习与视觉计算组
109+阅读 · 2018年4月12日
相关论文
Neural Image Captioning
Arxiv
5+阅读 · 2019年7月2日
Arxiv
3+阅读 · 2019年3月29日
Arxiv
30+阅读 · 2019年3月13日
Area Attention
Arxiv
5+阅读 · 2019年2月5日
Arxiv
6+阅读 · 2018年4月3日
Top
微信扫码咨询专知VIP会员