CN113947535B - 一种基于光照分量优化的低照度图像增强方法 - Google Patents
一种基于光照分量优化的低照度图像增强方法 Download PDFInfo
- Publication number
- CN113947535B CN113947535B CN202010694542.9A CN202010694542A CN113947535B CN 113947535 B CN113947535 B CN 113947535B CN 202010694542 A CN202010694542 A CN 202010694542A CN 113947535 B CN113947535 B CN 113947535B
- Authority
- CN
- China
- Prior art keywords
- illumination
- image
- low
- point
- rgb
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000005286 illumination Methods 0.000 title claims abstract description 45
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000005457 optimization Methods 0.000 title claims abstract description 11
- 238000000354 decomposition reaction Methods 0.000 claims abstract description 13
- 238000001914 filtration Methods 0.000 claims abstract description 12
- 230000000007 visual effect Effects 0.000 claims abstract description 3
- 239000011159 matrix material Substances 0.000 claims description 10
- 238000010586 diagram Methods 0.000 claims description 3
- 238000002474 experimental method Methods 0.000 abstract description 3
- 230000009466 transformation Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000000052 comparative effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本发明提出一种基于光照分量优化的低照度图像增强方法。首先通过对低照度原图使用max‑RGB模型估计初始光照分量,对初始光照分量使用奇异值分解和引导滤波进行优化,得到最终光照图。根据Retinex理论,将低照度原图和最终光照图逐点相除,并利用低照度原图RGB三通道中的G通道对得到的图像进行引导滤波去除噪声。由于结合了奇异值分解和引导滤波,从而能更加精准地估计出光照分量,提高了增强后图片的主观视觉效果和各项客观指标。在多次图像增强的实验中验证了方法的有效性。
Description
技术领域
本发明涉及图像处理领域中的低照度图像增强问题,尤其是涉及一种基于光照分量优化的低照度图像增强方法。
背景技术
低照度图像增强一直以来都是图像处理领域的研究热点。在缺乏良好光照条件的情况下,图像采集过程中必然会受设备自身参数、光照变化等诸多因素的影响,导致图像拍摄效果不佳,出现光照不均匀,颜色失真等问题,对进行目标检测、目标识别等后续处理将产生一定的影响。因此,如何在低照度条件下获得高质量的图像是一个至关重要的问题。
经典的低图像增强方法可分为三种:基于直方图变换、基于Retinex模型和基于去雾模型。直方图变换通过扩展原图的灰度级、增大图像的动态范围来达到增强的效果。Retinex模型以颜色恒常性原理为基础,传统方法使用高斯滤波估计出原图中的光照,并使用对数变换去除光照得到增强图像。去雾模型中,将图片反转后得到与雾天图像相似的效果,利用去雾算法处理后再次反转,得到增强图像。这三种方法都取得了一定的进展,但其视觉效果和客观指标仍不够理想。
发明内容
针对低照度图像增强结果不理想的问题,本发明提出了一种基于光照分量优化的低照度图像增强方法。利用奇异值分解和引导滤波对初始光照进行优化,通过简化Retinex模型得到增强图像后,再次使用引导滤波对增强图像进行去噪处理。本发明通过以下过程来实现上述目的:
(1)通过对低照度原图使用max-RGB模型得到初始光照分量图;
(2)对(1)中获得的初始光照分量图使用奇异值分解进行处理,并归一化;
(3)对(2)中归一化后的结果使用三次引导滤波得到优化后的光照分量图;
(4)根据简化Retinex模型,将低照度原图RGB三通道与(3)中获得的光照分量图逐点相除,获得增强图像;
(5)使用低照度原图RGB三通道中的G通道作为引导图像,对(4)中获得的增强图像进行去噪处理,得到最终需要的增强图像。
附图说明
图1基于光照分量优化的低照度图像增强方法框架图;
具体实施方式
下面结合附图对本发明做进一步说明:
光照图计算以及优化方法具体如下:
(1)初始光照图的获取
本文采用max-RGB模型提取初始光照图,计算公式为:
L(x,y)=max(R(x,y),G(x,y),B(x,y)) (1)
式中,R(x,y)、G(x,y)、B(x,y)分别为低照度原图的RGB三通道图像。
(2)光照图的优化
奇异值分解是一种常用的矩阵对角化分解方式,利用奇异值分解,可将矩阵A分解为如下形式:
A=UΣVT (2)
式中,其中U和V均为正交矩阵,即对矩阵U、V有UUT=I和VVT=I,Σ为非负对角阵,正交矩阵U和V包含原矩阵的结构信息,奇异矩阵Σ包含原矩阵的能量信息。奇异矩阵Σ可表示为:
Σ=diag(s1,s2,…,sN)(s1>s2>…>sN) (3)
式中,s1,s2,…,sN为原矩阵A的奇异值。
对初始光照图像中3×3区域进行奇异值分解后,选取奇异矩阵中的S1,即最大的奇异值作为该点的光照强度。对整幅图像处理完后,进行归一化。
引导滤波器是一种常用的边缘保持滤波器,在去除纹理细节信息的同时,能够很好的保留图像的边缘。为了进一步优化光照图,使用三次引导滤波对奇异值分解并归一化后的光照图进行再次处理。若初始光照图为Lini(x,y),奇异值分解并归一化后得到的光照图为Ls(x,y),GFR(A,B)表示以窗口半径为R进行引导滤波,存在下式:
式中,窗口大小为r1=15、r2=7、r3=3,L3(x,y)为优化后最终使用的光照图。
获得增强图像和去噪方法如下:
(1)根据Retinex理论,一幅低照度图像S(x,y)可以表示为光照分量L(x,y)和反射分量R(x,y)的乘积,即:
S(x,y)=L(x,y)×R(x,y) (5)
上式可变形为:
式中,τ为一个防止分母为零的常数,取0.01。
(2)根据式(6)可得到增强图像。低照度图像在增强的同时放大了原本隐藏在黑暗中的噪声,在增强之后需要进行去噪处理。当前使用的CCD相机和CMOS相机多使用拜耳阵列传感器来获取彩色图像,而拜耳阵列是一个由8个绿色、4个蓝色和4个红色像素组成的4×4阵列。因此,原图中绿色通道噪声水平通常较低,可作为引导图像,使用引导滤波对增强结果的RGB三通道分别去噪,三通道融合后获得最终结果。
为验证本发明的提出的基于光照分量优化的低照度图像增强方法有效性,在20张图上进行了试验,对经典的低照度图像增强方法MSRCR、Dong、SRIE和本发明提出的方法进行了对比实验。
表1 20幅图像各项指标的平均值
Tab.1Mean value of indicators for 20images
从表中可以看出本发明在实验图片上取得了较好的效果,具有一定的实用价值,在彩色熵这一指标上低于方法A,在LOE、NIQE、BRISQUE三个指标上均超过对比方法。
Claims (4)
1.一种基于光照分量优化的低照度图像增强方法,其特征在于包括以下步骤:
(1)通过对低照度原图使用max-RGB模型得到初始光照分量图;
(2)对(1)中获得的初始光照图使用奇异值分解进行处理,并归一化;
(3)对(1)中得到的初始光照图Lini(x,y)和(2)中得到的归一化结果图Ls(x,y)以窗口半径为R进行引导滤波,公式如下:其中GFR(A,B)表示以窗口半径为R进行引导滤波,L3(x,y)为优化后最终使用的光照图;
(4)根据简化Retinex模型:c∈{R,G,B},为防止分母为零,τ取0.01,将低照度原图RGB三通道与(3)中获得的光照分量图逐点相除,获得增强图像;
(5)使用低照度原图RGB三通道中的G通道作为引导图像,对(4)中获得的增强图像进行去噪处理,得到最终需要的增强图像。
2.根据权利要求1所述的方法,其特征在于步骤(1)中使用max-RGB模型获取初始光照图,即使用原始图像在点(x,y)处RGB三通道的最大值作为该点的光照。
3.根据权利要求1所述的方法,其特征在于步骤(2)中使用奇异值分解来处理初始光照图,其方法如下:
对于图像以点(x,y)为中心的3×3区域进行奇异值分解,即:
A=UΣVT (1)
其中,A代表初始光照图中3×3区域,U和V均为正交矩阵,Σ为非负对角阵,由A的奇异值组成,且存在:
Σ=diag=(s1,s2,…,sN)(s1>s2>…>sN) (2)
以最大奇异值S1代替该点光照,整幅图像处理完后,进行归一化。
4.根据权利要求1所述的方法,其特征在于步骤(5)中使用原图中噪声水平较低的绿色通道分量对增强后图像进行引导滤波去噪,提升了图像的视觉效果和各项指标。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010694542.9A CN113947535B (zh) | 2020-07-17 | 2020-07-17 | 一种基于光照分量优化的低照度图像增强方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010694542.9A CN113947535B (zh) | 2020-07-17 | 2020-07-17 | 一种基于光照分量优化的低照度图像增强方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113947535A CN113947535A (zh) | 2022-01-18 |
CN113947535B true CN113947535B (zh) | 2023-10-13 |
Family
ID=79326765
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010694542.9A Active CN113947535B (zh) | 2020-07-17 | 2020-07-17 | 一种基于光照分量优化的低照度图像增强方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113947535B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114897710A (zh) * | 2022-04-06 | 2022-08-12 | 四川大学 | 一种低照度环境下的视频增强方法 |
CN114862711B (zh) * | 2022-04-29 | 2023-03-31 | 西安理工大学 | 基于双重互补先验约束的低照度图像增强与去噪方法 |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101916431A (zh) * | 2010-07-23 | 2010-12-15 | 北京工业大学 | 一种低照度图像数据处理方法及系统 |
JP2012108898A (ja) * | 2010-10-29 | 2012-06-07 | Jvc Kenwood Corp | 画像処理装置、画像処理方法 |
CN103578084A (zh) * | 2013-12-09 | 2014-02-12 | 西安电子科技大学 | 基于亮通道滤波的彩色图像增强方法 |
CN105205794A (zh) * | 2015-10-27 | 2015-12-30 | 西安电子科技大学 | 一种低照度图像的同步增强去噪方法 |
CN105654437A (zh) * | 2015-12-24 | 2016-06-08 | 广东迅通科技股份有限公司 | 一种对低照度图像的增强方法 |
CN106846282A (zh) * | 2017-03-28 | 2017-06-13 | 华侨大学 | 一种采用自适应校正的低照度图像增强方法 |
CN106897981A (zh) * | 2017-04-12 | 2017-06-27 | 湖南源信光电科技股份有限公司 | 一种基于引导滤波的低照度图像增强方法 |
CN107203977A (zh) * | 2017-05-17 | 2017-09-26 | 河海大学 | 一种基于暗原色先验和稀疏表示的水下图像复原方法 |
CN107527332A (zh) * | 2017-10-12 | 2017-12-29 | 长春理工大学 | 基于改进Retinex的低照度图像色彩保持增强方法 |
CN107563971A (zh) * | 2017-08-12 | 2018-01-09 | 四川精视科技有限公司 | 一种真彩高清夜视成像方法 |
CN107578383A (zh) * | 2017-08-29 | 2018-01-12 | 北京华易明新科技有限公司 | 一种低照度图像增强处理方法 |
CN108596853A (zh) * | 2018-04-28 | 2018-09-28 | 上海海洋大学 | 基于背景光统计模型和传输地图优化的水下图像增强方法 |
CN109191390A (zh) * | 2018-08-03 | 2019-01-11 | 湘潭大学 | 一种基于不同颜色空间多算法融合的图像增强算法 |
CN109978789A (zh) * | 2019-03-26 | 2019-07-05 | 电子科技大学 | 一种基于Retinex算法与引导滤波的图像增强方法 |
CN110570360A (zh) * | 2019-05-30 | 2019-12-13 | 昆明理工大学 | 一种基于Retinex的鲁棒和全面的低质量光照图像增强方法 |
CN110992287A (zh) * | 2019-12-03 | 2020-04-10 | 中国电子科技集团公司信息科学研究院 | 一种非均匀光照视频的清晰化方法 |
CN111292257A (zh) * | 2020-01-15 | 2020-06-16 | 重庆邮电大学 | 一种基于Retinex的暗视觉环境下图像增强方法 |
CN111353955A (zh) * | 2020-02-28 | 2020-06-30 | 广州市百果园信息技术有限公司 | 一种图像处理方法、装置、设备和存储介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9008457B2 (en) * | 2010-05-31 | 2015-04-14 | Pesonify, Inc. | Systems and methods for illumination correction of an image |
US9418403B2 (en) * | 2013-10-04 | 2016-08-16 | Fuji Xerox Co., Ltd. | Image processor and non-transitory computer readable medium for generating a reproduction image which is reproduced so that visibility of an original image is enhanced |
-
2020
- 2020-07-17 CN CN202010694542.9A patent/CN113947535B/zh active Active
Patent Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101916431A (zh) * | 2010-07-23 | 2010-12-15 | 北京工业大学 | 一种低照度图像数据处理方法及系统 |
JP2012108898A (ja) * | 2010-10-29 | 2012-06-07 | Jvc Kenwood Corp | 画像処理装置、画像処理方法 |
CN103578084A (zh) * | 2013-12-09 | 2014-02-12 | 西安电子科技大学 | 基于亮通道滤波的彩色图像增强方法 |
CN105205794A (zh) * | 2015-10-27 | 2015-12-30 | 西安电子科技大学 | 一种低照度图像的同步增强去噪方法 |
CN105654437A (zh) * | 2015-12-24 | 2016-06-08 | 广东迅通科技股份有限公司 | 一种对低照度图像的增强方法 |
CN106846282A (zh) * | 2017-03-28 | 2017-06-13 | 华侨大学 | 一种采用自适应校正的低照度图像增强方法 |
CN106897981A (zh) * | 2017-04-12 | 2017-06-27 | 湖南源信光电科技股份有限公司 | 一种基于引导滤波的低照度图像增强方法 |
CN107203977A (zh) * | 2017-05-17 | 2017-09-26 | 河海大学 | 一种基于暗原色先验和稀疏表示的水下图像复原方法 |
CN107563971A (zh) * | 2017-08-12 | 2018-01-09 | 四川精视科技有限公司 | 一种真彩高清夜视成像方法 |
CN107578383A (zh) * | 2017-08-29 | 2018-01-12 | 北京华易明新科技有限公司 | 一种低照度图像增强处理方法 |
CN107527332A (zh) * | 2017-10-12 | 2017-12-29 | 长春理工大学 | 基于改进Retinex的低照度图像色彩保持增强方法 |
CN108596853A (zh) * | 2018-04-28 | 2018-09-28 | 上海海洋大学 | 基于背景光统计模型和传输地图优化的水下图像增强方法 |
CN109191390A (zh) * | 2018-08-03 | 2019-01-11 | 湘潭大学 | 一种基于不同颜色空间多算法融合的图像增强算法 |
CN109978789A (zh) * | 2019-03-26 | 2019-07-05 | 电子科技大学 | 一种基于Retinex算法与引导滤波的图像增强方法 |
CN110570360A (zh) * | 2019-05-30 | 2019-12-13 | 昆明理工大学 | 一种基于Retinex的鲁棒和全面的低质量光照图像增强方法 |
CN110992287A (zh) * | 2019-12-03 | 2020-04-10 | 中国电子科技集团公司信息科学研究院 | 一种非均匀光照视频的清晰化方法 |
CN111292257A (zh) * | 2020-01-15 | 2020-06-16 | 重庆邮电大学 | 一种基于Retinex的暗视觉环境下图像增强方法 |
CN111353955A (zh) * | 2020-02-28 | 2020-06-30 | 广州市百果园信息技术有限公司 | 一种图像处理方法、装置、设备和存储介质 |
Non-Patent Citations (9)
Title |
---|
Bima Sena Bayu Dewantara 等.OptiFuzz: a robust illumination invariant face recognition system and its implementation.《Machine Vision and Applications》.2016,第27卷(第2016期),877-891. * |
Wonjun Kim 等.Low-Light Image Enhancement Using Volume-Based Subspace Analysis.《IEEE Access》.2020,第08卷118370-118379. * |
刘颖 等.基于加权引导滤波的Retinex刑侦图像增强.《西安邮电大学学报》.2018,第23卷(第05期),30-36. * |
王殿伟 等.基于光照-反射成像模型和形态学操作的多谱段图像增强算法.《物理学报》.2018,第67卷(第21期),104-114. * |
王瑞尧 等.最大差值图决策的低照度图像自适应增强算法.《计算机应用》.2019,第40卷(第04期),1164-1170. * |
赵全友 等.复杂光照下的两步法颜色恒常性增强.《光学精密工程》.2009,第17卷(第04期),859-866. * |
鞠明 等.基于向心自动波交叉皮质模型的非均匀光照图像增强.《自动化学报》.2011,第37卷(第07期),800-810. * |
黄丽雯 等.低光照彩色图像增强算法研究.《重庆理工大学学报(自然科学)》.2020,第34卷(第01期),219-225. * |
龙庆延 等.基于奇异值分解和引导滤波的低照度图像增强算法.《科学技术与工程》.2021,第21卷(第12期),5018-5023. * |
Also Published As
Publication number | Publication date |
---|---|
CN113947535A (zh) | 2022-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11127122B2 (en) | Image enhancement method and system | |
CN108122213B (zh) | 一种基于YCrCb的低对比度图像增强方法 | |
WO2016206087A1 (zh) | 一种低照度图像处理方法和装置 | |
CN111861896A (zh) | 一种面向uuv的水下图像色彩补偿与恢复方法 | |
CN107358585B (zh) | 基于分数阶微分及暗原色先验的雾天图像增强方法 | |
CN103345733B (zh) | 基于改进暗通道先验的快速低照度图像增强方法 | |
CN105761227A (zh) | 基于暗通道先验与白平衡的水下图像增强方法 | |
CN102819827B (zh) | 一种基于灰度分割的自适应矩匹配条带噪声去除方法 | |
CN104091310A (zh) | 一种图像去雾方法和装置 | |
CN104157003B (zh) | 一种基于正态分布调节的热图像细节增强方法 | |
CN108875747A (zh) | 一种基于机器视觉的小麦不完善粒识别方法 | |
CN104299196A (zh) | 一种图像处理装置及方法、显示设备 | |
CN111598791B (zh) | 一种基于改进动态大气散射系数函数的图像去雾方法 | |
CN113947535B (zh) | 一种基于光照分量优化的低照度图像增强方法 | |
CN111127350A (zh) | 一种图像增强方法 | |
CN109087254A (zh) | 无人机航拍图像雾霾天空和白色区域自适应处理方法 | |
CN106530245A (zh) | 一种无人机载隧道火灾红外图像分频段增强方法 | |
CN103971343A (zh) | 基于相似像素点检测的图像降噪方法 | |
CN117274085A (zh) | 低照度图像增强方法及装置 | |
CN105678245A (zh) | 一种基于哈尔特征的靶位识别方法 | |
CN105574826B (zh) | 遥感影像的薄云去除方法 | |
CN109801231A (zh) | 一种电泳电子纸检测设备的图像处理方法 | |
CN110223253B (zh) | 一种基于图像增强的去雾方法 | |
CN104766287A (zh) | 一种基于显著性检测的模糊图像盲复原方法 | |
CN106504208A (zh) | 基于有序最小值与小波滤波的高光谱图像宽条带去除方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |