CN109658343B - 结合颜色转换和自适应曝光的水下图像增强方法 - Google Patents
结合颜色转换和自适应曝光的水下图像增强方法 Download PDFInfo
- Publication number
- CN109658343B CN109658343B CN201811306000.9A CN201811306000A CN109658343B CN 109658343 B CN109658343 B CN 109658343B CN 201811306000 A CN201811306000 A CN 201811306000A CN 109658343 B CN109658343 B CN 109658343B
- Authority
- CN
- China
- Prior art keywords
- image
- color
- exposure
- space
- color conversion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 238000006243 chemical reaction Methods 0.000 title claims abstract description 33
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 22
- 238000012545 processing Methods 0.000 claims abstract description 26
- 230000004927 fusion Effects 0.000 claims description 15
- 238000001914 filtration Methods 0.000 claims description 9
- 238000005286 illumination Methods 0.000 claims description 9
- 238000012937 correction Methods 0.000 claims description 8
- 230000003472 neutralizing effect Effects 0.000 claims description 2
- 230000000694 effects Effects 0.000 description 4
- 239000003086 colorant Substances 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000013441 quality evaluation Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000002146 bilateral effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000031700 light absorption Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000016776 visual perception Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
- Y02A90/30—Assessment of water resources
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
Abstract
本发明属于图像处理领域,为获得高对比度、高饱和度、低噪声的水下图像,本发明,结合颜色转换和自适应曝光的水下图像增强方法,步骤如下:输入原始水下图像;对原始水下图像进行颜色平衡处理;对颜色平衡后的图象在HSV空间对S、V空间进行CLAHE处理;对颜色平衡后的图像从RGB空间转换到Lab空间进行颜色转换;将两幅自适应曝光处理后的图像进行线性融合。本发明主要应用于图像处理场合。
Description
技术领域
本发明属于图像处理领域,图像增强范畴,具体涉及对水下图像进行颜色校正、颜色转换和亮度调整以实现水下图像增强的效果。具体讲,涉及结合颜色转换和自适应曝光的水下图像增强方法。
背景技术
因受到光线吸收、水中悬浮物颗粒导致的散射等影响,水下图像会出现对比度低、细节模糊、颜色失真等问题。不同波长的光线在水中的衰减程度不同,通常情况下红光在水中衰减最为严重,所以水下图像呈现蓝绿色偏。选取适当的图像增强技术,可以改善图像亮度、提高对比度、去除色偏等。对图像进行直方图均衡是最常用的图像增强方法,可以处理水下图像的对比度问题。
直方图均衡(HE)是多种空间域处理技术的基础,可实现对比度的增强,但直方图均衡方法导致变换后图像的灰度级减少,部分细节丢失,产生过增强现象。自适应直方图均衡(AHE)对图像亮度进行重分布,以提高对比度,但是该方法会导致图像噪声放大。对比度受限自适应直方图均衡(CLAHE)在自适应直方图均衡的基础上对每个小区域进行对比度限幅处理,有效增加图像细节的同时抑制了噪声的放大,但是仍会放大一部分噪声并且存在均衡后颜色过饱和的现象。Ancut等对原始输入图像进行白平衡处理并与CLAHE变换后的图像进行高斯-拉普拉斯金字塔融合,大大提高了图像的对比度、饱和度,但也导致部分图像处理后颜色过于绚烂、不真实,此外采用双边滤波器使得算法运行时间较长。Kashif Iqbal对RGB三通道滑动拉伸将颜色均值化,再将图像投射到HSI颜色空间,对图像的饱和度H和强度I进行拉伸,提高了图像质量,但是图像色偏问题依然存在。针对光照不均的问题,在三通道的相关性最小的Lab空间对图像的L通道进行处理,可以有效处理图像亮度问题。颜色转换方法利用Lab空间三通道相关性小的特性实现了两幅图像之间的颜色转换。Ancuti在12年研究的基础上,对颜色校正、对比度增强方面做了改进,并首次将颜色转换的方法用于水下图像颜色校正,所得图像颜色更贴合人的主观感受。
发明内容
为克服现有技术的不足,本发明旨在CLAHE变换的基础上,提出一种结合颜色转换和自适应曝光的方法,以获得高对比度、高饱和度、低噪声的水下图像。为此,本发明采取的技术方案是,结合颜色转换和自适应曝光的水下图像增强方法,步骤如下:
Step1.输入原始水下图像;
Step2.对原始水下图像进行颜色平衡处理;
Step3.对颜色平衡后的图象在HSV空间对S、V空间进行CLAHE处理;
Step4.对颜色平衡后的图像从RGB空间转换到Lab空间进行颜色转换,通过计算图像Lab各通道的均值参考图像的均值mguide,源输入图像的均值msource和标准差参考图像的标准差σguide,源输入图像的标准差σsource,分别计算L、a、b三通道的变换值,最后将Lab空间的值转换到空间RGB,获得颜色转换后的RGB图像:
对颜色平衡后的图像以及颜色转换后的图像进行自适应曝光处理,自适应曝光方法即参考Yi的图像亮度曝光情况来校正Yj的曝光程度:
其中Yi表示标准输入图像的照明强度即Lab通道中的L,Yj表示经过一系列增强处理后的图像照明强度,自适应曝光即校正Yj的局部亮度过高问题,GF为导向滤波处理,接下来将滤波后的曝光映射图s(x)与Yj相乘即校正了其L通道,完成图像的自适应曝光处理;
Step5.将两幅自适应曝光处理后的图像进行线性融合。
进一步的,对曝光映射图进行导向滤波处理,式(2)中的GF即为导向滤波处理,GF在去噪的同时可以很好地保留图像边缘,然后再将滤波后的曝光映射图s(x)与Yj相乘即校正其L通道,完成图像的自适应曝光处理。
对输入图像I1、I2进行线性融合,
I=a·I1+(1-a)·I2 (3)
其中a为输入权重,取a=0.5,意为对两个输入进行像素级融合,中和二者的颜色与对比度。
本发明的特点及有益效果是:
本发明提供了一种结合颜色转换和自适应曝光以校正图像颜色和亮度的方法。由于本发明是在CLAHE的基础上进行的改进,因此,图像的颜色、对比度和亮度都有了较好的改进。本文选用主观效果图及基于人类视觉感知系统的UIQM(无参考的水下图像质量评价方法)、UCIQE(水下彩色图像质量评价方法)、PCQI(局部块的对比度索引)进行评价。
选用十张经典水下图像进行具体实验,可看到主观效果图能较好地突出图像的细节,对比度也有很大的提高,并且很好地去除了蓝绿色偏。客观指标UIQM的均值为6.3613,UCIQUE平均值为0.6657,PCQI平均值为1.2842。与原始水下图像处理的相关算法相比,本发明的主观图像视觉效果较佳,客观指标也均有提高。
附图说明:
图1是本发明方法实验流程图;
图2是本发明方法实验常用水下图像;
图3是本发明方法实验颜色平衡图像;
图4是本发明方法实验CLAHE图;
图5是本发明方法实验颜色转换的参考图像;
图6是本发明方法实验线性融合的输入图像1;
图7是本发明方法实验线性融合的输入图像2;
图8是本发明方法实验结果图。
具体实施方式
1图像对比度增强
图像经现有的颜色平衡方法进行预处理后,在HSV空间的S、V通道对图像进行CLAHE处理。所得图像对比度增强效果明显,但部分图像存在明显的颜色失真问题。此外,使用颜色平衡方法在一定程度上也导致部分图片颜色过饱和。因此需要对CLAHE处理的图像进行颜色校正,本发明选用颜色转换的方法进行颜色校正,以获得视觉效果符合人眼感知、颜色较为真实的图像。
2图像颜色校正
颜色转换用于纠正参考图像和目标图像之间严重的色彩不一致性问题,可在光源复杂的情况下平衡颜色。将输入图像和参考图像从RGB空间转换到Lab颜色空间得到Iguide_lab(Lab通道的参考图像)和Isource_lab(Lab通道的源输入图像),再分别计算其Lab各通道的均值mguide(参考图像的均值),msource(源输入图像的均值)和标准差σguide(参考图像的标准差),σsource(源输入图像的标准差)。依式(1)分别计算L、a、b三通道的变换值,最后将Lab空间的值转换到RGB空间,获得颜色转换后的RGB图像。
本发明依照不同的颜色、对比度制作出一个简单的参考图像集。水下图像在[0,50]及[200,250]间的像素点分布很少,表明图像由于衰减导致对比度低、亮度不佳,经过颜色转换处理后,像素点广泛分布在[0,255],对比度得到提高。
由于参考图像的对比度远远大于输入图像的对比度,因而会产生一定程度的过曝光,即输入图像经颜色转换得到的目标图像会出现亮度过大区,使得局部亮度过大区域的图像细节丢失。因此本发明对颜色转换后的图像进行自适应曝光处理。
3图像亮度调整
本发明在Lab空间对图像进行自适应曝光处理。在Lab空间通过改变L通道的值进行亮度调整的效果很好。主要原因是L,a,b三通道相关性不大,改变图像亮度基本不会影响到图像的色度,因而在处理亮度的同时能够保持色度的良好性态,从而有效地处理图像亮度。
本发明选用快速求取自适应曝光映射图s(x)来校正图像的亮度,如式(2)。Yi表示标准输入图像的照明强度(Lab通道中的L),Yj表示经过一系列增强处理后的图像照明强度,λ为可调常量,可取值0.3,自适应曝光即校正Yj的局部亮度过高问题。自适应曝光方法即参考Yi的图像亮度曝光情况来校正Yj的曝光程度。
为了减少噪声对曝光校正的影响,本文对曝光映射图进行导向滤波处理,GF即为导向滤波处理,GF在去噪的同时可以很好地保留图像边缘。然后再将滤波后的曝光映射图s(x)与Yj相乘即校正了其L通道,完成了图像的自适应曝光处理。
4线性融合
本文选取颜色转换后的图像作为自适应曝光的待处理图像Yj,将CLAHE处理后的图像作为标准输入图像Yi,经自适应曝光处理,颜色转换后的图像的曝光程度优化为CLAHE变换图像的曝光情况记为线性融合时的输入I1。此外,CLAHE处理后的图像的细节信息多,因此颜色转换后的图像对比度得到增强。
为降低CLAHE处理后的图像噪声,选用CLAHE处理后的图像作为标准输入图像Yi,将颜色平衡处理后的图像作为待处理图像Yj,该Yj无局部过曝光现象,也基本不含被放大的噪声,只是细节信息有待增强,因此可以得到对比度提高、噪声降低的图像,记为输入I2。
对输入图像I1、I2进行线性融合,
I=a·I1+(1-a)·I2 (3)
其中a为输入权重,取a=0.5。意为对两个输入进行像素级融合,中和二者的颜色与对比度,得到较好的视觉效果。
下面通过算法流程结合附图对本发明进行进一步描述:
Step6.输入原始水下图像图2;
Step7.对原始水下图像进行颜色平衡处理,得到图3;
Step8.对颜色平衡后的图象在HSV空间对S、V空间进行CLAHE处理,得到图4;
Step9.对颜色平衡后的图像从RGB空间转换到Lab空间进行颜色转换。通过计算图像Lab各通道的均值mguide,msource和标准差σguide,σsource。分别计算L,a,b三通道的变换值,最后将Lab空间的值转换到RGB空间,获得颜色转换后的RGB图像。
对颜色平衡后的图像以及颜色转换后的图像进行自适应曝光处理。自适应曝光方法即参考Yi的图像亮度曝光情况来校正Yj的曝光程度。
其中Yi表示标准输入图像的照明强度(Lab通道中的L),Yj表示经过一系列增强处理后的图像照明强度,自适应曝光即校正Yj的局部亮度过高问题。GF为导向滤波处理,GF在去噪的同时可以很好地保留图像边缘。接下来将滤波后的曝光映射图s(x)与Yj相乘即校正了其L通道,完成了图像的自适应曝光处理。如图6、图7;
Step10.将两幅自适应曝光处理后的图像进行线性融合,得到本发明的实验结果图8。
I=a·I1+(1-a)·I2,a=0.5。
Claims (2)
1.一种结合颜色转换和自适应曝光的水下图像增强方法,其特征是,步骤如下:
Step1.输入原始水下图像;
Step2.对原始水下图像进行颜色平衡处理;
Step3.对颜色平衡后的图象在HSV空间对S、V通道进行CLAHE处理;
Step4.对颜色平衡后的图像从RGB空间转换到Lab空间进行颜色转换,通过计算图像Lab各通道的参考图像的均值mguide,源输入图像的均值msource和参考图像的标准差σguide,源输入图像的标准差σsource,分别计算L、a、b三通道的变换值,最后将Lab空间的值转换到空间RGB,获得颜色转换后的RGB图像:
对颜色平衡后的图像以及颜色转换后的图像进行自适应曝光处理,自适应曝光方法即参考Yi的图像亮度曝光情况来校正Yj的曝光程度:
其中Yi表示标准输入图像的照明强度即Lab通道中的L,Yj表示经过一系列增强处理后的图像照明强度,自适应曝光即校正Yj的局部亮度问题,GF为导向滤波处理,接下来将滤波后的曝光映射图s(x)与Yj相乘即校正了其L通道,完成图像的自适应曝光处理;
Step5.将两幅自适应曝光处理后的图像进行线性融合。
2.如权利要求1所述的结合颜色转换和自适应曝光的水下图像增强方法,其特征是,对输入图像I1、I2进行线性融合,
I=a·I1+(1-a)·I2 (3)
其中a为输入权重,取a=0.5,意为对两个输入进行像素级融合,中和二者的颜色与对比度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811306000.9A CN109658343B (zh) | 2018-11-05 | 2018-11-05 | 结合颜色转换和自适应曝光的水下图像增强方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811306000.9A CN109658343B (zh) | 2018-11-05 | 2018-11-05 | 结合颜色转换和自适应曝光的水下图像增强方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109658343A CN109658343A (zh) | 2019-04-19 |
CN109658343B true CN109658343B (zh) | 2023-06-16 |
Family
ID=66110109
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811306000.9A Expired - Fee Related CN109658343B (zh) | 2018-11-05 | 2018-11-05 | 结合颜色转换和自适应曝光的水下图像增强方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109658343B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110047051B (zh) * | 2019-04-24 | 2022-09-13 | 郑州轻工业学院 | 一种非均匀照明彩色图像增强方法 |
CN110176021B (zh) * | 2019-05-21 | 2021-04-16 | 山东大学 | 结合亮度校正的显著性信息的水平集图像分割方法及系统 |
CN110827225A (zh) * | 2019-11-13 | 2020-02-21 | 山东科技大学 | 一种基于双重曝光框架的非均匀光照水下图像增强方法 |
CN111260543B (zh) * | 2020-01-19 | 2022-01-14 | 浙江大学 | 一种基于多尺度图像融合和sift特征的水下图像拼接方法 |
CN113989137B (zh) * | 2021-10-21 | 2024-07-26 | 武汉博视电子有限公司 | 一种脸部肌肤图像色素沉着提取并形成棕区光谱的方法 |
CN114331876A (zh) * | 2021-12-10 | 2022-04-12 | 深圳职业技术学院 | 水下鱼类图像增强方法、系统、计算机设备及存储介质 |
CN114897735B (zh) * | 2022-05-20 | 2023-08-11 | 河南科技学院 | 局部自适应的水下图像对比度增强方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106296597A (zh) * | 2016-07-25 | 2017-01-04 | 天津大学 | 一种基于最优化颜色修正和回归模型的水下图像复原方法 |
CN106897972A (zh) * | 2016-12-28 | 2017-06-27 | 南京第五十五所技术开发有限公司 | 一种白平衡与暗原色的自适应直方图水下图像增强方法 |
CN107833189A (zh) * | 2017-10-30 | 2018-03-23 | 常州工学院 | 对比受限自适应直方图均衡的水下目标探测图像增强方法 |
-
2018
- 2018-11-05 CN CN201811306000.9A patent/CN109658343B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106296597A (zh) * | 2016-07-25 | 2017-01-04 | 天津大学 | 一种基于最优化颜色修正和回归模型的水下图像复原方法 |
CN106897972A (zh) * | 2016-12-28 | 2017-06-27 | 南京第五十五所技术开发有限公司 | 一种白平衡与暗原色的自适应直方图水下图像增强方法 |
CN107833189A (zh) * | 2017-10-30 | 2018-03-23 | 常州工学院 | 对比受限自适应直方图均衡的水下目标探测图像增强方法 |
Non-Patent Citations (4)
Title |
---|
水下图像增强和复原方法研究进展;郭继昌 等;《中国图象图形学报》;20170331;第22卷(第3期);全文 * |
水下图像增强方法研究现状;李重仪 等;《青岛技术学报》;20160415;第35卷(第2期);全文 * |
水下图像增强算法研究及其应用;陈超;《中国优秀硕士学位论文全文数据库信息科技辑》;20170315;第3章 * |
水下图像质量增强技术研究;林文;《中国优秀硕士学位论文全文数据库信息科技辑》;20170615;第3章 * |
Also Published As
Publication number | Publication date |
---|---|
CN109658343A (zh) | 2019-04-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109658343B (zh) | 结合颜色转换和自适应曝光的水下图像增强方法 | |
CN110148095B (zh) | 一种水下图像增强方法及增强装置 | |
CN108053374B (zh) | 一种结合双边滤波与Retinex的水下图像增强方法 | |
CN105654437B (zh) | 一种对低照度图像的增强方法 | |
CN102750674B (zh) | 基于自适应容差的视频图像去雾方法 | |
CN105046663B (zh) | 一种模拟人类视觉感知的自适应低照度图像增强方法 | |
CN107507145B (zh) | 一种基于不同颜色空间自适应直方图拉伸的水下图像增强方法 | |
WO2019091270A1 (zh) | 图像增强方法及系统 | |
CN104240194B (zh) | 一种基于抛物线函数的低照度图像增强算法 | |
CN108765342A (zh) | 一种基于改进暗通道的水下图像复原方法 | |
CN106897981A (zh) | 一种基于引导滤波的低照度图像增强方法 | |
CN107578383A (zh) | 一种低照度图像增强处理方法 | |
CN106780368A (zh) | 一种基于前景模型的水下图像增强方法 | |
CN105354801B (zh) | 一种基于hsv色彩空间的图像增强方法 | |
CN104867121B (zh) | 基于暗原色先验和Retinex理论的图像快速去雾法 | |
CN107424124B (zh) | 一种图像增强方法及装置 | |
CN110827225A (zh) | 一种基于双重曝光框架的非均匀光照水下图像增强方法 | |
CN107527325B (zh) | 一种基于暗通道优先的单目水下视觉增强方法 | |
CN102208101A (zh) | 一种红外图像的自适应线性变换增强方法 | |
CN110675351B (zh) | 一种基于全局亮度自适应均衡化的海上图像处理方法 | |
CN107977941B (zh) | 一种明亮区域色彩保真及对比度增强的图像去雾方法 | |
Mathur et al. | Enhancement of underwater images using white balancing and Rayleigh-stretching | |
CN113191956B (zh) | 基于深度抠图的逆光图像增强方法 | |
CN104091307A (zh) | 基于反馈均值滤波的雾天图像快速复原方法 | |
CN105809641B (zh) | 一种去雾图像的曝光补偿和边缘增强方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20230616 |