[go: up one dir, main page]

CN118628368B - 获取hdr图像的融合比例的方法、装置、设备及介质 - Google Patents

获取hdr图像的融合比例的方法、装置、设备及介质 Download PDF

Info

Publication number
CN118628368B
CN118628368B CN202411080600.3A CN202411080600A CN118628368B CN 118628368 B CN118628368 B CN 118628368B CN 202411080600 A CN202411080600 A CN 202411080600A CN 118628368 B CN118628368 B CN 118628368B
Authority
CN
China
Prior art keywords
image
pixel
fusion ratio
original
fusion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202411080600.3A
Other languages
English (en)
Other versions
CN118628368A (zh
Inventor
周杰旻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aixin Yuanzhi Semiconductor Co ltd
Original Assignee
Aixin Yuanzhi Semiconductor Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aixin Yuanzhi Semiconductor Co ltd filed Critical Aixin Yuanzhi Semiconductor Co ltd
Priority to CN202411080600.3A priority Critical patent/CN118628368B/zh
Publication of CN118628368A publication Critical patent/CN118628368A/zh
Application granted granted Critical
Publication of CN118628368B publication Critical patent/CN118628368B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)

Abstract

本申请涉及图像处理技术领域,公开一种获取HDR图像的融合比例的方法、装置、设备及介质,该方法确定用于融合得到HDR图像的多张原始图像中各个像素所对应的融合比例,确定每张原始图像与颜色通道的对应关系,基于原始图像与颜色通道的对应关系,确定融合比例所对应的目标融合比例图像,目标融合比例图像中第一像素的颜色通道数值对应第一原始图像中第二像素的融合比例,且第一原始图像与第一像素的颜色通道符合上述对应关系,第一像素在目标融合比例图像中的位置与第二像素在第一原始图像中的位置相对应。通过本申请,每张HDR图像仅需确定一张目标融合比例图像,以减少存储HDR图像的融合比例所占用的内存空间。

Description

获取HDR图像的融合比例的方法、装置、设备及介质
技术领域
本申请涉及图像处理技术领域,尤其涉及一种获取HDR图像的融合比例的方法、装置、设备及介质。
背景技术
高动态范围(High Dynamic Range,HDR)成像技术是一种用于提高影像亮度和对比度的处理技术。该技术可以将同一场景的多张不同曝光的标准动态范围(StandardDynamic Range,SDR)图像按照不同的融合比例进行融合,得到一张HDR图像,HDR图像可以提供更多的动态范围和图像细节,能够更好地反映出真实环境中的视觉效果,以满足场景需求。
后续对HDR图像的画质进行调参,或者在融合图像出现问题进行问题溯源时,均需要利用融合HDR图像的多张SDR图像对应的融合比例。因此在融合HDR图像时,需要将多张SDR图像对应的融合比例存储在内存或者硬盘等存储设备中,以便溯源时通过该存储设备查看融合比例。目前,通过存储每张SDR对应的融合比例图像体现该融合比例。上述方法虽然可以存储HDR图像的融合比例,但是每张HDR图像由至少两张SDR图像融合而成,因此需要为每张HDR图像存储至少两张融合比例图像。当有多张HDR图像时,会导致存储设备中存储较多的融合比例图像,占用较多的内存空间。
发明内容
有鉴于此,本申请实施例提供了一种获取HDR图像的融合比例的方法、装置、设备及介质,以便减少存储HDR图像的融合比例所占用的内存空间。
第一方面,本申请实施例提供了一种获取HDR图像的融合比例的方法,所述方法包括:
确定用于融合得到高动态范围HDR图像的多张原始图像中各个像素所对应的融合比例;
确定所述原始图像与颜色通道的对应关系,不同的原始图像对应的颜色通道不同;
基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,所述目标融合比例图像中第一像素的颜色通道数值对应第一原始图像中第二像素的融合比例,所述第一像素在所述目标融合比例图像中的位置与所述第二像素在所述第一原始图像中的位置相对应,所述第一原始图像与所述第一像素的颜色通道符合所述对应关系。
在一种可能的实现方式中,所述基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,包括:
响应于用户指示目标区域的操作,基于所述对应关系,确定所述目标融合比例图像中的第一图像区域,所述第一图像区域在所述目标融合比例图像中的位置与所述目标区域指示的位置相对应,所述第一图像区域中第三像素的颜色通道数值对应第二原始图像中第四像素的融合比例,所述第三像素在所述第一图像区域中的位置与所述第四像素在所述第二原始图像中的位置相对应,所述第二原始图像与所述第三像素的颜色通道符合所述对应关系;
基于所述HDR图像,确定所述目标融合比例图像中的第二图像区域,所述第二图像区域显示的内容与所述HDR图像中对应位置的像素显示的内容相同;
基于所述第一图像区域和所述第二图像区域,确定所述目标融合比例图像,所述第一像素为所述第一图像区域中的像素。
在一种可能的实现方式中,所述基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,包括:
基于所述对应关系,生成初始融合比例图像,所述初始融合比例图像中第五像素的颜色通道数值对应第三原始图像中第六像素的融合比例,所述第五像素为所述初始融合比例图像中的任一像素,所述第五像素在所述初始融合比例图像中的位置与所述第六像素在所述第三原始图像中的位置相对应,所述第三原始图像与所述第五像素的颜色通道符合所述对应关系;
响应于用户指示目标区域的操作,利用所述初始融合比例图像中的目标区域,替换所述HDR图像中的目标区域,替换后的所述HDR图像为所述目标融合比例图像。
在一种可能的实现方式中,所述响应于用户指示目标区域的操作,基于所述对应关系,确定所述目标融合比例图像中的第一图像区域,包括:
基于所述对应关系,生成初始融合比例图像,所述初始融合比例图像中第五像素的颜色通道数值对应第三原始图像中第六像素的融合比例,所述第五像素为所述初始融合比例图像中的任一像素,所述第五像素在所述初始融合比例图像中的位置与所述第六像素在所述第三原始图像中的位置相对应,所述第三原始图像与所述第五像素的颜色通道符合所述对应关系;
确定所述初始融合比例图像中的目标区域为所述第一图像区域。
在一种可能的实现方式中,所述基于所述HDR图像,确定位于所述目标融合比例图像中的第二图像区域,包括:
基于所述操作和所述HDR图像,确定所述HDR图像中除所述目标区域以外的其他区域显示的内容;
基于所述内容,生成所述第二图像区域,所述第二图像区域在所述目标融合比例图像中的位置与所述HDR图像的其他区域的位置相对应。
在一种可能的实现方式中,所述第一原始图像中包括至少两个像素块,每个像素块包括四个像素,所述第一像素的颜色通道数值与所述第二像素的融合比例的对应关系包括:
所述第一像素的颜色通道数值为所述第二像素的融合比例;或者,
所述第一像素的颜色通道数值为所述第二像素所在像素块的四个像素的融合比例的平均值。
在一种可能的实现方式中,所述确定用于融合得到高动态范围HDR图像的多张原始图像中各个像素所对应的融合比例,包括:
基于多张所述原始图像所对应的曝光时间以及所述原始图像中的各个像素值,计算所述融合比例。
在一种可能的实现方式中,所述基于多张所述原始图像所对应的曝光时间以及所述原始图像中的各个像素值,计算所述融合比例,包括:
针对所述原始图像中的任一像素,基于所述像素的像素值与像素阈值的大小关系,确定所述像素所对应的权重;
针对多张所述原始图像的多组待处理像素,基于任一组待处理像素中各个像素所对应的权重以及曝光时间,计算所述待处理像素所对应的融合比例,所述待处理像素中多张所述原始图像的像素的位置相对应。
在一种可能的实现方式中,所述目标融合比例图像中包括至少两个像素块,每个像素块包括四个像素,所述四个像素的颜色通道包括第一通道、两个第二通道和第三通道,当多张所述原始图像包括第四原始图像、第五原始图像和第六原始图像时,所述确定所述原始图像与颜色通道的对应关系,包括:
确定所述第一通道与所述第四原始图像相对应,确定两个所述第二通道与所述第五原始图像相对应,确定所述第三通道与所述第六原始图像相对应。
在一种可能的实现方式中,所述目标融合比例图像中包括至少两个像素块,每个像素块包括四个像素,所述四个像素的颜色通道包括第一通道、两个第二通道和第三通道,当多张所述原始图像包括第七原始图像、第八原始图像时,所述确定所述原始图像与颜色通道的对应关系,包括:
确定所述第一通道和所述第三通道与所述第七原始图像相对应,确定两个所述第二通道与所述第八原始图像相对应。
在一种可能的实现方式中,所述方法还包括以下一种或多种:
当用户开启可视化功能时,显示所述目标融合比例图像;或者,
当用户关闭所述可视化功能时,显示所述HDR图像。
第二方面,本申请实施例提供了一种获取HDR图像的融合比例的装置,所述装置包括:
第一确定单元,用于确定用于融合得到高动态范围HDR图像的多张原始图像中各个像素所对应的融合比例;
第二确定单元,用于确定所述原始图像与颜色通道的对应关系,不同的原始图像对应的颜色通道不同;
第三确定单元,用于基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,所述目标融合比例图像中第一像素的颜色通道数值对应第一原始图像中第二像素的融合比例,所述第一像素在所述目标融合比例图像中的位置与所述第二像素在所述第一原始图像中的位置相对应,所述第一原始图像与所述第一像素的颜色通道符合所述对应关系。
第三方面,本申请实施例提供了一种获取HDR图像的融合比例的设备,所述设备包括:存储器以及处理器;
所述存储器用于存储相关的程序代码;
所述处理器用于调用所述程序代码,执行上述第一方面任意一种实现方式所述的获取HDR图像的融合比例的方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质用于存储计算机程序,所述计算机程序用于执行上述第一方面任意一种实现方式所述的获取HDR图像的融合比例的方法。
第五方面,本申请实施例提供了一种计算机程序产品,所述计算机程序产品包括计算机程序/指令,所述计算机程序/指令被处理器执行时实现上述第一方面任意一种实现方式所述的获取HDR图像的融合比例的方法。
由此可见,本申请实施例具有如下有益效果:
在本申请实施例的上述实现方式中,首先确定用于融合得到HDR图像的多张原始图像中各个像素所对应的融合比例。然后确定每张原始图像与颜色通道的对应关系,其中,颜色通道可以包括R通道、G通道、B通道,并且不同的原始图像对应的颜色通道不同。基于原始图像与颜色通道的对应关系,确定融合比例所对应的目标融合比例图像。其中,目标融合比例图像中第一像素的颜色通道数值对应第一原始图像中第二像素的融合比例,且第一原始图像与第一像素的颜色通道符合上述对应关系,第一像素在目标融合比例图像中的位置与第二像素在第一原始图像中的位置相对应。基于本申请实施例所提供的方法,通过确定融合HDR图像的多张原始图像分别与颜色通道的对应关系,针对每张HDR图像可以仅确定一张目标融合比例图像,通过这一张目标融合比例图像能够表示该多张原始图像的融合比例,从而可以减少存储HDR图像的融合比例所占用的内存空间。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见,下面描述中的附图仅仅是本申请中提供的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1为一种确定融合比例图像的示意图;
图2为本申请实施例提供的一种获取HDR图像的融合比例的方法流程图;
图3为本申请实施例提供的一种确定像素所对应的权重的方法流程图;
图4为本申请实施例提供的一种颜色通道的排列顺序的示意图;
图5为本申请实施例提供的一种确定像素所对应的融合比例的示意图;
图6为本申请实施例提供的一种确定待显示图像的方法流程图;
图7为本申请实施例提供的一种获取HDR图像的融合比例的系统示意图;
图8为本申请实施例提供的一种获取HDR图像的融合比例的装置示意图;
图9为本申请实施例提供的一种获取HDR图像的融合比例的设备示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整的描述,所描述的实施例仅为本申请示例性的实施方式,并非全部实现方式。本领域技术人员可以结合本申请的实施例,在不进行创造性劳动的情况下,获得其他的实施例,而这些实施例也在本申请的保护范围之内。
为了使图像提供更多的图像细节和动态范围,通常可以将同一场景的多张不同曝光的SDR图像按照不同的融合比例(即ratio)进行融合,得到一张HDR图像。为了明确现有技术存在的问题,以下公开现有技术确定融合比例图像的方法,参见图1所示,为一种确定融合比例图像的示意图。以两张SDR图像,即第一SDR图像和第二SDR图像融合得到HDR图像为例,针对两张SDR图像中处于相同位置的像素,即第一SDR图像中的像素1以及第二SDR图像中的像素2,可以确定像素1和像素2所对应的融合比例。然后将两个像素的像素值按照对应的融合比例进行融合,即将融合比例作为像素值的权重,计算两个像素值与对应融合比例的乘积之和,得到HDR图像中对应位置像素3的像素值。针对两张SDR图像中每组相同位置的像素进行上述计算,可以得到每张SDR图像中每个像素对应的融合比例,则可以针对每张SDR图像得到一张融合比例图像,分别为第一融合比例图像和第二融合比例图像,每张融合比例图像中包括对应SDR图像中各个像素对应的融合比例。
后续对融合得到的HDR图像的画质进行调参,或者在融合HDR图像出现问题进行问题溯源时,需要利用融合HDR图像的多张SDR图像所对应的融合比例。因此在融合HDR图像时,需要将多张SDR图像对应的融合比例图像存储在内存或者硬盘等存储设备中,以便进行问题溯源时通过该存储设备查看融合比例图像。上述方法虽然可以存储HDR图像的融合比例,但是每张HDR图像由至少两张SDR图像融合而成,每张SDR图像对应一张融合比例图像,因此需要为每张HDR图像存储至少两张融合比例图像。当有多张HDR图像时,会导致存储设备中存储较多的融合比例图像,占用较多的内存空间。
基于此,本申请实施例提供了一种获取HDR图像的融合比例的方法,以便减少存储HDR图像的融合比例所占用的内存空间。下面将结合说明书中的附图进行具体介绍。
参见图2所示,为本申请实施例提供的一种获取HDR图像的融合比例的方法流程图。
可选地,该方法可以通过图像处理设备执行。例如,该图像处理设备可以为半导体集成电路。
该方法可以包括以下步骤:
S201:确定用于融合得到HDR图像的多张原始图像中各个像素所对应的融合比例。
本申请实施例中的HDR图像可以由多张原始图像融合得到,例如,可以由不同曝光时间的两张原始图像或者三张原始图像融合得到HDR图像,使HDR图像保留高曝光下更多的色彩信息和低曝光下更丰富的暗部信息。其中,该原始图像可以为SDR图像。为了方便理解,下面首先对融合得到HDR图像的过程进行介绍。
图像处理设备获取多张不同曝光的原始图像,其中,原始图像可以为拍摄设备拍摄得到的,拍摄设备再将原始图像发送给图像处理设备。当图像处理设备获取多张原始图像后,可以获取每张原始图像所对应的曝光时间以及原始图像中每个像素的像素值,然后可以基于每张原始图像所对应的曝光时间以及原始图像中的各个像素值,计算多张原始图像中各个像素所对应的融合比例。
具体实现时,针对每张原始图像中的任一像素,基于该像素的像素值与像素阈值的大小关系,确定该像素所对应的权重。其中,像素阈值可以表示像素满足曝光要求的上限值,也就是说,当像素值大于像素阈值时,表明该像素值对应的像素过曝,在图像融合时可以丢弃该像素。当像素值小于或等于像素阈值时,表明该像素值对应的像素处于合理的曝光范围内,满足曝光要求,可以基于该像素进行图像融合。
具体实现过程可以参见图3所示,为本申请实施例提供的一种确定像素所对应的权重的方法流程图。
该方法可以包括以下步骤:
S301:获取原始图像中的像素所对应的像素值;
S302:判断该像素值是否大于像素阈值;
S303:如果该像素值大于像素阈值,则设置该像素所对应的权重为0;
当像素值大于像素阈值时,表明该像素值对应的像素过曝,可以通过设置该像素所对应的权重为0,在图像融合时丢弃该像素。
S304:如果该像素值小于或等于像素阈值,则设置该像素所对应的权重为1;
当像素值小于或等于像素阈值时,表明该像素值对应的像素处于合理的曝光范围内,可以通过设置该像素所对应的权重为1,基于该像素进行图像融合。
S305:判断是否遍历完该原始图像中的所有像素;
S306:如果遍历完该原始图像中的所有像素,则结束流程;
S307:如果没有遍历完该原始图像中的所有像素,则获取该原始图像中的下一个像素,并跳转执行步骤S301。
通过上述步骤,可以确定原始图像中每个像素所对应的权重。在进行图像融合时,可以将多张原始图像中处于对应位置的像素作为一组像素,例如图1所示的像素1和像素2,则可以得到多张原始图像的多组待处理像素。基于任一组待处理像素中各个像素所对应的权重以及曝光时间,计算待处理像素中各个像素所对应的融合比例。
在一种可能的实现方式中,可以利用曝光时间对各个像素所对应的权重进行归一化处理。也就是说,针对一组待处理像素中的任一像素,以该像素所对应的权重与曝光时间的乘积作为分子,以各个像素分别对应的权重与曝光时间的乘积之和作为分母,计算比值作为该像素对应的融合比例。
以两张原始图像融合得到HDR图像为例,像素1在第一张原始图像中的位置与像素2在第二张原始图像中的位置相对应,则像素1和像素2表示为一组待处理像素,其中,像素1在第一张原始图像中的位置与像素2在第二张原始图像中的位置相对应,指的是像素1在第一张原始图像中的像素坐标与像素2在第二张原始图像中的像素坐标相同。第一张原始图像中像素1对应的权重可以表示为w1,对应的曝光时间表示为t1。第二张原始图像中像素2所对应的权重表示为w2,对应的曝光时间表示为t2,则在计算像素1与像素2分别对应的融合比例时,可以通过以下公式得到:
其中,ratio1表示像素1对应的融合比例,ratio2表示像素2对应的融合比例。
同理,当利用三张原始图像融合得到HDR图像时,像素1在第一张原始图像中的位置与像素2在第二张原始图像中的位置、以及像素3在第三张原始图像中的位置相对应,则像素1、像素2、像素3表示为一组待处理像素。第一张原始图像中像素1对应的权重表示为w1,对应的曝光时间表示为t1。第二张原始图像中像素2对应的权重表示为w2,对应的曝光时间表示为t2。第三张原始图像中像素3对应的权重表示为w3,对应的曝光时间表示为t3。则在计算像素1、像素2、像素3分别对应的融合比例时,可以通过以下公式得到:
其中,ratio1表示像素1对应的融合比例,ratio2表示像素2对应的融合比例,ratio3表示像素3对应的融合比例。
通过上述方法计算得到多张原始图像中各个像素对应的融合比例后,针对多张原始图像的任一组待处理像素,将该组待处理像素中的多个像素值按照对应的融合比例进行融合,即计算多个像素值与对应的融合比例的乘积之和,则可以得到HDR图像中对应位置像素的像素值。针对每组待处理像素均通过上述方式计算得到融合后的像素值,从而得到融合后的HDR图像。其中,HDR图像与原始图像的大小相同,即包括相同个数的像素。
在一种可能的实现方式中,当多张原始图像中一组待处理像素所对应的各个融合比例均较小时,为了避免融合得到的HDR图像的像素值过小,图像过暗,可以按照相同比例增大一组待处理像素所对应的各个融合比例,以提高HDR图像的亮度。
可选地,当像素1所对应的融合比例ratio1为1,像素2和像素3所对应的融合比例ratio2、ratio3均为0时,将像素1、像素2、像素3对应的像素值按照融合比例进行融合,得到HDR图像中处于对应位置像素的像素值,则可以确定HDR图像的像素值为像素1的像素值。
S202:确定原始图像与颜色通道的对应关系,不同的原始图像对应的颜色通道不同。
可选地,原始图像以及融合得到的HDR图像可以为Bayer格式的图像,目标融合比例图像也可以为基于Bayer格式的图像得到的。Bayer格式的图像中包括至少两个像素块,每个像素块包括四个像素,四个像素的颜色通道可以包括第一通道、两个第二通道和第三通道。其中,四个像素的颜色通道可以表示为R通道、两个G通道以及B通道,这种情况下,第一通道为R通道、第二通道为G通道、第三通道为B通道。当然,在本申请中,第一通道、第二通道和第三通道还可为其他通道,例如第一通道为B通道、第二通道为G通道、第三通道为G通道。其中,本申请实施例中并不限定四个颜色通道的排列顺序。
参见图4所示,为本申请实施例提供的一种颜色通道的排列顺序的示意图。根据图4可知,四个颜色通道的排列顺序可以为R通道-G通道-G通道-B通道,或者为B通道-G通道-G通道-R通道,或者为G通道-R通道-B通道-G通道,或者为G通道-B通道-R通道-G通道。
为了生成HDR图像所对应的目标融合比例图像,可以预先建立原始图像与颜色通道的对应关系,且不同的原始图像对应的颜色通道不同,因此也可以确定每个颜色通道对应的原始图像中像素的融合比例,以便确定多张原始图像的融合比例所对应的目标融合比例图像。下面将结合不同的应用场景介绍如何确定原始图像与颜色通道的对应关系。为了方便说明,首先对第四原始图像、第五原始图像、第六原始图像、第七原始图像、第八原始图像进行介绍。
在一种可能的应用场景中,可以利用三张原始图像进行融合得到HDR图像,三张原始图像分别表示为第四原始图像、第五原始图像和第六原始图像。在确定原始图像与颜色通道的对应关系时,可以确定第一通道与第四原始图像相对应,确定两个第二通道与第五原始图像相对应,确定第三通道与第六原始图像相对应。需要说明的是,上述实施例所提供的第四原始图像、第五原始图像、第六原始图像与第一通道、第二通道、第三通道之间的对应关系仅为一种示例性的说明,并非仅限于上述实现方式,保证不同的原始图像对应的颜色通道不同即可。例如,也可以确定第四原始图像与两个第二通道相对应,或者确定第六原始图像与两个第二通道相对应,均不影响本申请实施例的实现,在此不再展开介绍。
在另一种可能的应用场景中,可以利用两张原始图像进行融合得到HDR图像,两张原始图像分别表示为第七原始图像和第八原始图像。在确定原始图像与颜色通道的对应关系时,可以确定第一通道和第三通道与第七原始图像相对应,确定两个第二通道与第八原始图像相对应。或者,也可以确定第一通道和第三通道与第八原始图像相对应,确定两个第二通道与第七原始图像相对应,均不影响本申请实施例的实现。
S203:基于原始图像与颜色通道的对应关系,确定融合比例所对应的目标融合比例图像。
当确定原始图像和颜色通道的对应关系后,则可以确定原始图像中各个像素的融合比例所对应的目标融合比例图像,也就是HDR图像所对应的目标融合比例图像,该目标融合比例图像可用于表示融合得到HDR图像的融合比例。
其中,目标融合比例图像可以表示为Bayer格式的图像,即包括第一通道、第二通道、第三通道,且目标融合比例图像与原始图像、HDR图像的大小相同。在确定目标融合比例图像时,可以理解为目标融合比例图像的多个像素块中颜色通道的排列顺序已确定,然后可以基于预先建立的原始图像与颜色通道的对应关系,确定目标融合比例图像。
针对目标融合比例图像中的第一像素,首先基于建立的原始图像与颜色通道的对应关系,确定与第一像素的颜色通道所对应的原始图像,即第一原始图像。然后基于第一像素在目标融合比例图像中的位置,确定在第一原始图像中处于对应位置的第二像素,从而基于第一原始图像中第二像素所对应的融合比例确定第一像素的颜色通道数值。也就是说,第一原始图像与目标融合比例图像中第一像素的颜色通道符合对应关系,并且第一像素在目标融合比例图像中的位置与第二像素在第一原始图像中的位置相对应。其中,上述实施例中所描述的“在第一原始图像中处于对应位置的第二像素”、“第一像素在目标融合比例图像中的位置与第二像素在第一原始图像中的位置相对应” ,表示第一像素在目标融合比例图像中的像素坐标与第二像素在第一原始图像中的像素坐标相同。
可选地,第一像素可以为用户对目标融合比例图像中感兴趣区域的像素,即用户可以指定目标融合比例图像中的目标区域,图像处理设备则根据用户指定的目标区域,显示目标区域的像素所对应的融合比例。
根据上述实施例可知,第一原始图像、目标融合比例图像均包括至少两个像素块,并且每个像素块中包括四个像素,在一种可能的实现方式中,当基于第一原始图像中第二像素所对应的融合比例确定第一像素的颜色通道数值时,可以确定第一像素的颜色通道数值即为第二像素的融合比例。通过该种方法,可以更快速地确定目标融合比例图像中每个像素所对应的融合比例,提高确定目标融合比例图像的速度。
可选地,也可以确定第一像素的颜色通道数值为第二像素所在像素块的四个像素的融合比例的平均值。也就是说,当在第一原始图像中确定第二像素后,可以确定第二像素所在的像素块,并获取该像素块的四个像素分别对应的融合比例,然后计算该四个融合比例的平均值,确定为第一像素的颜色通道数值。通过该种方法,可以更准确地确定目标融合比例图像中每个像素所对应的融合比例,提高目标融合比例图像的准确性。下面可以结合一种具体的应用场景进行介绍。
参见图5所示,为本申请实施例提供的一种确定像素所对应的融合比例的示意图。以目标融合比例图像中的任一像素块为例,在该应用场景中,第一像素的颜色通道与第一原始图像具有对应关系,且第一像素在目标融合比例图像中的位置与第二像素在第一原始图像中的位置相对应。可以将第一原始图像中第二像素所对应的融合比例表示为ratio1,第二像素所在像素块的其余三个像素所对应的融合比例表示为ratio2(即融合比例2)、ratio3(即融合比例3)、ratio4(即融合比例4)。则第一像素的颜色通道数值可以表示为ratio1,或者可以表示为(ratio1+ ratio2+ratio3+ratio4)/4。
在本申请实施例中,可以通过两种方式确定目标融合比例图像,一种为在HDR图像的基础上替换用户指定的目标区域,另一种为生成组成目标融合比例图像的图像区域,下面将针对不同的实现方式进行具体介绍。为了方便说明,首先对第五像素和第六像素进行介绍。
(一)在HDR图像的基础上替换用户指定的目标区域。
该方法可以通过步骤A1-A2实现:
A1:基于原始图像与颜色通道的对应关系,生成初始融合比例图像。
其中,初始融合比例图像可以表示为Bayer格式的图像,即包括第一通道、第二通道、第三通道,且初始融合比例图像与原始图像、HDR图像的大小相同。在生成初始融合比例图像时,可以理解为初始融合比例图像中像素块的第一通道、第二通道、第三通道的排列顺序已确定,然后可以基于预先建立的原始图像与颜色通道的对应关系,确定初始融合比例图像。
针对初始融合比例图像中的任一像素,即第五像素,基于预先建立的原始图像与颜色通道的对应关系,确定与第五像素的颜色通道所对应的原始图像,即第三原始图像。然后基于第五像素在初始融合比例图像中的位置,确定在第三原始图像中处于对应位置的第六像素,从而基于第三原始图像中第六像素所对应的融合比例确定第五像素的颜色通道数值。也就是说,第三原始图像与初始融合比例图像中第五像素的颜色通道符合对应关系,并且第五像素在初始融合比例图像中的位置与第六像素在第三原始图像中的位置相对应。通过该方法,可以确定初始融合比例图像中每个像素所对应的融合比例,也就得到了初始融合比例图像。
需要说明的是,基于第三原始图像中第六像素所对应的融合比例确定第五像素的颜色通道数值的原理,与上述实施例中基于第一原始图像中第二像素所对应的融合比例确定第一像素的颜色通道数值的原理相同,具体实现方式可以参见上述实施例,在此不再展开介绍。
A2:响应于用户指示目标区域的操作,利用初始融合比例图像中的目标区域,替换HDR图像中的目标区域,替换后的HDR图像为目标融合比例图像。
在融合得到HDR图像后,用户可以通过指示目标区域的操作,来获取HDR图像中目标区域的像素所对应的融合比例。其中,图像处理设备可以通过接收用户输入的像素坐标的方式来确定目标区域。例如,当用户指示的目标区域为矩形区域时,用户可以在图像处理设备中输入矩形区域四个顶点的像素坐标。图像处理设备基于四个顶点的像素坐标,确定矩形区域的位置和大小。或者,用户可以在图像处理设备中输入矩阵区域两个对角顶点的像素坐标,这样,图像处理设备可以基于两个对角顶点的像素坐标,确定矩阵区域的位置和大小。由于初始融合比例图像、原始图像、HDR图像的大小均相同,因此用户所指示的目标区域在初始融合比例图像、原始图像、HDR图像中的位置相互对应。
当用户指示目标区域后,图像处理设备可以获取初始融合比例图像中的目标区域所显示的内容,即目标区域的像素所对应的融合比例,然后利用初始融合比例图像中的目标区域所显示的内容,替换HDR图像中的目标区域,得到替换后的HDR图像即为目标融合比例图像。也就是说,目标融合比例图像中只有用户指示的目标区域显示的内容为像素所对应的融合比例,除了目标区域以外的其他区域显示的为HDR图像的内容。可选地,当用户指示的目标区域为整张图像时,目标融合比例图像即显示HDR图像中的各个像素所对应的融合比例。
通过上述实施例所提供的方法,针对多张原始图像融合得到的HDR图像,可以仅生成一张目标融合比例图像,相比于现有技术中HDR图像至少存储两张融合比例图像,本申请实施例存储HDR图像的目标融合比例图像可以减少占用的内存空间。并且本申请实施例还可以基于用户指示目标区域的操作,仅在用户感兴趣的区域内显示融合比例,方便用户实时获取HDR图像的融合比例,改善用户体验。
在上述实施例中介绍了第一种在HDR图像的基础上替换用户指定的目标区域确定目标融合比例图像的方式,下面将介绍第二种通过生成组成目标融合比例图像的图像区域确定目标融合比例图像的方式。
(二)生成组成目标融合比例图像的图像区域。
该方法可以通过步骤B1-B3实现:
B1:响应于用户指示目标区域的操作,基于原始图像和颜色通道的对应关系,确定目标融合比例图像中的第一图像区域。
在本实施例中,可以通过生成组成目标融合比例图像的两个图像区域来确定目标融合比例图像,即第一图像区域和第二图像区域。其中,第一图像区域在目标融合比例图像中的位置与目标区域指示的位置相对应,第二图像区域则表示目标融合比例图像中除目标区域指示的位置以外的其他区域。也就是说,第一图像区域即表示目标融合比例图像中用户感兴趣的区域,那么,目标融合比例图像中的第一像素即可以为第一图像区域中的像素。
其中,第一图像区域可以表示为Bayer格式的图像,即包括第一通道、第二通道、第三通道。在生成第一图像区域时,可以理解为第一图像区域的像素块中第一通道、第二通道、第三通道的排列顺序已确定,然后可以基于预先建立的原始图像与颜色通道的对应关系,确定第一图像区域。
针对第一图像区域中的任一像素,即第三像素,基于预先建立的原始图像与颜色通道的对应关系,确定与第三像素的颜色通道所对应的原始图像,即第二原始图像。然后基于第三像素在第一图像区域中的位置,确定在第二原始图像中处于对应位置的第四像素,从而基于第二原始图像中第四像素所对应的融合比例确定第三像素的颜色通道数值。也就是说,第二原始图像与第三像素的颜色通道符合对应关系,第三像素在第一图像区域中的位置与第四像素在第二原始图像中的位置相对应,并且第一图像区域中第三像素的颜色通道数值对应第二原始图像中第四像素的融合比例。
需要说明的是,基于第二原始图像中第四像素所对应的融合比例确定第三像素的颜色通道数值的原理,与上述实施例中基于第一原始图像中第二像素所对应的融合比例确定第一像素的颜色通道数值的原理相同,具体实现方式可以参见上述实施例,在此不再展开介绍。
在一种可能的实现方式中,可以通过以下方式确定第一图像区域,首先基于原始图像与颜色通道的对应关系,生成初始融合比例图像。其中,生成初始融合比例图像的原理与上述实施例中生成初始融合比例图像的原理相同。具体地,针对初始融合比例图像中的任一像素,即第五像素,基于预先建立的原始图像与颜色通道的对应关系,确定与第五像素的颜色通道所对应的原始图像,即第三原始图像。然后基于第五像素在初始融合比例图像中的位置,确定在第三原始图像中处于对应位置的第六像素,从而将第五像素的颜色通道数值确定为第三原始图像中第六像素所对应的融合比例。也就是说,第三原始图像与初始融合比例图像中第五像素的颜色通道符合对应关系,并且第五像素在初始融合比例图像中的位置与第六像素在第三原始图像中的位置相对应。当生成初始融合比例图像后,确定初始融合比例图像中的目标区域为第一图像区域,也就是说,根据初始融合比例图像中目标区域的像素所显示的内容(融合比例)确定第一图像区域。
B2:基于HDR图像,确定目标融合比例图像中的第二图像区域。
具体实现时,可以基于用户指示目标区域的操作,确定HDR图像中除目标区域以外的其他区域显示的内容,然后基于该其他区域显示的内容,生成第二图像区域。也就是说,第二图像区域显示的内容与HDR图像中对应位置的像素显示的内容相同,并且第二图像区域在目标融合比例图像中的位置与HDR图像的其他区域的位置相对应。
B3:基于第一图像区域和第二图像区域,确定目标融合比例图像。
当生成第一图像区域和第二图像区域后,利用第一图像区域和第二图像区域组成目标融合比例图像。
在本申请的上述实施例中,介绍了两种确定目标融合比例图像的实现方式,基于本申请实施例所提供的方法,通过确定融合HDR图像的多张原始图像与颜色通道的对应关系,针对每张HDR图像可以仅确定一张目标融合比例图像,从而可以减少存储HDR图像的融合比例所占用的内存空间。并且还可以基于用户的操作,仅在目标融合比例图像中用户感兴趣的区域内显示融合比例,在其他区域还可以显示HDR图像的内容,使得用户可以实时查看HDR图像的融合比例,改善用户体验。
在一种可能的实现方式中,还可以在图像处理设备中增加可视化功能,该可视化功能用于确定显示目标融合比例图像还是HDR图像。也就是,图像处理设备可以通过是否开启图像处理设备的可视化功能,确定是否获取目标融合比例图像,而图像处理设备是否开启图像处理设备的可视化功能,可根据接收到的用户操作确定。具体地,当图像处理设备接收到用户开启可视化功能的操作时,图像处理设备可以显示目标融合比例图像,即可以通过前端页面向用户展示目标融合比例图像;当图像处理设备接收到用户关闭可视化功能的操作时,图像处理设备不显示HDR图像所对应的融合比例,仅显示HDR图像,即通过前端页面向用户展示HDR图像。
参见图6所示,为本申请实施例提供的一种确定待显示图像的方法流程图。
S601:判断用户是否开启可视化功能;
S602:如果用户未开启可视化功能,则显示HDR图像,并结束流程;
S603:如果用户开启可视化功能,判断待显示图像的当前像素是否在用户指示的目标区域内;
S604:如果待显示图像的当前像素在用户指示的目标区域内,则显示该像素所对应的融合比例;
S605:如果待显示图像的当前像素不在用户指示的目标区域内,则显示HDR图像中与该像素对应像素的内容;
S606:判断是否遍历完待显示图像的所有像素;
S607:如果已经遍历完待显示图像的所有像素,则结束流程;
S608:如果没有遍历完待显示图像的所有像素,则获取待显示图像的下一个像素,并跳转执行步骤S603。
在图像处理设备接收到用户的开始可视化功能的操作时,图像处理设备所确定的待显示图像即为目标融合比例图像。
通过上述方法,图像处理设备可以通过是否接收到开启可视化功能的操作,实现显示HDR图像或者显示HDR图像所对应的目标融合比例图像,在可以为用户显示HDR图像的融合比例的同时,还增加了用户操作的可选性,改善用户体验。
基于上述方法实施例,本申请实施例还提供一种获取HDR图像的融合比例的系统。参见图7所示,为本申请实施例提供的一种获取HDR图像的融合比例的系统示意图。
该系统可以包括:融合模块701、可视化图像生成模块702以及选通模块703;
融合模块701,用于计算多张原始图像中各个像素所对应的融合比例;基于该融合比例对多张原始图像进行融合,得到HDR图像;
可视化图像生成模块702,用于确定原始图像与颜色通道的对应关系,生成初始融合比例图像;
选通模块703,用于当用户开始可视化功能时,基于初始融合比例图像的目标区域,确定待显示图像的目标区域;基于HDR图像中除目标区域外的其他区域,确定待显示图像中除目标区域外的其他区域。
其中,融合模块701、可视化图像生成模块702、选通模块703的具体实现原理可以参见上述方法实施例,在此不再赘述。
基于上述方法实施例和系统实施例,本申请实施例还提供一种获取HDR图像的融合比例的装置。参见图8所示,为本申请实施例提供的一种获取HDR图像的融合比例的装置示意图。
该装置800可以包括:
第一确定单元801,用于确定用于融合得到高动态范围HDR图像的多张原始图像中各个像素所对应的融合比例;
第二确定单元802,用于确定所述原始图像与颜色通道的对应关系,不同的原始图像对应的颜色通道不同;
第三确定单元803,用于基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,所述目标融合比例图像中第一像素的颜色通道数值对应第一原始图像中第二像素的融合比例,所述第一像素在所述目标融合比例图像中的位置与所述第二像素在所述第一原始图像中的位置相对应,所述第一原始图像与所述第一像素的颜色通道符合所述对应关系。
在一种可能的实现方式中,所述第三确定单元803,具体用于响应于用户指示目标区域的操作,基于所述对应关系,确定所述目标融合比例图像中的第一图像区域,所述第一图像区域在所述目标融合比例图像中的位置与所述目标区域指示的位置相对应,所述第一图像区域中第三像素的颜色通道数值对应第二原始图像中第四像素的融合比例,所述第三像素在所述第一图像区域中的位置与所述第四像素在所述第二原始图像中的位置相对应,所述第二原始图像与所述第三像素的颜色通道符合所述对应关系;基于所述HDR图像,确定所述目标融合比例图像中的第二图像区域,所述第二图像区域显示的内容与所述HDR图像中对应位置的像素显示的内容相同;基于所述第一图像区域和所述第二图像区域,确定所述目标融合比例图像,所述第一像素为所述第一图像区域中的像素。
在一种可能的实现方式中,所述第三确定单元803,具体用于基于所述对应关系,生成初始融合比例图像,所述初始融合比例图像中第五像素的颜色通道数值对应第三原始图像中第六像素的融合比例,所述第五像素为所述初始融合比例图像中的任一像素,所述第五像素在所述初始融合比例图像中的位置与所述第六像素在所述第三原始图像中的位置相对应,所述第三原始图像与所述第五像素的颜色通道符合所述对应关系;响应于用户指示目标区域的操作,利用所述初始融合比例图像中的目标区域,替换所述HDR图像中的目标区域,替换后的所述HDR图像为所述目标融合比例图像。
在一种可能的实现方式中,所述第三确定单元803,具体用于基于所述对应关系,生成初始融合比例图像,所述初始融合比例图像中第五像素的颜色通道数值对应第三原始图像中第六像素的融合比例,所述第五像素为所述初始融合比例图像中的任一像素,所述第五像素在所述初始融合比例图像中的位置与所述第六像素在所述第三原始图像中的位置相对应,所述第三原始图像与所述第五像素的颜色通道符合所述对应关系;确定所述初始融合比例图像中的目标区域为所述第一图像区域。
在一种可能的实现方式中,所述第三确定单元803,具体用于基于所述操作和所述HDR图像,确定所述HDR图像中除所述目标区域以外的其他区域显示的内容;基于所述内容,生成所述第二图像区域,所述第二图像区域在所述目标融合比例图像中的位置与所述HDR图像的其他区域的位置相对应。
在一种可能的实现方式中,所述第一原始图像中包括至少两个像素块,每个像素块包括四个像素,所述第一像素的颜色通道数值与所述第二像素的融合比例的对应关系包括:所述第一像素的颜色通道数值为所述第二像素的融合比例;或者,所述第一像素的颜色通道数值为所述第二像素所在像素块的四个像素的融合比例的平均值。
在一种可能的实现方式中,所述第一确定单元801,具体用于基于多张所述原始图像所对应的曝光时间以及所述原始图像中的各个像素值,计算所述融合比例。
在一种可能的实现方式中,所述第一确定单元801,具体用于针对所述原始图像中的任一像素,基于所述像素的像素值与像素阈值的大小关系,确定所述像素所对应的权重;针对多张所述原始图像的多组待处理像素,基于任一组待处理像素中各个像素所对应的权重以及曝光时间,计算所述待处理像素所对应的融合比例,所述待处理像素中多张所述原始图像的像素的位置相对应。
在一种可能的实现方式中,所述目标融合比例图像中包括至少两个像素块,每个像素块包括四个像素,所述四个像素的颜色通道包括第一通道、两个第二通道和第三通道,当多张所述原始图像包括第四原始图像、第五原始图像和第六原始图像时,所述第二确定单元802,具体用于确定所述第一通道与所述第四原始图像相对应,确定两个所述第二通道与所述第五原始图像相对应,确定所述第三通道与所述第六原始图像相对应。
在一种可能的实现方式中,所述目标融合比例图像中包括至少两个像素块,每个像素块包括四个像素,所述四个像素的颜色通道包括第一通道、两个第二通道和第三通道,当多张所述原始图像包括第七原始图像、第八原始图像时,所述第二确定单元802,具体用于确定所述第一通道和所述第三通道与所述第七原始图像相对应,确定两个所述第二通道与所述第八原始图像相对应。
在一种可能的实现方式中,所述方法还包括显示单元,用于当用户开启可视化功能时,显示所述目标融合比例图像;或者,当用户关闭所述可视化功能时,显示所述HDR图像。
基于上述方法实施例和装置实施例,本申请实施例还提供一种获取HDR图像的融合比例的设备。下面将结合附图进行介绍。
参见图9,图9为本申请实施例提供的一种获取HDR图像的融合比例的设备示意图。
该设备900包括:存储器901以及处理器902;
所述存储器901用于存储相关的程序代码;
所述处理器902用于调用所述程序代码,执行上述方法实施例所述的获取HDR图像的融合比例的方法。
此外,本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质用于存储计算机程序,所述计算机程序用于执行上述方法实施例所述的获取HDR图像的融合比例的方法。
本申请实施例还提供一种计算机程序产品,所述计算机程序产品包括计算机程序/指令,所述计算机程序/指令被处理器执行时实现上述第一方面任意一种实现方式所述的获取HDR图像的融合比例的方法。
需要说明的是,本申请实施例中所提供的上位手段中的技术特征对于本领域技术人员来说是清楚的,上位手段要解决的问题也是清楚的,如何获得相应特征的手段,可以由本领域技术人员根据具体实现需求进行选择,本申请提供的手段不应视为对方案的限制或者是作为唯一实现手段。
需要说明的是,本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。尤其,对于系统或装置实施例而言,由于其基本类似于方法实施例,所以描述得比较简单,相关部分参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中作为分离部件说明的单元或模块可以是或者也可以不是物理上分开的,作为单元或模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络单元上,可以根据实际需要选择其中的部分或者全部单元或模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
附图中的流程图和框图,图示了按照本申请各种实施例的方法、装置和设备等可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
应当理解,在本申请中,“至少一个(项)”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:只存在A,只存在B以及同时存在A和B三种情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b或c中的至少一项(个),可以表示:a,b,c,“a和b”,“a和c”,“b和c”,或“a和b和c”,其中a,b,c可以是单个,也可以是多个。
还需要说明的是,在本申请中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
结合本申请中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本申请中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本申请所示的这些实施例,而是要符合与本申请所公开的原理和新颖特点相一致的最宽的范围。

Claims (12)

1.一种获取HDR图像的融合比例的方法,其特征在于,所述方法包括:
确定用于融合得到高动态范围HDR图像的多张原始图像中各个像素所对应的融合比例;
确定所述原始图像与颜色通道的对应关系,不同的原始图像对应的颜色通道不同;
基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,所述目标融合比例图像中第一像素的颜色通道数值对应第一原始图像中第二像素的融合比例,所述第一像素在所述目标融合比例图像中的位置与所述第二像素在所述第一原始图像中的位置相对应,所述第一原始图像与所述第一像素的颜色通道符合所述对应关系;
其中,所述目标融合比例图像中包括至少两个像素块,每个像素块包括四个像素,所述四个像素的颜色通道包括第一通道、两个第二通道和第三通道;
所述确定所述原始图像与颜色通道的对应关系,包括:
当多张所述原始图像包括第四原始图像、第五原始图像和第六原始图像时,确定所述第一通道与所述第四原始图像相对应,确定两个所述第二通道与所述第五原始图像相对应,确定所述第三通道与所述第六原始图像相对应;
或者,当多张所述原始图像包括第七原始图像和第八原始图像时,确定所述第一通道和所述第三通道与所述第七原始图像相对应,确定两个所述第二通道与所述第八原始图像相对应。
2.根据权利要求1所述的方法,其特征在于,所述基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,包括:
响应于用户指示目标区域的操作,基于所述对应关系,确定所述目标融合比例图像中的第一图像区域,所述第一图像区域在所述目标融合比例图像中的位置与所述目标区域指示的位置相对应,所述第一图像区域中第三像素的颜色通道数值对应第二原始图像中第四像素的融合比例,所述第三像素在所述第一图像区域中的位置与所述第四像素在所述第二原始图像中的位置相对应,所述第二原始图像与所述第三像素的颜色通道符合所述对应关系;
基于所述HDR图像,确定所述目标融合比例图像中的第二图像区域,所述第二图像区域显示的内容与所述HDR图像中对应位置的像素显示的内容相同;
基于所述第一图像区域和所述第二图像区域,确定所述目标融合比例图像,所述第一像素为所述第一图像区域中的像素。
3.根据权利要求1所述的方法,其特征在于,所述基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,包括:
基于所述对应关系,生成初始融合比例图像,所述初始融合比例图像中第五像素的颜色通道数值对应第三原始图像中第六像素的融合比例,所述第五像素为所述初始融合比例图像中的任一像素,所述第五像素在所述初始融合比例图像中的位置与所述第六像素在所述第三原始图像中的位置相对应,所述第三原始图像与所述第五像素的颜色通道符合所述对应关系;
响应于用户指示目标区域的操作,利用所述初始融合比例图像中的目标区域,替换所述HDR图像中的目标区域,替换后的所述HDR图像为所述目标融合比例图像。
4.根据权利要求2所述的方法,其特征在于,所述响应于用户指示目标区域的操作,基于所述对应关系,确定所述目标融合比例图像中的第一图像区域,包括:
基于所述对应关系,生成初始融合比例图像,所述初始融合比例图像中第五像素的颜色通道数值对应第三原始图像中第六像素的融合比例,所述第五像素为所述初始融合比例图像中的任一像素,所述第五像素在所述初始融合比例图像中的位置与所述第六像素在所述第三原始图像中的位置相对应,所述第三原始图像与所述第五像素的颜色通道符合所述对应关系;
确定所述初始融合比例图像中的目标区域为所述第一图像区域。
5.根据权利要求2所述的方法,其特征在于,所述基于所述HDR图像,确定位于所述目标融合比例图像中的第二图像区域,包括:
基于所述操作和所述HDR图像,确定所述HDR图像中除所述目标区域以外的其他区域显示的内容;
基于所述内容,生成所述第二图像区域,所述第二图像区域在所述目标融合比例图像中的位置与所述HDR图像的其他区域的位置相对应。
6.根据权利要求1所述的方法,其特征在于,所述第一原始图像中包括至少两个像素块,每个像素块包括四个像素,所述第一像素的颜色通道数值与所述第二像素的融合比例的对应关系包括:
所述第一像素的颜色通道数值为所述第二像素的融合比例;或者,
所述第一像素的颜色通道数值为所述第二像素所在像素块的四个像素的融合比例的平均值。
7.根据权利要求1所述的方法,其特征在于,所述确定用于融合得到高动态范围HDR图像的多张原始图像中各个像素所对应的融合比例,包括:
基于多张所述原始图像所对应的曝光时间以及所述原始图像中的各个像素值,计算所述融合比例。
8.根据权利要求7所述的方法,其特征在于,所述基于多张所述原始图像所对应的曝光时间以及所述原始图像中的各个像素值,计算所述融合比例,包括:
针对所述原始图像中的任一像素,基于所述像素的像素值与像素阈值的大小关系,确定所述像素所对应的权重;
针对多张所述原始图像的多组待处理像素,基于任一组待处理像素中各个像素所对应的权重以及曝光时间,计算所述待处理像素所对应的融合比例,所述待处理像素中多张所述原始图像的像素的位置相对应。
9.根据权利要求1至8任一项所述的方法,其特征在于,所述方法还包括以下一种或多种:
当用户开启可视化功能时,显示所述目标融合比例图像;或者,
当用户关闭所述可视化功能时,显示所述HDR图像。
10.一种获取HDR图像的融合比例的装置,其特征在于,所述装置包括:
第一确定单元,用于确定用于融合得到高动态范围HDR图像的多张原始图像中各个像素所对应的融合比例;
第二确定单元,用于确定所述原始图像与颜色通道的对应关系,不同的原始图像对应的颜色通道不同;
第三确定单元,用于基于所述对应关系,确定所述融合比例所对应的目标融合比例图像,所述目标融合比例图像中第一像素的颜色通道数值对应第一原始图像中第二像素的融合比例,所述第一像素在所述目标融合比例图像中的位置与所述第二像素在所述第一原始图像中的位置相对应,所述第一原始图像与所述第一像素的颜色通道符合所述对应关系;
其中,所述目标融合比例图像中包括至少两个像素块,每个像素块包括四个像素,所述四个像素的颜色通道包括第一通道、两个第二通道和第三通道;
所述第二确定单元具体用于,当多张所述原始图像包括第四原始图像、第五原始图像和第六原始图像时,确定所述第一通道与所述第四原始图像相对应,确定两个所述第二通道与所述第五原始图像相对应,确定所述第三通道与所述第六原始图像相对应;或者,当多张所述原始图像包括第七原始图像和第八原始图像时,确定所述第一通道和所述第三通道与所述第七原始图像相对应,确定两个所述第二通道与所述第八原始图像相对应。
11.一种获取HDR图像的融合比例的设备,其特征在于,所述设备包括:存储器以及处理器;
所述存储器用于存储相关的程序代码;
所述处理器用于调用所述程序代码,执行权利要求1至9任一项所述的获取HDR图像的融合比例的方法。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储计算机程序,所述计算机程序用于执行权利要求1至9任一项所述的获取HDR图像的融合比例的方法。
CN202411080600.3A 2024-08-08 2024-08-08 获取hdr图像的融合比例的方法、装置、设备及介质 Active CN118628368B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202411080600.3A CN118628368B (zh) 2024-08-08 2024-08-08 获取hdr图像的融合比例的方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202411080600.3A CN118628368B (zh) 2024-08-08 2024-08-08 获取hdr图像的融合比例的方法、装置、设备及介质

Publications (2)

Publication Number Publication Date
CN118628368A CN118628368A (zh) 2024-09-10
CN118628368B true CN118628368B (zh) 2024-11-08

Family

ID=92596191

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202411080600.3A Active CN118628368B (zh) 2024-08-08 2024-08-08 获取hdr图像的融合比例的方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN118628368B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107635102A (zh) * 2017-10-30 2018-01-26 广东欧珀移动通信有限公司 高动态范围图像曝光补偿值获取方法和装置
CN107888840A (zh) * 2017-10-30 2018-04-06 广东欧珀移动通信有限公司 高动态范围图像获取方法和装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101394487B (zh) * 2008-10-27 2011-09-14 华为技术有限公司 一种合成图像的方法与系统
CN111462031A (zh) * 2020-03-27 2020-07-28 Oppo广东移动通信有限公司 一种多帧hdr图像处理方法、装置、存储介质及电子设备
CN112418279B (zh) * 2020-11-05 2025-01-17 北京迈格威科技有限公司 图像融合方法、装置、电子设备及可读存储介质
CN113012081B (zh) * 2021-01-28 2024-10-11 北京迈格威科技有限公司 图像处理方法、装置和电子系统
CN116645274A (zh) * 2022-02-15 2023-08-25 Tcl科技集团股份有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN114841904B (zh) * 2022-03-03 2024-10-22 浙江大华技术股份有限公司 图像融合方法、电子设备及存储装置
CN116797504A (zh) * 2023-06-02 2023-09-22 成都西纬科技有限公司 图像融合方法、电子设备及存储介质
CN118314030A (zh) * 2024-04-11 2024-07-09 Oppo广东移动通信有限公司 图像融合方法、装置、电子设备和存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107635102A (zh) * 2017-10-30 2018-01-26 广东欧珀移动通信有限公司 高动态范围图像曝光补偿值获取方法和装置
CN107888840A (zh) * 2017-10-30 2018-04-06 广东欧珀移动通信有限公司 高动态范围图像获取方法和装置

Also Published As

Publication number Publication date
CN118628368A (zh) 2024-09-10

Similar Documents

Publication Publication Date Title
CN113992861B (zh) 一种图像处理方法及图像处理装置
US9412151B2 (en) Image processing apparatus and image processing method
US9036936B2 (en) Image processing device, image processing method, and image processing program
CN104580922B (zh) 一种拍摄补光的控制方法和装置
US9332195B2 (en) Image processing apparatus, imaging apparatus, and image processing method
CN109598673A (zh) 图像拼接方法、装置、终端及计算机可读存储介质
US10306210B2 (en) Image processing apparatus and image capturing apparatus
TWI777098B (zh) 一種圖像處理方法及裝置、電子設備、儲存介質
US10049432B2 (en) Image processing apparatus, image processing method, program and recording medium
US11076140B2 (en) Information processing apparatus and method of controlling the same
JP2019003428A (ja) 画像処理装置、画像処理方法及びプログラム
CN112288664B (zh) 高动态范围图像的融合方法、装置和电子设备
TWI555384B (zh) A content processing device, a content processing method, and a recording medium
CN118628368B (zh) 获取hdr图像的融合比例的方法、装置、设备及介质
KR101437898B1 (ko) 단일 영상을 이용한 hdr 영상 생성 장치 및 방법
WO2024093763A1 (zh) 全景图像处理方法、装置、计算机设备、介质和程序产品
CN117082343A (zh) 一种针对目标物体的自动聚焦方法、系统及装置
JP2016191773A (ja) 投影システム、プロジェクター装置、撮像装置、および、プログラム
JP2022126588A (ja) 撮像装置、撮像装置の制御方法、及びプログラム
JP6451300B2 (ja) 画像処理装置、撮像装置、画像処理方法、及びプログラム
JP6320165B2 (ja) 画像処理装置及びその制御方法、並びにプログラム
JP2017162313A (ja) 画像処理装置、画像処理方法、及びプログラム
CN104103034A (zh) 超分辨率图像处理方法及其图像处理装置
CN118840520B (zh) 相机畸变仿真方法、装置及电子设备
TW201439979A (zh) 超解析度影像處理方法及其影像處理裝置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant