CN106454288B - 控制方法、控制装置、成像装置及电子装置 - Google Patents
控制方法、控制装置、成像装置及电子装置 Download PDFInfo
- Publication number
- CN106454288B CN106454288B CN201611078878.2A CN201611078878A CN106454288B CN 106454288 B CN106454288 B CN 106454288B CN 201611078878 A CN201611078878 A CN 201611078878A CN 106454288 B CN106454288 B CN 106454288B
- Authority
- CN
- China
- Prior art keywords
- image
- pixel
- color
- unit
- merged
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
- H04N1/3871—Composing, repositioning or otherwise geometrically modifying originals the composed originals being of different kinds, e.g. low- and high-resolution originals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
- H04N25/778—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising amplifiers shared between a plurality of pixels, i.e. at least one part of the amplifier must be on the sensor array itself
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/74—Circuits for processing colour signals for obtaining special effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种控制方法,用于控制电子装置。控制方法包括以下步骤:控制图像传感器输出合并图像并旋转成像装置以输出色块图像;将色块图像转化成仿原图像;根据合并图像识别人像区域;将人像区域转化成合并真彩图像;将仿原图像转化成仿原真彩图像;和将合并真彩图像合并至仿原真彩图像。本发明实施方式的控制方法通过旋转成像装置以输出不同场景下的合并图像和色块图像,然后识别合并图像中的人像区域,将经过处理后的人像区域和色块图像进行合成,实现了将人像放入背景图片中的效果,提高了图像的信噪比、分辨率和解析度,且放入的位置可以手动调节,提升了用户体验。本发明还公开了一种控制装置、成像装置及电子装置。
Description
技术领域
本发明涉及图像处理技术,特别涉及一种控制方法、控制装置、成像装置及电子装置。
背景技术
现有的一种图像传感器包括感光像素单元阵列和设置在感光像素单元阵列上的滤光片单元阵列,每个滤光片单元阵列覆盖对应一个感光像素单元,每个感光像素单元包括多个感光像素。工作时,可以控制图像传感器曝光输出合并图像,合并图像可以通过控制方法转化成合并真彩图像并保存下来。合并图像包括合并像素阵列,同一感光像素单元的多个感光像素合并输出作为对应的合并像素。如此,可以提高合并图像的信噪比,然而,合并图像的解析度降低。当然,也可以控制图像传感器曝光输出高像素的色块图像,色块图像包括原始像素阵列,每个感光像素对应一个原始像素。然而,由于同一滤光片单元对应的多个原始像素颜色相同,同样无法提高色块图像的解析度。因此,需要通过插值计算的方式将高像素色块图像转化成高像素的仿原图像,仿原图像可以包括呈拜耳阵列排布的仿原像素。仿原图像可以通过控制方法转化成仿原真彩图像并保存下来。插值计算可以提高真彩图像的清晰度,然而耗费资源且耗时,导致拍摄时间加长,另一方面,实际应用时,用户在自拍的同时很难进行风景取景,或者拍摄出来的效果不佳,降低了用户体验。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一。为此,本发明需要提供一种控制方法、控制装置、成像装置及电子装置。
本发明实施方式的控制方法,用于控制电子装置,所述电子装置包括成像装置和触摸屏,所述成像装置包括图像传感器,所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列,每个所述滤光片单元阵列覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制方法包括以下步骤:
控制所述图像传感器输出合并图像并旋转所述成像装置以输出色块图像,所述合并图像包括合并像素阵列,同一所述感光像素单元的多个感光像素合并输出作为一个所述合并像素,所述色块图像包括预定阵列排布的图像像素单元,所述图像像素单元包括多个原始像素,每个所述感光像素对应一个所述原始像素;
将所述色块图像转化成仿原图像,所述仿原图像包括阵列排布的仿原像素,所述仿原像素包括当前像素,所述原始像素包括与所述当前像素位置对应的关联像素,所述将所述色块图像转化成仿原图像的步骤包括以下步骤:
判断所述当前像素的颜色与所述关联像素的颜色是否相同;
在所述当前像素的颜色与所述关联像素的颜色相同时,将所述关联像素的像素值作为所述当前像素的像素值;和
在所述当前像素的颜色与所述关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值,所述图像像素单元包括所述关联像素单元,所述关联像素单元的颜色与所述当前像素相同且与所述关联像素相邻;
根据所述合并图像识别人像区域;
将所述人像区域转化成合并真彩图像;
将所述仿原图像转化成仿原真彩图像;和
将所述合并真彩图像合并至所述仿原真彩图像。
在某些实施方式中,所述仿原真彩图像包括与所述人像区域对应的预定区域,所述将所述合并真彩图像合并至所述仿原真彩图像的步骤,包括以下步骤:
将所述合并真彩图像移动至所述预定区域。
在某些实施方式中,所述仿原真彩图像包括预定区域,所述将所述合并真彩图像合并至所述仿原真彩图像的步骤,包括以下步骤:
根据用户输入确定所述预定区域;
将所述合并真彩图像移动至所述预定区域。
在某些实施方式中,所述预定阵列包括拜耳阵列。
在某些实施方式中,所述图像像素单元包括2*2阵列的所述原始像素。
在某些实施方式中,所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤,包括以下步骤:
计算所述关联像素各个方向上的渐变量;
计算所述关联像素各个方向上的权重;和
根据所述渐变量及所述权重计算所述当前像素的像素值。
在某些实施方式中,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前,包括以下步骤:
对所述色块图像做白平衡补偿;
所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤后包括以下步骤:
对所述仿原图像做白平衡补偿还原。
在某些实施方式中,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前,包括以下步骤:
对所述色块图像做坏点补偿。
在某些实施方式中,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前,包括以下步骤:
对所述色块图像做串扰补偿。
在某些实施方式中,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤后,包括以下步骤:
对所述仿原图像进行镜片形状校正、去马赛克、降噪和边缘锐化处理。
在某些实施方式中,所述将所述人像区域转化成合并真彩图像的步骤,包括以下步骤:
利用第二插值算法将所述人像区域转化成与所述仿原图像对应的还原图像,所述第二插值算法的复杂度小于所述第一插值算法;和
将所述还原图像转化成所述合并真彩图像。
本发明实施方式的控制装置,用于控制电子装置,所述电子装置包括成像装置和触摸屏,所述成像装置包括图像传感器,所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列,每个所述滤光片单元阵列覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制装置包括:
控制模块,所述控制模块用于控制所述图像传感器输出合并图像并旋转所述成像装置以输出色块图像,所述合并图像包括合并像素阵列,同一所述感光像素单元的多个感光像素合并输出作为一个所述合并像素,所述色块图像包括预定阵列排布的图像像素单元,所述图像像素单元包括多个原始像素,每个所述感光像素对应一个所述原始像素;
第一转化模块,所述第一转化模块用于将所述色块图像转化成仿原图像,所述仿原图像包括阵列排布的仿原像素,所述仿原像素包括当前像素,所述原始像素包括与所述当前像素位置对应的关联像素;
所述第一转化模块包括:
判断单元,所述判断单元用于判断所述当前像素的颜色与所述关联像素的颜色是否相同;
第一计算单元,所述第一计算单元用于在所述当前像素的颜色与所述关联像素的颜色相同时,将所述关联像素的像素值作为所述当前像素的像素值;和
第二计算单元,所述第二计算单元用于在所述当前像素的颜色与所述关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值,所述图像像素单元包括所述关联像素单元,所述关联像素单元的颜色与所述当前像素相同且与所述关联像素相邻;
识别模块,所述识别模块用于根据所述合并图像识别人像区域;
第二转化模块,所述第二转化模块用于将所述人像区域转化成合并真彩图像;
第三转化模块,所述第三转化模块用于将所述仿原图像转化成仿原真彩图像;和
合并模块,所述合并模块用于将所述合并真彩图像合并至所述仿原真彩图像。
在某些实施方式中,所述仿原真彩图像包括与所述人像区域对应的预定区域,所述合并模块包括:
第一合并单元,所述第一合并单元用于将所述合并真彩图像移动至所述预定区域。
在某些实施方式中,所述仿原真彩图像包括预定区域,所述合并模块包括:
选定单元,所述选定单元用于根据用户输入确定所述预定区域;
第二合并单元,所述第二合并单元用于将所述合并真彩图像移动至所述预定区域。
在某些实施方式中,所述预定阵列包括拜耳阵列。
在某些实施方式中,所述图像像素单元包括2*2阵列的所述原始像素。
在某些实施方式中,所述第二计算单元包括:
第一计算子单元,所述第一计算子单元用于计算所述关联像素各个方向上的渐变量;
第二计算子单元,所述第二计算子单元用于计算所述关联像素各个方向上的权重;和
第三计算子单元,所述第三计算子单元用于根据所述渐变量及所述权重计算所述当前像素的像素值。
在某些实施方式中,所述转化模块包括:
白平衡补偿单元,所述白平衡补偿单元用于对所述色块图像做白平衡补偿;
白平衡补偿还原单元,所述白平衡补偿还原单元用于对所述仿原图像做白平衡补偿还原。
在某些实施方式中,所述转化模块包括:
坏点补偿单元,所述坏点补偿单元用于对所述色块图像做坏点补偿。
在某些实施方式中,所述转化模块包括:
串扰补偿单元,所述串扰补偿单元用于对所述色块图像做串扰补偿。
在某些实施方式中,所述转化模块包括:
处理单元,所述处理单元用于对所述仿原图像进行镜片形状校正、去马赛克、降噪和边缘锐化处理。
在某些实施方式中,所述第二转化模块包括:
第一转化单元,所述第一转化单元用于利用第二插值算法将所述人像区域转化成与所述仿原图像对应的还原图像,所述第二插值算法的复杂度小于所述第一插值算法;和
第二转化单元,所述第二转化单元用于将所述还原图像转化成所述合并真彩图像。
本发明实施方式的成像装置包括上述的控制装置和图像传感器,所述图像传感器用于产生所述色块图像。
本发明实施方式的电子装置包括上述的成像装置触摸屏。
在某些实施方式中,所述电子装置包括手机或平板电脑。
在某些实施方式中,所述成像装置包括前置摄像头、后置摄像头或旋转摄像头。
本发明实施方式的控制方法、控制装置、成像装置及电子装置,通过旋转成像装置以输出不同场景下的合并图像和色块图像,然后识别合并图像中的人像区域,将经过处理后的人像区域和色块图像进行合成,实现了将人像放入背景图片中的效果,提高了图像的信噪比、分辨率和解析度,且放入的位置可以手动调节,提升了用户体验。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点可以从结合下面附图对实施方式的描述中将变得明显和容易理解,其中:
图1是本发明实施方式的控制方法的流程示意图;
图2是本发明实施方式的控制方法的另一个流程示意图;
图3是本发明实施方式的控制方法的状态示意图;
图4是本发明实施方式的控制装置的功能模块图;
图5是本发明某些实施方式的控制方法流程的示意图;
图6是本发明某些实施方式的控制装置的功能模块图;
图7是本发明某些实施方式的控制方法流程的示意图;
图8是本发明某些实施方式的控制装置的功能模块图;
图9是本发明实施方式的图像传感器的模块示意图;
图10是本发明实施方式的图像传感器的电路示意图;
图11是本发明实施方式的滤光片单元的示意图;
图12是本发明实施方式的图像传感器的结构示意图;
图13是本发明实施方式的合并图像状态示意图;
图14是本发明实施方式的色块图像的状态示意图;
图15是本发明实施方式的控制方法的状态示意图;
图16是本发明某些实施方式的控制方法的流程示意图;
图17是本发明某些实施方式的第二计算模块的功能模块示意图;
图18是本发明某些实施方式的控制方法的流程示意图;
图19是本发明某些实施方式的控制装置的功能模块示意图;
图20是本发明某些实施方式的色块图像的图像像素单元示意图;
图21是本发明某些实施方式的控制方法的流程示意图;
图22是本发明某些实施方式的控制装置的功能模块示意图;
图23是本发明某些实施方式的控制方法的流程示意图;
图24是本发明某些实施方式的控制装置的功能模块示意图;
图25是本发明某些实施方式的控制方法的状态示意图;
图26是本发明实施方式的成像装置的功能模块示意图;
图27是本发明实施方式的电子装置的功能模块示意图;
主要元件及符号说明:
控制装置100、控制模块110、第一转化模块120、判断单元121、第一计算单元122、第二计算单元123、第一计算子单元1231、第二计算子单元1232、第三计算子单元1233、白平衡补偿单元124、白平衡补偿还原单元125、坏点补偿单元126、串扰补偿单元127、处理单元128、识别模块130、第二转化模块140、第一转化单元141、第二转化单元142、第三转化模块150、合并模块160、第一合并单元161、选定单元162、第二合并单元163;
图像传感器200、感光像素单元阵列210、感光像素单元210a、感光像素212、感光像素子单元2120、感光器件2121、传输管2122、源极跟随器2123、模数转换器2124、加法器213、滤光片单元阵列220、滤光片单元220a;
成像装置1000;
触摸屏2000;
电子装置10000。
具体实施方式
下面详细描述本发明的实施方式,实施方式的示例在附图中示出,其中,相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
在本发明的实施方式的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明的实施方式和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的实施方式的限制。此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的实施方式的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本发明的实施方式的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接或可以相互通讯;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明的实施方式中的具体含义。
在本发明的实施方式中,除非另有明确的规定和限定,第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接触,也可以包括第一和第二特征不是直接接触而是通过它们之间的另外的特征接触。而且,第一特征在第二特征“之上”、“上方”和“上面”包括第一特征在第二特征正上方和斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方,或仅仅表示第一特征水平高度小于第二特征。
下文的公开提供了许多不同的实施方式或例子用来实现本发明的实施方式的不同结构。为了简化本发明的实施方式的公开,下文中对特定例子的部件和设置进行描述。当然,它们仅仅为示例,并且目的不在于限制本发明。此外,本发明的实施方式可以在不同例子中重复参考数字和/或参考字母,这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施方式和/或设置之间的关系。此外,本发明的实施方式提供了的各种特定的工艺和材料的例子,但是本领域普通技术人员可以意识到其他工艺的应用和/或其他材料的使用。
请参阅图1至图3,本发明实施方式的控制方法用于控制电子装置10000。电子装置10000包括成像装置1000和触摸屏2000。成像装置1000包括图像传感器200。图像传感器200包括感光像素单元阵列210和设置在感光像素单元阵列210上的滤光片单元阵列220。每个滤光片单元阵列220覆盖对应一个感光像素单元210a。每个感光像素单元210a包括多个感光像素212。控制方法包括以下步骤:
步骤S10:控制图像传感器200输出合并图像并旋转成像装置1000以输出色块图像,合并图像包括合并像素阵列,同一感光像素单元210a的多个感光像素212合并输出作为一个合并像素,色块图像包括预定阵列排布的图像像素单元。图像像素单元包括多个原始像素。每个感光像素212对应一个原始像素。
步骤S20:将色块图像转化成仿原图像,仿原图像包括阵列排布的仿原像素,仿原像素包括当前像素,原始像素包括与当前像素位置对应的关联像素;
步骤S30:根据合并图像识别人像区域;
步骤S40:将人像区域转化成合并真彩图像;
步骤S50:将仿原图像转化成仿原真彩图像;和
步骤S60:将合并真彩图像合并至仿原真彩图像。
具体地,步骤S20包括以下步骤:
步骤S21:判断当前像素的颜色与关联像素的颜色是否相同;
步骤S22:在当前像素的颜色与关联像素的颜色相同时,将关联像素的像素值作为当前像素的像素值;和
步骤S23:在当前像素的颜色与关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算当前像素的像素值,图像像素单元包括关联像素单元,关联像素单元的颜色与当前像素相同且与关联像素相邻。
请参阅图4,本发明实施方式的控制装置100用于控制电子装置10000,电子装置10000包括成像装置1000和触摸屏2000,成像装置1000包括图像传感器200。图像传感器200包括感光像素单元阵列210和设置在感光像素单元阵列210上的滤光片单元阵列220。每个滤光片单元阵列220覆盖对应一个感光像素单元210a。每个感光像素单元210a包括多个感光像素212。控制装置100包括控制模块110、第一转化模块120、识别模块130、第二转化模块140、第三转化模块150和合并模块160。第一转化模块120包括判断单元121、第一计算单元122和第二计算单元123。
本发明实施方式的控制方法可以由本发明实施方式的控制装置100实现。例如,步骤S10可以由控制模块110实现,步骤S20可以由第一转化模块120实现,步骤S21可以由判断单元121实现,步骤S22可以由第一计算单元122实现,步骤S23可以由第二计算单元123实现,步骤S30可以由识别模块130实现,步骤S40可以由第二转化模块140实现,步骤S50可以由第三转化模块150实现,步骤S60可以由合并模块160实现。
也即是说,控制模块110用于控制图像传感器200输出合并图像并旋转成像装置1000以输出色块图像。合并图像包括合并像素阵列。同一感光像素单元210a的多个感光像素212合并输出作为一个合并像素。色块图像包括预定阵列排布的图像像素单元。图像像素单元包括多个原始像素。每个感光像素对应一个原始像素。第一转化模块120用于将色块图像转化成仿原图像。仿原图像包括阵列排布的仿原像素。仿原像素包括当前像素。原始像素包括与当前像素位置对应的关联像素。判断单元121用于判断当前像素的颜色与关联像素的颜色是否相同。第一计算单元122用于在当前像素的颜色与关联像素的颜色相同时,将关联像素的像素值作为当前像素的像素值。第二计算单元123用于在当前像素的颜色与关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算当前像素的像素值。图像像素单元包括关联像素单元。关联像素单元的颜色与当前像素相同且与关联像素相邻。识别模块130用于根据合并图像识别人像区域。第二转化模块140用于将人像区域转化成合并真彩图像。第三转化模块150用于将仿原图像转化成仿原真彩图像。合并模块160用于将合并真彩图像合并至仿原真彩图像。
本发明实施方式的控制方法及控制装置100通过旋转成像装置1000以输出不同场景下的合并图像和色块图像,然后识别合并图像中的人像区域,将经过处理后的人像区域和色块图像进行合成,实现了将人像放入背景图片中的效果,提高了图像的信噪比、分辨率和解析度,且放入的位置可以手动调节,提升了用户体验。
可以理解的是,合并图像具有亮度高、信噪比好的优点,因而适合于拍摄人像或者自拍。而色块图像具有清晰度高的优点,因而适合于拍摄风景图片。也即是说,拍摄人像时输出合并图像,而拍摄风景时旋转成像装置1000以输出色块图像。如此,可以使得拍摄出来的人像和风景都具有较好的效果。然后再将合并图像中的人像区域选取出来,合并到色块图像或者说风景图像中去。
需要指出的是,在将色块图像转化成仿原图像和将仿原图像转化成仿原真彩图像的过程中,可以同时实现根据合并图像识别人像区域和将人像区域转化成合并真彩图像,这里步骤S20和S50与步骤S30和S40的先后顺序不作限制,只需满足步骤S50在步骤S20后、步骤S40在步骤S30后即可。
请参阅图5及图6,在某些实施方式中,仿原真彩图像包括与人像区域对应的预定区域,步骤S60包括以下步骤:
S61,将合并真彩图像移动至预定区域。
在某些实施方式中,合并模块160包括第一合并单元161。步骤S61可以由第一合并单元161实现。也即是说,第一合并单元161用于将合并真彩图像移动至预定区域。
具体地,根据两帧图像中各像素点的坐标关系,可以在仿原真彩图像中找到与人像区域对应的预定区域,然后默认将经过处理后的人像区域或者说合并真彩图像移动至预定区域,将其合并成一张图片。如此,减少了运算量,简化了用户操作。
请参阅图7及图8,在某些实施方式中,仿原真彩图像包括预定区域,步骤S60包括以下步骤:
步骤S62,根据用户输入确定预定区域;
步骤S63,将合并真彩图像移动至预定区域。
在某些实施方式中,合并模块160包括选定单元162和第二合并单元163。步骤S62可以由选定单元162实现,步骤S63可以由第二合并单元163实现。也即是说,选定单元162用于根据用户输入确定预定区域,第二合并单元163用于将合并真彩图像移动至预定区域。
如此,用户可以根据自己的需求在触摸屏上确定预定区域,然后将经过处理后的人像区域或者说合并真彩图像移动到预定位置,如此,提升了用户体验。
请一并参阅图9至图12,本发明实施方式的图像传感器200包括感光像素单元阵列210和设置在感光像素单元阵列210上的滤光片单元阵列220。
进一步地,感光像素单元阵列210包括多个感光像素单元210a,每个感光像素单元210a包括多个相邻的感光像素212。每个感光像素212包括一个感光器件2121和一个传输管2122,其中,感光器件2121可以是光电二极管,传输管2122可以是MOS晶体管。
滤光片单元阵列220包括多个滤光片单元220a,每个滤光片单元220a覆盖对应一个感光像素单元210a。
具体地,在某些示例中,滤光片单元阵列220包括拜耳阵列,也即是说,相邻的四个滤光片单元220a分别为一个红色滤光片单元、一个蓝色滤光片单元和两个绿色滤光片单元。
每一个感光像素单元210a对应同一颜色的滤光片单元220a,若一个感光像素单元210a中一共包括n个相邻的感光器件2121,那么一个滤光片单元220a覆盖一个感光像素单元210a中的n个感光器件2121,该滤光片单元220a可以是一体构造,也可以由n个独立的子滤光片组装连接在一起。
在某些实施方式中,每个感光像素单元210a包括四个相邻的感光像素212,相邻两个感光像素212共同构成一个感光像素子单元2120,感光像素子单元2120还包括一个源极跟随器2123及一个模数转换器2124。感光像素单元210a还包括一个加法器213。其中,一个感光像素子单元2120中的每个传输管2122的一端电极被连接到对应感光器件2121的阴极电极,每个传输管2122的另一端被共同连接至源极跟随器2123的闸极电极,并通过源极跟随器2123源极电极连接至一个模数转换器2124。其中,源极跟随器2123可以是MOS晶体管。两个感光像素子单元2120通过各自的源极跟随器2123及模数转换器2124连接至加法器213。
也即是说,本发明实施方式的图像传感器200的一个感光像素单元210a中相邻的四个感光器件2121共用一个同颜色的滤光片单元220a,每个感光器件2121对应连接一个传输管2122,相邻两个感光器件2121共用一个源极跟随器2123和一个模数转换器2124,相邻的四个感光器件2121共用一个加法器213。
进一步地,相邻的四个感光器件2121呈2*2阵列排布。其中,一个感光像素子单元2120中的两个感光器件2121可以处于同一列。
在成像时,当同一滤光片单元220a下覆盖的两个感光像素子单元2120或者说四个感光器件2121同时曝光时,可以对像素进行合并进而可输出合并图像。
具体地,感光器件2121用于将光照转化为电荷,且产生的电荷与光照强度成比例关系,传输管2122用于根据控制信号来控制电路的导通或断开。当电路导通时,源极跟随器2123用于将感光器件2121经光照产生的电荷信号转化为电压信号。模数转换器2124用于电压信号转换为数字信号。加法器213用于将两路数字信号相加共同输出。
请参阅图13,以16M的图像传感器200举例来说,本发明实施方式的图像传感器200可以将16M的感光像素212合并成4M,或者说,输出合并图像,合并后,感光像素212的大小相当于变成了原来大小的4倍,从而提升了感光像素212的感光度。此外,由于图像传感器200中的噪声大部分都是随机噪声,对于合并之前的感光像素212的来说,有可能其中一个或两个像素中存在噪点,而在将四个感光像素212合并成一个大的感光像素212后,减小了噪点对该大像素的影响,也即是减弱了噪声,提高了信噪比。
但在感光像素212大小变大的同时,由于像素值降低,合并图像的解析度也将降低。
在成像时,当同一滤光片单元220a下覆盖的四个感光器件2121依次曝光时,经过图像处理可以输出色块图像。
具体地,感光器件2121用于将光照转化为电荷,且产生的电荷与光照强度成比例关系,传输管2122用于根据控制信号来控制电路的导通或断开。当电路导通时,源极跟随器2123用于将感光器件2121经光照产生的电荷信号转化为电压信号。模数转换器2124用于电压信号转换为数字信号,以供与图像传感器200相连的控制装置100处理。
请参阅图14,以16M的图像传感器200举例来说,本发明实施方式的图像传感器200还可以保持16M的感光像素212输出,或者说输出色块图像,色块图像包括图像像素单元,图像像素单元包括2*2阵列排布的原始像素,该原始像素的大小与感光像素212大小相同,然而由于覆盖相邻四个感光器件2121的滤光片单元220a为同一颜色,也即是说,虽然四个感光器件2121分别曝光,但其覆盖的滤光片单元220a颜色相同,因此,输出的每个图像像素单元的相邻四个原始像素颜色相同,仍然无法提高图像的解析度。
本发明实施方式的控制方法,可以用于对输出的色块图像进行处理,以得到仿原图像。
可以理解,合并图像在输出时,四个相邻的同色感光像素212以合并像素输出,如此,合并图像中的四个相邻的合并像素仍可看作是典型的拜耳阵列,可以直接被控制装置100接收进行处理以输出合并真彩图像。而色块图像在输出时每个感光像素212分别输出,由于相邻四个感光像素212颜色相同,因此,一个图像像素单元的四个相邻原始像素的颜色相同,是非典型的拜耳阵列。而控制装置100无法对非典型拜耳阵列直接进行处理,也即是说,在图像传感器200采用同一控制装置100时,为兼容两种模式的真彩图像输出即合并模式下的合并真彩图像输出及色块模式下的仿原真彩图像输出,需将色块图像转化为仿原图像,或者说将非典型拜耳阵列的图像像素单元转化为典型拜耳阵列的像素排布。
仿原图像包括呈拜耳阵列排布的仿原像素。仿原像素包括当前像素,原始像素包括与当前像素位置对应的关联像素。
请参阅图15,以图15为例,当前像素为R3’3’和R5’5’,对应的关联像素分别为R33和B55。
在获取当前像素R3’3’时,由于R33’与对应的关联像素R33的颜色相同,因此在转化时直接将R33的像素值作为R33’的像素值。
在获取当前像素R5’5’时,由于R5’5’与对应的关联像素B55的颜色不相同,显然不能直接将B55的像素值作为R5’5’的像素值,需要根据R5’5’的关联像素单元通过第一插值算法计算得到。
需要说明的是,以上及下文中的像素值应当广义理解为该像素的颜色属性数值,例如色彩值。
关联像素单元包括多个,例如4个,颜色与当前像素相同且与关联像素相邻的图像像素单元中的原始像素。
需要说明的是,此处相邻应做广义理解,以图15为例,R5’5’对应的关联像素为B55,与B55所在的图像像素单元相邻的且与R5’5’颜色相同的关联像素单元所在的图像像素单元分别为R44、R74、R47、R77所在的图像像素单元,而并非在空间上距离B55所在的图像像素单元更远的其他的红色图像像素单元。其中,与B55在空间上距离最近的红色原始像素分别为R44、R74、R47和R77,也即是说,R5’5’的关联像素单元由R44、R74、R47和R77组成,R5’5’与R44、R74、R47和R77的颜色相同,关联像素单元R44、R74、R47和R77与R5’5’对应的B55相邻。
如此,针对不同情况的当前像素,采用不同方式的将原始像素转化为仿原像素,从而将色块图像转化为仿原图像,由于拍摄图像时,采用了特殊的拜耳阵列结构的滤光片,提高了图像信噪比,并且在图像处理过程中,通过第一插值算法对色块图像进行插值处理,提高了图像的分辨率及解析度。
请参阅图16,在某些实施方式中,步骤S23包括以下步骤:
步骤S231:计算关联像素单元各个方向上的渐变量;
步骤S232:计算关联像素单元各个方向上的权重;和
步骤S233:根据渐变量及权重计算当前像素的像素值。
请参阅图17,在某些实施方式中,第二计算单元123包括第一计算子单元1231、第二计算子单元1232和第三计算子单元1233。步骤S231可以由第一计算子单元1231实现,步骤S232可以由第二计算子单元1232实现,步骤S233可以由第三计算子单元1233实现。或者说,第一计算子单元1231用于计算关联像素单元各个方向上的渐变量,第二计算子单元1232用于计算关联像素单元各个方向上的权重,第三计算子单元1233用于根据渐变量及权重计算当前像素的像素值。
具体地,第一插值算法是参考图像在不同方向上的能量渐变,将与当前像素对应的颜色相同且与关联像素相邻的关联像素单元依据在不同方向上的渐变权重大小,通过线性插值的方式计算得到当前像素的像素值。其中,在能量变化量较小的方向上,参考比重较大,因此,在插值计算时的权重较大。
在某些示例中,为方便计算,仅考虑水平和垂直方向。
R5’5’由R44、R74、R47和R77插值得到,而在水平和垂直方向上并不存在颜色相同的原始像素,因此需要根据关联像素单元计算在水平和垂直方向上该颜色的分量。其中,水平方向上的分量为R45和R75、垂直方向的分量为R54和R57可以分别通过R44、R74、R47和R77计算得到。
具体地,R45=R44*2/3+R47*1/3,R75=2/3*R74+1/3*R77,R54=2/3*R44+1/3*R74,R57=2/3*R47+1/3*R77。
然后,分别计算在水平和垂直方向的渐变量及权重,也即是说,根据该颜色在不同方向的渐变量,以确定在插值时不同方向的参考权重,在渐变量小的方向,权重较大,而在渐变量较大的方向,权重较小。其中,在水平方向的渐变量X1=|R45-R75|,在垂直方向上的渐变量X2=|R54-R57|,W1=X1/(X1+X2),W2=X2/(X1+X2)。
如此,根据上述可计算得到,R5’5’=(2/3*R45+1/3*R75)*W2+(2/3*R54+1/3*R57)*W1。可以理解,若X1大于X2,则W1大于W2,因此计算时水平方向的权重为W2,而垂直方向的权重为W1,反之亦反。
如此,可根据第一插值算法计算得到当前像素的像素值。依据上述对关联像素的处理方式,可将原始像素转化为呈典型拜耳阵列排布的仿原像素,也即是说,相邻的四个2*2阵列的仿原像素包括一个红色仿原像素,两个绿色仿原像素和一个蓝色仿原像素。
需要说明的是,第一插值算法包括但不限于本实施例中公开的在计算时仅考虑垂直和水平两个方向相同颜色的像素值的方式,例如还可以参考其他颜色的像素值。
请参阅图18及图19,在某些实施方式中,步骤S23前包括步骤:
步骤S24:对色块图像做白平衡补偿;
步骤S23后包括步骤:
步骤S25:对仿原图像做白平衡补偿还原。
在某些实施方式中,第一转化模块120包括白平衡补偿单元124和白平衡补偿还原单元125。步骤S24可以由白平衡补偿单元124实现,步骤S25可以由白平衡补偿还原单元125实现。或者说,白平衡补偿单元124用于对色块图像做白平衡补偿,白平衡补偿还原单元125用于对仿原图像做白平衡补偿还原。
具体地,在一些示例中,在将色块图像转化为仿原图像的过程中,在插值过程中,红色和蓝色仿原像素往往不仅参考与其颜色相同的通道的原始像素的颜色,还会参考绿色通道的原始像素的颜色权重,因此,在插值前需要进行白平衡补偿,以在插值计算中排除白平衡的影响。为了不破坏色块图像的白平衡,因此,在插值之后需要将仿原图像进行白平衡补偿还原,还原时根据在补偿中红色、绿色及蓝色的增益值进行还原。
如此,可排除在第一插值算法的过程中白平衡的影响,并且能够使得插值后得到的仿原图像保持色块图像的白平衡。
请再次参阅图18及图19,在某些实施方式中,步骤S23前包括步骤:
步骤S26:对色块图像做坏点补偿。
在某些实施方式中,第一转化模块120包括坏点补偿单元126。步骤S26可以由坏点补偿单元126实现。或者说,坏点补偿单元126用于对色块图像做坏点补偿。
可以理解,受限于制造工艺,图像传感器200可能会存在坏点,坏点通常不随感光度变化而始终呈现同一颜色,坏点的存在将影响图像质量,因此,为保证插值的准确,不受坏点的影响,需要在第一插值算法前进行坏点补偿。
具体地,坏点补偿过程中,可以对原始像素进行检测,当检测到某一原始像素为坏点时,可根据其所在的图像像素单元的其他原始像的像素值进行坏点补偿。
如此,可排除坏点对插值处理的影响,提高图像质量。
请再次参阅图18及图19,在某些实施方式中,步骤S23前包括步骤:
步骤S27:对色块图像做串扰补偿。
在某些实施方式中,第一转化模块120包括串扰补偿单元127。步骤S27可以由串扰补偿单元127实现。或者说,串扰补偿单元127用于对色块图像做串扰补偿。
具体的,一个感光像素单元210a中的四个感光像素212覆盖同一颜色的滤光片,而感光像素212之间可能存在感光度的差异,以至于以仿原图像转化输出的真彩图像中的纯色区域会出现固定型谱噪声,影响图像的质量。因此,需要对色块图像进行串扰补偿。
如上述解释说明,进行串扰补偿,需要在成像装置1000的图像传感器200制造过程中获得补偿参数,并将串扰补偿的相关参数预置于成像装置1000的存储器中或装设成像装置1000的电子装置10000例如手机或平板电脑中。
预定光环境例如可包括LED匀光板,5000K左右的色温,亮度1000勒克斯左右,成像参数可包括增益值,快门值及镜头位置。设定好相关参数后,进行串扰补偿参数的获取。
处理过程中,首先在设定的光环境中以设置好的成像参数,获取多张色块图像,并合并成一张色块图像,如此可减少以单张色块图像作为校准基础的噪声影响。
请参阅图20,以图20中的图像像素单元Gr为例,其包括Gr1、Gr2、Gr3和Gr4,串扰补偿目的在于将感光度可能存在差异的感光像素212通过补偿进本校准至同一水平。该图像像素单元的平均像素值为Gr_avg=(Gr1+Gr2+Gr3+Gr4)/4,可基本表征这四个感光像素212的感光度的平均水平,以此平均值作为基础值,分别计算Gr1/Gr_avg,Gr2/Gr_avg,Gr3/Gr_avg和Gr4/Gr_avg,可以理解,通过计算每一个原始像素的像素值与该图像像素单元的平均像素值的比值,可以基本反映每个原始像素与基础值的偏差,记录四个比值并作为补偿参数记录到相关装置的存储器中,以在成像时进行调取对每个原始像素进行补偿,从而减少串扰,提高图像质量。
通常,在设定串扰补偿参数后还应当验证所设定的参数是否准确。
验证过程中,首先以相同的光环境和成像参数获取一张色块图像,依据计算得到的补偿参数对该色块图像进行串扰补偿,计算补偿后的Gr’_avg、Gr’1/Gr’_avg、Gr’2/Gr’_avg、Gr’3/Gr’_avg和Gr’4/Gr’_avg。根据计算结果判断补偿参数是否准确,判断可根据宏观与微观两个角度考虑。微观是指某一个原始像素在补偿后仍然偏差较大,成像后易被使用者感知,而宏观则从全局角度,也即是在补偿后仍存在偏差的原始像素的总数目较多时,此时即便单独的每一个原始像素的偏差不大,但作为整体仍然会被使用者感知。因此,应当设置针对微观设置一个比例阈值即可,针对宏观需设置一个比例阈值和一个数量阈值。如此,可对设置的串扰补偿参数进行验证,确保补偿参数的正确,以减少串扰对图像质量的影响。
请参阅图21和图22,在某些实施方式中,步骤S23后还包括步骤:
步骤S28:对仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
在某些实施方式中,第一转化模块120包括处理单元128。步骤S28可以由处理单元128实现,或者说,处理单元128用于对仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
可以理解,将色块图像转化为仿原图像后,仿原像素排布为典型的拜耳阵列,可采用处理模块进行处理,处理过程中包括镜片阴影校正、去马赛克、降噪和边缘锐化处理,如此,处理后即可得到真彩图像输出给用户。
请参阅图23及24,在某些实施方式中,步骤S40包括以下步骤:
步骤S41,利用第二插值算法将人像区域转化成与仿原图像对应的还原图像,第二插值算法的复杂度小于第一插值算法;和
步骤S42,将还原图像转化成合并真彩图像。
在某些实施方式中,第二转化模块140包括第一转化单元141和第二转化单元142。步骤S41可以由第一转化单元141实现,步骤S42可以由第二转化单元142实现。也即是说,第一转化单元141用于利用第二插值算法将人像区域转化成与仿原图像对应的还原图像。第二插值算法的复杂度小于第一插值算法。第二转化单元142用于将还原图像转化成合并真彩图像。
在某些实施方式中,第二插值算法的时间复杂度和空间复杂度都比第一插值算法小。算法的复杂度包括时间复杂度和空间复杂度,时间复杂度用来度量算法需要耗费的时间,空间复杂度是用来度量算法需要耗费的存储空间。时间复杂度小说明算法需要耗费的时间少,空间复杂度小说明算法需要耗费的存储空间小,因此,利用第二插值算法有利于提高运算速度,使得拍照过程更加流畅,提高用户体验。
具体地,第二插值算法的插值过程可以是:对人像区域的每一个图像像素单元中所有的原始像素的像素值取均值,随后判断当前像素与关联像素的颜色是否相同,在当前像素与关联像素颜色值相同时,取关联像素的像素值作为当前像素的像素值,在当前像素与关联像素颜色不同时,取最邻近的与当前像素值颜色相同的图像像素单元中的原始像素的像素值作为当前像素的像素值。
具体地,请参阅图25,以图25为例,先计算图像像素单元中各个原始像素的像素值:Ravg=(R1+R2+R3+R4)/4,Gravg=(Gr1+Gr2+Gr3+Gr4)/4,
Gbavg=(Gb1+Gb2+Gb3+Gb4)/4,Bavg=(B1+B2+B3+B4)/4。此时,R11、R12、R21、R22的像素值均为Ravg,Gr31、Gr32、Gr41、Gr42的像素值均为Gravg,Gb13、Gb14、Gb23、Gb24的像素值均为Gbavg,B33、B34、B43、B44的像素值均为Bavg。以当前像素B22为例,当前像素B22对应的关联像素为R22,由于当前像素B22的颜色与关联像素R22的颜色不同,因此当前像素B22的像素值应取最邻近的蓝色滤光片对应的像素值即取B33、B34、B43、B44中任一Bavg的值。同样地,其他颜色也采用第二插值算法进行计算以得到各个像素的像素值。
如此,采用第二插值算法,由非典型拜耳阵列转换成典型的拜耳阵列过程中所需的复杂度较小,第二插值算法同样能提升仿原图像的解析度,但图像的仿原效果比第一插值算法的仿原效果略差。因此,用第一插值算法处理色块图像,而采用第二插值算法处理合并图像中的人像区域,提升图像的解析度和仿原效果,提升了用户体验,同时减少了图像处理所需的时间。
请参阅图26,本发明实施方式的成像装置1000包括上述的控制装置100和图像传感器200。图像传感器200用于产生色块图像。
本发明实施方式的成像装置1000通过旋转成像装置1000以输出不同场景下的合并图像和色块图像,然后识别合并图像中的人像区域,将经过处理后的人像区域和色块图像进行合成,实现了将人像放入背景图片中的效果,提高了图像的信噪比、分辨率和解析度,且放入的位置可以手动调节,提升了用户体验。
请参阅图27,本发明实施方式的电子装置10000包括上述成像装置1000和触摸屏2000。
在某些实施方式中,电子装置10000包括手机或平板电脑。
手机和平板电脑均带有摄像头即成像装置1000,用户使用手机或平板电脑进行拍摄时,可以采用本发明实施方式的控制方法,以得到高解析度的图片。
当然,电子装置10000也可以包括其他具有成像功能的电子设备。
在某些实施方式中,成像装置1000包括前置摄像头、后置摄像头或旋转摄像头。
当成像装置1000包括前置摄像头或后置摄像头时,需要移动电子设备以拍摄两帧不同场景下的图片,即人像图片和风景图片。而当成像装置1000包括旋转摄像头时,只需要旋转一下旋转摄像头即可实现拍摄人像图片和风景图片。
可以理解,前置摄像头、后置摄像头或旋转摄像头均可采用本发明实施方式的控制方法实现图像处理,以提升用户体验。
在本说明书的描述中,参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(控制方法),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的实施方式的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明的各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
尽管上面已经示出和描述了本发明的实施方式,可以理解的是,上述实施方式是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施实施进行变化、修改、替换和变型。
Claims (26)
1.一种控制方法,用于控制电子装置,其特征在于,所述电子装置包括成像装置和触摸屏,所述成像装置包括图像传感器,所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列,每个所述滤光片单元阵列覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制方法包括以下步骤:
控制所述图像传感器输出合并图像并旋转所述成像装置以输出色块图像,所述合并图像包括合并像素阵列,同一所述感光像素单元的多个感光像素合并输出作为一个所述合并像素,所述色块图像包括预定阵列排布的图像像素单元,所述图像像素单元包括多个原始像素,每个所述感光像素对应一个所述原始像素;
将所述色块图像转化成仿原图像,所述仿原图像包括阵列排布的仿原像素,所述仿原像素包括当前像素,所述原始像素包括与所述当前像素位置对应的关联像素,所述将所述色块图像转化成仿原图像的步骤包括以下步骤:
判断所述当前像素的颜色与所述关联像素的颜色是否相同;
在所述当前像素的颜色与所述关联像素的颜色相同时,将所述关联像素的像素值作为所述当前像素的像素值;和
在所述当前像素的颜色与所述关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值,所述图像像素单元包括所述关联像素单元,所述关联像素单元的颜色与所述当前像素相同且与所述关联像素相邻;
根据所述合并图像识别人像区域;
将所述人像区域转化成合并真彩图像;
将所述仿原图像转化成仿原真彩图像;和
将所述合并真彩图像合并至所述仿原真彩图像。
2.如权利要求1所述的控制方法,其特征在于,所述仿原真彩图像包括与所述人像区域对应的预定区域,所述将所述合并真彩图像合并至所述仿原真彩图像的步骤,包括以下步骤:
将所述合并真彩图像移动至所述预定区域。
3.如权利要求1所述的控制方法,其特征在于,所述仿原真彩图像包括预定区域,所述将所述合并真彩图像合并至所述仿原真彩图像的步骤,包括以下步骤:
根据用户输入确定所述预定区域;
将所述合并真彩图像移动至所述预定区域。
4.如权利要求1所述的控制方法,其特征在于,所述预定阵列包括拜耳阵列。
5.如权利要求1所述的控制方法,其特征在于,所述图像像素单元包括2*2阵列的所述原始像素。
6.如权利要求1所述的控制方法,其特征在于,所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤,包括以下步骤:
计算所述关联像素各个方向上的渐变量;
计算所述关联像素各个方向上的权重;和
根据所述渐变量及所述权重计算所述当前像素的像素值。
7.如权利要求1所述的控制方法,其特征在于,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前,包括以下步骤:
对所述色块图像做白平衡补偿;
所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤后包括以下步骤:
对所述仿原图像做白平衡补偿还原。
8.如权利要求1所述的控制方法,其特征在于,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前,包括以下步骤:
对所述色块图像做坏点补偿。
9.如权利要求1所述的控制方法,其特征在于,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前,包括以下步骤:
对所述色块图像做串扰补偿。
10.如权利要求1所述的控制方法,其特征在于,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤后,包括以下步骤:
对所述仿原图像进行镜片形状校正、去马赛克、降噪和边缘锐化处理。
11.如权利要求1所述的控制方法,其特征在于,所述将所述人像区域转化成合并真彩图像的步骤,包括以下步骤:
利用第二插值算法将所述人像区域转化成与所述仿原图像对应的还原图像,所述第二插值算法的复杂度小于所述第一插值算法;和
将所述还原图像转化成所述合并真彩图像。
12.一种控制装置,用于控制电子装置,其特征在于,所述电子装置包括成像装置和触摸屏,所述成像装置包括图像传感器,所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列,每个所述滤光片单元阵列覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制装置包括:
控制模块,所述控制模块用于控制所述图像传感器输出合并图像并旋转所述成像装置以输出色块图像,所述合并图像包括合并像素阵列,同一所述感光像素单元的多个感光像素合并输出作为一个所述合并像素,所述色块图像包括预定阵列排布的图像像素单元,所述图像像素单元包括多个原始像素,每个所述感光像素对应一个所述原始像素;
第一转化模块,所述第一转化模块用于将所述色块图像转化成仿原图像,所述仿原图像包括阵列排布的仿原像素,所述仿原像素包括当前像素,所述原始像素包括与所述当前像素位置对应的关联像素;
所述第一转化模块包括:
判断单元,所述判断单元用于判断所述当前像素的颜色与所述关联像素的颜色是否相同;
第一计算单元,所述第一计算单元用于在所述当前像素的颜色与所述关联像素的颜色相同时,将所述关联像素的像素值作为所述当前像素的像素值;和
第二计算单元,所述第二计算单元用于在所述当前像素的颜色与所述关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值,所述图像像素单元包括所述关联像素单元,所述关联像素单元的颜色与所述当前像素相同且与所述关联像素相邻;
识别模块,所述识别模块用于根据所述合并图像识别人像区域;
第二转化模块,所述第二转化模块用于将所述人像区域转化成合并真彩图像;
第三转化模块,所述第三转化模块用于将所述仿原图像转化成仿原真彩图像;和
合并模块,所述合并模块用于将所述合并真彩图像合并至所述仿原真彩图像。
13.如权利要求12所述的控制装置,其特征在于,所述仿原真彩图像包括与所述人像区域对应的预定区域,所述合并模块包括:
第一合并单元,所述第一合并单元用于将所述合并真彩图像移动至所述预定区域。
14.如权利要求12所述的控制装置,其特征在于,所述仿原真彩图像包括预定区域,所述合并模块包括:
选定单元,所述选定单元用于根据用户输入确定所述预定区域;
第二合并单元,所述第二合并单元用于将所述合并真彩图像移动至所述预定区域。
15.如权利要求12所述的控制装置,其特征在于,所述预定阵列包括拜耳阵列。
16.如权利要求12所述的控制装置,其特征在于,所述图像像素单元包括2*2阵列的所述原始像素。
17.如权利要求12所述的控制装置,其特征在于,所述第二计算单元包括:
第一计算子单元,所述第一计算子单元用于计算所述关联像素各个方向上的渐变量;
第二计算子单元,所述第二计算子单元用于计算所述关联像素各个方向上的权重;和
第三计算子单元,所述第三计算子单元用于根据所述渐变量及所述权重计算所述当前像素的像素值。
18.如权利要求12所述的控制装置,其特征在于,所述第一转化模块包括:
白平衡补偿单元,所述白平衡补偿单元用于对所述色块图像做白平衡补偿;
白平衡补偿还原单元,所述白平衡补偿还原单元用于对所述仿原图像做白平衡补偿还原。
19.如权利要求12所述的控制装置,其特征在于,所述第一转化模块包括:
坏点补偿单元,所述坏点补偿单元用于对所述色块图像做坏点补偿。
20.如权利要求12所述的控制装置,其特征在于,所述第一转化模块包括:
串扰补偿单元,所述串扰补偿单元用于对所述色块图像做串扰补偿。
21.如权利要求12所述的控制装置,其特征在于,所述第一转化模块包括:
处理单元,所述处理单元用于对所述仿原图像进行镜片形状校正、去马赛克、降噪和边缘锐化处理。
22.如权利要求12所述的控制装置,其特征在于,所述第二转化模块包括:
第一转化单元,所述第一转化单元用于利用第二插值算法将所述人像区域转化成与所述仿原图像对应的还原图像,所述第二插值算法的复杂度小于所述第一插值算法;和
第二转化单元,所述第二转化单元用于将所述还原图像转化成所述合并真彩图像。
23.一种成像装置,其特征在于,包括:
如权利要求12-22任意一项所述的控制装置;和
图像传感器,用于产生所述色块图像。
24.一种电子装置,其特征在于包括:
如权利要求23所述的成像装置;和
触摸屏。
25.如权利要求24所述的电子装置,其特征在于,所述电子装置包括手机或平板电脑。
26.如权利要求24所述的电子装置,其特征在于,所述成像装置包括前置摄像头、后置摄像头或旋转摄像头。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611078878.2A CN106454288B (zh) | 2016-11-29 | 2016-11-29 | 控制方法、控制装置、成像装置及电子装置 |
PCT/CN2017/081921 WO2018098984A1 (zh) | 2016-11-29 | 2017-04-25 | 控制方法、控制装置、成像装置及电子装置 |
US15/727,128 US10290079B2 (en) | 2016-11-29 | 2017-10-06 | Image processing method and apparatus, and electronic device |
ES17198507T ES2763646T3 (es) | 2016-11-29 | 2017-10-26 | Procedimiento y aparato de procesamiento de imagen y dispositivo electrónico |
EP17198507.0A EP3327663B1 (en) | 2016-11-29 | 2017-10-26 | Image processing method and apparatus, and electronic device |
US15/966,059 US10262395B2 (en) | 2016-11-29 | 2018-04-30 | Image processing method and apparatus, and electronic device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611078878.2A CN106454288B (zh) | 2016-11-29 | 2016-11-29 | 控制方法、控制装置、成像装置及电子装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106454288A CN106454288A (zh) | 2017-02-22 |
CN106454288B true CN106454288B (zh) | 2018-01-19 |
Family
ID=58224089
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611078878.2A Expired - Fee Related CN106454288B (zh) | 2016-11-29 | 2016-11-29 | 控制方法、控制装置、成像装置及电子装置 |
Country Status (5)
Country | Link |
---|---|
US (2) | US10290079B2 (zh) |
EP (1) | EP3327663B1 (zh) |
CN (1) | CN106454288B (zh) |
ES (1) | ES2763646T3 (zh) |
WO (1) | WO2018098984A1 (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106504218B (zh) | 2016-11-29 | 2019-03-12 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106454054B (zh) | 2016-11-29 | 2019-03-19 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106341670B (zh) | 2016-11-29 | 2017-09-22 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106454288B (zh) * | 2016-11-29 | 2018-01-19 | 广东欧珀移动通信有限公司 | 控制方法、控制装置、成像装置及电子装置 |
CN108270942B (zh) * | 2018-01-31 | 2020-09-25 | 威海华菱光电股份有限公司 | 图像扫描装置、控制图像扫描光信号的接收方法及装置 |
CN111586363B (zh) * | 2020-05-22 | 2021-06-25 | 深圳市睿联技术股份有限公司 | 基于对象的视频文件查看方法及系统 |
CN113840067B (zh) * | 2021-09-10 | 2023-08-18 | Oppo广东移动通信有限公司 | 图像传感器、图像生成方法、装置和电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014006524A (ja) * | 2012-06-26 | 2014-01-16 | Fei Co | 3次元基準マーク |
CN104580910A (zh) * | 2015-01-09 | 2015-04-29 | 宇龙计算机通信科技(深圳)有限公司 | 基于前、后摄像头的图像合成方法及系统 |
CN105611258A (zh) * | 2015-12-18 | 2016-05-25 | 广东欧珀移动通信有限公司 | 图像传感器的成像方法、成像装置和电子装置 |
Family Cites Families (50)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7088392B2 (en) * | 2001-08-27 | 2006-08-08 | Ramakrishna Kakarala | Digital image system and method for implementing an adaptive demosaicing method |
JP4458236B2 (ja) * | 2003-09-30 | 2010-04-28 | パナソニック株式会社 | 固体撮像装置 |
US7769230B2 (en) | 2006-11-30 | 2010-08-03 | Eastman Kodak Company | Producing low resolution images |
JP5053654B2 (ja) * | 2007-02-09 | 2012-10-17 | オリンパスイメージング株式会社 | 画像処理装置およびその方法と電子カメラ |
JP4359634B2 (ja) * | 2007-06-21 | 2009-11-04 | シャープ株式会社 | カラー固体撮像装置、および画素信号の読み出し方法 |
JP5036482B2 (ja) | 2007-10-19 | 2012-09-26 | シリコン ヒフェ ベー.フェー. | 画像処理装置及び画像処理方法、画像処理プログラム |
JP5068158B2 (ja) * | 2007-12-28 | 2012-11-07 | イーストマン コダック カンパニー | 撮像装置 |
US7745779B2 (en) | 2008-02-08 | 2010-06-29 | Aptina Imaging Corporation | Color pixel arrays having common color filters for multiple adjacent pixels for use in CMOS imagers |
JP2010028722A (ja) * | 2008-07-24 | 2010-02-04 | Sanyo Electric Co Ltd | 撮像装置及び画像処理装置 |
JP5219778B2 (ja) * | 2008-12-18 | 2013-06-26 | キヤノン株式会社 | 撮像装置及びその制御方法 |
US8345144B1 (en) | 2009-07-15 | 2013-01-01 | Adobe Systems Incorporated | Methods and apparatus for rich image capture with focused plenoptic cameras |
JP2011248576A (ja) * | 2010-05-26 | 2011-12-08 | Olympus Corp | 画像処理装置、撮像装置、プログラム及び画像処理方法 |
US8803994B2 (en) * | 2010-11-18 | 2014-08-12 | Canon Kabushiki Kaisha | Adaptive spatial sampling using an imaging assembly having a tunable spectral response |
CN102638679B (zh) * | 2011-02-12 | 2014-07-02 | 澜起科技(上海)有限公司 | 基于矩阵对图像进行插值的方法及图像处理系统 |
WO2012114574A1 (ja) * | 2011-02-21 | 2012-08-30 | 三菱電機株式会社 | 画像拡大装置及び方法 |
US8619179B2 (en) * | 2011-03-28 | 2013-12-31 | Canon Kabushiki Kaisha | Multi-modal image capture apparatus with a tunable spectral response |
JP5306563B2 (ja) * | 2011-07-08 | 2013-10-02 | オリンパス株式会社 | 撮像装置及び画像生成方法 |
JP5528627B2 (ja) * | 2011-07-13 | 2014-06-25 | 富士フイルム株式会社 | 撮像装置、撮像素子及び感度差補正方法 |
JP2013021660A (ja) * | 2011-07-14 | 2013-01-31 | Sony Corp | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
JP2013066146A (ja) | 2011-08-31 | 2013-04-11 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
CN103563361B (zh) * | 2011-09-29 | 2015-04-29 | 富士胶片株式会社 | 图像处理设备和方法以及成像设备 |
JP5687608B2 (ja) * | 2011-11-28 | 2015-03-18 | オリンパス株式会社 | 画像処理装置、画像処理方法、および画像処理プログラム |
US9699429B2 (en) | 2012-03-27 | 2017-07-04 | Sony Corporation | Image processing apparatus, imaging device, image processing method, and program for reducing noise or false colors in an image |
WO2014034486A1 (ja) * | 2012-08-27 | 2014-03-06 | 富士フイルム株式会社 | 画像処理装置、方法、プログラム及び記録媒体並びに撮像装置 |
US9531961B2 (en) | 2015-05-01 | 2016-12-27 | Duelight Llc | Systems and methods for generating a digital image using separate color and intensity data |
KR101744761B1 (ko) * | 2012-11-30 | 2017-06-09 | 한화테크윈 주식회사 | 영상처리장치 및 방법 |
CN103856617A (zh) | 2012-12-03 | 2014-06-11 | 联想(北京)有限公司 | 一种拍照方法和用户终端 |
JP5933105B2 (ja) | 2013-02-15 | 2016-06-08 | 富士フイルム株式会社 | 画像処理装置、撮像装置、フィルタ生成装置、画像復元方法及びプログラム |
WO2014185238A1 (ja) * | 2013-05-13 | 2014-11-20 | 富士フイルム株式会社 | カラー画像データの混入補正装置および撮像装置ならびにそれらの動作制御方法 |
JP6263035B2 (ja) * | 2013-05-17 | 2018-01-17 | キヤノン株式会社 | 撮像装置 |
CN103810675B (zh) * | 2013-09-09 | 2016-09-21 | 深圳市华星光电技术有限公司 | 图像超分辨率重构系统及方法 |
US8917327B1 (en) | 2013-10-04 | 2014-12-23 | icClarity, Inc. | Method to use array sensors to measure multiple types of data at full resolution of the sensor |
CN103996170B (zh) * | 2014-04-28 | 2017-01-18 | 深圳市华星光电技术有限公司 | 一种具有超高解析度的图像边缘锯齿消除方法 |
JP6415113B2 (ja) * | 2014-05-29 | 2018-10-31 | オリンパス株式会社 | 撮像装置、画像処理方法 |
US9438809B2 (en) | 2014-07-25 | 2016-09-06 | Samsung Electronics Co., Ltd. | Methodology for generating high fidelity digital zoom for mobile phone cameras |
US9344639B2 (en) * | 2014-08-12 | 2016-05-17 | Google Technology Holdings LLC | High dynamic range array camera |
US10049432B2 (en) * | 2014-09-10 | 2018-08-14 | Mitsubishi Electric Corporation | Image processing apparatus, image processing method, program and recording medium |
JP5893713B1 (ja) * | 2014-11-04 | 2016-03-23 | オリンパス株式会社 | 撮像装置、撮像方法、処理プログラム |
JP6598496B2 (ja) * | 2015-04-22 | 2019-10-30 | キヤノン株式会社 | 撮像装置及び信号処理方法 |
WO2016181476A1 (ja) * | 2015-05-12 | 2016-11-17 | オリンパス株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP6508626B2 (ja) * | 2015-06-16 | 2019-05-08 | オリンパス株式会社 | 撮像装置、処理プログラム、撮像方法 |
WO2017064807A1 (ja) * | 2015-10-16 | 2017-04-20 | オリンパス株式会社 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラムおよび記憶媒体 |
CN105578078B (zh) * | 2015-12-18 | 2018-01-19 | 广东欧珀移动通信有限公司 | 图像传感器、成像装置、移动终端及成像方法 |
CN105578072A (zh) | 2015-12-18 | 2016-05-11 | 广东欧珀移动通信有限公司 | 成像方法、成像装置及电子装置 |
CN105611122B (zh) | 2015-12-18 | 2019-03-01 | Oppo广东移动通信有限公司 | 图像传感器及输出方法、相位对焦方法、成像装置和终端 |
JP6711612B2 (ja) * | 2015-12-21 | 2020-06-17 | キヤノン株式会社 | 画像処理装置、画像処理方法、および撮像装置 |
US9979942B2 (en) | 2016-06-30 | 2018-05-22 | Apple Inc. | Per pixel color correction filtering |
CN106504218B (zh) | 2016-11-29 | 2019-03-12 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106454289B (zh) | 2016-11-29 | 2018-01-23 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106454288B (zh) * | 2016-11-29 | 2018-01-19 | 广东欧珀移动通信有限公司 | 控制方法、控制装置、成像装置及电子装置 |
-
2016
- 2016-11-29 CN CN201611078878.2A patent/CN106454288B/zh not_active Expired - Fee Related
-
2017
- 2017-04-25 WO PCT/CN2017/081921 patent/WO2018098984A1/zh active Application Filing
- 2017-10-06 US US15/727,128 patent/US10290079B2/en active Active
- 2017-10-26 ES ES17198507T patent/ES2763646T3/es active Active
- 2017-10-26 EP EP17198507.0A patent/EP3327663B1/en active Active
-
2018
- 2018-04-30 US US15/966,059 patent/US10262395B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014006524A (ja) * | 2012-06-26 | 2014-01-16 | Fei Co | 3次元基準マーク |
CN104580910A (zh) * | 2015-01-09 | 2015-04-29 | 宇龙计算机通信科技(深圳)有限公司 | 基于前、后摄像头的图像合成方法及系统 |
CN105611258A (zh) * | 2015-12-18 | 2016-05-25 | 广东欧珀移动通信有限公司 | 图像传感器的成像方法、成像装置和电子装置 |
Also Published As
Publication number | Publication date |
---|---|
US20180150932A1 (en) | 2018-05-31 |
CN106454288A (zh) | 2017-02-22 |
US10262395B2 (en) | 2019-04-16 |
US10290079B2 (en) | 2019-05-14 |
US20180247390A1 (en) | 2018-08-30 |
WO2018098984A1 (zh) | 2018-06-07 |
EP3327663B1 (en) | 2019-12-11 |
EP3327663A1 (en) | 2018-05-30 |
ES2763646T3 (es) | 2020-05-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106454288B (zh) | 控制方法、控制装置、成像装置及电子装置 | |
CN106412592B (zh) | 图像处理方法、图像处理装置、成像装置及电子装置 | |
CN106454289B (zh) | 控制方法、控制装置及电子装置 | |
CN106341670B (zh) | 控制方法、控制装置及电子装置 | |
CN106604001B (zh) | 图像处理方法、图像处理装置、成像装置及电子装置 | |
CN106507080B (zh) | 控制方法、控制装置及电子装置 | |
WO2018099010A1 (zh) | 控制方法、控制装置和电子装置 | |
CN106507069B (zh) | 控制方法、控制装置及电子装置 | |
CN106791477B (zh) | 图像处理方法、图像处理装置、成像装置及制造方法 | |
CN106357967B (zh) | 控制方法、控制装置和电子装置 | |
CN106504218A (zh) | 控制方法、控制装置及电子装置 | |
CN106507068B (zh) | 图像处理方法及装置、控制方法及装置、成像及电子装置 | |
CN106507067B (zh) | 控制方法、控制装置及电子装置 | |
WO2018098982A1 (zh) | 图像处理方法、图像处理装置、成像装置及电子装置 | |
CN106454054A (zh) | 控制方法、控制装置及电子装置 | |
WO2018098981A1 (zh) | 控制方法、控制装置、电子装置和计算机可读存储介质 | |
WO2018099009A1 (zh) | 控制方法、控制装置、电子装置和计算机可读存储介质 | |
CN106534822B (zh) | 控制方法、控制装置及电子装置 | |
CN106506984A (zh) | 图像处理方法及装置、控制方法及装置、成像及电子装置 | |
CN106507018A (zh) | 控制方法、控制装置及电子装置 | |
CN106504217A (zh) | 图像处理方法、图像处理装置、成像装置及电子装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder |
Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Patentee after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Patentee before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. |
|
CP01 | Change in the name or title of a patent holder | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180119 |
|
CF01 | Termination of patent right due to non-payment of annual fee |