CN105072327B - 一种防闭眼的人像拍摄处理的方法和装置 - Google Patents
一种防闭眼的人像拍摄处理的方法和装置 Download PDFInfo
- Publication number
- CN105072327B CN105072327B CN201510416911.7A CN201510416911A CN105072327B CN 105072327 B CN105072327 B CN 105072327B CN 201510416911 A CN201510416911 A CN 201510416911A CN 105072327 B CN105072327 B CN 105072327B
- Authority
- CN
- China
- Prior art keywords
- image
- eyes
- eye
- portrait
- face
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Image Processing (AREA)
Abstract
本发明涉及一种防闭眼的人像拍摄处理的方法和装置,包括拍摄单元、检测单元、调取单元和处理单元;所述拍摄单元,用于获得待确认图像;所述检测单元,用于获取所述待确认图像中的第一张图像并检测其中所有人像的眼睛的状态;所述调取单元,用于若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取之后的后续图像;所述处理单元,用于根据所述后续图像对所述第一张图像处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态。可见,该防闭眼的人像拍摄处理的方法和装置,能够有效避免拍出人像的眼睛处于闭眼状态的照片,大大提高照片本身的质量,优化用户体验。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种防闭眼的人像拍摄处理的方法和装置。
背景技术
随着移动终端,如手机的拍照技术的不断发展,越来越多的用户使用手机玩自拍或者群拍,各种美颜拍照功能也随之出现。美颜拍照功能通过对待确认的拍摄图像进行人脸识别,然后对脸部进行美白、收敛、磨皮等后处理操作,实现让确认拍出的图像显得脸部皮肤更光滑、白亮的视觉效果。美颜拍照功能现在几乎成为了女性用户拍照的必选功能。然而,当多人一起群拍时,特别是外出游玩留念时,很容易就拍出某一个人眼睛处于闭眼状态的照片,这种照片的质量不仅大大折扣,还会或多或少影响到人们的游玩心情。
发明内容
本发明的目的在于提出一种防闭眼的人像拍摄处理的方法和装置,能够有效避免拍出人像的眼睛处于闭眼状态的照片,大大提高照片本身的质量,优化用户体验。
为达此目的,本发明采用以下技术方案:
第一方面,提供一种防闭眼的人像拍摄处理的方法,包括:
获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像;
获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态;
若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像;
检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态。
第二方面,提供一种防闭眼的人像拍摄处理的装置,包括:
拍摄单元,用于获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像;
检测单元,用于获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态;
调取单元,用于若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像;
处理单元,用于检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态。
本发明的有益效果在于:一种防闭眼的人像拍摄处理的方法和装置,包括拍摄单元、检测单元、调取单元和处理单元;所述拍摄单元,用于获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像;所述检测单元,用于获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态;所述调取单元,用于若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像;所述处理单元,用于检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态。可见,该防闭眼的人像拍摄处理的方法和装置,能够有效避免拍出人像的眼睛处于闭眼状态的照片,大大提高照片本身的质量,优化用户体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对本发明实施例描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据本发明实施例的内容和这些附图获得其他的附图。
图1是本发明提供的防闭眼的人像拍摄处理的方法第一个实施例的方法流程图。
图2是本发明提供的防闭眼的人像拍摄处理的方法第二个实施例的方法流程图。
图3是本发明提供的防闭眼的人像拍摄处理的装置第一个实施例的结构方框图。
图4是本发明提供的防闭眼的人像拍摄处理的装置第二个实施例的结构方框图。
具体实施方式
为使本发明解决的技术问题、采用的技术方案和达到的技术效果更加清楚,下面将结合附图对本发明实施例的技术方案作进一步的详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参考图1,其是本发明提供的防闭眼的人像拍摄处理的方法第一个实施例的方法流程图。本发明实施例的防闭眼的人像拍摄处理的方法,可应用于各种具备拍照功能的智能终端,如手机、平板、智能手表等。
该防闭眼的人像拍摄处理的方法,包括:
步骤S101、获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像。
所述拍摄人像的取景界面即为具备拍照功能的智能终端的视窗或显示屏幕。
图像经过数字图像压缩处理后,可以使图像信号进行高质量地传输,并便于图像的检索、分析、处理和存储。
步骤S102、获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态。
当获得确认拍摄指令,即表示用户对目前取景界面的待确认图像基本满意,通过按下确认拍摄键,对待确认图像进行处理输出,形成最终人像图片。
利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态的过程,主要分为人脸部分检测、基于所述人脸部分检测的眼部区域检测和眼睛状态检测三个部分。
人脸部分检测主要依据人脸上的特征点的检测,对人脸图像进行特征点检测之前,还需要进行特征点提取和分类。检测人脸过程中,首先将待确定的人脸图像和人脸模板进行模板匹配,如果匹配,那么将其投影到人脸子空间,由特征子脸技术判断是否为人脸。特征子脸技术从统计的角度,寻找人脸图像分布的基本元素,即人脸图像样本集协方差矩阵的特征向量,以此近似地表征人脸图像。这些特征向量称为特征脸(Eigenface)。实际上,特征脸反映了隐含在人脸样本集合内部的信息和人脸的结构关系。将眼睛、面颊、下颌的样本集协方差矩阵的特征向量称为特征眼、特征颌和特征唇,统称特征子脸。特征子脸在相应的图像空间中张成子空间,称为子脸空间。计算出测试图像窗口在子脸空间的投影距离,若窗口图像满足阈值比较条件,则判断其为人脸。该人脸对应的区域为人脸部分。
眼部区域检测主要依据上述人脸部分检测的结果,根据确定的所述人脸部分的图像,利用三庭五眼的比例估计鼻子的初始位置。定义两个初始搜索矩形,分别向左、右两眼所处的大致位置生长。根据人眼灰度明显低于人脸灰度的特点,利用搜索矩形找到眼部的边缘,并定位眼球内瞳孔的中心,最终确定人脸部分的眼部区域。
眼睛状态检测主要依据眼部特征值,如瞳孔中部高度、瞳距或瞳孔灰度值等的检测结果,对眼睛处于睁眼状态还是闭眼状态进行判断。
步骤S103、若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像。
若发现至少有一个人像的眼睛处于闭眼状态,说明此时的待确认图像质量较低,达不到用户的要求,需要对待确认图像进行防闭眼的人像拍摄处理。
步骤S104、检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态。
优选地,眼部局部处理为采用眼部处于睁眼状态的后续图像中的眼部替换掉所述第一张图像中对应人像处于闭眼状态的眼部,在人脸特征基本吻合的前提下,把睁眼状态的眼部直接覆盖于闭眼状态的眼部。
本发明实施例提供的动防闭眼的人像拍摄处理的方法,能够有效避免拍出人像的眼睛处于闭眼状态的照片,大大提高照片本身的质量,优化用户体验。
请参考图2,其是本发明提供的防闭眼的人像拍摄处理的方法第二个实施例的方法流程图。本发明实施例在防闭眼的人像拍摄处理的方法的第一个实施例的基础上,对眼部做局部处理和判断人像眼部的状态的步骤进行了具体说明。
该防闭眼的人像拍摄处理的方法,包括:
步骤S201、启动拍照功能。
启动拍照功能,即让终端进入拍照状态,拍摄人像的取景界面开始取景。
步骤S202、获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像。
步骤S203、获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态。
优选地,所述利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态,包括:
利用人脸检测算法检测所述第一张图像中所有人像的眼部特征值,所述眼部特征值包括的瞳孔中部高度、瞳距或瞳孔灰度值;
当任一人像的瞳孔中部高度小于等于预设高度,则判断该人像的眼睛处于闭眼状态;当任一人像的瞳孔中部高度大于所述预设高度,则判断该人像的眼睛处于睁眼状态,或;
当没有检测到任一人像的瞳距,则判断该人像的眼睛处于闭眼状态;当检测到任一人像的瞳距,则判断该人像的眼睛处于睁眼状态,或;
当任一人像的瞳孔灰度值小于等于预设瞳孔灰度值,则判断该人像的眼睛处于闭眼状态;当任一人像的瞳孔灰度值大于所述预设瞳孔灰度值,则判断该人像的眼睛处于睁眼状态。
眼珠是指眼球前面中间部分,这个部位是由角膜、虹膜和瞳孔组成的。瞳孔中部高度为圆形瞳孔的中心线高度、瞳距为两个瞳孔之间的距离、瞳孔灰度值为瞳孔的颜色深度。
预设高度为预先设置的、对应于图像中的人脸大小的眼睛处于正常睁眼状态时的瞳孔中部高度,预设瞳孔灰度值为预先设置的、对应于图像中的人脸大小的眼睛处于正常睁眼状态时的瞳孔灰度值。实际应用过程中,可以根据不同终端的型号和配置,对预设高度和预设瞳孔灰度值进行设置。
步骤S204a、若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像。
步骤S204b、若没有人像的眼睛处于闭眼状态,则对所述第一张图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
若没有人像的眼睛处于闭眼状态,则可以直接对待拍摄的图像进行述数字图像压缩处理,以便输出。
需要说明的是,步骤S204a和步骤S204b并没有先后顺序关系,两者择一实施。
步骤S205、在预设时间周期内,检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开。
优选地,所述预设时间周期为2s。在2s内,人像的眼部依然没有睁开、持续处于闭眼状态的话,则可以判断这是为了营造更生动的拍摄效果的故意为之。此时可以直接对待拍摄的图像进行述数字图像压缩处理,以便输出。
步骤S206a、若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态;对做所述局部处理后获得的所有人像的眼睛处于睁眼状态的图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
步骤S206b、若没有睁开,则对所述第一张图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
步骤S206a和步骤S206b让终端的防闭眼的人像拍摄处理的过程更加智能化和人性化,提高了用户的满意度。需要说明的是,步骤S206a和步骤S206b并没有先后顺序关系,两者择一实施。
优选地,所述数字图像压缩处理为采用JPEG编码算法的数字图像压缩处理。
JPEG编码算法为静态图像压缩的标准算法。JPEG编码算法必须满足以下要求:
1、JPEG编码算法独立于图像的分辨率。
2、具有低于1bit/象素的编码率,并且能够在五秒钟内建立图像,以满足实时要求。
3、在压缩比大约是2的情况下能够无失真地恢复原图像。
4、支持顺序编解码和渐进编解码。
5、对各种图像成分及数据精度的自适应能力。
6、编解码设备简单易实现。
本发明实施例提供的防闭眼的人像拍摄处理的方法,首先通过人脸检测算法,实时检测拍摄人像的取景界面中所有人脸的位置及对应的眼睛状态。当确认拍摄键被按下、发出确认拍摄指令后,在待确认图像做JPEG编码之前,取第一张图像,并判断该第一张图像中人像眼睛的状态,如果有人眼睛处于闭眼状态,则先将第一张图像保存下来,并不去做JPEG编码。后面每张图像持续关注闭眼人的眼睛状态。等到闭眼人的眼睛处于睁眼状态时,根据该人的眼睛与脸部的特征,对第一张图像的闭眼人,进行相应的眼部局部处理,使其眼睛处于睁眼状态。如果闭眼人持续处于闭眼状态超过2s,则不进行眼部局部处理,默认是特意想拍出闭眼的效果,而不是因为眨眼导致的拍出闭眼的照片。最后将经过眼部处理的第一张图像进行JPEG编码,输出最终的人像图片。
本发明实施例提供的防闭眼的人像拍摄处理的方法,通过人脸检测算法可以获取到人眼的状态,然后对闭眼的人像进行眼部局部处理,将人像的睁眼状态合成到第一张图像上,使闭眼人像处于睁眼状态,以便拍出更高质量的人像照片,有效避免拍出闭眼人像的照片。
以下为本发明实施例提供的防闭眼的人像拍摄处理的装置的实施例。防闭眼的人像拍摄处理的装置的实施例与上述的防闭眼的人像拍摄处理的方法的实施例属于同一构思,防闭眼的人像拍摄处理的装置的实施例中未详尽描述的细节内容,可以参考上述防闭眼的人像拍摄处理的方法的实施例。
请参考图3,其是本发明提供的防闭眼的人像拍摄处理的装置第一个实施例的结构方框图。
该防闭眼的人像拍摄处理的装置,包括:
拍摄单元,用于获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像;
检测单元,用于获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态;
调取单元,用于若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像;
处理单元,用于检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态。
本发明实施例提供的防闭眼的人像拍摄处理的装置,能够有效避免拍出人像的眼睛处于闭眼状态的照片,大大提高照片本身的质量,优化用户体验。
请参考图4,是本发明提供的防闭眼的人像拍摄处理的装置第二个实施例的结构方框图。本发明实施例在防闭眼的人像拍摄处理的装置的第一个实施例的基础上,增加了显示单元和启动单元。
该防闭眼的人像拍摄处理的装置,包括:
拍摄单元,用于获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像;
检测单元,用于获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态;
调取单元,用于若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像;
处理单元,用于检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态。
其中,所述处理单元,具体用于:
在预设时间周期内,检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;
若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态;对做所述局部处理后获得的所有人像的眼睛处于睁眼状态的图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕;
若没有睁开,则对所述第一张图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
其中,所述数字图像压缩处理为采用JPEG编码算法的数字图像压缩处理。
其中,所述防闭眼的人像拍摄处理的装置还包括显示单元,所述显示单元,用于若没有人像的眼睛处于闭眼状态,则对所述第一张图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
其中,所述利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态,包括:
利用人脸检测算法检测所述第一张图像中所有人像的眼部特征值,所述眼部特征值包括的瞳孔中部高度、瞳距或瞳孔灰度值;
当任一人像的瞳孔中部高度小于等于预设高度,则判断该人像的眼睛处于闭眼状态;当任一人像的瞳孔中部高度大于所述预设高度,则判断该人像的眼睛处于睁眼状态,或;
当没有检测到任一人像的瞳距,则判断该人像的眼睛处于闭眼状态;当检测到任一人像的瞳距,则判断该人像的眼睛处于睁眼状态,或;
当任一人像的瞳孔灰度值小于等于预设瞳孔灰度值,则判断该人像的眼睛处于闭眼状态;当任一人像的瞳孔灰度值大于所述预设瞳孔灰度值,则判断该人像的眼睛处于睁眼状态。
其中,所述防闭眼的人像拍摄处理的装置还包括启动单元,所述启动单元,用于启动拍照功能。
本发明实施例提供的防闭眼的人像拍摄处理的装置,过人脸检测算法可以获取到人眼的状态,然后对闭眼的人像进行眼部局部处理,将人像的睁眼状态合成到第一张图像上,使闭眼人像处于睁眼状态,以便拍出更高质量的人像照片,有效避免拍出闭眼人像的照片。
一种防闭眼的人像拍摄处理的方法和装置,能够有效避免拍出人像的眼睛处于闭眼状态的照片,大大提高照片本身的质量,优化用户体验。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括存储器、磁盘或光盘等。
以上内容仅为本发明的较佳实施例,对于本领域的普通技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种防闭眼的人像拍摄处理的方法,其特征在于,包括:
获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像;
获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态,其中所述检测包括人脸部分检测、基于所述人脸部分检测的眼部区域检测和眼睛状态检测;
所述人脸部分检测包括:进行人脸上的特征点提取和分类;依据所述特征点将待确定的人脸图像和人脸模板进行模板匹配,如果匹配,则将待确定的人脸图像投影到人脸子空间;计算出测试图像窗口在所述人脸子空间的投影距离,若窗口图像满足阈值比较条件,则判断待确定的人脸图像为人脸,其中所述人脸子空间是特征子脸在相应的图像空间中张成的子空间,所述特征子脸包括眼睛、面颊和下颌的样本集协方差矩阵的特征向量构成的特征眼、特征颌和特征唇,所述样本集协方差矩阵的特征向量是由特征子脸技术从统计的角度寻找的所述待确定的人脸图像分布的基本元素;
所述眼部区域检测包括:根据确定的所述人脸部分的图像,利用三庭五眼的比例确定鼻子的初始位置;定义两个初始搜索矩形,分别向左、右两眼所处的位置生长,根据人眼灰度低于人脸灰度的特点,利用所述搜索矩形找到眼部的边缘,并定位眼球内瞳孔的中心;根据所述鼻子的初始位置、眼部的边缘和瞳孔的中心确定所述人脸部分的眼部区域;
所述眼睛状态检测包括:依据眼部特征值,对眼睛处于睁眼状态还是闭眼状态进行判断,其中所述眼部特征值包括瞳孔中部高度、瞳距或瞳孔灰度值;
若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像;
在预设时间周期2s内,检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态;对做所述局部处理后获得的所有人像的眼睛处于睁眼状态的图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕;其中,所述局部处理为采用眼部处于睁眼状态的后续图像中的眼部替换掉所述第一张图像中对应人像处于闭眼状态的眼部,在人脸特征吻合的前提下,把睁眼状态的眼部直接覆盖于闭眼状态的眼部;
若没有睁开,则对所述第一张图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
2.根据权利要求1所述的防闭眼的人像拍摄处理的方法,其特征在于,所述数字图像压缩处理为采用JPEG编码算法的数字图像压缩处理。
3.根据权利要求1所述的防闭眼的人像拍摄处理的方法,其特征在于,所述利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态之后,还包括:
若没有人像的眼睛处于闭眼状态,则对所述第一张图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
4.根据权利要求1或3所述的防闭眼的人像拍摄处理的方法,其特征在于,所述利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态,包括:
利用人脸检测算法检测所述第一张图像中所有人像的眼部特征值,所述眼部特征值包括的瞳孔中部高度、瞳距或瞳孔灰度值;
当任一人像的瞳孔中部高度小于等于预设高度,则判断该人像的眼睛处于闭眼状态;当任一人像的瞳孔中部高度大于所述预设高度,则判断该人像的眼睛处于睁眼状态,或;
当没有检测到任一人像的瞳距,则判断该人像的眼睛处于闭眼状态;当检测到任一人像的瞳距,则判断该人像的眼睛处于睁眼状态,或;
当任一人像的瞳孔灰度值小于等于预设瞳孔灰度值,则判断该人像的眼睛处于闭眼状态;当任一人像的瞳孔灰度值大于所述预设瞳孔灰度值,则判断该人像的眼睛处于睁眼状态。
5.根据权利要求1所述的防闭眼的人像拍摄处理的方法,其特征在于,所述获得确认拍摄指令之前,还包括:启动拍照功能。
6.一种防闭眼的人像拍摄处理的装置,其特征在于,包括:
拍摄单元,用于获得确认拍摄指令,通过拍摄人像的取景界面获得待确认图像,所述待确认图像包括连续获取的若干张未做数字图像压缩处理的图像;
检测单元,用于获取所述待确认图像中的第一张图像,利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态,其中所述检测包括人脸部分检测、基于所述人脸部分检测的眼部区域检测和眼睛状态检测;
所述人脸部分检测包括:进行人脸上的特征点提取和分类;依据所述特征点将待确定的人脸图像和人脸模板进行模板匹配,如果匹配,则将待确定的人脸图像投影到人脸子空间;计算出测试图像窗口在所述人脸子空间的投影距离,若窗口图像满足阈值比较条件,则判断待确定的人脸图像为人脸,其中所述人脸子空间是特征子脸在相应的图像空间中张成的子空间,所述特征子脸包括眼睛、面颊和下颌的样本集协方差矩阵的特征向量构成的特征眼、特征颌和特征唇,所述样本集协方差矩阵的特征向量是由特征子脸技术从统计的角度寻找的所述待确定的人脸图像分布的基本元素;
所述眼部区域检测包括:根据确定的所述人脸部分的图像,利用三庭五眼的比例确定鼻子的初始位置;定义两个初始搜索矩形,分别向左、右两眼所处的位置生长,根据人眼灰度低于人脸灰度的特点,利用所述搜索矩形找到眼部的边缘,并定位眼球内瞳孔的中心;根据所述鼻子的初始位置、眼部的边缘和瞳孔的中心确定所述人脸部分的眼部区域;
所述眼睛状态检测包括:依据眼部特征值,对眼睛处于睁眼状态还是闭眼状态进行判断,其中所述眼部特征值包括瞳孔中部高度、瞳距或瞳孔灰度值;
调取单元,用于若至少有一个人像的眼睛处于闭眼状态,则保存所述第一张图像,并调取所述第一张图像之后的后续图像;
处理单元,用于在预设时间周期2s内,检测所述后续图像中对应于所述第一张图像处于闭眼状态的人像的眼睛是否睁开;若睁开,则利用睁眼状态对应的该张后续图像对所述第一张图像对应处于闭眼状态的眼部做局部处理,以使所述第一张图像中所有人像的眼睛处于睁眼状态;对做所述局部处理后获得的所有人像的眼睛处于睁眼状态的图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕;其中,所述局部处理为采用眼部处于睁眼状态的后续图像中的眼部替换掉所述第一张图像中对应人像处于闭眼状态的眼部,在人脸特征吻合的前提下,把睁眼状态的眼部直接覆盖于闭眼状态的眼部;
若没有睁开,则对所述第一张图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
7.根据权利要求6所述的防闭眼的人像拍摄处理的装置,其特征在于,所述数字图像压缩处理为采用JPEG编码算法的数字图像压缩处理。
8.根据权利要求6所述的防闭眼的人像拍摄处理的装置,其特征在于,所述防闭眼的人像拍摄处理的装置还包括显示单元,所述显示单元,用于若没有人像的眼睛处于闭眼状态,则对所述第一张图像进行数字图像压缩处理,把经所述数字图像压缩处理后的最终人像图片显示于屏幕。
9.根据权利要求6或8所述的防闭眼的人像拍摄处理的装置,其特征在于,所述利用人脸检测算法检测所述第一张图像中所有人像的眼睛的状态,包括:
利用人脸检测算法检测所述第一张图像中所有人像的眼部特征值,所述眼部特征值包括的瞳孔中部高度、瞳距或瞳孔灰度值;
当任一人像的瞳孔中部高度小于等于预设高度,则判断该人像的眼睛处于闭眼状态;当任一人像的瞳孔中部高度大于所述预设高度,则判断该人像的眼睛处于睁眼状态,或;
当没有检测到任一人像的瞳距,则判断该人像的眼睛处于闭眼状态;当检测到任一人像的瞳距,则判断该人像的眼睛处于睁眼状态,或;
当任一人像的瞳孔灰度值小于等于预设瞳孔灰度值,则判断该人像的眼睛处于闭眼状态;当任一人像的瞳孔灰度值大于所述预设瞳孔灰度值,则判断该人像的眼睛处于睁眼状态。
10.根据权利要求6所述的防闭眼的人像拍摄处理的装置,其特征在于,所述防闭眼的人像拍摄处理的装置还包括启动单元,所述启动单元,用于启动拍照功能。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510416911.7A CN105072327B (zh) | 2015-07-15 | 2015-07-15 | 一种防闭眼的人像拍摄处理的方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510416911.7A CN105072327B (zh) | 2015-07-15 | 2015-07-15 | 一种防闭眼的人像拍摄处理的方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105072327A CN105072327A (zh) | 2015-11-18 |
CN105072327B true CN105072327B (zh) | 2018-05-25 |
Family
ID=54501596
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510416911.7A Expired - Fee Related CN105072327B (zh) | 2015-07-15 | 2015-07-15 | 一种防闭眼的人像拍摄处理的方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105072327B (zh) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105592249B (zh) * | 2015-12-23 | 2018-12-21 | 努比亚技术有限公司 | 基于眼纹识别对照片中人物进行眼部修复的终端及方法 |
CN105827969A (zh) * | 2016-03-29 | 2016-08-03 | 乐视控股(北京)有限公司 | 一种智能拍照的方法、装置及移动设备 |
CN106250426A (zh) * | 2016-07-25 | 2016-12-21 | 深圳天珑无线科技有限公司 | 一种照片处理方法和终端 |
US10148884B2 (en) * | 2016-07-29 | 2018-12-04 | Microsoft Technology Licensing, Llc | Facilitating capturing a digital image |
CN107292261B (zh) * | 2017-06-16 | 2021-07-13 | 深圳天珑无线科技有限公司 | 一种拍照方法及其移动终端 |
CN107622483A (zh) * | 2017-09-15 | 2018-01-23 | 深圳市金立通信设备有限公司 | 一种图像合成方法及终端 |
CN107743195A (zh) * | 2017-10-09 | 2018-02-27 | 惠州Tcl移动通信有限公司 | 一种拍照方法、移动终端及存储介质 |
CN107833197B (zh) * | 2017-10-31 | 2021-03-02 | Oppo广东移动通信有限公司 | 图像处理的方法、装置、计算机可读存储介质和电子设备 |
CN107911608A (zh) * | 2017-11-30 | 2018-04-13 | 西安科锐盛创新科技有限公司 | 防闭眼拍摄的方法 |
CN108022206A (zh) * | 2017-11-30 | 2018-05-11 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
CN108234878A (zh) * | 2018-01-31 | 2018-06-29 | 广东欧珀移动通信有限公司 | 图像处理方法、装置及终端 |
CN108229443A (zh) * | 2018-02-08 | 2018-06-29 | 三星电子(中国)研发中心 | 一种防闭眼的拍照方法和装置 |
CN108462831B (zh) * | 2018-03-18 | 2020-09-08 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN108259766B (zh) * | 2018-03-29 | 2020-05-19 | 宁波大学 | 一种移动智能终端拍照摄像处理方法 |
CN108259769B (zh) * | 2018-03-30 | 2020-08-14 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110717349A (zh) * | 2018-07-11 | 2020-01-21 | 深圳纬目信息技术有限公司 | 一种桌垫和状态监测方法 |
CN114170069A (zh) * | 2021-11-25 | 2022-03-11 | 杭州电子科技大学上虞科学与工程研究院有限公司 | 一种基于连续多张照片的闭眼自动处理方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101617339A (zh) * | 2007-02-15 | 2009-12-30 | 索尼株式会社 | 图像处理装置和图像处理方法 |
WO2010029922A1 (ja) * | 2008-09-12 | 2010-03-18 | アイシン精機株式会社 | 開閉眼判定装置、開眼度推定装置、及びプログラム |
CN103369248A (zh) * | 2013-07-20 | 2013-10-23 | 厦门美图移动科技有限公司 | 一种闭眼后睁开的拍照方法 |
CN103716539A (zh) * | 2013-12-16 | 2014-04-09 | 乐视致新电子科技(天津)有限公司 | 一种拍照方法和设备 |
CN104052908A (zh) * | 2013-03-15 | 2014-09-17 | 卡西欧计算机株式会社 | 显示装置、以及显示方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8102417B2 (en) * | 2006-10-25 | 2012-01-24 | Delphi Technologies, Inc. | Eye closure recognition system and method |
CN100463000C (zh) * | 2007-09-27 | 2009-02-18 | 上海交通大学 | 基于级联分类和哈夫圆变换的人眼状态检测方法 |
JP5169139B2 (ja) * | 2007-10-25 | 2013-03-27 | 株式会社ニコン | カメラ、および画像記録プログラム |
CN102193621A (zh) * | 2010-03-17 | 2011-09-21 | 三星电子(中国)研发中心 | 基于视觉的交互式电子设备控制系统及其控制方法 |
JP6304999B2 (ja) * | 2013-10-09 | 2018-04-04 | アイシン精機株式会社 | 顔検出装置、方法およびプログラム |
-
2015
- 2015-07-15 CN CN201510416911.7A patent/CN105072327B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101617339A (zh) * | 2007-02-15 | 2009-12-30 | 索尼株式会社 | 图像处理装置和图像处理方法 |
WO2010029922A1 (ja) * | 2008-09-12 | 2010-03-18 | アイシン精機株式会社 | 開閉眼判定装置、開眼度推定装置、及びプログラム |
CN102150189A (zh) * | 2008-09-12 | 2011-08-10 | 爱信精机株式会社 | 睁闭眼判定装置、睁眼度推定装置及程序 |
CN104052908A (zh) * | 2013-03-15 | 2014-09-17 | 卡西欧计算机株式会社 | 显示装置、以及显示方法 |
CN103369248A (zh) * | 2013-07-20 | 2013-10-23 | 厦门美图移动科技有限公司 | 一种闭眼后睁开的拍照方法 |
CN103716539A (zh) * | 2013-12-16 | 2014-04-09 | 乐视致新电子科技(天津)有限公司 | 一种拍照方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN105072327A (zh) | 2015-11-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105072327B (zh) | 一种防闭眼的人像拍摄处理的方法和装置 | |
EP3582187B1 (en) | Face image processing method and apparatus | |
CN107730444B (zh) | 图像处理方法、装置、可读存储介质和计算机设备 | |
WO2016180224A1 (zh) | 一种人物图像处理方法及装置 | |
CN105243371B (zh) | 一种人脸美颜程度的检测方法、系统及拍摄终端 | |
CN102946516A (zh) | 移动终端检测眨眼动作实现自拍的方法及移动终端 | |
WO2021027537A1 (zh) | 一种拍摄证件照的方法、装置、设备及存储介质 | |
KR20190038594A (ko) | 얼굴 인식-기반 인증 | |
US20170161553A1 (en) | Method and electronic device for capturing photo | |
CN107820017B (zh) | 图像拍摄方法、装置、计算机可读存储介质和电子设备 | |
CN107862653B (zh) | 图像显示方法、装置、存储介质和电子设备 | |
CN105357425B (zh) | 图像拍摄方法及装置 | |
CN106599660A (zh) | 终端安全验证方法及装置 | |
CN108810406B (zh) | 人像光效处理方法、装置、终端及计算机可读存储介质 | |
CN107862274A (zh) | 美颜方法、装置、电子设备和计算机可读存储介质 | |
CN107330370B (zh) | 一种额头皱纹动作检测方法和装置及活体识别方法和系统 | |
WO2017211139A1 (zh) | 一种实现视频通讯的方法和装置 | |
CN103716539A (zh) | 一种拍照方法和设备 | |
CN111144266B (zh) | 人脸表情的识别方法及装置 | |
KR20100055946A (ko) | 동영상 썸네일 생성 방법 및 장치 | |
CN108182714A (zh) | 图像处理方法及装置、存储介质 | |
WO2021120626A1 (zh) | 一种图像处理方法、终端及计算机存储介质 | |
CN113642364A (zh) | 人脸图像处理方法、装置、设备及计算机可读存储介质 | |
CN104735357A (zh) | 一种自动拍照的方法和装置 | |
CN114187166A (zh) | 图像处理方法、智能终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder |
Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Patentee after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Patentee before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. |
|
CP01 | Change in the name or title of a patent holder | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180525 |
|
CF01 | Termination of patent right due to non-payment of annual fee |