CN117528063A - 一种手机摄像头景深测量的光学装置及方法 - Google Patents

Abstract

本发明公开了一种手机摄像头景深测量的光学装置，包括照明模块和成像模块，照明模块包括第一壳体，且第一壳体的内部设置有光源，光源的内部设置有驱动器，且第一壳体顶部的外壁上设置有漫射器，成像模块包括第二壳体和底板，且第二壳体罩在底板的外部，第二壳体的内部插放有成像透镜，第二壳体底部的外壁上设置有带通滤波器，底板的内部设置有成像器。本发明有益效果光源为波长与温度相关性较低的窄带光源，驱动器为垂直腔面发射激光器(VCSEL)和边缘发射激光器(EEL)，垂直腔面发射激光器VCSEL，垂直腔面发射激光器VCSE成本较低、外形尺寸小、可靠性高且易于集成到手机摄像头成像技术的ToF模块中而越来越受欢迎。

Description

一种手机摄像头景深测量的光学装置及方法

技术领域

本发明涉及手机摄像头技术领域，具体涉及一种手机摄像头景深测量的光学装置及方法。

背景技术

手机摄像头可以进行录像、拍照、文字识别、拍全景照等功能，其中全景照片，又称为全景，通常是指符合人的双眼正常有效视角或包括双眼余光视角以上，乃至360度完整场景范围拍摄的照片；

景深，是指在摄影机镜头或其他成像器前沿能够取得清晰图像的成像所测定的被摄物体前后距离范围。而光圈、镜头、及拍摄物的距离是影响景深的重要因素；在聚焦完成后，焦点前后的范围内所呈现的清晰图像，这一前一后的距离范围，便叫做景深，在镜头前方(调焦点的前、后)有一段一定长度的空间，当被摄物体位于这段空间内时，其在底片上的成像恰位于焦点前后这两个弥散圆之间，被摄体所在的这段空间的长度，就叫景深，换言之，在这段空间内的被摄体，其呈现在底片面的影象模糊度，都在容许弥散圆的限定范围内，这段空间的长度就是景深

光学器件在飞行时间(ToF)景深测量摄像头中起着关键作用，光学设计决定了最终系统的复杂性和可行性及其性能，3D ToF摄像头有一些独特的特性1，因此其在光学方面有一些特殊要求，本文介绍景深测量光学系统架构，其由成像光学子组件、接收器上的ToF传感器和发射器上的照明模块组成，并讨论如何优化每个子模块以提高传感器和系统性。

如申请号为CN10248660A的一种景深测量方法，景深测量方法包括：分别于数个聚焦刻度撷取图像，数张图像分别包括对应至同一图像位置的图像区域；从数个图像区域中选择一图像区域作为最佳景深图像区域；以及根据查阅表找出对应最佳景深图像区域的聚焦刻度所对应的景深值。

上述以及在现有技术中，光源通常使用LED发光灯管，速度太慢，并且成本高、体积大、可靠性低。因此，亟需设计一种手机摄像头景深测量的光学装置及方法来解决上述问题。

发明内容

本发明的目的是提供一种手机摄像头景深测量的光学装置及方法，以解决现有技术中的上述不足之处。

为了实现上述目的，本发明提供如下技术方案：

一种手机摄像头景深测量的光学装置，包括照明模块和成像模块，所述照明模块包括第一壳体，且第一壳体的内部设置有光源，所述光源的内部设置有驱动器，且第一壳体顶部的外壁上设置有漫射器，所述成像模块包括第二壳体和底板，且第二壳体罩在底板的外部，所述第二壳体的内部插放有成像透镜，所述第二壳体底部的外壁上设置有带通滤波器，所述底板的内部设置有成像器，且成像器的内部设置有微透镜阵列。

进一步地，所述光源为波长与温度相关性较低的窄带光源，且驱动器为垂直腔面发射激光器(VCSEL)和边缘发射激光器(EEL)。

进一步地，所述光源因光波长的不同会对TOF的性能产生影响，且根据以下情况对820nm或940nm波长进行选择：传感器量子效率和响应度、QE衡量光电探测器将光子转换为电子的能力、R衡量光电探测器将光功率转换为电流的能力、人类感知和太阳光。

进一步地，所述传感器量子效率和响应度：量子效率(QE)和响应度(R)是相互关联的，QE测量光电探测器将光子转换为电子的能力，R测量光电探测器将光功率转换为电流的能力，公式为：R＝R＝QE×q/hc/λ(QE＝收集到的电子数量/撞击光检测板的光子数量(％)；R＝光检测板上的上的电流/光检测板上的光功率(A/W)；R＝QE×q/hc/λ；其中q是电子电荷，h是普朗克常数，c是光速，λ是波长)；

硅基传感器的QE在850nm处要比在940nm处好2倍以上；例如，ADICW ToF传感器在850nm处的QE是44％，在940nm处的QE只有27％。

进一步地，所述人类感知：人眼可以感知850nm的光，但是看不到940nm的光；所述太阳光：户外应用时，由于大气的吸收，920nm至960nm范围的太阳辐射强度有所下降，与850nm范围相比，940nm范围的太阳辐射强度还不到一半，即户外应用中，以940nm运行ToF系统可提供更好的抗光环境干扰性能、更好的深度传感性能。

进一步地，所述光源的辐射强度是影响ToF系统的信噪比的原因之一，所述光源的光波束轮廓完整性应满足以下特征：FOI内的照明轮廓形状、轮廓宽度、光学效率(即在特定FOV内的封闭能量)和FOI外的光功率下降，且应满足以下公式：I＝dΦ/dΩ(dΦ是入射进立体角dΩ中的功率)。

进一步地，所述FOI内的照明轮廓形状：ToF泛光照明中最常见的辐射强度分布呈蝙蝠翼形状，且具有呈cos-n(θ)变化的轮廓，以补偿成像镜头的衰减，且目标中心和目标边缘之间辐照度(E)中的cos3(θ)下降因子[W/m2]的定义公式为：E＝dΦ/DA＝I(θ)cos(θ)/R(θ)2＝I(θ)cos3(θ)/R0²；(其中E是辐射照度，dA是光功率dΦ照射的表面积，R(θ)是光源与dA之间的距离，dΩ＝dAcos(θ)/R(θ)2)。

进一步地，所述轮廓宽度：轮廓的宽度是光源的强度轮廓与散射器对准直光束响应的卷积；散射器的输入发散角越宽，宽度就越宽，过渡斜率就越慢，可以使用以下两个指标来确定此类损失的可接受标准：光学效率-成像镜头FOV内的封闭能量，且该规范定义了成像模块将接收多少能量，定义为：光学效率＝镜头FOV内的2D集合光功率/整个照明剖面轮廓的2D集合光功率％x散射器的传输效率；

FOI外的光功率下降定义为：FOI外的光功率下降＝照明轮廓的总积分-FOI内的照明轮廓积分/照明轮廓的总积分％。

进一步地，所述微透镜阵列的像素阵列上光线采集的效率和均匀性极大地影响整体性能，且光线收集效率与1/(f/#)2成正比，其中f/#＝(焦距)/(孔径大小)，所述光线采集的效率和均匀性会受杂散光影响，且杂散光受影响的因素为：光晕、增透膜、透镜数量、带通滤波器和微透镜阵列。

一种手机摄像头景深测量的方法，包括所述的一种手机摄像头景深测量的光学装置，还包括以下方法：将照明模块内部的光源的光被相机视野中的物体反向散射，成像模块的成像器和微透镜阵列对反射的光进行接收，测量发射波形和反射接收波形之间的相移，通过测量多个调制频率的相移，可以计算每个像素的深度值，相移是通过使用像素内光子混合解调，测量不同的相对延时下发射波形和接收波形之间的相关性获得的，即可得到景深值。

在上述技术方案中，本发明提供的一种手机摄像头景深测量的光学装置及方法，(1)通过设置的光源，光源为波长与温度相关性较低的窄带光源，驱动器为垂直腔面发射激光器(VCSEL)和边缘发射激光器(EEL)，垂直腔面发射激光器VCSEL，垂直腔面发射激光器VCSE成本较低、外形尺寸小、可靠性高且易于集成到手机摄像头成像技术的ToF模块中而越来越受欢迎，与EEL(光线从侧面射出)和LED(光线从侧面和顶部射出)相比，VCSEL射出的光束垂直于其表面，故生产良率更高且制造成本更低。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。

图1为本发明一种手机摄像头景深测量的光学装置及方法实施例提供的照明模块和成像模块结构示意图。

图2为本发明一种手机摄像头景深测量的光学装置及方法实施例提供的成像模块立体结构示意图。

图3为本发明一种手机摄像头景深测量的光学装置及方法实施例提供的太阳光谱辐照度结构示意图。

图4为本发明一种手机摄像头景深测量的光学装置及方法实施例提供的辐照度分布与强度的关系结构示意图。

图5为本发明一种手机摄像头景深测量的光学装置及方法实施例提供的照明剖面示例结构示意图。

图6为本发明一种手机摄像头景深测量的光学装置及方法实施例提供的相对照度示例结构示意图

附图标记说明：

1、照明模块；2、成像模块；3、光源；4、成像透镜；5、带通滤波器；6、成像器；7、微透镜阵列；8、第二壳体；9、底板；10、第一壳体；11、漫射器；12、驱动器。

具体实施方式

为了使本领域的技术人员更好地理解本发明的技术方案，下面将结合附图对本发明作进一步的详细介绍。

如图1-6所示，本发明实施例提供的一种手机摄像头景深测量的光学装置，包括照明模块1和成像模块2，照明模块1包括第一壳体10，且第一壳体10的内部设置有光源3，光源3的内部设置有驱动器12，且第一壳体10顶部的外壁上设置有漫射器11，成像模块2包括第二壳体8和底板9，且第二壳体8罩在底板9的外部，第二壳体8的内部插放有成像透镜4，第二壳体8底部的外壁上设置有带通滤波器5，底板9的内部设置有成像器6，且成像器6的内部设置有微透镜阵列7。

本发明提供的一种手机摄像头景深测量的光学装置，包括照明模块1和成像模块2，照明模块1包括第一壳体10，且第一壳体10的内部设置有光源3，光源3的内部设置有驱动器12，且第一壳体10顶部的外壁上设置有漫射器11，成像模块2包括第二壳体8和底板9，且第二壳体8罩在底板9的外部，第二壳体8的内部插放有成像透镜4，第二壳体8底部的外壁上设置有带通滤波器5，底板9的内部设置有成像器6，且成像器6的内部设置有微透镜阵列7，光源3使用波长与温度相关性较低的窄带光源，驱动器12为垂直腔面发射激光器(VCSEL)和边缘发射激光器(EEL)，垂直腔面发射激光器VCSE成本较低、外形尺寸小、可靠性高且易于集成到手机摄像头成像技术的ToF模块中而越来越受欢迎，与EEL(光线从侧面射出)和LED(光线从侧面和顶部射出)相比，VCSEL射出的光束垂直于其表面，故生产良率更高且制造成本更低。

本发明提供的一个实施例中，光源3为波长与温度相关性较低的窄带光源，且驱动器12为垂直腔面发射激光器(VCSEL)和边缘发射激光器(EEL)。

本发明提供的另一个实施例中，光源3因光波长的不同会对TOF的性能产生影响，且根据以下情况对820nm或940nm波长进行选择：传感器量子效率和响应度、QE衡量光电探测器将光子转换为电子的能力、R衡量光电探测器将光功率转换为电流的能力、人类感知和太阳光。

本发明提供的再一个实施例中，传感器量子效率和响应度：量子效率(QE)和响应度(R)是相互关联的，QE测量光电探测器将光子转换为电子的能力，R测量光电探测器将光功率转换为电流的能力，公式为：R＝R＝QE×q/hc/λ(QE＝收集到的电子数量/撞击光检测板的光子数量(％)；R＝光检测板上的上的电流/光检测板上的光功率(A/W)；R＝QE×q/hc/λ；其中q是电子电荷，h是普朗克常数，c是光速，λ是波长)；

硅基传感器的QE在850nm处要比在940nm处好2倍以上；例如，ADICW ToF传感器在850nm处的QE是44％，在940nm处的QE只有27％，对于相同强度的照明光功率，较高的QE和R会导致更好的信噪比(SNR)，尤其是当返回传感器的光不多时(遇到远距离或低反射率物体时就是这种情况)。

本发明提供的一个实施例中，如图3所示的，人类感知：人眼可以感知850nm的光，但是看不到940nm的光；太阳光：虽然可见光谱区域中的太阳光最强，但NIR区域中的能量仍然很大，阳光(更一般地说是环境光)会增加景深噪声，缩短ToF摄像头的有效距离，户外应用时，由于大气的吸收，920nm至960nm范围的太阳辐射强度有所下降，与850nm范围相比，940nm范围的太阳辐射强度还不到一半，即户外应用中，以940nm运行ToF系统可提供更好的抗光环境干扰性能、更好的深度传感性能。

本发明提供的另一个实施例中，光源3的辐射强度是影响ToF系统的信噪比的原因之一，光源产生恒定的光功率，其分布到漫射光学元件所产生的FOI内的三维空间中，随着FOI增大，(如表1所示)，表1列出了FOI的几个例子及其对应的辐射强度(归一化为60°×45°FOI的辐射强度)，辐射强度计算为每个矩形立体角的光功率，每立体弧度(sr)承受的能量——即辐射强度[W/sr]——减小；光源3的光波束轮廓完整性应满足以下特征：FOI内的照明轮廓形状、轮廓宽度、光学效率(即在特定FOV内的封闭能量)和FOI外的光功率下降，且应满足以下公式：I＝dΦ/dΩ(dΦ是入射进立体角dΩ中的功率)。

本发明提供的再一个实施例中，如图4所示的，FOI内的照明轮廓形状：ToF泛光照明中最常见的辐射强度分布呈蝙蝠翼形状，且具有呈cos-n(θ)变化的轮廓，以补偿成像镜头的衰减，且目标中心和目标边缘之间辐照度(E)中的cos3(θ)下降因子[W/m2]的定义公式为：E＝dΦ/DA＝I(θ)cos(θ)/R(θ)2＝I(θ)cos3(θ)/R0₂；(其中E是辐射照度，dA是光功率dΦ照射的表面积，R(θ)是光源3与dA之间的距离，dΩ＝dAcos(θ)/R(θ)2)。

本发明提供的另一个实施例中，如图5所示的，轮廓宽度：轮廓的宽度是光源的强度轮廓与散射器对准直光束响应的卷积；散射器的输入发散角越宽，宽度就越宽，过渡斜率就越慢，可以使用以下两个指标来确定此类损失的可接受标准：光学效率-成像镜头FOV内的封闭能量，且该规范定义了成像模块将接收多少能量，定义为：光学效率＝镜头FOV内的2D集合光功率/整个照明剖面轮廓的2D集合光功率％x散射器的传输效率；

FOI外的光功率下降定义为：FOI外的光功率下降＝照明轮廓的总积分-FOI内的照明轮廓积分/照明轮廓的总积分％，通过在光源和散射器之间设置准直透镜来减小散射器的输入角，或者选择具有较小发散角的光源来提高光学效率。

本发明提供的另一个实施例中，如图6所示，微透镜阵列7的像素阵列上光线采集的效率和均匀性极大地影响整体性能，且光线收集效率与1/(f/#)2成正比，其中f/#＝(焦距)/(孔径大小)，f/#小的光学系统需要权衡取舍，随着孔径尺寸的增加，会出现更多的光晕和像差，相对照度(RI)和主光线角(CRA)，RI＝传感器上的单点照度/视场内的最大照度，在无畸变和光晕的透镜系统中，传感器照度依据(cosq)4定律下降，其中q是传感器平面上的CRA入射角。结果是图像朝向传感器边界方向相对变暗，通过在镜头系统中引入负畸变可以减少辐射照度的下降；传感器边缘的最大CRA应根据成像器微透镜阵列规格进行优化，较小的CRA有助于缩小BPF的带宽，从而实现更好的抗环境光干扰性能，图6中的示例1的透镜系统具有较大的CRA，并且随着视场角的增加成像锥逐渐减小(即f/#增加)。相应的RI随视场角显著下降，就如相应的RI图中所示，图6中的示例2表明，可以通过最小化CRA以及在视场内保持均匀的f/#来很好地保持RI；光线采集的效率和均匀性会受杂散光影响，杂散光是系统中可以被传感器检测到的的何有害光，杂散光可以来自场源内部或外部，通过偶数次反射会形成鬼影(例如，镜头光晕)，杂散光也可以从光机结构和任何散射表面发出，ToF系统对杂散光特别敏感，因为杂散光的多径特性会导致到像素的光路长度不同，从而导致深度测量不准确，且杂散光受影响的因素为：光晕(光晕会切断成像光线，有时可以用来提高图像质量同时平衡周边区域的亮度。然而，切断的光线通常会在镜头系统内反弹，从而容易造成杂散光问题)、增透膜(光学元件上的增透膜可以降低各个表面的反射率，从而有效降低透镜反射对深度计算的影响，应针对光源波长范围和透镜表面入射角的角度范围仔细设计增透膜)、透镜数量(虽然增加更多的透镜可以为实现设计规格和更高分辨率的图像质量提供更大的自由度，但它也增加了来自透镜的不可避免的背向反射，并增加了复杂性和成本)、带通滤波器(BPF可以切断环境光的影响，对于ToF系统来说至关重要。为了获得最佳性能，BPF设计应针对以下参数进行裁剪：镜头参数，例如跨场的f/#和CRA；光源参数，例如带宽、标称波长容差和热偏移；低入射角漂移与波长或低热漂移与波长的基底材料特性)和微透镜阵列(ToF背照式(BSI)传感器通常有一层微透镜阵列，可将入射到图像传感器的光线汇聚起来并最大化到达像素调制区域的光子数量。微透镜的几何形状经过优化后可以在光子转化为电子的像素区域内实现最高的吸收率)。

一种手机摄像头景深测量的方法，包括以下方法：将照明模块1内部的光源3的光被相机视野中的物体反向散射，成像模块2的成像器6和微透镜阵列7对反射的光进行接收，测量发射波形和反射接收波形之间的相移，通过测量多个调制频率的相移，可以计算每个像素的深度值，相移是通过使用像素内光子混合解调，测量不同的相对延时下发射波形和接收波形之间的相关性获得的，即可得到景深值。

工作原理：该手机摄像头景深测量的光学装置使用时，将照明模块1内部的光源3的光被相机视野中的物体反向散射，成像模块2的成像器6和微透镜阵列7对反射的光进行接收，测量发射波形和反射接收波形之间的相移，通过测量多个调制频率的相移，可以计算每个像素的深度值，相移是通过使用像素内光子混合解调，测量不同的相对延时下发射波形和接收波形之间的相关性获得的，即可得到景深值，光源3使用波长与温度相关性较低的窄带光源，驱动器12为垂直腔面发射激光器(VCSEL)和边缘发射激光器(EEL)，垂直腔面发射激光器VCSE成本较低、外形尺寸小、可靠性高且易于集成到手机摄像头成像技术的ToF模块中而越来越受欢迎，与EEL(光线从侧面射出)和LED(光线从侧面和顶部射出)相比，VCSEL射出的光束垂直于其表面，故生产良率更高且制造成本更低。

以上只通过说明的方式描述了本发明的某些示范性实施例，毋庸置疑，对于本领域的普通技术人员，在不偏离本发明的精神和范围的情况下，可以用各种不同的方式对所描述的实施例进行修正。因此，上述附图和描述在本质上是说明性的，不应理解为对本发明权利要求保护范围的限制。

Claims (10)

1.一种手机摄像头景深测量的光学装置，包括照明模块(1)和成像模块(2)，其特征在于，所述照明模块(1)包括第一壳体(10)，且第一壳体(10)的内部设置有光源(3)，所述光源(3)的内部设置有驱动器(12)，且第一壳体(10)顶部的外壁上设置有漫射器(11)，所述成像模块(2)包括第二壳体(8)和底板(9)，且第二壳体(8)罩在底板(9)的外部，所述第二壳体(8)的内部插放有成像透镜(4)，所述第二壳体(8)底部的外壁上设置有带通滤波器(5)，所述底板(9)的内部设置有成像器(6)，且成像器(6)的内部设置有微透镜阵列(7)。

2.根据权利要求1所述的一种手机摄像头景深测量的光学装置，其特征在于，所述光源(3)为波长与温度相关性较低的窄带光源，且驱动器(12)为垂直腔面发射激光器(VCSEL)和边缘发射激光器(EEL)。

3.根据权利要求1所述的一种手机摄像头景深测量的光学装置，其特征在于，所述光源(3)因光波长的不同会对TOF的性能产生影响，且根据以下情况对820nm或940nm波长进行选择：传感器量子效率和响应度、QE衡量光电探测器将光子转换为电子的能力、R衡量光电探测器将光功率转换为电流的能力、人类感知和太阳光。

4.根据权利要求3所述的一种手机摄像头景深测量的光学装置，其特征在于，所述传感器量子效率和响应度：量子效率(QE)和响应度(R)是相互关联的，QE测量光电探测器将光子转换为电子的能力，R测量光电探测器将光功率转换为电流的能力，公式为：R＝R＝QE×q/hc/λ(QE＝收集到的电子数量/撞击光检测板的光子数量(％)；R＝光检测板上的上的电流/光检测板上的光功率(A/W)；R＝QE×q/hc/λ；其中q是电子电荷，h是普朗克常数，c是光速，λ是波长)；

硅基传感器的QE在850nm处要比在940nm处好2倍以上；例如，ADICW ToF传感器在850nm处的QE是44％，在940nm处的QE只有27％。

5.根据权利要求3所述的一种手机摄像头景深测量的光学装置，其特征在于，所述人类感知：人眼可以感知850nm的光，但是看不到940nm的光；所述太阳光：户外应用时，由于大气的吸收，920nm至960nm范围的太阳辐射强度有所下降，与850nm范围相比，940nm范围的太阳辐射强度还不到一半，即户外应用中，以940nm运行ToF系统可提供更好的抗光环境干扰性能、更好的深度传感性能。

6.根据权利要求1所述的一种手机摄像头景深测量的光学装置，其特征在于，所述光源(3)的辐射强度是影响ToF系统的信噪比的原因之一(表1)，所述光源(3)的光波束轮廓完整性应满足以下特征：FOI内的照明轮廓形状、轮廓宽度、光学效率(即在特定FOV内的封闭能量)和FOI外的光功率下降，且应满足以下公式：I＝dΦ/dΩ(dΦ是入射进立体角dΩ中的功率)。

7.根据权利要求6所述的一种手机摄像头景深测量的光学装置，其特征在于，所述FOI内的照明轮廓形状：ToF泛光照明中最常见的辐射强度分布呈蝙蝠翼形状，且具有呈cos-n(θ)变化的轮廓，以补偿成像镜头的衰减，且目标中心和目标边缘之间辐照度(E)中的cos3(θ)下降因子[W/m2]的定义公式为：E＝dΦ/DA＝I(θ)cos(θ)/R(θ)2＝I(θ)cos3(θ)/R0₂；(其中E是辐射照度，dA是光功率dΦ照射的表面积，R(θ)是光源(3)与dA之间的距离，dΩ＝dAcos(θ)/R(θ)2)。

8.根据权利要求6所述的一种手机摄像头景深测量的光学装置，其特征在于，所述轮廓宽度：轮廓的宽度是光源的强度轮廓与散射器对准直光束响应的卷积；散射器的输入发散角越宽，宽度就越宽，过渡斜率就越慢，可以使用以下两个指标来确定此类损失的可接受标准：光学效率-成像镜头FOV内的封闭能量，且该规范定义了成像模块将接收多少能量，定义为：光学效率＝镜头FOV内的2D集合光功率/整个照明剖面轮廓的2D集合光功率％x散射器的传输效率；

FOI外的光功率下降定义为：FOI外的光功率下降＝照明轮廓的总积分-FOI内的照明轮廓积分/照明轮廓的总积分％。

9.根据权利要求1所述的一种手机摄像头景深测量的光学装置，其特征在于，所述微透镜阵列(7)的像素阵列上光线采集的效率和均匀性极大地影响整体性能，且光线收集效率与1/(f/#)2成正比，其中f/#＝(焦距)/(孔径大小)，所述光线采集的效率和均匀性会受杂散光影响，且杂散光受影响的因素为：光晕、增透膜、透镜数量、带通滤波器和微透镜阵列。

10.一种手机摄像头景深测量的方法，其特征在于，包括权利要求1-9中的任意一项所述的一种手机摄像头景深测量的光学装置，包括以下方法：

将照明模块(1)内部的光源(3)的光被相机视野中的物体反向散射，成像模块(2)的成像器(3)和微透镜阵列(7)对反射的光进行接收，测量发射波形和反射接收波形之间的相移，通过测量多个调制频率的相移，可以计算每个像素的深度值，相移是通过使用像素内光子混合解调，测量不同的相对延时下发射波形和接收波形之间的相关性获得的，即可得到景深值。