CN108769636B - 投影方法及装置、电子设备 - Google Patents

Abstract

本发明涉及投影方法及装置、电子设备。所述投影方法包括：确定投影图像中畸变区域的位置；基于所述畸变区域的位置，根据设定策略调整投影到所述畸变区域中的图像，从而使畸变区域中的图像与投影图像中其他位置相一致。本实施例无需用于更换投射面即可使投影区域内投影图像无畸变，保证用户的观看体验。

Description

投影方法及装置、电子设备

技术领域

本发明涉及显示技术领域，尤其涉及一种投影方法及装置、电子设备。

背景技术

为满足一些用户的需求，例如智能手机等部分电子设备已增加投影功能，方便用户将待显示图像或者视频投射至周围的墙面。在一些场景中，用户所在位置周围的墙面会存在亮度不均匀、表面凹凸不平的情形，导致呈现给用户的投影图像存在局部畸变，降低用户的观看体验。

发明内容

本发明提供一种投影方法及装置、电子设备，以解决相关技术中投影图像存在局部畸变影响用户观看的问题。

根据本发明实施例的第一方面，提供一种投影方法，所述方法包括：

确定投影图像中畸变区域的位置；

基于所述畸变区域的位置，根据设定策略调整投影到所述畸变区域中的图像。

可选地，确定投影图像中畸变区域的位置包括：

获取触发信号；所述触发信号基于用户的移动操作生成；

基于所述触发信号调整编辑窗口的位置；

在用户操作完成后，确定所述编辑窗口的位置为畸变区域的位置。

可选地，根据设定策略调整所述畸变区域中的图像包括：

获取调整信号；所述调整信号基于用户的调整操作生成；

基于所述调整操作调整所述畸变区域中图像的畸变参数。

可选地，确定投影图像中畸变区域的位置包括：

获取投影区域的投影图像；

利用预先设置的图像识别算法从所述投影图像中确定出畸变区域的位置。

可选地，根据设定策略调整所述畸变区域中的图像包括：

根据所述待显示图像和所述畸变区域内图像确定出所述畸变区域内图像的畸变类型；

基于畸变类型和畸变参数的对应关系，根据所述畸变类型调整所述畸变区域中图像的畸变参数。

根据本发明实施例的第二方面，提供一种投影装置，所述装置包括：

畸变位置确定模块，用于确定投影图像中畸变区域的位置；

畸变图像调整模块，用于基于所述畸变区域的位置，根据设定策略调整投影到所述畸变区域中的图像。

可选地，所述畸变位置确定模块包括：

触发信号监测单元，用于获取触发信号；所述触发信号基于用户的移动操作生成；

编辑窗口调整单元，用于基于所述触发信号调整编辑窗口的位置；

畸变位置确定单元，用于在用户操作完成后，确定所述编辑窗口的位置为畸变区域的位置。

可选地，所述畸变图像调整模块包括：

调整信号获取单元，用于获取调整信号；所述调整信号基于用户的调整操作生成；

畸变参数调整单元，用于基于所述调整操作调整所述畸变区域中图像的畸变参数。

可选地，所述畸变位置确定模块包括：

投影图像获取单元，用于获取投影区域的投影图像；

畸变位置确定单元，用于利用预先设置的图像识别算法从所述投影图像中确定出畸变区域的位置。

可选地，所述畸变图像调整模块包括：

畸变类型确定单元，用于根据所述待显示图像和所述畸变区域内图像确定出所述畸变区域内图像的畸变类型；

畸变参数调整单元，用于基于畸变类型和畸变参数的对应关系，根据所述畸变类型调整所述畸变区域中图像的畸变参数。

根据本发明实施例的第三方面，提供一种电子设备，所述电子设备包括：

处理器；

用于存储所述处理器可执行指令的存储器；

投影模组，用于将待显示图像投影到投影区域；

其中，所述处理器被配置为执行所述存储器中的可执行指令以实现第一方面所述方法的步骤。

可选地，所述电子设备还包括重力传感器，所述投影模组至少包括重力平衡器件和旋转投影镜头；所述重力传感器用于获取所述电子设备的旋转向量；所述重力平衡器件用于根据所述旋转向量调整所述旋转投影镜头与所述投影区域之间的投影角度。

可选地，所述电子设备还包括：手动调整模组；所述手动调整模组与所述处理器连接，用于监测用户的移动操作生成触发信号，并将所述触发信号发送给所述处理器；

或者，还用于监测用户的调整操作生成调整信号，并将所述调整信号发送给所述处理器。

可选地，所述电子设备还包括：图像采集模组；所述图像采集模组与所述处理器连接，用于采集所述投影区域的投影图像，并将所述投影图像发送给所述处理器。

根据上述实施例可知，通过确定投影图像中畸变区域的位置，然后根据设定策略投影到对畸变区域中的图像进行调整，从而可以使投影区域内投影图像无畸变，保证用户的观看体验。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

图1是根据本发明实施例示出的一种投影方法的流程示意图；

图2是根据本发明实施例示出的另一种投影方法的流程示意图；

图3～图6是根据本发明实施例示出的一种应用场景示意图；

图7是根据本发明实施例示出的又一种投影方法的流程示意图；

图8～图12是根据本发明实施例示出的一种投影装置的框图；

图13是根据本发明实施例示出的一种电子设备的框图；

图14是根据本发明实施例示出的一种投影模组的框图；

图15是根据本发明实施例示出的摇杆的安装位置示意图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

在使用电子设备向周围的墙面投影待显示图像或者视频时，由于墙面会存在亮度不均匀、表面凹凸不平的情况，导致呈现给用户的投影图像存在局部畸变，降低用户的观看体验。

为解决上述技术问题，本发明实施例提供了一种投影方法，图1是根据本发明实施例示出的一种投影方法的流程示意图。为方便说明，后续各实施例中均以电子设备中的处理器作为执行主体执行该投影方法。参见图1，一种投影方法包括：

101，确定投影图像中畸变区域的位置。

本实施例中，电子设备通过投影模组将待显示图像投射到投射面上，然后以投影图像的方式呈现给用户。之后，处理器确定投影图像中的畸变区域，可以包括以下方式：

方式一，手动方式。本方式下，电子设备上设置有手动调整模组，该手动调整模组会监测用户的操作，为方便说明，后续内容中将移动编辑窗口的操作称之为移动操作，将调整编辑窗口内图像的畸变参数的操作称之为调整事件。其中，手动调整模组可以包括摇杆、方向按键、触摸按键中的一种或者多种。

可理解的是，上述编辑窗口可以在投影过程中保持显示，也可以是响应用户的触发操作而显示。

用户在观看投影图像时，若投影图像中存在畸变区域，用户会移动操作手动调整模组。根据移动操作和触发信号的对应关系，手动调整模组生成触发信号，并将触发信号发送给处理器。处理器根据触发信号调整编辑窗口的位置。例如触发信号可以对应偏移位置，此时处理器可以在编辑窗口当前位置的基础上叠加偏移位置，将两个位置的矢量之和作为编辑窗口的移动操作后的位置。

若编辑窗口保持在同一位置的时间超过设定阈值，或者用户“确定”位置，则处理器将移动操作后的编辑窗口的位置作为投影图像中畸变区域的位置。

方式二，自动方式。本方式下，电子设备上可以设置有图像采集模组。该图像采集模组与处理器连接，用于采集投影区域的投影图像，并将投影图像发送给处理器。

处理器根据预先设置的图像识别算法，从投影图像中确定出畸变区域的位置。图像识别算法可以采用以下思路确定畸变区域的位置包括：

方式一，处理器根据投射面确定一个坐标系(后续称之为第一坐标系)，根据待显示图像确定一个坐标系(后续称之为第二坐标系)，将投影图像中各像素点分别映射到待显示图像，可以得到第一坐标系和第二坐标系的对应关系。基于上述方式，处理器预先存储第一坐标系和第二坐标系的对应关系。

在接收到投影图像后，根据第一坐标系和第二坐标系的对应关系，处理器将投影图像映射到待显示图像，然后对比分析映射后的投影图像和待显示图像即可确定畸变像素的坐标(相同位置的像素点无法匹配对应)，最后统计所有畸变像素的坐标位置即可得到畸变区域的位置。

方式二，处理器分别提取待显示图像和投影图像中的图像特征(例如边缘特征、灰度值变化率特征等)，然后处理器过滤掉投影图像的图像特征的噪声特征。其中噪声特征是指，与待显示图像的图像特征相比较，投影图像中大部分区域新增加的图像特征。之后，处理器对比待显示图像的图像特征和过滤后的投影图像的图像特征，可以确定出图像特征发生变化的位置，将变化的位置作为投影图像的畸变区域。

当然，技术人员可以根据具体场景选择其他图像识别算法，在能够确定出畸变区域位置的情况下，对应的方案同样落入本申请的保护范围。

102，基于所述畸变区域的位置，根据设定策略调整投影到所述畸变区域中的图像。

本实施例中，在确定畸变区域的位置后，处理器可以设定策略调整投影到畸变区域中的图像，从而使畸变区域中的图像与待显示图像的其他部分保持一致。

其中，设定策略可以包括以下方式：

方式一，手动方式。本方式下，手动调整模组继续监测用户的调整操作。用户通过手动调整模组选择调整畸变区域的畸变参数(例如形状、尺寸、亮度等)，然后手动调整调整模组根据用户的调整操作生成调整信号发送给处理器。处理器根据调整信号调整畸变区域中图像对应的畸变参数。例如，用户通过手动调整模组选择调整畸变区域的亮度，然后填写调整后的亮度值。处理器根据亮度值调整畸变区域内图像的亮度值。

方式二，自动方式。本方式下，处理器利用图像识别模型识别出畸变区域的畸变类型，基于预先存储的畸变类型和畸变参数的对应关系，处理器根据畸变类型可以调整畸变区域中图像的畸变参数，从而使调整后的畸变区域的图像与其他区域的图像保持一致。

可理解的是，本实施例中识别畸变类型和畸变位置的图像识别模型可以为同一个图像识别模型，也可以不同的图像识别模型。以不同的图像识别模型为例，处理器在确定投影图像存在畸变区域后，将畸变区域的图像和待显示图像输入至用于识别畸变类型的图像识别模型，由该图像识别模型识别畸变区域的畸变类型。其中，畸变类型可以为尺寸扭曲、亮度不均匀等。然后处理器根据畸变类型确定出需要调整的畸变参数，并形成畸变类型和畸变参数的对应关系。

可见，本实施例中通过手动方式或者自动方式确定投影图像中畸变区域的位置，然后处理器根据设定策略调整投影到对畸变区域中的图像，从而使畸变区域中的图像与投影图像中其他位置相一致。即本实施例无需更换投射面即可使投影区域内投影图像无畸变，保证用户的观看体验。

基于图1所示实施例提供的投影方法，下面结合流程图和场景图详细描述不同方式下的投影方法。图2是根据本发明实施例示出的一种投影方法的流程示意图；图3是根据本发明实施例示出的一种应用场景示意图。参见图2和图3，电子设备11的顶部边缘设置有投影模组111(采用虚线表示，在图3所示方向不可见)，用户预先调整“投影调整方式”为“手动方式”。在投影时，用户调整投影模组111的方向，将待显示图像投射至投射面12，并且待显示图像在投射面12的成像区域为投影区域13。由于投射面12上存在凸起121，导致用户观看投影区域13内的投影图像中存在畸变区域14。

参见图4，用户触摸电子设备11的显示模组时，在显示区域内会弹出方向操作窗口15和编辑窗口16。其中，方向操作窗口15包括“向上”、“向下”“向左”和“向右”四个移动按键，参见图4中所示的各方向的箭头。编辑窗口16中心位置的初始位置为P1。用户通过方向操作窗口15操作“向下”和“向右”两个移动按键，从而将编辑窗口16的中心位置移动到P2，从而使移动后的编辑窗口16覆盖畸变区域14。需要说明的是，为明确编辑窗口16和畸变区域14的位置关系，本发明适当的调整了畸变区域14和编辑窗口16的尺寸，从而更方便理解。

处理器可以根据移动按键发送的触发信号按照设定步长移动编辑窗口的位置，还可以根据编辑窗口16的初始位置P1与“向下”和“向右”两个移动按键移动步长确定移动后位置P2。

处理器在每次移动操作完成后计时或者监测用户的“确定”操作对应的触发信号，在计时超过2秒(可设置)后，处理器确定用户移动操作完成，此时处理器确定编辑窗口16的位置为畸变区域的位置，即位置P2。

处理器继续获取触摸电子设备11的显示模组，参见图5，此时在显示区域内会弹出下拉菜单，包括畸变参数选项。然后处理器根据用户的调整信息，例如调整“曲率”参数，对畸变区域14内的图像进行调整，最终呈现给用户图6所示的投影图像。

可见，本实施例中处理器根据用户的操作对畸变区域进行畸变参数调整，从而使畸变区域内的图像与投影图像中其他区域的图像相一致，无需更换投射面即可保证投影图像的完整性，提升用户的观看体验。另外，本实施例中可以提升用户与电子设备的交互性，提高使用投影功能的趣味性。

图7是根据本发明实施例示出的又一种投影方法的流程示意图。参见图7，本实施例中电子设备11中设置有图像采集模组(图中未示出)，例如摄像头。在用户选择图3所示的“自动方式”后，投影模组111向投影区域13投射待显示图像。之后，图像采集模组采集投影区域13的投影图像，并将投影图像发送给处理器。处理器获取投影图像，利用预先设置的图像识别算法从该投影图像中识别出畸变区域的位置。然后，处理器对比分析待显示图像和畸变区域内图像，确定出畸变区域内图像的畸变类型。最后，处理器根据预先存储的畸变类型和畸变参数的对应关系，根据畸变类型调整畸变区域中图像的畸变参数。

可见，本实施例中通过设置图像采集模组采集投影图像，然后由处理器对投影图像处理即可调整畸变区域，无需用户更换投射面即可保证投影图像无畸变区域，有利于提升用户的观看体验。

图8是根据本发明实施例示出的一种投影装置的框图。参见图8，一种投影装置800包括：

畸变位置确定模块801，用于确定投影图像中畸变区域的位置；

畸变图像调整模块802，用于基于所述畸变区域的位置，根据设定策略调整投影到所述畸变区域中的图像。

图9是根据本发明实施例示出的另一种投影装置的框图。参见图9，在图8所示投影装置的基础上，所述畸变位置确定模块801包括：

触发信号监测单元901，用于获取触发信号；所述触发信号基于用户的移动操作生成；

编辑窗口调整单元902，用于基于所述触发信号调整编辑窗口的位置；

畸变位置确定单元903，用于在用户操作完成后，确定所述编辑窗口的位置为畸变区域的位置。

图10是根据本发明实施例示出的又一种投影装置的框图。参见图10，在图9所示投影装置的基础上，所述畸变图像调整模块802包括：

调整信号获取单元1001，用于获取调整信号；所述调整信号基于用户的调整操作生成；

畸变参数调整单元1002，用于基于所述调整操作调整所述畸变区域中图像的畸变参数。

图11是根据本发明实施例示出的另一种投影装置的框图。参见图11，在图8所示投影装置的基础上，所述畸变位置确定模块801包括：

投影图像获取单元1101，用于获取投影区域的投影图像；

畸变位置确定单元1102，用于利用预先设置的图像识别算法从所述投影图像中确定出畸变区域的位置。

图12是根据本发明实施例示出的另一种投影装置的框图。参见图12，在图3所示投影装置的基础上，所述畸变图像调整模块802包括：

畸变类型确定单元1201，用于根据所述待显示图像和所述畸变区域内图像确定出所述畸变区域内图像的畸变类型；

畸变参数调整单元1202，用于基于畸变类型和畸变参数的对应关系，根据所述畸变类型调整所述畸变区域中图像的畸变参数

可理解的是，本发明实施例提供的投影装置与上述投影方法相对应，具体内容可以参考投影方法各实施例的内容，在此不再赘述。

图13是根据本发明实施例示出的一种电子设备。参见图13，一种电子设备1300包括：

处理器1301；

用于存储所述处理器1301可执行指令的存储器1302；

投影模组1303，用于将待显示图像投影到投影区域；

其中，所述处理器1301被配置为执行所述存储器1302中的可执行指令以实现上述各方法实施例所述方法的步骤。

继续参见图13，上述电子设备1300还包括重力传感器1304。参见图14，所述投影模组1303至少包括重力平衡器件1401和旋转投影镜头1402。该旋转投影镜头1402安装在镜头槽1403中。其中，重力传感器1304用于获取所述电子设备1300的旋转向量；所述重力平衡器件1401用于根据所述旋转向量调整所述旋转投影镜头1402与所述投影区域之间的投影角度。本实施例中，通过设置重力传感器和重力平衡器件，可以在电子设备旋转时旋转投影镜头能够作相应的调整，从而保证投影图像不旋转，有利于提升观看体验。

继续参见图13，上述电子设备1300还包括：手动调整模组1305；所述手动调整模组1305与所述处理器1301连接，用于监测用户的移动操作生成触发信号，并将所述触发信号发送给所述处理器1301；或者，还用于监测用户的调整操作生成调整信号，并将所述调整信号发送给所述处理器1301。本实施例中可以根据用户与电子设备的交互操作对畸变区域进行畸变参数调整，从而使畸变区域内的图像与投影图像中其他区域的图像相一致，无需更换投射面即可保证投影图像的完整性，提升用户的观看体验。

参见图15，在一实施例中，上述手动调整模组1305包括设置在电子设备1300正面(面向用户的显示侧)的顶部或者底部的摇杆，这样摇杆可以根据用户向各方向晃动的倾角生成触发信号，方便处理器根据触发信号移动编辑窗口。

继续参见图13，上述电子设备1300还包括：图像采集模组1306；所述图像采集模组1306与所述处理器1301连接，用于采集所述投影区域的投影图像，并将所述投影图像发送给所述处理器1301。处理器1301可以利用图像识别算法识别出畸变区域，并根据待显示图像和畸变区域内图像确定畸变区域内图像的畸变类型，然后根据畸变类型和畸变参数的对应关系，调整畸变类型对应的畸变参数，使调整后的畸变区域内的图像与周围区域保持一致。

可理解的是，在上述方法实施例的描述中已经对电子设备的结构和各器件之间的功能作了详细描述，具体参考对应的内容即可，在此不再赘述。

在本发明中，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性。术语“多个”指两个或两个以上，除非另有明确的限定。

本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本发明的其它实施方案。本发明旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (8)

1.一种投影方法，其特征在于，所述方法包括：

确定投影图像中畸变区域的位置；

基于所述畸变区域的位置，根据设定策略调整投影到所述畸变区域中的图像；

其中，确定投影图像中畸变区域的位置，包括：获取投影区域的投影图像并利用预先设置的图像识别算法从所述投影图像中确定出畸变区域的位置，具体包括：

分别提取待显示图像和投影图像中的图像特征；所述图像特征为灰度值变化率特征；

过滤掉投影图像的图像特征的噪声特征；其中噪声特征是指，与待显示图像的图像特征相比较，投影图像中大部分区域新增加的图像特征；

对比待显示图像的图像特征和过滤后的投影图像的图像特征，确定出图像特征发生变化的位置，将变化的位置作为投影图像的畸变区域；所述畸变区域为投影面存在亮度不均匀或者表面凹凸不平而引起投影图像局部畸变所在的区域。

2.根据权利要求1所述的投影方法，其特征在于，根据设定策略调整所述畸变区域中的图像包括：

根据待显示图像和所述畸变区域内图像确定出所述畸变区域内图像的畸变类型；

基于畸变类型和畸变参数的对应关系，根据所述畸变类型调整所述畸变区域中图像的畸变参数。

3.一种投影装置，其特征在于，所述装置包括：

畸变位置确定模块，用于确定投影图像中畸变区域的位置，所述畸变位置确定模块包括：投影图像获取单元，用于获取投影区域的投影图像；畸变位置确定单元，用于利用预先设置的图像识别算法从所述投影图像中确定出畸变区域的位置；其中所述畸变位置确定单元具体用于分别提取待显示图像和投影图像中的图像特征，所述图像特征为灰度值变化率特征；过滤掉投影图像的图像特征的噪声特征；其中噪声特征是指，与待显示图像的图像特征相比较，投影图像中大部分区域新增加的图像特征；对比待显示图像的图像特征和过滤后的投影图像的图像特征，确定出图像特征发生变化的位置，将变化的位置作为投影图像的畸变区域；

畸变图像调整模块，用于基于所述畸变区域的位置，根据设定策略调整投影到所述畸变区域中的图像；所述畸变区域为投影面存在亮度不均匀或者表面凹凸不平而引起投影图像局部畸变所在的区域。

4.根据权利要求3所述的投影装置，其特征在于，所述畸变图像调整模块包括：

畸变类型确定单元，用于根据所述待显示图像和所述畸变区域内图像确定出所述畸变区域内图像的畸变类型；

畸变参数调整单元，用于基于畸变类型和畸变参数的对应关系，根据所述畸变类型调整所述畸变区域中图像的畸变参数。

5.一种电子设备，其特征在于，所述电子设备包括：

处理器；

用于存储所述处理器可执行指令的存储器；

投影模组，用于将待显示图像投影到投影区域；

其中，所述处理器被配置为执行所述存储器中的可执行指令以实现权利要求1或2所述方法的步骤。

6.根据权利要求5所述的电子设备，其特征在于，所述电子设备还包括：重力传感器，所述投影模组至少包括重力平衡器件和旋转投影镜头；所述重力传感器用于获取所述电子设备的旋转向量；所述重力平衡器件用于根据所述旋转向量调整所述旋转投影镜头与所述投影区域之间的投影角度。

7.根据权利要求5所述的电子设备，其特征在于，所述电子设备还包括：手动调整模组；所述手动调整模组与所述处理器连接，用于监测用户的移动操作生成触发信号，并将所述触发信号发送给所述处理器；

或者，还用于监测用户的调整操作生成调整信号，并将所述调整信号发送给所述处理器。

8.根据权利要求5所述的电子设备，其特征在于，所述电子设备还包括：图像采集模组；所述图像采集模组与所述处理器连接，用于采集所述投影区域的投影图像，并将所述投影图像发送给所述处理器。

Images