CN109903129A - 增强现实显示方法与装置、电子设备、存储介质 - Google Patents

Abstract

本公开属于增强现实领域，涉及一种增强现实显示方法及装置、电子设备、计算机可读存储介质。该方法包括：获取采集到的现实场景图像中的实体信息；针对虚拟物品的三维模型，提取三维模型的尺寸信息；根据实体信息以及尺寸信息，确定三维模型的显示参数；基于显示参数，在现实场景图像中显示虚拟物品的三维模型图像。本公开通过现实场景图像中的实体确定虚拟物品的三维模型的显示参数，从而使用户确切地看出虚拟物品与现实场景的适配情况，带给用户更为真实的体验，提高购买率，减少退货率；进一步，通过手势动作进行人机交互，不仅给用户的线上购物增添趣味性，更让用户具有身临其境的沉浸感，购物方式更为灵活且准确，提升转化率。

Description

增强现实显示方法与装置、电子设备、存储介质

技术领域

本公开涉及增强现实(Augmented Reality，AR)领域，尤其涉及一种增强现实显示方法与增强现实显示装置、电子设备及计算机可读存储介质。

背景技术

随着科技的发展，电子商务慢慢走近人们的生活。随着线上购物的推广与普及，给用户的消费带来了全新的购物体验。传统线上购物模式是消费者通过图片形式查看商品，但是，消费者能够获取到的商品信息受到了极大地限制。这种情况下，需要一种其他购物方式向消费者提供所需的信息，使消费者可以直观地了解商品的相关资讯，随时随地体验商品功能等。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种增强现实显示方法与增强现实显示装置、电子设备及计算机可读存储介质，进而至少在一定程度上克服由于相关技术的限制而导致的商品图像与场景无法关联及消费者与商品无法交互等问题。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

根据本公开的一个方面，提供一种增强现实显示方法，所述方法包括：获取采集到的现实场景图像中的实体信息；针对虚拟物品的三维模型，提取所述三维模型的尺寸信息；根据所述实体信息以及所述尺寸信息，确定所述三维模型的显示参数；基于所述显示参数，在所述现实场景图像中显示所述虚拟物品的三维模型图像。

在本公开的一种示例性实施例中，所述获取采集到的现实场景图像中的实体信息，包括：识别所述现实场景图像中的至少一个实体；获取所述实体的边界信息和位置信息。

在本公开的一种示例性实施例中，所述方法还包括：获取所述虚拟物品的视频数据；从所述视频数据中抽取预设帧数的静态图像；利用所述静态图像生成所述虚拟物品的三维模型。

在本公开的一种示例性实施例中，所述确定所述三维模型的显示参数，包括：确定所述三维模型的显示尺寸和缩放比例；确定所述三维模型的显示位置。

在本公开的一种示例性实施例中，所述增强现实显示方法还包括：响应于针对所述虚拟物品的交互指令，在所述现实场景图像中显示经过处理后的所述虚拟物品的三维模型图像。

在本公开的一种示例性实施例中，所述增强现实显示方法还包括：针对用户的手势动作生成针对所述虚拟物品的交互指令。

在本公开的一种示例性实施例中，所述针对用户的手势动作生成针对所述虚拟物品的交互指令，包括：当判断所述手势动作为第一手势时，生成用于移动所述虚拟物品的第一交互指令；当判断所述手势动作为第二手势时，生成用于缩放所述虚拟物品的第二交互指令。

根据本公开的一个方面，提供一种增强现实显示装置，所述装置包括：获取信息模块，被配置为获取采集到的现实场景图像中的实体信息；提取信息模块，被配置为针对虚拟物品的三维模型，提取所述三维模型的尺寸信息；参数确定模块，被配置为根据所述实体信息以及所述尺寸信息，确定所述三维模型的显示参数；图像显示模块，被配置基于所述显示参数，在所述现实场景图像中显示所述虚拟物品的三维模型图像。

根据本公开的一个方面，提供一种电子设备，包括：处理器和存储器；其中，存储器上存储有计算机可读指令，所述计算机可读指令被所述处理器执行时实现上述任意示例性实施例的增强现实显示方法。

根据本公开的一个方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任意示例性实施例中的增强现实显示方法。

本公开的示例性实施例具有以下有益效果：

在本公开的示例性实施例提供的方法及装置中，通过现实场景图像中的实体确定虚拟物品的三维模型的显示参数，从而使用户确切地看出虚拟物品与现实场景的适配情况，带给用户更为真实的体验，提高购买率，降低因购回物品与真实使用情况不符合带来的退货率；进一步，通过手势动作进行人机交互，不仅给用户的线上购物增添了趣味性，更让用户具有身临其境的沉浸感，购物方式更为灵活且准确，提升转化率。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示意性示出本公开示例性实施例中一种增强现实显示方法的流程图；

图2示意性示出本公开实施例中一种增强现实显示方法的部分步骤流程图；

图3示意性示出本公开实施例中一种增强现实显示方法的部分步骤流程图；

图4示意性示出本公开实施例中一种增强现实显示方法的部分步骤流程图；

图5示意性示出本公开实施例中一种增强现实显示方法的部分步骤流程图；

图6示出本公开示例性实施例中一种增强现实显示装置的结构示意图；

图7示意性示出本公开示例性实施例中一种用于实现增强现实显示方法的电子设备；

图8示意性示出本公开示例性实施例中一种用于实现增强现实显示方法的计算机可读存储介质。

具体实施方式

现在将参考附图更全面地描述示例性实施方式。然而，示例性实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例性实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。

此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

需要说明的是，本公开中，用语“包括”、“配置有”、“设置于”用以表示开放式的包括在内的意思，并且是指除了列出的要素/组成部分/等之外还可存在另外的要素/组成部分/等；用语“第一”、“第二”等仅作为标记使用，不是对其对象数量或次序的限制。

在本公开的示例性实施例中，首先提供了一种增强现实显示方法，应用于终端设备，举例而言，该终端设备可以是配置有摄像头的电脑或者笔记本、具有增强现实显示的多功能眼镜，也可以是智能终端作为采集和处理侧与具有通讯链路的家庭电视作为显示侧的设备，另外还可以是其他任意具有增强现实显示功能的电子终端设备。

参考图1中所示，该增强现实显示方法主要可以包括以下步骤：

步骤S101.获取采集到的现实场景图像中的实体信息。

在实际应用中，可以使用智能终端的摄像装置采集现实场景图像，该摄像装置可以包括一个摄像头，也可以包括位于不同角度的多个摄像头。当摄像装置只包括一个摄像头的时候，可以进行360°采集，每隔15°采集一个场景，对该场景的采集距离可以设置为1米、2米、3米、4米和5米等五种距离，采集环境可以设置为白天室内、夜晚室内等两种场景；相应的，当摄像装置包括多个摄像头的时候，只需设置不同的采集距离及采集环境即可。

针对不同的虚拟物品，需要在采集到的现实场景图像中选择最适宜的实体作为参考。针对该现实场景图像，需要获取其中的实体信息。该实体信息中的实体可以是现实场景图像中包含的对象，对象个数不作限定。针对不同的实体，由于其所处环境不同，所指代的对象不同，例如，若现实场景是家中，实体可以是茶几、椅子、沙发、桌子等；当现实场景是交通工具上，实体可以是座位、显示屏、窗户等；当现实场景是办公室，实体可以是饮水机、办公桌、计算机、电话等；当现实场景是商场里，实体可以是模特、穿衣镜等。那么，实体信息指的就是与实体相关的信息，如尺寸信息、位置信息、色彩信息、形状信息、环境信息等，其中，环境信息是实体所处环境的相关信息，例如实体距离墙壁的距离、所处环境的亮度、与所处环境中的其他实体之间的距离等。

步骤S102.针对虚拟物品的三维模型，提取三维模型的尺寸信息。

通过步骤S101可以获取采集到的现实场景图像中的实体信息，本步骤获取虚拟物品的三维模型的尺寸信息。一般的，虚拟物品是以3D模型的形式呈现。其中，该虚拟物品可以是线上商店的物品，例如家具、服饰、器材、乐器、配件等。获取物品图像可以通过在展示页面上输入名称获取提供的物品图像，也可以通过利用摄像工具拍摄物品获取物品图像等方式。运用已获取到的物品图像生成对应的虚拟物品的三维模型，并获取该三维模型的尺寸信息。例如，虚拟物品为桌子时，获取桌子的三维模型的特征信息可以是它的长、宽、高等尺寸信息等。针对不同的虚拟物品可以获取不同的尺寸信息，方便后续操作。

步骤S103.根据实体信息以及尺寸信息，确定三维模型的显示参数。

步骤S101中获取到现实场景图像中的实体信息，且步骤S102中获取到虚拟物品的三维模型的尺寸信息，本步骤可以将线上的虚拟物品的三维模型在现实场景图像中显示，通过实体信息及尺寸信息对三维模型的显示参数进行确定。若现实场景图像中的实体为椅子，且已经取得该椅子的实体信息，即其尺寸、形状、位置与颜色等信息，当虚拟物品为桌子时，可以根据已取得的实体信息中的尺寸信息和桌子的尺寸关系确定二者之间的尺寸比例关系确定桌子的显示尺寸，并根据椅子的其他实体信息对桌子的显示位置和适配色彩等显示参数进行确定。

步骤S104.基于显示参数，在现实场景图像中显示虚拟物品的三维模型图像。

在步骤S103中已经确定虚拟物品的三维模型的显示参数，本步骤可以将虚拟物品的三维模型图像在现实场景图像中显示。为了在摄像装置拍摄的现实场景图像中介入虚拟物品的三维模型图像，从而使用户能够在现实场景中感觉到虚拟物品的存在，需要对摄像装置的相关参数进行设定，并且要以虚拟物品的三维模型图像为基准，进行三维模型图像与现实场景图像的叠加处理，例如，虚拟物品环绕在现实场景中的实体周围，或者覆盖在实体上，或者放置在实体旁边等。

对现实场景图像中虚拟物品的三维模型图像的显示可以在增强现实显示的眼镜镜片上，也可以是在智能终端的屏幕上，例如手机、电脑、家庭电视的显示屏上。

根据本示例实施例中的增强现实显示方法，通过现实场景中的实体对需要显示的虚拟物品的三维模型的相关显示信息进行确定，从而确定出最真实的虚拟物品尺寸信息；进一步的，将虚拟商品显示于现实场景中，对于用户确定是否符合预期、评估是否购买具有极大的参考价值，提高了线上购买的成功率，减小了由于无法掌握商品信息带来的退换货情况发生，节约了成本与资源。

在以上实施例的基础上，如图2所示，获取现实场景图像中的实体信息，包括以下步骤：

步骤S201.识别现实场景图像中的至少一个实体。

在步骤S101可以采集现实场景图像，本步骤可以识别现实场景图像中的实体。对现实场景图像中的实体识别首先可以是对整个现实场景图像进行识别，也可以是对现实场景图像中的某一特定区域进行识别。在识别现实场景图像前，首先应对现实场景图像的预处理实现，预处理方式可以有：降采样、二值化、滤波等。其中，降采样可以用来提高现实场景图像性能，使现实场景图像符合需显示区域大小；二值化可以使选取到的特征点不仅仅依赖于颜色，更加清晰；使用高斯滤波可以降低噪点，使获取到的现实场景图像不受如划痕、灰尘等之类的影响。

对现实场景图像中的实体进行识别，对识别到的实体个数不做限定，可以是一个，也可以是多个，识别的实体个数越多，对确定三维模型的显示尺寸和/或缩放比例，以及显示位置的定位更为精确。识别实体的方式可以是对特定颜色进行识别，也可以是对特定形状进行识别，只要可以识别所需实体即可，本示例性实施例对识别方式不做限定。

步骤S202.获取实体的边界信息和位置信息。

在步骤S201中已经识别出现实场景图像中的实体，本步骤可以获取已识别的实体的相关信息，该相关信息可以是实体的边界信息和位置信息。例如，获取实体的位置信息，可以建立实体在现实场景图像中的三维坐标系，并建立捕获该现实场景图像的摄像装置的摄像坐标系，根据三维坐标系和摄像坐标系之间的相互转化，获取到实体的位置信息。而实体的边界信息可以通过图像识别算法来确定，例如Sobel边缘检测算法、拉普拉斯算子等。

本实施例可以识别现实场景图像中的实体，并确定其相关信息，可以准确掌握现实环境中的实体信息，对于虚拟物品的显示参数的确定具有非常重要的参考意义。

在以上实施例的基础上，如图3所示，获取虚拟物品的三维模型，包括以下步骤：

步骤S301.获取虚拟物品的视频数据。

商家可以使用拍摄终端对虚拟物品拍摄视频，获取视频数据。其中，拍摄终端可以包括监控摄像机、智能终端的前置摄像头、智能终端的后置摄像头等，还可以包括获取视频数据后对其进行处理的处理终端。对于采集到的视频数据，可以以xml、json等数据存储于数据库和服务器当中。

步骤S302.从视频数据中抽取预设帧数的静态图像。

在步骤S301中已经采集到虚拟物品的视频数据，本步骤可以在该视频数据中抽取静态图像。通过设置提取静态图像的帧数间隔，且帧数间隔的起始点可以是前一次获取静态图像时的帧数，来完成抽取预设帧数的静态图像的目的。帧数间隔不应设置过小，否则虚拟物品还未发生变化即提取静态图像，会导致提取的静态图像数量过多，造成资源浪费；帧数间隔不宜设置过大，否则静态图像的提取数量过少，会导致有效信息提取不足，使得用户体验度下降。一般的，为了使虚拟物品的三维模型可以呈现出较为逼真的三维立体感，抽取预设帧数的静态图像可以包括虚拟物品的正面视图、背面视图、左面视图、右面视图、上面视图和下面视图。提取静态图像的方式可以是采用图像压缩标准为JPEG的编码的方式。

步骤S303.利用静态图像生成虚拟物品的三维模型。

在步骤S302中可以抽取到虚拟物品的静态图像若干张，本步骤将利用静态图像生成该虚拟物品的三维模型。通过静态图像建立三维模型的技术，可以使用智能设备对采集到的静态图像进行图形处理以及三维计算，从而自动生成虚拟物品的三维模型。

本实施例对虚拟物品的三维模型的生成进行说明，通过视频数据获取静态图像，从而构建所需的三维模型，生成方式简单，操作方便，由实际静态图像构建的三维模型更加逼真，提高了商品观感，提升了用户的购物体验。

在以上实施例的基础上，如图4所示，确定三维模型的显示参数，包括以下步骤：

步骤S401.确定三维模型的显示尺寸和缩放比例。

根据现实场景图像中的实体，可以对三维模型的显示参数进行确定，以使其不仅可以反映虚拟物品的真实信息，而且同时可以反映其在环境的最恰当和适宜的尺寸，用户可以直观明确地知道虚拟物品是否与用户的真实使用环境相匹配。例如，若三维模型是一桌子，可以根据现实场景图像中摆放区域的凳子或者沙发的尺寸以及比例，来确定适宜摆放区域中的桌子的显示尺寸和缩放比例，如桌子的高度、长度、宽度等。

步骤S402.确定三维模型的显示位置。

在步骤S401中可以确定三维模型的显示尺寸和缩放比例，本步骤可以对该三维模型的显示位置进行确定。三维模型的显示位置应该是现实场景图像中的摆放位置、使用位置等最适宜的位置。例如，当虚拟物品为桌子时，其显示位置应该在凳子或者沙发的正前方，并保持适宜距离。

对应于现实场景图像中的实体信息，本实施例获取三维模型的尺寸信息，以二者的比例关系，确定三维模型的最佳显示效果对应的显示尺寸和缩放比例，以及显示位置，避免由于虚拟物品过大或过小，以及摆放位置不佳带来的突兀感。

在以上实施例的基础上，增强现实显示方法还包括：响应于针对虚拟物品的交互指令，在现实场景图像中显示经过处理后的虚拟物品的三维模型图像。

当虚拟物品的三维模型置于现实场景图像中时，无法确定一开始的默认色彩为最适配颜色，也无法确定一开始的显示面即为最佳显示效果的一面，所以需要对虚拟物品的三维模型图像进行调整。当用户实施一手势动作时，相当于发送了一针对虚拟物品的交互指令，该交互指令可以完成对三维模型的缩放、旋转、切换等动作。当用户已选择好该虚拟物品的最佳显示效果，亦即完成了在现实场景图像中与虚拟物品的三维模型图像的交互过程。

本实施例通过一交互指令使得用户可以在现实场景图像中与虚拟物品的三维模型进行交互，并显示交互后的三维模型图像，既可以保证用户的真是代入感，又可以保证不同用户的个性化选择，还可以使虚拟物品以最佳的显示状态置于现实场景中，保证了线上购物的最优显示效果。

在以上实施例的基础上，增强现实显示方法还包括：针对用户的手势动作生成针对虚拟物品的交互指令。

在获取用户的手势动作时，可以先采集用户的手部动态图像。通过智能终端的摄像装置或者增强现实设备上的深度相机来获取用户的手部动态图像，并对该手部动态图像进行解析。获取用户手部的实时手部信息，可以包括有效手势动作和无效手势动作，有效手势动作是指预设手势动作。该增强现实装置中应当至少设置一个预设手势动作，例如，大拇指和食指闭合、食指旋转、食指翻动等其他手势动作，但不局限于使用特定手指或特定动作。一个预设手势动作设置有相应的操作，例如对虚拟物品进行缩放、旋转、切换等。当获取到的用户的手势动作时，可以将该手势动作与预设手势动作进行匹配，若匹配成功，则该手势动作可以执行相应操作，若匹配不成功，则该手势动作被视为无效手势动作。用户在与虚拟物品的三维模型进行交互，需要对其进行例如缩放、旋转、切换等调整时，可以通过已执行的手势操作发送一交互指令进行相关操作。

本实施例通过用户的手势动作，对虚拟物品发出一交互指令对虚拟物品执行操作，一方面可以提高用户购物时的流畅性及准确性，方便用户对三维模型的显示状态进行调整，以达到想要的显示效果；另一方面可以打破传统线上购物方式的用户与商品之间无法互动交流的壁垒，提高用户在线上购物体验的沉浸感。

在以上实施例的基础上，如图5所示，针对用户的手势动作生成针对所述虚拟物品的交互指令，可以包括以下步骤：

步骤S501.当判断手势动作为第一手势时，生成用于移动虚拟物品的第一交互指令。

对于已经获取到用户的手势动作，本步骤列出当判断获取到的手势动作为第一手势时的情景。当获取到的手势动作是一种预设动作且为第一手势时，该第一手势可以是食指翻转，当出现该手势动作时，相当于触发了第一交互指令，该交互指令对应移动虚拟物品的操作。

步骤S502.当判断手势动作为第二手势时，生成用于缩放虚拟物品的第二交互指令。

在步骤S501中已经获取到用户的手势动作，本步骤列出当判断获取到的手势动作为第二手势时的情景。当获取到的手势动作是一种预设动作且为第二手势时，该第二手势可以是大拇指和食指的闭合。只要出现该手势动作，相当于触发了第二交互指令，该交互指令对应缩放虚拟物品的操作。其中，第二交互指令可以包括两种情况：当大拇指和食指之间的距离是从小变大时，可以是将虚拟物品缩小；当大拇指和食指之间的距离是由大变小时，可以是把虚拟物品放大。

本实施例列出了两种手势动作对应的调整虚拟物品的显示状态，对用户的交互方式进行说明，使用户在购物时可以更准确得对虚拟物品进行操作，虚拟物品更加逼真，购物方式更为灵活。

需要说明的是，虽然以上示例性实施例的实施方式以特定顺序描述了本公开中方法的各个步骤，但是，这并非要求或者暗示必须按照该特定顺序来执行这些步骤，或者必须执行全部的步骤才能实现期望的结果。附加地或者备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，以及/或者将一个步骤分解为多个步骤执行等。

此外，在本公开的示例实施例中，还提供了一种增强现实显示装置。参照图6所示，增强现实显示装置600可以包括：获取信息模块601、提取信息模块602、参数确定模块603、图像显示模块604。其中：

获取信息模块601，被配置为获取采集到的现实场景图像中的实体信息；提取信息模块602，被配置为针对虚拟物品的三维模型，提取所述三维模型的尺寸信息；参数确定模块603，被配置为根据所述实体信息以及所述尺寸信息，确定所述三维模型的显示参数；图像显示模块604，被配置基于所述显示参数，在所述现实场景图像中显示所述虚拟物品的三维模型图像。

上述增强现实显示装置的具体细节已经在对应的增强现实显示方法中进行了详细的描述，因此此处不再赘述。

应当注意，尽管在上文详细描述中提及了增强现实显示装置600的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

此外，在本公开的示例性实施例中，还提供了一种能够实现上述方法的电子设备。

下面参照图7来描述根据本发明的这种实施例的电子设备700。图7显示的电子设备700仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图7所示，电子设备700以通用计算设备的形式表现。电子设备700的组件可以包括但不限于：上述至少一个处理单元710、上述至少一个存储单元720、连接不同系统组件(包括存储单元720和处理单元710)的总线730、显示单元740。

其中，所述存储单元存储有程序代码，所述程序代码可以被所述处理单元710执行，使得所述处理单元710执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施例的步骤。

存储单元720可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(RAM)721和/或高速缓存存储单元722，还可以进一步包括只读存储单元(ROM)723。

存储单元720还可以包括具有一组(至少一个)程序模块725的程序/实用工具724，这样的程序模块725包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

总线730可以为表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。

电子设备700也可以与一个或多个外部设备900(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备700交互的设备通信，和/或与使得该电子设备700能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口750进行。并且，电子设备700还可以通过网络适配器760与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器740通过总线730与电子设备700的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备700使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

通过以上的实施例的描述，本领域的技术人员易于理解，这里描述的示例实施例可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施例的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施例的方法。

在本公开的示例性实施例中，还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施例中，本发明的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施例的步骤。

参考图8所示，描述了根据本发明的实施例的用于实现上述方法的程序产品800，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。

Claims (10)

1.一种增强现实显示方法，其特征在于，包括：

获取采集到的现实场景图像中的实体信息；

针对虚拟物品的三维模型，提取所述三维模型的尺寸信息；

根据所述实体信息以及所述尺寸信息，确定所述三维模型的显示参数；

基于所述显示参数，在所述现实场景图像中显示所述虚拟物品的三维模型图像。

2.根据权利要求1所述的增强现实显示方法，其特征在于，所述获取采集到的现实场景图像中的实体信息，包括：

识别所述现实场景图像中的至少一个实体；

获取所述实体的边界信息和位置信息。

3.根据权利要求1所述的增强现实显示方法，其特征在于，所述方法还包括：

获取所述虚拟物品的视频数据；

从所述视频数据中抽取预设帧数的静态图像；

利用所述静态图像生成所述虚拟物品的三维模型。

4.根据权利要求1所述的增强现实显示方法，其特征在于，所述确定所述三维模型的显示参数，包括：

确定所述三维模型的显示尺寸和缩放比例；

确定所述三维模型的显示位置。

5.根据权利要求1所述的增强现实显示方法，其特征在于，所述方法还包括：

响应于针对所述虚拟物品的交互指令，在所述现实场景图像中显示经过处理后的所述虚拟物品的三维模型图像。

6.根据权利要求5所述的增强现实显示方法，其特征在于，所述方法还包括：

针对用户的手势动作生成针对所述虚拟物品的交互指令。

7.根据权利要求6所述的增强现实显示方法，其特征在于，所述针对用户的手势动作生成针对所述虚拟物品的交互指令，包括：

当判断所述手势动作为第一手势时，生成用于移动所述虚拟物品的第一交互指令；

当判断所述手势动作为第二手势时，生成用于缩放所述虚拟物品的第二交互指令。

8.一种增强现实显示装置，其特征在于，包括：

获取信息模块，被配置为获取采集到的现实场景图像中的实体信息；

提取信息模块，被配置为针对虚拟物品的三维模型，提取所述三维模型的尺寸信息；

参数确定模块，被配置为根据所述实体信息以及所述尺寸信息，确定所述三维模型的显示参数；

图像显示模块，被配置基于所述显示参数，在所述现实场景图像中显示所述虚拟物品的三维模型图像。

9.一种电子设备，其特征在于，包括：

处理器；以及

存储器，所述存储器上存储有计算机可读指令，所述计算机可读指令被所述处理器执行时实现根据权利要求1至7中任一项所述的方法。

10.一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现根据权利要求1至7中任一项所述方法。