[go: up one dir, main page]

CN106383587B - 一种增强现实场景生成方法、装置及设备 - Google Patents

一种增强现实场景生成方法、装置及设备 Download PDF

Info

Publication number
CN106383587B
CN106383587B CN201610949178.XA CN201610949178A CN106383587B CN 106383587 B CN106383587 B CN 106383587B CN 201610949178 A CN201610949178 A CN 201610949178A CN 106383587 B CN106383587 B CN 106383587B
Authority
CN
China
Prior art keywords
image
virtual
scene
real
background image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610949178.XA
Other languages
English (en)
Other versions
CN106383587A (zh
Inventor
吴雁林
李德元
王鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201610949178.XA priority Critical patent/CN106383587B/zh
Publication of CN106383587A publication Critical patent/CN106383587A/zh
Priority to PCT/CN2017/107739 priority patent/WO2018077206A1/zh
Priority to US16/294,890 priority patent/US11270419B2/en
Application granted granted Critical
Publication of CN106383587B publication Critical patent/CN106383587B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/537—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00—Amusement arrangements
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63J—DEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J1/00—Stage arrangements
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/837—Shooting of targets
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Optics & Photonics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明实施例公开了一种增强现实场景生成方法、装置及设备，能够使基于现实的场景临场感。本发明实施例方法包括：获取图像采集器采集的现实场景信息；将现实场景信息进行处理生成基于现实的背景图像；将背景图像与待显示的虚拟场景图像进行融合生成融合图像，虚拟场景图像包括虚拟物体图像和/或虚拟角色图像；显示融合图像。本发明实施例中，不需要识别特定的目标图像，而是通过图像采集器采集现实环境中的任意的现实场景信息，在将背景图像与待显示的虚拟场景图像进行融合生成融合图像时，基于现实的背景上生成具有虚拟物体和虚拟角色的虚拟场景，从而能够使游戏过程中基于现实的场景更为丰富，增强基于现实的临场感。

Description

一种增强现实场景生成方法、装置及设备
技术领域
本发明涉及计算机领域，尤其涉及一种增强现实场景生成方法、装置及设备。
背景技术
现有技术中的电脑、手机、或其他游戏设备中的游戏大多是发生在虚拟世界中的，游戏的画面和场景没有与真实世界中的环境相关联，不能结合现实世界中玩家所处的场景。
增强现实(Augmented Reality，AR)是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
现有技术中的增强现实游戏提供了一种扫描特定目标后开始游戏的方式，游戏过程中的对象会呈现在扫描的目标之上。例如，NDS上的玩卡类AR游戏，AR Magic Cards游戏。此类大多数的玩法都是在桌面上摆放识别卡，识别卡片后通过手机屏幕与识别出来的内容进行交互。因此此类游戏目前更多用于早教类的识图游戏。
但是此类游戏在游戏过程中要时刻举着手机对准桌面上的识别卡，识别特定的目标图像(识别卡)，其交互方式单一，游戏的现实场景不丰富，游戏临场感不强。
发明内容
本发明实施例提供了一种增强现实场景生成方法、装置及设备，能够使基于现实的场景更为丰富，能增强场景代入感和临场感。
第一方面，本发明实施例提供了一种增强现实场景生成方法，该方法包括：
获取图像采集器采集的现实场景信息；将现实场景信息进行处理生成基于现实的背景图像；将背景图像与待显示的虚拟场景图像进行融合生成融合图像，虚拟场景图像包括虚拟物体图像和/或虚拟角色图像；显示融合图像。
另外，本发明实施例还提供一种增强现实场景生成装置及用户设备，具体实现对应于上述第一方面提供的增强现实场景生成方法所对应的功能。功能可以通过硬件实现，也可以通过硬件执行相应的软件程序实现。硬件和软件包括一个或多个与上述功能相对应的单元模块，单元模块可以是软件和/或硬件。
第二方面，本发明实施例提供的增强现实场景生成装置包括：
现实场景信息获取模块，用于获取图像采集器采集的现实场景信息；
背景图像生成模块，用于将现实场景信息进行处理生成基于现实的背景图像；
融合图像生成模块，用于将背景图像与待显示的虚拟场景图像进行融合生成融合图像，虚拟场景图像包括虚拟物体图像和/或虚拟角色图像；
显示模块，用于显示融合图像。
第二方面，本发明实施例提供的用户设备包括：
图像采集器、处理器、存储器以及显示屏；其中，图像采集器，用于采集现实场景信息；存储器，用于存储图像采集器采集的现实场景信息；处理器，用于获取现实场景信息，将现实场景信息进行处理生成基于现实的背景图像，并将背景图像与待显示的虚拟场景图像进行融合生成融合图像，虚拟场景图像包括虚拟物体图像和/或虚拟角色图像；显示屏，用于显示融合图像。
从以上技术方案可以看出，本发明实施例具有以下优点：
本发明实施例中，不需要识别特定的目标图像，而是通过图像采集器采集现实环境中的任意的现实场景信息，将现实场景信息进行处理生成基于现实的背景图像；并将背景图像与待显示的虚拟场景图像进行融合生成融合图像，即在基于现实的背景上生成具有虚拟物体和虚拟角色的虚拟场景，从而能够使游戏过程中基于现实的场景更为丰富，增强了游戏的临场感。
附图说明
图1为本发明实施例中的增强现实的游戏系统的组成及各模块间的信息交互图；
图2为本发明实施例中的增强现实场景生成方法流程图；
图3为本发明实施例中的融合图像效果示意图；
图4为本发明实施例中的红外特效处理效果示意图；
图5为本发明实施例中的夜视特效处理效果示意图；
图6本发明实施例中的红外特效处理流程图；
图7为本发明实施例中的夜视特效处理流程图；
图8为玩家、虚拟物体、真实场景之间的关系示意图；
图9为本发明实施例中的增强现实场景生成装置功能模块结构示意图；
图10为本发明实施例中的用户设备硬件结构示意图。
具体实施方式
为了使本发明的技术方案及有益效果更加清楚，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明实施例中的技术可以应用于各种场景，包括基于真实场景的游戏；基于真实场景的娱乐；旅游、展览的景点介绍等场景，本发明实施例以游戏为例进行详细介绍。
本发明的游戏场景是发生在真实场景中的一种游戏方式，本发明的增强现实的游戏系统的结构组成及数据流如图1所示。
增强现实游戏系统至少包括以下几个组成部分：图像采集器、处理器、存储器以及显示屏；
其中，通过图像采集器采集现实场景信息，通过存储器存储图像采集器采集的现实场景信息，处理器获取现实场景信息，将现实场景信息进行处理生成基于现实的背景图像。
处理器再将背景图像与待显示的虚拟场景图像进行融合生成融合图像，虚拟场景图像包括虚拟物体图像和/或虚拟角色图像，再通过显示屏显示融合图像。
其中，图像采集器可以是摄像头，也可以是全息扫描仪。
存储器还用于暂存游戏程序执行过程中所生成的数据或者存储用户输入的数据，例如：玩家旋转值、玩家积分等。
待显示的虚拟场景图像由处理器生成，具体可以是处理器通过游戏引擎生成的。游戏引擎是指一些已编写好的可编辑电脑游戏系统或者一些交互式实时图像应用程序的核心组件，为游戏设计者提供各种编写游戏所需的各种工具，其目的在于让游戏设计者能容易和快速地做出游戏程序而不用由零开始。
具体的，虚拟场景图像中的虚拟角色为游戏中玩家(用户)所控制的角色，可以是代表玩家身份的人物角色或者物件；虚拟物体图像可以是游戏中除虚拟角色以外的物体，例如：虚拟的敌人、虚拟的动物、雷达等。
本发明实施例中的图像采集器采集的现实场景图像会跟随用户所处现实场景的变化而变化，处理器生成的虚拟场景图像也会通过游戏引擎实时生成，或跟随用户所处的现实场景实时变化，因此在显示屏上输出的融合图像也会实时变化。
另外，本发明的增强现实的游戏系统还可以包括陀螺仪组件，陀螺仪组件可以获取玩家自身旋转的数据，而图像采集器所采集形成的背景图像会随着玩家的旋转而发生旋转，处理器可以根据陀螺仪组件所采集的玩家自身旋转的数据将玩家的真实旋转同步到虚拟场景图像中的虚拟角色，从而可以给玩家造成游戏发生在真实世界中的错觉，能够提升游戏的沉浸式体验。
此外，本发明的增强现实的游戏系统还可以包括触摸屏，触摸屏用于提供用户在屏幕上触摸的位置值，具体的，用于接受玩家的输入交互信息，并将玩家的输入交互信息转化成操作指令发送给处理器，由处理器控制虚拟场景中的虚拟物体和虚拟角色之间的互动。
优选的，本发明实施例中的触摸屏和显示屏为集成在一起的触控显示屏。
需要说明的是，本发明实施例中的增强现实游戏系统可以以一个用户设备(例如：手机)的形式存在，也可以是以多个物理设备的形式存在，例如：通过可穿戴式设备与投影仪的结合，手持设备与投影仪的结合。具体的存在形式本发明不做限定。
下面对本发明实施例中的增强现实场景生成方法流程进行介绍。该方法由上述图1所示的增强现实游戏系统中的处理器执行。方法流程包括：
201、获取图像采集器采集的现实场景信息；
具体的，所述图像采集器可以为摄像头，通过所述摄像头拍摄周边现实世界的场景图片或场景视频；再将所述场景图片或场景视频作为所述现实场景信息，处理器再获取摄像头采集的现实场景信息。
可选的，所述图像采集器为全息扫描仪；通过所述全息扫描仪对周边现实世界进行扫描得到全息图片；将所述全息图片作为所述现实场景信息，处理器再获取全息扫描仪采集的现实场景信息。
需要说明的是，图像采集器是实时采集现实场景信息，现实场景信息指的是图像采集器拍摄到的玩家所见即所得的整个场景画面，并不是图像采集器所采集的画面中的某个特定的目标物，即并不是某个特定的目标图像。
例如：图像采集器采集的现实场景信息如图3中所示的建筑物背景，该建筑物背景图像为摄像头当前对着的，拍摄到的整个图像。
202、将所述现实场景信息进行处理生成基于现实的背景图像；
处理器在获取到图像采集器采集的现实场景信息后，对获取到的图像采集器采集的现实场景信息进行处理生成基于现实的背景图像，可将其缓存于存储器中。
203、将所述背景图像与待显示的虚拟场景图像进行融合生成融合图像，所述虚拟场景图像包括虚拟物体图像和/或虚拟角色图像；
处理器可通过游戏引擎生成待显示的虚拟场景图像，该虚拟场景图像包括游戏画面中的虚拟物体图像和/或虚拟角色图像。其中，虚拟角色为游戏中代表玩家身份的人物角色或者物件；虚拟物体图像可以是游戏中除虚拟角色以外的物体，例如：虚拟的敌人、虚拟的动物等。
例如：待显示的虚拟场景图像如图3中所示的除建筑物背景以外的物体图像，该图像中包括虚拟敌人和虚拟角色。
可选的，处理器可以对背景图像进行实时分析，根据背景图像中的元素实时生成虚拟场景图像中的虚拟物体图像。例如：若背景图像为城市建筑，则生成的虚拟物体的UI图可以为飞碟；若背景图像为室内画面，则生成的虚拟物体的UI图可以为宠物；若背景图像为空旷的外景，则生成的虚拟物体UI图可以为精灵；若背景图像为微距下呈现的花朵，则生成的虚拟物体UI图可以为虫子，等等。
可选的，处理器可以对背景图像进行实时分析，根据背景图像中的元素实时调整虚拟场景图像中的虚拟物体的视觉效果。
处理器将所述背景图像与待显示的虚拟场景图像进行融合生成融合图像。
例如：生成的融合图像可以为如图3所示。
具体的，在生成融合图像的过程中，可以对背景图像进行特效处理。
进行特效处理的过程为：
处理器获取环境参数，环境参数具体用于指示使用哪种特效，例如：
1)、环境参数为红外模式，则指示将背景图像进行红外特效处理。
红外特效处理的原理是根据图像的不同灰度值来产生图像对应的热度值的模拟方法，给玩家造成一种热感的背景效果，但并不能感受对象的真实热度。
其中，灰度图(或灰阶图)是把白色与黑色之间按对数关系分为若干等级，灰度分为256阶。用灰度表示的图像称作灰度图或灰阶图。
2)、环境参数为夜视模式，则指示将背景图像进行夜视特效处理。
夜视特效处理是通过在图像背景上加渲染程序实现的，渲染程序首先对采集到的图像按照像素到图像中心的距离做出扭曲效果，再修改显示颜色为偏绿色，并在原始图像中产生随机的噪点以达到模拟的夜视的效果。
此外，环境参数还可以是：
3)卡通模式：指示将背景图像进行卡通特效处理。
4)、素描模式：则指示将背景图像进行素描特效处理。
具体的，获取环境参数的方式可以为：
1、系统预置有多种环境参数，这些环境参数可以供用户在玩游戏过程中通过界面选择进行设置。用户设置环境参数后，处理器可以接收到用户端输入的所述环境参数。
2、处理器可以对背景图像进行分析，根据背景图像中的元素，从所述待显示的虚拟场景图像中提取所述环境参数。例如：当背景图像为夜景图像时，处理器可以从该夜景图像中提取出环境参数：夜视模式。
处理器在获取到环境参数后，根据所述环境参数对所述背景图像进行渲染得到渲染图像，将所述渲染图像与所述待显示的虚拟场景图像进行叠加生成所述融合图像。
具体的，当所述环境参数指示为红外模式时，对所述背景图像进行红外热感渲染得到所述渲染图像，将所述渲染图像与所述待显示的虚拟场景图像进行叠加生成所述融合图像。例如：对背景图像进行红外热感渲染后的融合图像如图4所示。
当所述环境参数指示为夜视模式时，对所述背景图像进行夜视渲染得到所述渲染图像，将所述渲染图像与所述待显示的虚拟场景图像进行叠加生成所述融合图像。对背景图像进行夜视特效渲染后的融合图像如图5所示。
同样，当所述环境参数指示为卡通模式时，对所述背景图像进行卡通效果处理后得到渲染图像，将所述渲染图像与所述待显示的虚拟场景图像进行叠加生成所述融合图像。
同样，当所述环境参数指示为素描模式时，对所述背景图像进行素描效果处理后得到渲染图像，将所述渲染图像与所述待显示的虚拟场景图像进行叠加生成所述融合图像。
204、显示所述融合图像。
在生成所述融合后的图像后，处理器将所述融合图像发送给显示屏，将其在显示屏中显示。
下面以红外特效和夜视特效为例，介绍对背景图像进行特效处理的过程。
红外特效处理流程如图6所示：
601、将所述背景图像转换为图像矩阵；
因为数字图像数据可以用矩阵来表示，因此可以采用矩阵理论和矩阵算法对数字图像进行分析和处理。灰度图的像素数据就是一个矩阵，矩阵的行对应图像的高(单位为像素)，矩阵的列对应图像的宽(单位为像素)，矩阵的元素对应图像的像素，矩阵元素的值就是像素的灰度值。
602、对所述图像矩阵中的元素去除颜色值得到灰度图；
603、按照预置的比例尺对所述灰度图进行缩小得到临时图片；
604、按照预设的热度值对所述临时图片进行色彩调整得到热度图片，使得所述临时图片中热度值高的区域的色彩温度高于所述临时图片中热度值低的区域的色彩温度；
605、按照所述预置的比例尺对所述热度图片进行放大得到所述渲染图像。
红外特效处理流程如图7所示：
701、获取所述背景图像的中心像素点；
702、计算所述背景图像中各像素点与所述中心像素点之间的距离；
703、按照所述距离设置所述各像素点的扭曲度得到扭曲图像，所述各像素点的扭曲度与该像素点与所述中心像素点之间的距离正相关；
704、使用绿色透镜对所述扭曲图像进行处理得到绿化图像；
705、对所述绿化图像增加随机噪点生成所述渲染图像。
此外，本发明实施例中，根据图像采集器实时采集的现实场景信息生成基于现实的背景图像，并实时生成虚拟场景图像，实时将背景图像与虚拟场景图像进行融合生成融合图像。在此过程中，处理器还可以实时获取增强现实场景生成设备中的传感器的数据，根据传感器的数据调整或控制虚拟场景图像的生成。
例如：陀螺仪组件可以获取玩家自身旋转的旋转值，将旋转值发往处理器，处理器在游戏场景中对玩家所控制的角色(虚拟角色)应用相同的陀螺仪旋转值，通过游戏引擎实时更新虚拟场景图像，使得真实场景和虚拟场景的玩家旋转一致，从而可以将玩家的真实旋转同步到虚拟场景图像中的虚拟角色。
此外，玩家通过触摸屏操作游戏UI界面，处理器接收到游戏操作指令，通过游戏引擎实时生成新的虚拟场景图像，从而控制虚拟场景中的虚拟物体和虚拟角色之间的互动，进行诸如射击，复活，释放技能等游戏效果。
图8为为玩家、虚拟物体(敌人)、真实场景之间的关系。
在游戏过程中，玩家需要观察显示屏上显示的雷达，通过自身旋转寻找敌人并击毁。游戏场景会随着玩家身体的移动或转动而变化，并通过程序将采集到的真实场景实时增加特殊效果后显示到屏幕上。
本发明实施例中，通过获取图像采集器采集的现实场景信息；将现实场景信息进行处理生成基于现实的背景图像；将背景图像与待显示的虚拟场景图像进行融合生成融合图像，虚拟场景图像包括虚拟物体图像和/或虚拟角色图像，并显示该融合图像。因为本发明实施例中不需要识别特定的目标图像，而是实时采集现实场景，将现实场景进行处理后作为基于现实的背景，并在基于现实的背景上生成具有虚拟物体和虚拟角色的虚拟场景，能够使基于现实的场景更为丰富，增强了游戏的临场感，提升了游戏的沉浸式体验。
另外，本发明实施例对背景图像进行特效处理，可以形成红外特效、夜视特效等效果，从而可以通过实时对背景图像进行二次处理后再输出，使游戏场景更为丰富，而不是局限于真实世界的原始场景。
上述是对本发明实施例中的增强现实系统及场景生成方法流程进行的介绍，下面从功能模块角度对本发明实施例中的增强现实场景生成装置进行介绍。
如图9所示，本发明实施例还提供一种增强现实场景生成装置，具体实现对应于(图1到图7)所述的增强现实场景生成方法所实现的功能。所述功能可以通过硬件实现，也可以通过硬件执行相应的软件程序实现。硬件和软件包括一个或多个与上述功能相对应的单元模块，所述单元模块可以是软件和/或硬件。
具体包括以下几个功能模块：
现实场景信息获取模块901，用于获取图像采集器采集的现实场景信息；
背景图像生成模块902，用于将所述现实场景信息进行处理生成基于现实的背景图像；
融合图像生成模块903，用于将所述背景图像与待显示的虚拟场景图像进行融合生成融合图像，所述虚拟场景图像包括虚拟物体图像和/或虚拟角色图像；
显示模块904，用于显示所述融合图像。
可选的，在一些具体的实施中，
所述现实场景信息获取模块901，具体用于通过所述摄像头拍摄周边现实世界的场景图片或场景视频，将所述场景图片或场景视频作为所述现实场景信息。
可选的，在一些具体的实施中，所述图像采集器为全息扫描仪；
所述现实场景信息获取模块901，具体用于通过所述全息扫描仪对周边现实世界进行扫描得到全息图片，将所述全息图片作为所述现实场景信息。
可选的，在一些具体的实施中，所述融合图像生成模块903包括：
环境参数获取单元9031，用于获取环境参数；
特效生成单元9032，用于根据所述环境参数对所述背景图像进行渲染得到渲染图像；
图像融合单元9033，用于将所述渲染图像与所述待显示的虚拟场景图像进行叠加生成所述融合图像。
可选的，在一些具体的实施中，所述环境参数获取单元9031，具体用于获取用户端输入的所述环境参数；
可选的，在一些具体的实施中，所述环境参数获取单元9031，具体用于从所述待显示的虚拟场景图像中提取所述环境参数。
可选的，在一些具体的实施中，所述特效生成单元9032，具体用于当所述环境参数指示为红外模式时，对所述背景图像进行红外热感渲染得到所述渲染图像；
可选的，在一些具体的实施中，所述特效生成单元9032，具体用于当所述环境参数指示为夜视模式时，对所述背景图像进行夜视渲染得到所述渲染图像。
可选的，在一些具体的实施中，所述特效生成单元9032，具体用于当所述环境参数指示为红外模式时，将所述背景图像转换为图像矩阵；对所述图像矩阵中的元素去除颜色值得到灰度图；按照预置的比例尺对所述灰度图进行缩小得到临时图片；按照预设的热度值对所述临时图片进行色彩调整得到热度图片，使得所述临时图片中热度值高的区域的色彩温度高于所述临时图片中热度值低的区域的色彩温度；按照所述预置的比例尺对所述热度图片进行放大得到所述渲染图像。
可选的，在一些具体的实施中，所述特效生成单元9032，具体用于获取所述背景图像的中心像素点；计算所述背景图像中各像素点与所述中心像素点之间的距离；按照所述距离设置所述各像素点的扭曲度得到扭曲图像，所述各像素点的扭曲度与该像素点与所述中心像素点之间的距离正相关；使用绿色透镜对所述扭曲图像进行处理得到绿化图像；对所述绿化图像增加随机噪点生成所述渲染图像。
具体的，上述各功能模块之间的信息交互请参与图1到图7所对应的系统及方法实施例中的描述，具体此处不做赘述。
此外，本发明还提供一种计算机存储介质，该介质存储有应用程序，该程序执行时包括上述增强现实场景生成方法(图1到图7所示的实施例)中的部分或者全部步骤。
本发明实施例中的增强现实游戏系统可以以一个用户设备(例如：手机)的形式存在。该发明的用户设备，包括手持设备、车载设备、可穿戴设备、计算设备，以及各种形式的用户设备。手持设备可以为包括手机、平板电脑、PDA(Personal Digital Assistant，个人数字助理)、等任意终端设备。
下面以为手机为例对本发明实施例中的用户设备进行介绍。
图10示出的是与本发明实施例提供的用户设备相关的手机的部分结构的框图。参考图10，手机包括：射频(Radio Frequency，RF)电路1010、存储器1020、输入单元1030、显示单元1040、传感器1050、音频电路1060、无线保真(wireless fidelity，WiFi)模块1070、处理器1080、以及电源1090等部件。本领域技术人员可以理解，图10中示出的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
下面结合图10对手机的各个构成部件进行具体的介绍：
存储器1020可用于存储软件程序以及模块，处理器1080通过运行存储在存储器1020的软件程序以及模块，从而执行手机的各种功能应用以及数据处理。存储器1020可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器1020可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
具体的，存储器1020存储的应用程序为执行时包括上述图1到图7所对应的方法中的部分或者全部步骤。存储器1020中存储的数据游戏程序执行过程中所生成的数据或者存储用户输入的数据。
输入单元1030可用于接收输入的数字或字符信息，以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地，输入单元1030可包括触控面板1031以及其他输入设备1032。触控面板1031，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1031上或在触控面板1031附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板1031可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器1080，并能接收处理器1080发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1031。除了触控面板1031，输入单元1030还可以包括其他输入设备1032。具体地，其他输入设备1032可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
具体的，本发明实施例中的触控面板1031接收玩家的输入，从而由处理器1080控制虚拟场景中的虚拟物体和虚拟角色之间的互动。
显示单元1040可用于显示由用户输入的信息或提供给用户的信息。显示单元1040可包括显示面板1041，可选的，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板1041。进一步的，触控面板1031可覆盖显示面板1041，当触控面板1031检测到在其上或附近的触摸操作后，传送给处理器1080以确定触摸事件的类型，随后处理器1080根据触摸事件的类型在显示面板1041上提供相应的视觉输出。虽然在图10中，触控面板1031与显示面板1041是作为两个独立的部件来实现手机的输入和输入功能，但是在某些实施例中，可以将触控面板1031与显示面板1041集成而实现手机的输入和输出功能。
具体的，本发明实施例中的显示面板1041用于显示融合图像。
处理器1080是手机的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器1020内的软件程序和/或模块，以及调用存储在存储器1020内的数据，执行手机的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器1080可包括一个或多个处理单元；优选的，处理器1080可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1080中。
具体的，本发明实施例中的处理器1080用于执行存储器1020中的应用程序，以执行图1到图7中的实施例中的处理器所执行的部分或者全部步骤。
手机还可包括至少一种传感器1050，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板1041的亮度，接近传感器可在手机移动到耳边时，关闭显示面板1041和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
手机还包括给各个部件供电的电源1090(比如电池)。
尽管未示出，手机还可以包括摄像头、蓝牙模块等，在此不再赘述。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (17)

1.一种增强现实场景生成方法，应用于基于真实场景的游戏系统，其特征在于，所述方法包括：
获取图像采集器采集的现实场景信息，所述现实场景信息为所述图像采集器拍摄到的整个场景画面；
将所述现实场景信息进行处理生成基于现实的背景图像；
根据所述背景图像中的元素实时生成虚拟场景图像中的虚拟物体图像和/或虚拟角色图像，所述虚拟角色图像为游戏中用户所控制的角色，包括代表玩家身份的人物角色或者物件，所述虚拟物体图像是游戏中除虚拟角色以外的物体，所述虚拟角色根据所述游戏系统的陀螺仪组件所采集的所述用户自身旋转的数据与所述用户的真实旋转同步；
根据所述背景图像中的元素实时调整所述虚拟场景图像中的所述虚拟物体图像和/或所述虚拟角色图像的视觉效果；
将所述背景图像与所述虚拟场景图像进行融合生成融合图像，所述虚拟场景图像包括所述虚拟物体图像和/或所述虚拟角色图像；
显示所述融合图像；
所述将所述背景图像与虚拟场景图像进行融合生成融合图像包括：
获取环境参数；
根据所述环境参数对所述背景图像进行渲染得到渲染图像；
将所述渲染图像与待显示的所述虚拟场景图像进行叠加生成所述融合图像。
2.根据权利要求1所述的方法，其特征在于，所述图像采集器为摄像头；
所述获取图像采集器采集的现实场景包括：
通过所述摄像头拍摄周边现实世界的场景图片或场景视频；
将所述场景图片或场景视频作为所述现实场景信息。
3.根据权利要求1所述的方法，其特征在于，所述图像采集器为全息扫描仪；
所述获取图像采集器采集的现实场景包括：
通过所述全息扫描仪对周边现实世界进行扫描得到全息图片；
将所述全息图片作为所述现实场景信息。
4.根据权利要求1至3中任一项所述的方法，其特征在于，所述获取环境参数包括：
获取用户端输入的所述环境参数；
或，
从所述待显示的虚拟场景图像中提取所述环境参数。
5.根据权利要求4所述的方法，其特征在于，所述根据所述环境参数对所述背景图像进行渲染得到渲染图像包括：
当所述环境参数指示为红外模式时，对所述背景图像进行红外热感渲染得到所述渲染图像；
或，
当所述环境参数指示为夜视模式时，对所述背景图像进行夜视渲染得到所述渲染图像。
6.根据权利要求5所述的方法，其特征在于，所述对所述背景图像进行红外热感渲染得到所述渲染图像包括：
将所述背景图像转换为图像矩阵；
对所述图像矩阵中的元素去除颜色值得到灰度图；
按照预置的比例尺对所述灰度图进行缩小得到临时图片；
按照预设的热度值对所述临时图片进行色彩调整得到热度图片，使得所述临时图片中热度值高的区域的色彩温度高于所述临时图片中热度值低的区域的色彩温度；
按照所述预置的比例尺对所述热度图片进行放大得到所述渲染图像。
7.根据权利要求5所述的方法，其特征在于，所述对所述背景图像进行夜视渲染得到所述渲染图像包括：
获取所述背景图像的中心像素点；
计算所述背景图像中各像素点与所述中心像素点之间的距离；
按照所述距离设置所述各像素点的扭曲度得到扭曲图像，所述各像素点的扭曲度与该像素点与所述中心像素点之间的距离正相关；
使用绿色透镜对所述扭曲图像进行处理得到绿化图像；
对所述绿化图像增加随机噪点生成所述渲染图像。
8.一种增强现实场景生成装置，其特征在于，所述装置包括：
现实场景信息获取模块，用于获取图像采集器采集的现实场景信息，所述现实场景信息为所述图像采集器拍摄到的整个场景画面；
背景图像生成模块，用于将所述现实场景信息进行处理生成基于现实的背景图像；
融合图像生成模块，用于根据所述背景图像中的元素实时生成虚拟场景图像中的虚拟物体图像和/或虚拟角色图像，所述虚拟角色图像为游戏中用户所控制的角色，包括代表玩家身份的人物角色或者物件，所述虚拟物体图像是游戏中除虚拟角色以外的物体，所述虚拟角色根据所述游戏系统的陀螺仪组件所采集的所述用户自身旋转的数据与所述用户的真实旋转同步；根据所述背景图像中的元素实时调整所述虚拟场景图像中的所述虚拟物体图像和/或所述虚拟角色图像的视觉效果；将所述背景图像与所述虚拟场景图像进行融合生成融合图像，所述虚拟场景图像包括所述虚拟物体图像和/或所述虚拟角色图像；
显示模块，用于显示所述融合图像；
所述融合图像生成模块包括：
环境参数获取单元，用于获取环境参数；
特效生成单元，用于根据所述环境参数对所述背景图像进行渲染得到渲染图像；
图像融合单元，用于将所述渲染图像与待显示的所述虚拟场景图像进行叠加生成所述融合图像。
9.根据权利要求8所述的装置，其特征在于，所述图像采集器为摄像头；
所述现实场景信息获取模块，具体用于通过所述摄像头拍摄周边现实世界的场景图片或场景视频，将所述场景图片或场景视频作为所述现实场景信息。
10.根据权利要求9所述的装置，其特征在于，所述图像采集器为全息扫描仪；
所述现实场景信息获取模块，具体用于通过所述全息扫描仪对周边现实世界进行扫描得到全息图片，将所述全息图片作为所述现实场景信息。
11.根据权利要求8至10中任一项所述的装置，其特征在于，
所述环境参数获取单元，具体用于获取用户端输入的所述环境参数；
或，
所述环境参数获取单元，具体用于从所述待显示的虚拟场景图像中提取所述环境参数。
12.根据权利要求11所述的装置，其特征在于，
所述特效生成单元，具体用于当所述环境参数指示为红外模式时，对所述背景图像进行红外热感渲染得到所述渲染图像；
或，
所述特效生成单元，具体用于当所述环境参数指示为夜视模式时，对所述背景图像进行夜视渲染得到所述渲染图像。
13.根据权利要求12所述的装置，其特征在于，
所述特效生成单元，具体用于当所述环境参数指示为红外模式时，将所述背景图像转换为图像矩阵；对所述图像矩阵中的元素去除颜色值得到灰度图；按照预置的比例尺对所述灰度图进行缩小得到临时图片；按照预设的热度值对所述临时图片进行色彩调整得到热度图片，使得所述临时图片中热度值高的区域的色彩温度高于所述临时图片中热度值低的区域的色彩温度；按照所述预置的比例尺对所述热度图片进行放大得到所述渲染图像。
14.根据权利要求12所述的装置，其特征在于，
所述特效生成单元，具体用于获取所述背景图像的中心像素点；计算所述背景图像中各像素点与所述中心像素点之间的距离；按照所述距离设置所述各像素点的扭曲度得到扭曲图像，所述各像素点的扭曲度与该像素点与所述中心像素点之间的距离正相关；使用绿色透镜对所述扭曲图像进行处理得到绿化图像；对所述绿化图像增加随机噪点生成所述渲染图像。
15.一种用户设备，其特征在于，所述用户设备包括：
图像采集器、处理器、存储器以及显示屏；
所述图像采集器，用于采集现实场景信息，所述现实场景信息为所述图像采集器拍摄到的整个场景画面；
所述存储器，用于存储图像采集器采集的所述现实场景信息；
所述处理器，用于获取所述现实场景信息，将所述现实场景信息进行处理生成基于现实的背景图像；根据所述背景图像中的元素实时生成虚拟场景图像中的虚拟物体图像和/或虚拟角色图像，所述虚拟角色图像为游戏中用户所控制的角色，包括代表玩家身份的人物角色或者物件，所述虚拟物体图像是游戏中除虚拟角色以外的物体，所述虚拟角色根据所述游戏系统的陀螺仪组件所采集的所述用户自身旋转的数据与所述用户的真实旋转同步；根据所述背景图像中的元素实时调整所述虚拟场景图像中的所述虚拟物体图像和/或所述虚拟角色图像的视觉效果；并将所述背景图像与所述虚拟场景图像进行融合生成融合图像，所述虚拟场景图像包括所述虚拟物体图像和/或所述虚拟角色图像；
所述显示屏，用于显示所述融合图像；
所述处理器，具体用于获取所述现实场景信息，将所述现实场景信息进行处理生成基于现实的背景图像，获取环境参数，根据所述环境参数对所述背景图像进行渲染得到渲染图像，将所述渲染图像与待显示的所述虚拟场景图像进行叠加生成所述融合图像。
16.根据权利要求15所述的用户设备，其特征在于，
所述处理器，具体用于获取用户端输入的所述环境参数，或，从所述待显示的虚拟场景图像中提取所述环境参数。
17.根据权利要求16所述的用户设备，其特征在于，
所述处理器，具体用于当所述环境参数指示为红外模式时，对所述背景图像进行红外热感渲染得到所述渲染图像；或，当所述环境参数指示为夜视模式时，对所述背景图像进行夜视渲染得到所述渲染图像。
CN201610949178.XA 2016-10-26 2016-10-26 一种增强现实场景生成方法、装置及设备 Active CN106383587B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201610949178.XA CN106383587B (zh) 2016-10-26 2016-10-26 一种增强现实场景生成方法、装置及设备
PCT/CN2017/107739 WO2018077206A1 (zh) 2016-10-26 2017-10-26 增强现实场景生成方法、装置、系统及设备
US16/294,890 US11270419B2 (en) 2016-10-26 2019-03-06 Augmented reality scenario generation method, apparatus, system, and device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610949178.XA CN106383587B (zh) 2016-10-26 2016-10-26 一种增强现实场景生成方法、装置及设备

Publications (2)

Publication Number Publication Date
CN106383587A CN106383587A (zh) 2017-02-08
CN106383587B true CN106383587B (zh) 2020-08-04

Family

ID=57957162

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610949178.XA Active CN106383587B (zh) 2016-10-26 2016-10-26 一种增强现实场景生成方法、装置及设备

Country Status (3)

Country Link
US (1) US11270419B2 (zh)
CN (1) CN106383587B (zh)
WO (1) WO2018077206A1 (zh)

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106383587B (zh) * 2016-10-26 2020-08-04 腾讯科技（深圳）有限公司 一种增强现实场景生成方法、装置及设备
CN107424206B (zh) * 2017-04-14 2020-09-22 苏州蜗牛数字科技股份有限公司 一种利用现实环境影响虚拟场景光影表现的互动方法
CN107272889A (zh) * 2017-05-23 2017-10-20 武汉秀宝软件有限公司 一种基于三维坐标的ar界面交互方法及系统
WO2018219962A1 (en) * 2017-06-01 2018-12-06 Philips Lighting Holding B.V. A system for rendering virtual objects and a method thereof
CN107441714A (zh) * 2017-06-01 2017-12-08 杨玉苹 一种实现ar第一人称射击游戏的图像处理方法及其装置、射击游戏对战系统及其工作方法
CN107320955B (zh) * 2017-06-23 2021-01-29 武汉秀宝软件有限公司 一种基于多客户端的ar场馆界面交互方法及系统
CN107574625A (zh) * 2017-08-18 2018-01-12 珠海格力电器股份有限公司 衣物的洗涤方法、装置、存储设备、移动终端及洗衣机
CN109420336A (zh) * 2017-08-30 2019-03-05 深圳市掌网科技股份有限公司 基于增强现实的游戏实现方法和装置
CN107551546A (zh) * 2017-09-14 2018-01-09 光锐恒宇（北京）科技有限公司 一种游戏视频的生成方法和装置
CN107469349A (zh) * 2017-09-14 2017-12-15 光锐恒宇（北京）科技有限公司 一种游戏应用的控制方法和装置
CN109523457A (zh) * 2017-09-18 2019-03-26 东斓视觉科技发展（北京）有限公司 宣传海报的制作方法及设备
CN107526443A (zh) * 2017-09-29 2017-12-29 北京金山安全软件有限公司 一种增强现实方法、装置、系统、电子设备及存储介质
CN108022301B (zh) 2017-11-23 2020-05-19 腾讯科技（上海）有限公司 一种图像处理方法、装置以及存储介质
CN108038911B (zh) * 2017-11-27 2022-03-11 广西南宁聚象数字科技有限公司 一种基于ar技术的全息成像控制方法
CN109840947B (zh) * 2017-11-28 2023-05-09 广州腾讯科技有限公司 增强现实场景的实现方法、装置、设备及存储介质
CN107773254A (zh) * 2017-12-05 2018-03-09 苏州创捷传媒展览股份有限公司 一种测试用户体验的方法及装置
CN108133517A (zh) * 2017-12-25 2018-06-08 福建天泉教育科技有限公司 一种在虚拟场景下显示外景的方法和终端
CN108153201A (zh) * 2017-12-29 2018-06-12 安徽创视纪科技有限公司 一种触发式激光感应系统
CN108176051A (zh) * 2017-12-29 2018-06-19 武汉艺术先生数码科技有限公司 室内跑酷游戏模拟系统
CN108159698A (zh) * 2017-12-29 2018-06-15 武汉艺术先生数码科技有限公司 基于ar的室内跑酷游戏模拟系统
CN108200446B (zh) * 2018-01-12 2021-04-30 北京蜜枝科技有限公司 虚拟形象的线上多媒体互动系统及方法
KR102484333B1 (ko) * 2018-01-22 2023-01-02 애플 인크. 합성된 현실 설정들에서 오브젝티브 실행기들에 대한 오브젝티브들의 생성
EP3724821A1 (en) * 2018-01-22 2020-10-21 Dakiana Research LLC Objective-effectuators in synthesized reality settings
CN108255304B (zh) * 2018-01-26 2022-10-04 腾讯科技（深圳）有限公司 基于增强现实的视频数据处理方法、装置和存储介质
CN108345667A (zh) * 2018-02-06 2018-07-31 北京搜狗科技发展有限公司 一种搜索方法及相关装置
US10695667B2 (en) * 2018-03-14 2020-06-30 Sony Interactive Entertainment LLC Pro gaming AR visor and method for parsing context specific HUD content from a video stream
CN108665553B (zh) * 2018-04-28 2023-03-17 腾讯科技（深圳）有限公司 一种实现虚拟场景转换的方法及设备
CN110544311B (zh) * 2018-05-29 2023-04-25 百度在线网络技术（北京）有限公司 安全警示方法、装置及存储介质
CN108815847B (zh) * 2018-05-29 2021-07-20 努比亚技术有限公司 一种虚拟现实交互调控方法、设备及计算机可读存储介质
CN109035420A (zh) * 2018-08-21 2018-12-18 维沃移动通信有限公司 一种增强现实ar图像的处理方法及移动终端
CN109285130B (zh) * 2018-09-10 2020-09-22 珠海格力电器股份有限公司 一种景物复现方法、装置、存储介质及终端
CN109218709B (zh) * 2018-10-18 2022-02-15 北京小米移动软件有限公司 全息内容的调整方法及装置和计算机可读存储介质
CN111083391A (zh) * 2018-10-19 2020-04-28 舜宇光学（浙江）研究院有限公司 虚实融合系统及其方法
CN109379551B (zh) * 2018-11-26 2021-05-18 京东方科技集团股份有限公司 一种增强内容显示方法、处理方法、显示装置及处理装置
US11083961B2 (en) * 2018-12-21 2021-08-10 Universal City Studios Llc Scalable interactive video systems and methods
JP7651252B2 (ja) * 2018-12-25 2025-03-26 株式会社Cygames 画像処理方法、画像処理装置、ゲーム装置及びプログラム
CN109598801A (zh) * 2018-12-29 2019-04-09 北京琳云信息科技有限责任公司 播放信息处理方法及系统
US10780359B2 (en) * 2019-01-08 2020-09-22 Universal City Studios Llc Systems and methods for a connected augmented environment
CN109978945B (zh) * 2019-02-26 2021-08-31 浙江舜宇光学有限公司 一种增强现实的信息处理方法和装置
CN109920063B (zh) * 2019-03-11 2023-04-28 中船第九设计研究院工程有限公司 一种船舶分段堆场引导系统构建方法
CN110018740A (zh) * 2019-03-13 2019-07-16 武汉零点视觉数字科技有限公司 一种基于vr与三维技术的深海体验系统
CN109847350A (zh) * 2019-03-25 2019-06-07 深圳初影科技有限公司 基于ar技术的游戏实现方法、游戏系统、及存储介质
CN110174939A (zh) * 2019-04-19 2019-08-27 深圳远为文化有限公司 全景扫描融合现实系统
CN110412765B (zh) * 2019-07-11 2021-11-16 Oppo广东移动通信有限公司 增强现实图像拍摄方法、装置、存储介质及增强现实设备
CN112396686B (zh) * 2019-07-31 2024-08-06 富联精密电子(天津)有限公司 三维场景工程模拟与实景融合系统及方法
CN111068326B (zh) * 2019-12-23 2023-06-23 上海米哈游天命科技有限公司 一种游戏技能配置方法、装置、服务器及存储介质
US11232637B2 (en) 2020-02-17 2022-01-25 Wipro Limited Method and system for rendering content in low light condition for field assistance
CN111429585A (zh) * 2020-03-30 2020-07-17 北京字节跳动网络技术有限公司 图像生成方法、装置、电子设备及计算机可读存储介质
CN111639613B (zh) * 2020-06-04 2024-04-16 上海商汤智能科技有限公司 一种增强现实ar特效生成方法、装置及电子设备
CN111598824A (zh) * 2020-06-04 2020-08-28 上海商汤智能科技有限公司 场景图像处理方法、装置、ar设备以及存储介质
CN111652981A (zh) * 2020-06-07 2020-09-11 浙江商汤科技开发有限公司 一种太空舱特效生成方法、装置、电子设备及存储介质
CN111694431A (zh) * 2020-06-09 2020-09-22 浙江商汤科技开发有限公司 一种人物形象生成的方法及装置
CN111652985B (zh) * 2020-06-10 2024-04-16 上海商汤智能科技有限公司 一种虚拟对象的控制方法、装置、电子设备及存储介质
CN112037158B (zh) * 2020-07-22 2023-09-15 四川长宁天然气开发有限责任公司 一种基于页岩气田生产设备图像增强标注方法
CN114078102A (zh) * 2020-08-11 2022-02-22 北京芯海视界三维科技有限公司 图像处理装置和虚拟现实设备
CN112215934B (zh) * 2020-10-23 2023-08-29 网易（杭州）网络有限公司 游戏模型的渲染方法、装置、存储介质及电子装置
CN112102422B (zh) * 2020-11-19 2021-03-05 蚂蚁智信(杭州)信息技术有限公司 图像处理方法及装置
CN112710608B (zh) * 2020-12-16 2023-06-23 深圳晶泰科技有限公司 实验观测方法及系统
CN112991553B (zh) * 2021-03-11 2022-08-26 深圳市慧鲤科技有限公司 信息展示方法及装置、电子设备和存储介质
WO2022205102A1 (zh) * 2021-03-31 2022-10-06 华为技术有限公司 一种场景处理方法、装置、系统及相关设备
CN113082728A (zh) * 2021-04-14 2021-07-09 杭州易现先进科技有限公司 游乐车和增强现实交互系统
TWI773350B (zh) * 2021-05-28 2022-08-01 樹德科技大學 結合環境偵測之實境遊戲系統
WO2023283659A2 (en) * 2021-07-09 2023-01-12 Artema Labs, Inc Systems and methods for token management in augmented and virtual environments
CN113902884A (zh) * 2021-11-10 2022-01-07 海信视像科技股份有限公司 一种图像显示方法及设备
CN114462117B (zh) * 2021-12-29 2025-03-14 北京五八信息技术有限公司 房屋装修的处理方法、装置、电子设备及存储介质
CN115089957A (zh) * 2022-07-07 2022-09-23 亿咖通(湖北)技术有限公司 车载游戏的控制方法、设备、存储介质及程序产品
CN118535002B (zh) * 2023-02-23 2025-03-04 中信国际电讯(信息技术)有限公司 基于计算机视觉的扩展现实应用程序的生成和操作
CN116110080B (zh) * 2023-04-04 2023-07-04 成都新希望金融信息有限公司 一种真人面签和虚拟人面签的切换方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1746822A (zh) * 2004-09-07 2006-03-15 佳能株式会社 用于呈现与虚拟图像合成的图像的信息处理装置及方法
CN104270577A (zh) * 2014-08-22 2015-01-07 北京德馨同创科技发展有限责任公司 用于移动智能终端的图像处理方法和装置
CN104539925A (zh) * 2014-12-15 2015-04-22 北京邮电大学 基于深度信息的三维场景增强现实的方法及系统
CN105955456A (zh) * 2016-04-15 2016-09-21 深圳超多维光电子有限公司 虚拟现实与增强现实融合的方法、装置及智能穿戴设备

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6215498B1 (en) * 1998-09-10 2001-04-10 Lionhearth Technologies, Inc. Virtual command post
US7084887B1 (en) * 1999-06-11 2006-08-01 Canon Kabushiki Kaisha Marker layout method, mixed reality apparatus, and mixed reality space image generation method
US6760134B1 (en) * 2003-03-20 2004-07-06 The United States Of America As Represented By The Secretary Of The Army Multicolor electronic holography and 3D image projection system
US8742982B2 (en) * 2010-03-30 2014-06-03 Sony Corporation Indirect radar holography apparatus and corresponding method
US9646417B1 (en) * 2011-01-28 2017-05-09 The Boeing Company Augmented reality system for field training
US9280206B2 (en) * 2012-08-20 2016-03-08 Samsung Electronics Co., Ltd. System and method for perceiving images with multimodal feedback
CN103196564B (zh) * 2013-03-25 2015-04-29 北京航空航天大学 一种通过图像分割修正表面发射率的红外热成像测温方法
CN103593514B (zh) * 2013-10-30 2016-06-01 中国运载火箭技术研究院 多谱段合成环境模拟系统
US9858720B2 (en) * 2014-07-25 2018-01-02 Microsoft Technology Licensing, Llc Three-dimensional mixed-reality viewport
IL234396A0 (en) * 2014-08-31 2014-12-02 Brightway Vision Ltd Self-portrait remediation
US10026228B2 (en) * 2015-02-25 2018-07-17 Intel Corporation Scene modification for augmented reality using markers with parameters
US10788791B2 (en) * 2016-02-22 2020-09-29 Real View Imaging Ltd. Method and system for displaying holographic images within a real object
US10606342B2 (en) * 2016-02-26 2020-03-31 Samsung Eletrônica da Amazônia Ltda. Handsfree user input method for controlling an immersive virtual environment application
CN105786432A (zh) * 2016-03-18 2016-07-20 北京奇虎科技有限公司 在移动终端上展示虚拟画面的方法及装置
US9607201B1 (en) * 2016-04-22 2017-03-28 Datalogic ADC, Inc. Systems and methods for non-permanent operator customization of a scanning device
US10636222B2 (en) * 2016-05-04 2020-04-28 Google Llc Avatars in virtual environments
CN106383587B (zh) * 2016-10-26 2020-08-04 腾讯科技（深圳）有限公司 一种增强现实场景生成方法、装置及设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1746822A (zh) * 2004-09-07 2006-03-15 佳能株式会社 用于呈现与虚拟图像合成的图像的信息处理装置及方法
CN104270577A (zh) * 2014-08-22 2015-01-07 北京德馨同创科技发展有限责任公司 用于移动智能终端的图像处理方法和装置
CN104539925A (zh) * 2014-12-15 2015-04-22 北京邮电大学 基于深度信息的三维场景增强现实的方法及系统
CN105955456A (zh) * 2016-04-15 2016-09-21 深圳超多维光电子有限公司 虚拟现实与增强现实融合的方法、装置及智能穿戴设备

Also Published As

Publication number Publication date
CN106383587A (zh) 2017-02-08
US20190206037A1 (en) 2019-07-04
WO2018077206A1 (zh) 2018-05-03
US11270419B2 (en) 2022-03-08

Similar Documents

Publication Publication Date Title
CN106383587B (zh) 一种增强现实场景生成方法、装置及设备
CN111035918B (zh) 基于虚拟环境的侦察界面显示方法、装置及可读存储介质
CN104102412B (zh) 一种基于增强现实技术的手持式阅览设备及其方法
WO2019153750A1 (zh) 用于对虚拟环境进行视角切换的方法、装置、设备及存储介质
CN103357177B (zh) 使用便携式游戏装置来记录或修改在主游戏系统上实时运行的游戏或应用
CN111701238A (zh) 虚拟画卷的显示方法、装置、设备及存储介质
KR101692335B1 (ko) 증강현실 영상표시 시스템 및 증강현실 영상표시 방법
US20090251421A1 (en) Method and apparatus for tactile perception of digital images
CN106355153A (zh) 一种基于增强现实的虚拟对象显示方法、装置以及系统
CN112156464A (zh) 虚拟对象的二维形象展示方法、装置、设备及存储介质
CN108525298A (zh) 图像处理方法、装置、存储介质及电子设备
CN111603771B (zh) 动画生成方法、装置、设备及介质
CN103871092A (zh) 显示控制装置以及显示控制方法
CN109426343B (zh) 基于虚拟现实的协作训练方法及系统
CN105279795A (zh) 基于3d标记的增强现实系统
CN104428791A (zh) 通过检测图像中的圆形物体操作计算装置
CN111330278B (zh) 基于虚拟环境的动画播放方法、装置、设备及介质
CN112933606A (zh) 游戏场景转换方法及装置、存储介质、计算机设备
CN204028887U (zh) 一种基于增强现实技术的手持式阅览设备
CN111325822A (zh) 热点图的显示方法、装置、设备及可读存储介质
CN113194329B (zh) 直播互动方法、装置、终端及存储介质
CN112755517B (zh) 虚拟对象控制方法、装置、终端及存储介质
CN113470190A (zh) 场景显示方法及装置、设备、车辆、计算机可读存储介质
CN112316423A (zh) 虚拟对象状态变化的显示方法、装置、设备及介质
CN111338487B (zh) 虚拟环境中的特征切换方法、装置、终端及可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant