[go: up one dir, main page]

KR20140043522A - Apparatus and method for controlling of transparent both-sided display - Google Patents

Apparatus and method for controlling of transparent both-sided display Download PDF

Info

Publication number
KR20140043522A
KR20140043522A KR1020120105145A KR20120105145A KR20140043522A KR 20140043522 A KR20140043522 A KR 20140043522A KR 1020120105145 A KR1020120105145 A KR 1020120105145A KR 20120105145 A KR20120105145 A KR 20120105145A KR 20140043522 A KR20140043522 A KR 20140043522A
Authority
KR
South Korea
Prior art keywords
user
sided display
transparent double
motion
recognizing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
KR1020120105145A
Other languages
Korean (ko)
Inventor
이희섭
윤준성
김계영
Original Assignee
숭실대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 숭실대학교산학협력단 filed Critical 숭실대학교산학협력단
Priority to KR1020120105145A priority Critical patent/KR20140043522A/en
Publication of KR20140043522A publication Critical patent/KR20140043522A/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • G—PHYSICS
    • G02—OPTICS
    • G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/133—Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
    • G02F1/1333—Constructional arrangements; Manufacturing methods
    • G02F1/1347—Arrangement of liquid crystal layers or cells in which the final condition of one light beam is achieved by the addition of the effects of two or more layers or cells
    • G02F1/13471—Arrangement of liquid crystal layers or cells in which the final condition of one light beam is achieved by the addition of the effects of two or more layers or cells in which all the liquid crystal cells or layers remain transparent, e.g. FLC, ECB, DAP, HAN, TN, STN, SBE-LC cells
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Nonlinear Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Mathematical Physics (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명은 투명 양면형 디스플레이 제어 장치 및 그 제어 방법에 관한 것으로, 본 발명의 일 실시예에 따른 투명 양면형 디스플레이 제어 장치는, 투명 양면형 디스플레이의 각 면으로부터 기 설정된 범위 내에 포함되는 하나 이상의 사용자의 위치를 인식하는 위치 인식부와, 상기 사용자의 모션을 인식하는 모션 인식부와, 상기 사용자의 위치 또는 모션에 따라 상기 투명 양면형 디스플레이의 각 면에 표시되는 가상 객체가 가변되도록 맵핑하는 맵핑부를 포함한다.
이에 따라, 투명 양면형 디스플레이를 이용하여 각 면의 사용자의 움직임에 따라 가변되는 가상 객체와 투명 양면형 디스플레이를 통해 투과된 반대편 사용자의 투과 영상이 오버레이되어 함께 표시됨으로써 현실감 있는 영상을 제공할 수 있다.The present invention relates to a transparent double-sided display control device and a control method thereof, the transparent double-sided display control device according to an embodiment of the present invention, at least one user included in a predetermined range from each side of the transparent double-sided display A location recognizing unit for recognizing a location of the user, a motion recognizing unit recognizing the motion of the user, and a mapping unit for mapping virtual objects displayed on each side of the transparent double-sided display according to the location or motion of the user to be variable Include.
Accordingly, the transparent double-sided display can be used to provide a realistic image by overlaying the virtual objects that are varied according to the movement of the user on each side and the transmitted images of the opposite user transmitted through the transparent double-sided display. .

Description

투명 양면형 디스플레이 제어 장치 및 그 제어 방법{APPARATUS AND METHOD FOR CONTROLLING OF TRANSPARENT BOTH-SIDED DISPLAY}Transparent double-sided display control device and its control method {APPARATUS AND METHOD FOR CONTROLLING OF TRANSPARENT BOTH-SIDED DISPLAY}

본 발명은 투명 양면형 디스플레이 제어 장치 및 그 제어 방법에 관한 것으로, 더욱 상세하게는 사용자의 위치 또는 모션을 인식하여 서로 다른 영상을 생성하는 기술이 개시된다.The present invention relates to a transparent double-sided display control device and a control method thereof, and more particularly, a technology for generating different images by recognizing a user's position or motion.

일반적으로 게임큐브, 플레이스테이션 및 엑스박스 같은 콘솔용 비디오 게임기는 게임기 본체와 게임 컨트롤러 및 영상장치로 이루어져 각 개인 혹은 몇 명의 지인이 함께 게임을 즐기도록 구성된다. 또한, 오락실에 설치되어 있는 게임기는 하우징 내부에 게임 보드와 영상장치가 설치되고, 하우징 외부에 게임 컨트롤러가 설치된 형태로 게임을 즐기도록 되어 있으며, 최근에는 컴퓨터와 모니터와 같은 영상장치 및 키보드, 마우스, 조이스틱과 같은 입력장치로 이루어진 컴퓨터 시스템으로 인터넷에 연결된 상태의 온라인 게임을 즐기도록 되어있다.In general, video game consoles such as game cubes, playstations, and Xbox are composed of a game console body, a game controller, and a video device so that each person or several acquaintances can play a game together. In addition, the game machine installed in the game room is provided with a game board and an image device inside the housing, and a game controller is installed outside the housing, and recently, video devices such as computers and monitors, keyboards, mice, etc. It is a computer system consisting of input devices such as joysticks, and it is designed to play online games connected to the Internet.

게임기 및 게임 시스템은 영상장치로 한쪽 면에서 영상을 구현하는 스크린을 이용하며, 일부 오락실에서는 대형화면을 제공하는 후면투사형 프로젝션 영상 시스템을 채택하기도 한다. 따라서 게임 참여자들은 영상장치의 한쪽 면에서만 게임을 할 수밖에 없고, 최근의 게임 내용을 보면 개인 혼자서 즐기는 내용보다는 여러 명이 서로 경쟁하면서 점수를 높이는 게임 내용이 상당수를 차지한다. 여러 명이 동시에 하나의 게임 콘텐츠를 이용하는 게임의 경우, 같은 공간에서 하나의 게임 화면을 이용함으로써 게임 콘텐츠에 제한이 생기게 된다. 또한, 운동 경기 게임의 경우 현실감이 떨어지는 문제점이 있다.Game consoles and game systems use screens that produce images on one side as imaging devices, and some entertainment rooms also employ rear projection projection imaging systems that provide large screens. Therefore, game participants have no choice but to play the game on only one side of the video device, and in the recent game contents, a large number of game contents in which a number of people compete with each other to increase scores rather than contents enjoyed by individuals alone. In the case of a game in which several people use one game content at the same time, the game content is limited by using one game screen in the same space. In addition, in the case of an athletic game, there is a problem that the reality falls.

본 발명의 배경이 되는 기술은 일본 공개특허공보 제2003-190628호(2003. 07. 08 공개)에 개시되어 있다.The background art of this invention is disclosed by Unexamined-Japanese-Patent No. 2003-190628 (published on July 07, 2003).

본 발명이 해결하고자 하는 기술적인 과제는 투명 양면형 디스플레이를 이용하여 각 면에 사용자의 움직임에 따라 가변되는 가상 객체와 반대편 사용자의 영상을 함께 표시함으로써 현실감 있는 영상을 제공할 수 있는 투명 양면형 디스플레이 제어 장치 및 그 제어 방법을 제공하기 위함이다.The technical problem to be solved by the present invention is a transparent double-sided display that can provide a realistic image by displaying the image of the opposite user and the virtual object that is variable according to the user's movement on each side using a transparent double-sided display It is to provide a control device and a control method thereof.

본 발명의 일 실시예에 따른 투명 양면형 디스플레이 제어 장치는, 투명 양면형 디스플레이의 각 면으로부터 기 설정된 범위 내에 포함되는 하나 이상의 사용자의 위치를 인식하는 위치 인식부와, 상기 사용자의 모션을 인식하는 모션 인식부와, 상기 사용자의 위치 또는 모션에 따라 상기 투명 양면형 디스플레이의 각 면에 표시되는 가상 객체가 가변되도록 맵핑하는 맵핑부를 포함한다.The transparent double-sided display control apparatus according to an embodiment of the present invention, the position recognition unit for recognizing the position of one or more users included in a predetermined range from each side of the transparent double-sided display, and to recognize the motion of the user A motion recognition unit and a mapping unit for mapping a virtual object displayed on each side of the transparent double-sided display to vary according to the position or motion of the user.

또한, 상기 투명 양면형 디스플레이의 일 면에는 타 면에 대향하여 위치하는 사용자의 투과 영상 또는 상기 가상 객체가 표시될 수 있다.In addition, one side of the transparent double-sided display may display a transmission image or the virtual object of the user located opposite the other side.

또한, 상기 위치 인식부는, 상기 사용자에 부착된 사용자 단말기로부터 상기 사용자의 모션을 인식할 수 있다.The location recognition unit may recognize a motion of the user from a user terminal attached to the user.

또한, 상기 모션 인식부는, 상기 사용자에 부착된 사용자 단말기로부터 상기 사용자의 모션을 인식할 수 있다.The motion recognition unit may recognize a motion of the user from a user terminal attached to the user.

또한, 상기 맵핑부는, 상기 투명 양면형 디스플레이의 각 면에 표시되는 영상이 상기 사용자의 위치 또는 모션에 따라 서로 다르게 표시되도록 상기 가상 객체를 맵핑할 수 있다.The mapping unit may map the virtual object such that an image displayed on each side of the transparent double-sided display is displayed differently according to the position or motion of the user.

또한, 상기 맵핑부는, 상기 투명 양면형 디스플레이의 각 면에 상기 사용자의 위치에 따라 가변되는 배경 객체와, 상기 사용자의 모션에 따라 가변되는 타겟 객체를 맵핑할 수 있다.The mapping unit may map a background object variable according to the position of the user and a target object variable according to the motion of the user, on each side of the transparent double-sided display.

또한, 상기 맵핑부는, 상기 투명 양면형 디스플레이의 일 면에 위치한 사용자의 상기 타겟 객체에 대한 모션을 이용하여, 상기 투명 양면형 디스플레이의 타 면에 표시되는 상기 타겟 객체의 움직임을 맵핑할 수 있다.The mapping unit may map a movement of the target object displayed on the other side of the transparent double-sided display by using a motion of the target object of a user located on one side of the transparent double-sided display.

본 발명의 또 다른 실시예에 따른 투명 양면형 디스플레이 제어 방법은, 투명 양면형 디스플레이의 각 면으로부터 기 설정된 범위 내에 포함되는 하나 이상의 사용자의 위치를 인식하는 단계와, 상기 사용자의 모션을 인식하는 단계와, 상기 사용자의 위치 또는 모션에 따라 상기 투명 양면형 디스플레이의 각 면에 표시되는 가상 객체가 가변되도록 맵핑하는 단계를 포함한다.According to still another aspect of the present invention, there is provided a method for controlling a transparent double-sided display, including recognizing a position of at least one user included in a preset range from each side of the transparent double-sided display, and recognizing a motion of the user. And mapping the virtual objects displayed on each side of the transparent double-sided display to vary according to the position or motion of the user.

이에 따라, 투명 양면형 디스플레이를 이용하여 각 면의 사용자의 움직임에 따라 가변되는 가상 객체와 투명 양면형 디스플레이를 통해 투과된 반대편 사용자의 투과 영상이 오버레이되어 함께 표시됨으로써 현실감 있는 영상을 제공할 수 있다.Accordingly, the transparent double-sided display can be used to provide a realistic image by overlaying the virtual objects that are varied according to the movement of the user on each side and the transmitted images of the opposite user transmitted through the transparent double-sided display. .

도 1은 본 발명의 실시예에 따른 투명 양면형 디스플레이 제어 장치를 포함하는 투명 양면형 디스플레이 시스템을 설명하기 위한 예시도,
도 2는 도 1에 따른 투명 양면형 디스플레이 제어 장치의 구성도,
도 3은 도 2에 따른 투명 양면형 디스플레이 제어 장치에 따른 투명 양면형 디스플레이 제어 방법의 흐름도,
도 4a는 도 3에 따른 투명 양면형 디스플레이 제어 방법 중 투명 양면형 디스플레이의 일 면에 표시되는 영상의 예시도,
도 4b는 도 4a에 따른 투명 양면형 디스플레이의 타 면에 표시되는 영상의 예시도이다.1 is an exemplary view for explaining a transparent double-sided display system including a transparent double-sided display control device according to an embodiment of the present invention,
2 is a block diagram of a transparent double-sided display control device according to FIG.
3 is a flowchart of a transparent double-sided display control method according to the transparent double-sided display control device according to FIG.
4A is an exemplary view of an image displayed on one surface of the transparent double-sided display of the method for controlling the transparent double-sided display according to FIG.
4B is an exemplary view of an image displayed on the other side of the transparent double-sided display according to FIG. 4A.

이하, 첨부된 도면들을 참조하여 본 발명의 실시예를 상세하게 설명한다. 사용되는 용어들은 실시예에서의 기능을 고려하여 선택된 용어들로서, 그 용어의 의미는 사용자, 운용자의 의도 또는 판례 등에 따라 달라질 수 있다. 그러므로 후술하는 실시예들에서 사용된 용어의 의미는, 본 명세서에 구체적으로 정의된 경우에는 그 정의에 따르며, 구체적인 정의가 없는 경우는 당업자들이 일반적으로 인식하는 의미로 해석되어야 할 것이다.
Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The terms used are terms selected in consideration of the functions in the embodiments, and the meaning of the terms may vary depending on the user, the intention or the precedent of the operator, and the like. Therefore, the meaning of the terms used in the following embodiments is defined according to the definition when specifically defined in this specification, and unless otherwise defined, it should be interpreted in a sense generally recognized by those skilled in the art.

도 1은 본 발명의 실시예에 따른 투명 양면형 디스플레이 제어 장치를 포함하는 투명 양면형 디스플레이 시스템을 설명하기 위한 예시도이다.1 is an exemplary view illustrating a transparent double-sided display system including a transparent double-sided display control device according to an embodiment of the present invention.

도 1을 참조하면, 투명 양면형 디스플레이 시스템은 투명 양면형 디스플레이(100) 및 투명 양면형 디스플레이 제어 장치(200)를 포함한다.Referring to FIG. 1, the transparent double-sided display system includes a transparent double-sided display 100 and a transparent double-sided display control apparatus 200.

투명 양면형 디스플레이(100)는 평면 디스플레이의 정면과 배면 각각에 영상을 출력하는 디스플레이로, 정면과 배면에 출력되는 영상은 서로 다를 수 있다. 또한, 투명 양면형 디스플레이(100)는 투명(transparent) 디스플레이일 수 있으며, 정면에서는 그 배면에 위치하는 사물이 비치게 되고, 투명 양면형 디스플레이(100)의 배면에서는 그 정면에 위치하는 사물이 비치게 된다. 여기서, 투명 양면형 디스플레이(100)는 특정 구조의 디스플레이로 한정하는 것은 아니며, 평면과 그 배면에 서로 다른 영상을 출력할 수 있는 디스플레이를 포함하는 의미로 사용된다.The transparent double-sided display 100 is a display that outputs an image on each of the front and rear surfaces of the flat panel display. The images output on the front and rear surfaces may be different from each other. In addition, the transparent double-sided display 100 may be a transparent display, the front side of the object is reflected on the back, the rear of the transparent double-sided display 100 is placed on the front of the object It becomes. Here, the transparent double-sided display 100 is not limited to a display having a specific structure, and is used as a meaning including a display capable of outputting different images on a flat surface and a rear surface thereof.

투명 양면형 디스플레이 제어 장치(200)는 투명 양면형 디스플레이(100)에 출력되는 영상을 제어하는 장치로, 투명 양면형 디스플레이(100)와 일체로 형성되거나 분리되어 형성될 수 있다. 투명 양면형 디스플레이 제어 장치(200)는 센서(201)를 이용하여 투명 양면형 디스플레이(100)의 각 면의 기 설정된 범위로부터 감지되는 사용자를 파악한다. 즉, 투명 양면형 디스플레이 제어 장치(200)는 각 사용자의 위치 정보 또는 움직임 정보를 이용하여 투명 양면형 디스플레이(100)의 각 면에 출력되는 영상을 생성할 수 있다.The transparent double-sided display control apparatus 200 is an apparatus for controlling an image output on the transparent double-sided display 100, and may be formed integrally with or separated from the transparent double-sided display 100. The transparent double-sided display control apparatus 200 detects a user detected from a preset range of each side of the transparent double-sided display 100 using the sensor 201. That is, the transparent double-sided display control apparatus 200 may generate an image output on each side of the transparent double-sided display 100 using location information or motion information of each user.

예를 들어, 투명 양면형 디스플레이(100)를 두고 두 명의 사용자(A, B)가 마주보고 있는 경우, 사용자 A가 바라보는 투명 양면형 디스플레이(100)의 일 면에는 사용자 B의 사용자 영상(101) 및 가상 객체(102)가 표시된다. 여기서, 사용자 영상(101)은 투명 양면형 디스플레이(100)의 반대편의 사용자가 투명 디스플레이의 특성에 의해 비춰진 투과 영상을 의미한다. 또한, 가상 객체(102)는 사용자의 위치 또는 모션 정보에 따라 기 설정된 컴퓨터 그래픽 영상을 의미한다. 이 경우, 가상 객체(102)는 각 면 사용자의 위치 또는 모션 정보에 대응하여 변화하도록 설정될 수 있다.For example, when two users A and B face each other with the transparent double-sided display 100, the user image 101 of user B is displayed on one side of the transparent double-sided display 100 that user A faces. And virtual object 102 are displayed. Here, the user image 101 refers to a transmission image in which a user opposite to the transparent double-sided display 100 is illuminated by characteristics of the transparent display. In addition, the virtual object 102 refers to a computer graphic image preset according to a user's position or motion information. In this case, the virtual object 102 may be set to change in response to the position or motion information of each face user.

또한, 투명 양면형 디스플레이 제어 장치(200)는 투명 양면형 디스플레이(100)에 2D 또는 3D 영상을 생성할 수 있다. 이 경우, 사용자는 입체 안경을 착용하거나 무안경 방식으로 입체 영상을 즐길 수 있다.Also, the transparent double-sided display control apparatus 200 may generate a 2D or 3D image on the transparent double-sided display 100. In this case, the user may wear stereoscopic glasses or enjoy stereoscopic images in an autostereoscopic manner.

한편, 투명 양면형 디스플레이 시스템은 사용자 단말기(300)를 더 포함할 수 있다. 예를 들어, 사용자 단말기(300)는 PDA, PMP, 스마트폰, 태블릿 PC 및 이에 준하는 휴대용 단말을 포함하나, 반드시 이에 한정하는 것은 아니다. 또한, 사용자(A, B)가 사용자 단말기(300)를 손에 쥐거나 몸에 부착하여 움직이는 경우, 사용자 단말기(300)는 투명 양면형 디스플레이 제어 장치(200)와 통신하여 자신의 모션 정보를 투명 양면형 디스플레이 제어 장치(200)로 전송할 수 있다.Meanwhile, the transparent double-sided display system may further include a user terminal 300. For example, the user terminal 300 includes, but is not limited to, a PDA, a PMP, a smartphone, a tablet PC, and a portable terminal. In addition, when the users A and B move by holding the user terminal 300 in the hand or attached to the body, the user terminal 300 communicates with the transparent double-sided display control apparatus 200 to make its motion information transparent. It may transmit to the double-sided display control device 200.

또한, 사용자 단말기(300)가 투명 양면형 디스플레이(100)를 통해 반대편 사용자에게 보여지는 경우, 사용자 단말기(300)는 가상 객체(102)로 변환되어 보여지도록 설정될 수 있다. 또한, 사용자 단말기(300)는 입체 안경으로 구현될 수 있으며, 이 경우 투명 양면형 디스플레이(100)에는 가상 객체(102)가 입체적으로 표시되도록 설정할 수 있다. 이러한, 투명 양면형 디스플레이 시스템은 양방향 게임 장치 등으로 이용될 수 있다.
In addition, when the user terminal 300 is shown to the opposite user through the transparent double-sided display 100, the user terminal 300 may be set to be converted to the virtual object 102 to be viewed. In addition, the user terminal 300 may be implemented as a three-dimensional glasses, in this case, the transparent double-sided display 100 may be set to display the virtual object 102 in three dimensions. Such a transparent double-sided display system may be used as an interactive game device.

도 2는 도 1에 따른 투명 양면형 디스플레이 제어 장치의 구성도이고, 도 3은 도 2에 따른 투명 양면형 디스플레이 제어 장치에 따른 투명 양면형 디스플레이 제어 방법의 흐름도이다.2 is a block diagram of the transparent double-sided display control device according to Figure 1, Figure 3 is a flow chart of a transparent double-sided display control method according to the transparent double-sided display control device according to FIG.

도 2 및 도 3을 참조하면, 본 발명의 일 실시예에 따른 투명 양면형 디스플레이 제어 장치(200)는 위치 인식부(210), 모션 인식부(220) 및 맵핑부(230)를 포함한다.2 and 3, the transparent double-sided display control apparatus 200 according to an embodiment of the present invention includes a position recognition unit 210, a motion recognition unit 220, and a mapping unit 230.

먼저, 위치 인식부(210)는 투명 양면형 디스플레이의 각 면으로부터 기 설정된 범위 내에 포함되는 하나 이상의 사용자의 위치를 인식한다(S300). 예를 들어, 위치 인식부(210)는 근접 센서, 조도 센서, 적외선 센서 및 카메라 중 적어도 하나의 감지 수단으로부터 사용자의 위치 정보를 획득할 수 있다. 즉, 위치 인식부(210)는 투명 양면형 디스플레이의 각 면에서 사용자와의 거리 및 사용자의 방향을 공간 좌표 정보로 획득할 수 있다.First, the location recognizing unit 210 recognizes the location of one or more users included in a predetermined range from each side of the transparent double-sided display (S300). For example, the location recognizing unit 210 may obtain location information of the user from at least one sensing means of a proximity sensor, an illumination sensor, an infrared sensor, and a camera. That is, the location recognizing unit 210 may obtain the distance from the user and the direction of the user as spatial coordinate information on each side of the transparent double-sided display.

다음으로, 모션 인식부(220)는 투명 양면형 디스플레이의 각 면으로부터 기 설정된 범위 내에 포함되는 하나 이상의 사용자에 대한 모션을 인식한다(S310). 예를 들어, 모션 인식부(220)는 근접 센서, 조도 센서, 적외선 센서 및 카메라 중 적어도 하나의 감지 수단으로부터 사용자의 모션 정보를 획득할 수 있다. 즉, 모션 인식부(220)는 사용자의 이동 방향, 이동 속도 등을 포함하는 이동 정보, 사용자의 모션에 대한 패턴 정보를 획득할 수 있다. 이 경우, 사용자의 패턴 정보는 투명 양면형 디스플레이를 구동시키기 위해 미리 설정된 명령어일 수 있다.Next, the motion recognition unit 220 recognizes a motion for at least one user included in a predetermined range from each side of the transparent double-sided display (S310). For example, the motion recognition unit 220 may obtain motion information of the user from at least one sensing means of a proximity sensor, an illumination sensor, an infrared sensor, and a camera. That is, the motion recognition unit 220 may obtain movement information including a movement direction, a movement speed, and the like of the user, and pattern information about the motion of the user. In this case, the pattern information of the user may be a preset command to drive the transparent double-sided display.

또한, 모션 인식부(220)는 사용자에 부착된 사용자 단말기로부터 사용자의 모션을 인식할 수 있다. 예를 들어, 모션 인식부(220)는 사용자 단말기에 탑재된 가속도 센서, 중력 센서, 지자기 센서 및 자이로 센서 중 적어도 하나의 센서로부터 사용자 단말기의 모션 정보를 획득할 수 있다. 이 경우, 획득된 사용자 단말기의 모션 정보를 사용자의 모션 정보로 간주하여 이용할 수 있다.In addition, the motion recognition unit 220 may recognize the motion of the user from the user terminal attached to the user. For example, the motion recognition unit 220 may obtain motion information of the user terminal from at least one of an acceleration sensor, a gravity sensor, a geomagnetic sensor, and a gyro sensor mounted on the user terminal. In this case, the obtained motion information of the user terminal may be regarded as motion information of the user and used.

한편, 앞서 설명한 위치 인식부(210)와 모션 인식부(220)는 하나의 구성으로 구현되어, 사용자의 위치 정보 및 모션 정보를 동시에 획득하는 것도 가능하다. 예를 들어, 스테레오 카메라(stereoscopic camera)를 이용하여 사용자의 위치 및 모션을 인식하는 경우, 카메라로부터 기 설정된 시간 간격으로 획득된 영상 정보를 이용하여 사용자 모델을 추출하여 위치 정보 및 모션 정보를 획득할 수 있다.On the other hand, the position recognition unit 210 and the motion recognition unit 220 described above is implemented in one configuration, it is also possible to obtain the user's position information and motion information at the same time. For example, when recognizing a user's position and motion using a stereoscopic camera, the user model is extracted by using image information acquired at a predetermined time interval from the camera to obtain position information and motion information. Can be.

다음으로, 맵핑부(230)는 사용자의 위치 또는 모션에 따라 투명 양면형 디스플레이의 각 면에 표시되는 가상 객체가 가변되도록 맵핑한다(S320). 여기서, 가상 객체(virtual object)는 앞서 설명한 바와 같이, 컴퓨터 그래픽으로 구현되는 영상을 의미한다. 따라서, 투명 양면형 디스플레이의 각 면에는 반대편의 사용자의 영상 및 가상 객체가 혼합된(overlay) 영상이 표시된다.Next, the mapping unit 230 maps the virtual objects displayed on each side of the transparent double-sided display according to the position or motion of the user to be variable (S320). Here, the virtual object refers to an image implemented by computer graphics as described above. Therefore, on each side of the transparent double-sided display, the image of the opposite user's image and the virtual object are overlayed.

또한, 맵핑부(230)는 투명 양면형 디스플레이의 각 면에 표시되는 영상이 사용자의 위치 또는 모션에 따라 서로 다르게 표시되도록 가상 객체를 맵핑할 수 있다. 예를 들어, 맵핑부(230)는 투명 양면형 디스플레이의 각 면에 사용자의 위치에 따라 가변되는 배경 객체 및 사용자의 모션에 따라 가변되는 타겟 객체를 맵핑할 수 있다. 예를 들어, 투명 양면형 디스플레이를 이용하여 탁구 게임을 구현하는 경우, 각 면에는 상대방 사용자의 영상, 배경 객체로 탁구대, 타겟 객체로 탁구공이 맵핑되어 표시될 수 있다.In addition, the mapping unit 230 may map the virtual object such that the image displayed on each side of the transparent double-sided display is displayed differently according to the position or motion of the user. For example, the mapping unit 230 may map a background object variable according to a user's position and a target object variable according to a user's motion to each side of the transparent double-sided display. For example, when a table tennis game is implemented using a transparent double-sided display, a table tennis ball may be mapped to an image of a counterpart user, a table tennis table as a background object, and a target object.

또한, 맵핑부(230)는 투명 양면형 디스플레이의 일 면에 위치한 사용자의 타겟 객체에 대한 모션을 이용하여, 투명 양면형 디스플레이의 타 면에 표시되는 타겟 객체의 움직임을 맵핑할 수 있다. 예를 들어, 투명 양면형 디스플레이를 이용하여 탁구 게임을 구현하는 경우, 투명 양면형 디스플레이의 일 면에 위치하는 사용자가 타겟 객체인 탁구공을 타격하는 모션을 행하는 경우, 해당 모션의 속도, 방향 정보 등을 반영하여 투명 양면형 디스플레이의 타 면에 탁구공의 움직임을 맵핑할 수 있다. 따라서, 사용자는 실제로 탁구공을 치고, 받아내는 것과 같은 느낌을 받을 수 있어 현실감을 높일 수 있다.In addition, the mapping unit 230 may map the movement of the target object displayed on the other side of the transparent double-sided display by using the motion of the target object of the user located on one side of the transparent double-sided display. For example, when implementing a table tennis game using a transparent double-sided display, when a user located on one side of the transparent double-sided display performs a motion hitting a table tennis ball as a target object, the speed and direction information of the motion It is possible to map the movement of the table tennis ball to the other side of the transparent double-sided display by reflecting such. Therefore, the user can actually feel like hitting and picking up a ping pong ball, thereby increasing the realism.

이하, 도 4a 및 도 4b를 참조하여, 투명 양면형 디스플레이를 이용하여 탁구 게임을 구현하는 경우, 각 면에 표시되는 영상에 대해 구체적으로 설명하도록 한다.
Hereinafter, referring to FIGS. 4A and 4B, when a table tennis game is implemented using a transparent double-sided display, an image displayed on each side will be described in detail.

도 4a는 도 3에 따른 투명 양면형 디스플레이 제어 방법 중 투명 양면형 디스플레이의 일 면에 표시되는 영상의 예시도이고, 도 4b는 도 4a에 따른 투명 양면형 디스플레이의 타 면에 표시되는 영상의 예시도이다.4A is an exemplary view of an image displayed on one side of the transparent double-sided display control method according to FIG. 3, and FIG. 4B is an example of an image displayed on the other side of the transparent double-sided display according to FIG. 4A. It is also.

먼저 도 4a를 참조하면, 투명 양면형 디스플레이의 일 면에 표시되는 영상의 경우, 사용자 영상(401)은 투명 양면형 디스플레이의 타 면에 대향하여 위치하는 상대편 사용자가 투명 양면형 디스플레이의 투명성에 의해 비춰지는 영상이다. 탁구대는 배경 객체(402)로 사용자의 위치 정보에 따라 가변될 수 있다. 예를 들어, 투명 양면형 디스플레이의 일 면에 대향하여 위치하는 사용자가 오른쪽으로 움직이면 배경 객체(402)인 탁구대도 오른쪽으로 방향으로 회전하여 움직일 수 있다. 이 경우, 배경 객체(402)를 고정하도록 설정하는 것도 가능하다.First, referring to FIG. 4A, in the case of an image displayed on one side of a transparent double-sided display, the user image 401 may be formed by a transparency of the transparent double-sided display by a counterpart user positioned opposite to the other side of the transparent double-sided display. It is a video that is illuminated. The table tennis table is a background object 402 and may vary according to the user's location information. For example, when a user positioned to face one side of the transparent double-sided display moves to the right, the table tennis table, which is the background object 402, may also rotate to the right and move. In this case, it is also possible to set the background object 402 to be fixed.

또한, 타겟 객체(403)인 탁구공은 상대편 사용자의 모션 정보에 대응하여 표시된다. 예를 들어, 상대편 사용자가 자신의 오른쪽에 있는 탁구공을 대각선 방향으로 타격하는 경우, 투명 양면형 디스플레이의 일 면에서는 탁구공이 디스플레이의 왼쪽에서 오른쪽으로 이동하며, 원근법에 의해 그 크기가 가변되어 표시될 수 있다. 이에 따라, 일 면의 사용자는 실제로 상대편 사용자의 타격에 의해 탁구공이 이동하는 것처럼 느낄 수 있다.In addition, the ping pong ball which is the target object 403 is displayed corresponding to the motion information of the user of the other side. For example, if the other user hits a ping pong ball on his right side diagonally, on one side of the transparent double-sided display, the ping pong ball moves from left to right on the display, and its size is changed by perspective. Can be. Accordingly, the user of one side may actually feel as if the ping pong ball is moved by the opponent's blow.

또한, 사용자 단말기 영상(404)은 투명 양면형 디스플레이의 투명성에 따라 그대로 비춰질 수도 있으나, 기 설정된 객체로 변환되어 표시될 수 있다. 예를 들어, 상대편 사용자가 스마트폰을 손에 쥐고 있는 경우, 투명 양면형 디스플레이의 일 면에는 상대편 사용자가 탁구채를 쥐고 있는 것으로 표시될 수 있다.In addition, although the user terminal image 404 may be reflected as it is according to the transparency of the transparent double-sided display, it may be converted into a preset object and displayed. For example, when the opposite user has a smartphone in his hand, one side of the transparent double-sided display may be displayed as the other user holding the table tennis.

한편, 도 4b를 참조하면, 투명 양면형 디스플레이의 타 면에 표시되는 영상의 경우, 사용자 영상(405)은 투명 양면형 디스플레이의 일 면에 대향하여 위치하는 상대편 사용자가 투명 양면형 디스플레이의 투명성에 의해 비춰지는 영상이다. 배경 객체(406)인 탁구대는 사용자의 위치 정보에 따라 가변될 수 있으며, 양면 디스플레이의 일 면에 표시되는 탁구대와는 그 크기 및 위치가 다르게 표시될 수 있다. 즉, 사용자가 투명 양면형 디스플레이의 타 면에 근접하는 경우 배경 객체(406)인 탁구대와 타겟 객체(407)인 탁구공의 크기가 상대적으로 크게 표시되고, 멀어지는 경우 상대적으로 작게 표시될 수 있다.On the other hand, referring to Figure 4b, in the case of the image displayed on the other side of the transparent double-sided display, the user image 405 is the opposite side of the user positioned opposite one side of the transparent double-sided display to the transparency of the transparent double-sided display It is a video that is illuminated by. The table tennis table, which is the background object 406, may vary according to the location information of the user, and may be displayed differently in size and position from the table tennis table displayed on one side of the double-sided display. That is, when the user approaches the other side of the transparent double-sided display, the size of the table tennis table, which is the background object 406, and the table tennis ball, which is the target object 407, may be displayed relatively large, and the distance may be displayed relatively small.

또한, 사용자 단말기 영상(408)은 앞서 설명한 바와 같이 투명 양면형 디스플레이의 투명성에 따라 그대로 비춰질 수도 있으나, 기 설정된 객체로 변환되어 표시될 수 있다.
In addition, as described above, the user terminal image 408 may be reflected as it is according to the transparency of the transparent double-sided display, but may be converted into a preset object and displayed.

한편, 본 발명의 실시예들은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다.Meanwhile, the embodiments of the present invention can be embodied as computer readable codes on a computer readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored.

컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device and the like, and also a carrier wave (for example, transmission via the Internet) . In addition, the computer-readable recording medium may be distributed over network-connected computer systems so that computer readable codes can be stored and executed in a distributed manner. And functional programs, codes, and code segments for implementing the present invention can be easily deduced by programmers skilled in the art to which the present invention pertains.

이와 같이 본 발명의 실시예에 따른 투명 양면형 디스플레이 제어 장치 및 그 제어 방법은, 투명 양면형 디스플레이를 이용하여 각 면의 사용자의 움직임에 따라 가변되는 가상 객체와 투명 양면형 디스플레이를 통해 투과된 반대편 사용자의 투과 영상이 오버레이되어 함께 표시됨으로써 현실감 있는 영상을 제공할 수 있다.
As described above, the apparatus for controlling a transparent double-sided display and a control method thereof according to an exemplary embodiment of the present invention use a transparent double-sided display and an opposite side transmitted through a virtual object and a transparent double-sided display that are varied according to a user's movement on each side. The transmitted images of the user are overlaid and displayed together to provide a realistic image.

이상에서 본 발명은 도면을 참조하면서 기술되는 바람직한 실시예를 중심으로 설명되었지만 이에 한정되는 것은 아니다. 따라서 본 발명은 기재된 실시예로부터 도출 가능한 자명한 변형예를 포괄하도록 의도된 특허청구범위의 기재에 의해 해석되어져야 한다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, Therefore, the present invention should be construed as a description of the claims which are intended to cover obvious variations that can be derived from the described embodiments.

100 : 투명 양면형 디스플레이
101 : 사용자 영상
102 : 가상 객체
200 : 투명 양면형 디스플레이 제어 장치
201 : 센서
210 : 위치 인식부
220 : 모션 인식부
230 : 맵핑부
300 : 사용자 단말기
401, 405 : 사용자 영상
402, 406 : 배경 객체
403, 407 : 타겟 객체
404, 408 : 사용자 단말기 영상100: transparent double-sided display
101: user video
102: virtual object
200: transparent double-sided display control device
201: sensor
210: location recognition unit
220: motion recognition unit
230: mapping unit
300: user terminal
401, 405: user video
402, 406: background object
403, 407: target object
404, 408: user terminal image

Claims (13)

투명 양면형 디스플레이의 각 면으로부터 기 설정된 범위 내에 포함되는 하나 이상의 사용자의 위치를 인식하는 위치 인식부;
상기 사용자의 모션을 인식하는 모션 인식부; 및
상기 사용자의 위치 또는 모션에 따라 상기 투명 양면형 디스플레이의 각 면에 표시되는 가상 객체가 가변되도록 맵핑하는 맵핑부를 포함하는 투명 양면형 디스플레이 제어 장치.A location recognizing unit recognizing a location of at least one user included in a preset range from each side of the transparent double-sided display;
A motion recognition unit recognizing the motion of the user; And
And a mapping unit configured to map a virtual object displayed on each side of the transparent double-sided display in response to a position or a motion of the user. 제1항에 있어서,
상기 투명 양면형 디스플레이의 일 면에는 타 면에 대향하여 위치하는 사용자의 투과 영상 또는 상기 가상 객체가 표시되는 투명 양면형 디스플레이 제어 장치.The method of claim 1,
One side of the transparent double-sided display is a transparent double-sided display control device that displays the transmission image or the virtual object of the user located opposite the other side. 제1항에 있어서,
상기 위치 인식부는,
상기 사용자에 부착된 사용자 단말기로부터 상기 사용자의 모션을 인식하는 투명 양면형 디스플레이 제어 장치.The method of claim 1,
The position recognizing unit,
Transparent double-sided display control device for recognizing the motion of the user from a user terminal attached to the user. 제1항에 있어서,
상기 모션 인식부는,
상기 사용자에 부착된 사용자 단말기로부터 상기 사용자의 모션을 인식하는 투명 양면형 디스플레이 제어 장치.The method of claim 1,
Wherein the motion recognition unit comprises:
Transparent double-sided display control device for recognizing the motion of the user from a user terminal attached to the user. 제1항에 있어서,
상기 맵핑부는,
상기 투명 양면형 디스플레이의 각 면에 표시되는 영상이 상기 사용자의 위치 또는 모션에 따라 서로 다르게 표시되도록 상기 가상 객체를 맵핑하는 투명 양면형 디스플레이 제어 장치.The method of claim 1,
The mapping unit,
And displaying the virtual object such that an image displayed on each side of the transparent double-sided display is displayed differently according to the position or motion of the user. 제1항에 있어서,
상기 맵핑부는,
상기 투명 양면형 디스플레이의 각 면에 상기 사용자의 위치에 따라 가변되는 배경 객체와, 상기 사용자의 모션에 따라 가변되는 타겟 객체를 맵핑하는 투명 양면형 디스플레이 제어 장치.The method of claim 1,
The mapping unit,
The transparent double-sided display control device for mapping the background object variable according to the position of the user and the target object variable according to the motion of the user on each side of the transparent double-sided display. 제6항에 있어서,
상기 맵핑부는,
상기 투명 양면형 디스플레이의 일 면에 위치한 사용자의 상기 타겟 객체에 대한 모션을 이용하여, 상기 투명 양면형 디스플레이의 타 면에 표시되는 상기 타겟 객체의 움직임을 맵핑하는 투명 양면형 디스플레이 제어 장치.The method according to claim 6,
The mapping unit,
And a motion of the target object displayed on the other side of the transparent double-sided display by using a motion of the target object of a user located on one side of the transparent double-sided display. 투명 양면형 디스플레이 제어 장치의 제어 방법에 있어서,
투명 양면형 디스플레이의 각 면으로부터 기 설정된 범위 내에 포함되는 하나 이상의 사용자의 위치를 인식하는 단계;
상기 사용자의 모션을 인식하는 단계; 및
상기 사용자의 위치 또는 모션에 따라 상기 투명 양면형 디스플레이의 각 면에 표시되는 가상 객체가 가변되도록 맵핑하는 단계를 포함하는 투명 양면형 디스플레이 제어 방법.In the control method of the transparent double-sided display control device,
Recognizing a location of at least one user included in a preset range from each side of the transparent double-sided display;
Recognizing the motion of the user; And
And mapping the virtual objects displayed on each side of the transparent double-sided display to vary according to the position or motion of the user. 제8항에 있어서,
상기 사용자의 위치를 인식하는 단계는,
상기 사용자에 부착된 사용자 단말기로부터 상기 사용자의 모션을 인식하는 투명 양면형 디스플레이 제어 방법.9. The method of claim 8,
Recognizing the location of the user,
Transparent double-sided display control method for recognizing the motion of the user from a user terminal attached to the user. 제8항에 있어서,
상기 사용자의 모션을 인식하는 단계는,
상기 사용자에 부착된 사용자 단말기로부터 상기 사용자의 모션을 인식하는 투명 양면형 디스플레이 제어 방법.9. The method of claim 8,
Recognizing the motion of the user,
Transparent double-sided display control method for recognizing the motion of the user from a user terminal attached to the user. 제8항에 있어서,
상기 맵핑하는 단계는,
상기 투명 양면형 디스플레이의 각 면에 표시되는 영상이 상기 사용자의 위치 또는 모션에 따라 서로 다르게 표시되도록 상기 가상 객체를 맵핑하는 투명 양면형 디스플레이 제어 방법.9. The method of claim 8,
Wherein the mapping comprises:
And mapping the virtual object such that an image displayed on each side of the transparent double-sided display is displayed differently according to the position or motion of the user. 제8항에 있어서,
상기 맵핑하는 단계는,
상기 투명 양면형 디스플레이의 각 면에 상기 사용자의 위치에 따라 가변되는 배경 객체와, 상기 사용자의 모션에 따라 가변되는 타겟 객체를 맵핑하는 투명 양면형 디스플레이 제어 방법.9. The method of claim 8,
Wherein the mapping comprises:
And a background object variable according to the position of the user and a target object variable according to the user's motion on each side of the transparent double-sided display. 제12항에 있어서,
상기 맵핑하는 단계는,
상기 투명 양면형 디스플레이의 일 면에 위치한 사용자의 상기 타겟 객체에 대한 모션을 이용하여, 상기 투명 양면형 디스플레이의 타 면에 표시되는 상기 타겟 객체의 움직임을 맵핑하는 투명 양면형 디스플레이 제어 방법.The method of claim 12,
Wherein the mapping comprises:
And a movement of the target object displayed on the other side of the transparent double-sided display by using a motion of the target object of a user located on one side of the transparent double-sided display.
KR1020120105145A 2012-09-21 2012-09-21 Apparatus and method for controlling of transparent both-sided display Ceased KR20140043522A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120105145A KR20140043522A (en) 2012-09-21 2012-09-21 Apparatus and method for controlling of transparent both-sided display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120105145A KR20140043522A (en) 2012-09-21 2012-09-21 Apparatus and method for controlling of transparent both-sided display

Publications (1)

Publication Number Publication Date
KR20140043522A true KR20140043522A (en) 2014-04-10

Family

ID=50651974

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120105145A Ceased KR20140043522A (en) 2012-09-21 2012-09-21 Apparatus and method for controlling of transparent both-sided display

Country Status (1)

Country Link
KR (1) KR20140043522A (en)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104740869A (en) * 2015-03-26 2015-07-01 北京小小牛创意科技有限公司 True environment integrated and virtuality and reality combined interaction method and system
KR20160107055A (en) * 2015-03-03 2016-09-13 엘지전자 주식회사 Digital signage and method for controlling the same
WO2016153467A1 (en) * 2015-03-20 2016-09-29 Hewlett-Packard Development Company, L.P. Display with adjustable transparency
KR20180052576A (en) * 2018-04-30 2018-05-18 배성현 Advertising media with transparent OLED displays
WO2019079826A1 (en) * 2017-10-22 2019-04-25 Magical Technologies, Llc Systems, methods and apparatuses of digital assistants in an augmented reality environment and local determination of virtual object placement and apparatuses of single or multi-directional lens as portals between a physical world and a digital world component of the augmented reality environment
KR20190075637A (en) * 2017-12-21 2019-07-01 배성현 Advertising device with transparent LCD display
KR20200012118A (en) * 2018-07-26 2020-02-05 (주)홀로그래미카 Face-to-fact display apparatus
US10740804B2 (en) 2017-07-28 2020-08-11 Magical Technologies, Llc Systems, methods and apparatuses of seamless integration of augmented, alternate, virtual, and/or mixed realities with physical realities for enhancement of web, mobile and/or other digital experiences
CN112102655A (en) * 2020-09-16 2020-12-18 联想(北京)有限公司 Output control method and electronic equipment
KR102321015B1 (en) * 2021-07-08 2021-11-03 (주)인테크 디자인 System for controlling skywalk
US11249714B2 (en) 2017-09-13 2022-02-15 Magical Technologies, Llc Systems and methods of shareable virtual objects and virtual objects as message objects to facilitate communications sessions in an augmented reality environment
US11398088B2 (en) 2018-01-30 2022-07-26 Magical Technologies, Llc Systems, methods and apparatuses to generate a fingerprint of a physical location for placement of virtual objects
US11467656B2 (en) 2019-03-04 2022-10-11 Magical Technologies, Llc Virtual object control of a physical device and/or physical device control of a virtual object
US11561639B2 (en) 2017-11-13 2023-01-24 Samsung Electronics Co., Ltd. Display device and control method for performing operations relating to user input and display state

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160107055A (en) * 2015-03-03 2016-09-13 엘지전자 주식회사 Digital signage and method for controlling the same
WO2016153467A1 (en) * 2015-03-20 2016-09-29 Hewlett-Packard Development Company, L.P. Display with adjustable transparency
US10712629B2 (en) 2015-03-20 2020-07-14 Hewlett-Packard Development Company, L.P. Display with adjustable transparency
US10416520B2 (en) 2015-03-20 2019-09-17 Hewlett-Packard Development Company, L.P. Display with adjustable transparency
US10661157B2 (en) 2015-03-26 2020-05-26 Bei Jing Xiao Xiao Niu Creative Technologies Ltd. Method and system incorporating real environment for virtuality and reality combined interaction
WO2016150292A1 (en) * 2015-03-26 2016-09-29 北京小小牛创意科技有限公司 Virtuality-and-reality-combined interactive method and system for merging real environment
CN104740869B (en) * 2015-03-26 2018-04-03 北京小小牛创意科技有限公司 The exchange method and system that a kind of actual situation for merging true environment combines
CN104740869A (en) * 2015-03-26 2015-07-01 北京小小牛创意科技有限公司 True environment integrated and virtuality and reality combined interaction method and system
US10740804B2 (en) 2017-07-28 2020-08-11 Magical Technologies, Llc Systems, methods and apparatuses of seamless integration of augmented, alternate, virtual, and/or mixed realities with physical realities for enhancement of web, mobile and/or other digital experiences
US11249714B2 (en) 2017-09-13 2022-02-15 Magical Technologies, Llc Systems and methods of shareable virtual objects and virtual objects as message objects to facilitate communications sessions in an augmented reality environment
WO2019079826A1 (en) * 2017-10-22 2019-04-25 Magical Technologies, Llc Systems, methods and apparatuses of digital assistants in an augmented reality environment and local determination of virtual object placement and apparatuses of single or multi-directional lens as portals between a physical world and a digital world component of the augmented reality environment
US11494991B2 (en) 2017-10-22 2022-11-08 Magical Technologies, Llc Systems, methods and apparatuses of digital assistants in an augmented reality environment and local determination of virtual object placement and apparatuses of single or multi-directional lens as portals between a physical world and a digital world component of the augmented reality environment
US11561639B2 (en) 2017-11-13 2023-01-24 Samsung Electronics Co., Ltd. Display device and control method for performing operations relating to user input and display state
KR20190075637A (en) * 2017-12-21 2019-07-01 배성현 Advertising device with transparent LCD display
US11398088B2 (en) 2018-01-30 2022-07-26 Magical Technologies, Llc Systems, methods and apparatuses to generate a fingerprint of a physical location for placement of virtual objects
KR20180052576A (en) * 2018-04-30 2018-05-18 배성현 Advertising media with transparent OLED displays
KR20200012118A (en) * 2018-07-26 2020-02-05 (주)홀로그래미카 Face-to-fact display apparatus
US11467656B2 (en) 2019-03-04 2022-10-11 Magical Technologies, Llc Virtual object control of a physical device and/or physical device control of a virtual object
CN112102655A (en) * 2020-09-16 2020-12-18 联想(北京)有限公司 Output control method and electronic equipment
KR102321015B1 (en) * 2021-07-08 2021-11-03 (주)인테크 디자인 System for controlling skywalk

Similar Documents

Publication Publication Date Title
KR20140043522A (en) Apparatus and method for controlling of transparent both-sided display
US11745097B2 (en) Spatially-correlated human-machine interface
US11173392B2 (en) Spatially-correlated human-machine interface
US9789391B2 (en) Method and apparatus for using a common pointing input to control 3D viewpoint and object targeting
US9933851B2 (en) Systems and methods for interacting with virtual objects using sensory feedback
JP6754678B2 (en) Simulation system and program
US8223147B1 (en) Method and system for vision-based interaction in a virtual environment
EP2485119A2 (en) Spatially-correlated multi-display human-machine interface
US20170352188A1 (en) Support Based 3D Navigation
US11759701B2 (en) System and method for generating user inputs for a video game
JP5816435B2 (en) Display control program, display control apparatus, display control system, and display control method
JP6918189B2 (en) Simulation system and program
EP4400943A1 (en) Touchless control method, system, computer program and computer-readable medium for controlling an avatar
WO2016057997A1 (en) Support based 3d navigation
KR20120109128A (en) A stereoscopic 3d image table for hockey and shooting games
JP2020014888A (en) Application control program, application control method and application control system
Wang et al. Three-dimensional VR interaction using the movement of a mobile display

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20120921

PA0201 Request for examination
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20131209

Patent event code: PE09021S01D

PG1501 Laying open of application
E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20140626

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20131209

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I