[go: up one dir, main page]

KR101861380B1 - 헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이 - Google Patents

헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이 Download PDF

Info

Publication number
KR101861380B1
KR101861380B1 KR1020120077352A KR20120077352A KR101861380B1 KR 101861380 B1 KR101861380 B1 KR 101861380B1 KR 1020120077352 A KR1020120077352 A KR 1020120077352A KR 20120077352 A KR20120077352 A KR 20120077352A KR 101861380 B1 KR101861380 B1 KR 101861380B1
Authority
KR
South Korea
Prior art keywords
hmd
state
content
digital device
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020120077352A
Other languages
English (en)
Other versions
KR20140010715A (ko
Inventor
김용신
Original Assignee
마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 filed Critical 마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Priority to KR1020120077352A priority Critical patent/KR101861380B1/ko
Priority to EP12881212.0A priority patent/EP2872945B1/en
Priority to EP17197917.2A priority patent/EP3309601B1/en
Priority to PCT/KR2012/006344 priority patent/WO2014014155A1/en
Priority to US13/587,527 priority patent/US8427396B1/en
Priority to US13/850,108 priority patent/US8730131B2/en
Publication of KR20140010715A publication Critical patent/KR20140010715A/ko
Priority to US14/203,315 priority patent/US9423619B2/en
Application granted granted Critical
Publication of KR101861380B1 publication Critical patent/KR101861380B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02—Viewing or reading apparatus
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0123—Head-up displays characterised by optical features comprising devices increasing the field of view
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)

Abstract

본 발명은, 헤드 마운트 디스플레이(Head Mounted Display, HMD)를 이용한 컨텐츠 출력 방법에 관한 것으로, 더욱 상세하게는 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD로 출력하는 방법에 관한 것이다. 이를 위해 본 발명은, 컨텐츠를 디스플레이 하는 적어도 하나의 디스플레이 유닛을 구비하는 디지털 디바이스와의 페어링을 수행하는 단계, 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 화각 영역에 위치하지 않는 제 2 상태를 포함하는 위치 상태를 디텍트 하는 단계, 상기 디텍트 된 위치 상태에 기초하여, 상기 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 HMD로 출력하는 단계를 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법을 제공한다.

Description

헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이{A Method of Providing Contents Using Head Mounted Display and a Head Mounted Display Thereof}
본 발명은, 헤드 마운트 디스플레이(Head Mounted Display, HMD)를 이용한 컨텐츠 출력 방법에 관한 것으로, 더욱 상세하게는 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD로 출력하는 방법에 관한 것이다.
헤드 마운트 디스플레이(HMD)란 안경처럼 머리에 착용하여 영상을 볼 수 있도록 하는 각종 영상 표시 장치를 말한다. 디지털 디바이스의 경량화 및 소형화 추세에 따라, 다양한 웨어러블 컴퓨터(Wearable Computer)가 개발되고 있으며, 상기 HMD 또한 널리 사용되고 있다. HMD는 단순한 디스플레이 기능을 넘어 증강 현실 기술, N 스크린 기술 등과 조합 되어 유저에게 다양한 편의를 제공할 수 있다.
HMD는 다양한 디지털 디바이스와 연계하여 사용 가능하다. HMD는 디지털 디바이스와 네트워크로 연결되어 해당 디지털 디바이스의 컨텐츠를 출력할 수 있으며, 상기 디지털 디바이스를 위한 유저 입력을 수신하거나 해당 디지털 디바이스와 연동한 작업의 수행도 가능하다.
본 발명은 HMD와 연동된 디지털 디바이스에서 디스플레이 되는 컨텐츠를 최적의 상태로 유저에게 제공하기 위한 목적을 가지고 있다.
더욱 구체적으로, 본 발명은 HMD를 착용한 유저의 사용 상태, 예를 들면 HMD를 착용한 유저의 시선에 따라 적합하게 컨텐츠를 디스플레이 하는 방법을 제공하기 위한 목적을 가지고 있다.
또한, 본 발명은 HMD 및 이와 연동된 디지털 디바이스 간의 컨텐츠 출력 전환을 유저의 수동 입력이 아닌 자동으로 수행되도록 함으로 유저에게 편의성을 제공하기 위한 목적을 가지고 있다.
상기와 같은 문제를 해결하기 위해, 본 발명의 실시예에 따른 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법은, 디지털 디바이스와의 페어링을 수행하는 단계, 상기 디지털 디바이스는 컨텐츠를 디스플레이 하는 적어도 하나의 디스플레이 유닛을 구비함; 상기 페어링 된 디지털 디바이스의 위치 상태를 디텍트 하는 단계; 상기 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 화각 영역에 위치하지 않는 제 2 상태를 포함함; 상기 디텍트 된 위치 상태에 기초하여, 상기 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 HMD로 출력하는 단계;를 포함하는 것을 특징으로 한다.
또한, 본 발명의 실시예에 따른 헤드 마운트 디스플레이(HMD)는, 상기 HMD의 작동을 제어하는 프로세서; 상기 프로세서의 명령에 기초하여 영상을 출력하는 디스플레이 유닛; 및 상기 프로세서의 명령에 기초하여 적어도 하나의 디지털 디바이스와 데이터를 송/수신하는 커뮤니케이션 유닛을 포함하되, 상기 프로세서는, 컨텐츠를 디스플레이 하는 적어도 하나의 디스플레이 유닛을 구비한 디지털 디바이스와의 페어링을 수행하고, 상기 페어링 된 디지털 디바이스의 위치 상태를 디텍트 하되, 상기 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 화각 영역에 위치하지 않는 제 2 상태를 포함하고, 상기 디텍트 된 위치 상태에 기초하여, 상기 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 HMD의 디스플레이 유닛으로 출력하는 것을 특징으로 한다.
본 발명에 따르면, HMD와 연동중인 디지털 디바이스에서 디스플레이 되는 컨텐츠가 유저의 사용 환경에 따라 심리스(seamless)하게 HMD로 이동하므로 유저의 편의를 제공한다.
즉, HMD를 착용한 유저의 시선이 상기 HMD와 연동된 디지털 디바이스에 향하지 않을 경우 자동적으로 해당 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD에서 디스플레이 함으로, 유저는 HMD로 편리하게 컨텐츠를 제공받을 수 있다.
또한, 본 발명에 따르면, HMD를 착용한 유저의 시선이 상기 HMD와 연동된 디지털 디바이스를 향할 경우 HMD에서의 컨텐츠 디스플레이를 수행하지 않음으로, 유저가 HMD의 디스플레이를 통한 간섭 없이 정확하게 디지털 디바이스의 컨텐츠를 제공받을 수 있다.
또한, 본 발명에 따르면, 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD로 출력할지 여부에 대한 트리거링이 유저의 시선에 기초하여 자동적으로 전환되므로, 유저는 별도의 유저 입력 없이도 상기 디지털 디바이스의 컨텐츠를 지속적으로 제공받을 수 있다.
또한, 본 발명의 다른 실시예에 따르면, 상기 HMD를 통한 유저의 시선이 디스플레이 유닛을 구비한 다른 외부 디바이스를 향할 경우 해당 외부 디바이스에서 상기 컨텐츠를 출력하도록 함으로, 유저는 컨텐츠의 디스플레이가 가능한 다양한 리소스를 통해 컨텐츠를 제공받을 수 있다.
도 1은 본 발명의 실시예에 따른 HMD, 상기 HMD를 착용한 유저 및 상기 HMD와 연동된 디지털 디바이스를 나타낸 도면.
도 2는 본 발명의 실시예에 따른 HMD를 나타낸 블록도.
도 3은 본 발명의 일 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타낸 순서도.
도 4는 본 발명의 다른 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타낸 순서도.
도 5 내지 도 7은 본 발명의 HMD를 이용하여 컨텐츠를 출력하는 구체적인 실시예를 나타내는 도면.
도 8 내지 도 10은 본 발명의 HMD를 이용하여 컨텐츠를 출력하는 다른 실시예를 나타내는 도면.
도 11은 본 발명의 또 다른 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타낸 순서도.
도 12 내지 도 13은 본 발명의 HMD를 이용하여 컨텐츠를 출력하는 또 다른 실시예를 나타내는 도면.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도, 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한 특정 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 아닌 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.
도 1은 본 발명의 실시예에 따른 HMD(100), 상기 HMD를 착용한 유저(10) 및 상기 HMD(100)와 연동된 디지털 디바이스(200)를 나타내고 있다.
본 발명에서 디지털 디바이스(200)는 다양한 종류의 컨텐츠(1)를 출력할 수 있다. 예를 들어, 상기 디지털 디바이스(200)는 생방송, 영화, 음악, 드라마, 웹 페이지, 게임 또는 어플리케이션 등의 다양한 멀티미디어 컨텐츠를 출력할 수 있다. 상기 디지털 디바이스(200)는 적어도 하나의 디스플레이 유닛(220)을 구비하며, 디지털 디바이스(200)에서 출력되는 컨텐츠(1)는 상기 디스플레이 유닛(220)으로 디스플레이 될 수 있다. 한편, 디지털 디바이스(200)는 커뮤니케이션 유닛(미도시)을 구비할 수 있으며, 상기 커뮤니케이션 유닛을 통해 HMD(100) 및 기타 다른 외부 디바이스들과 데이터 송수신이 가능하다. 본 발명에서 디지털 디바이스(200)는 디스플레이 유닛 및 커뮤니케이션 유닛을 구비한 다양한 전자 디바이스들을 포함한다. 예를 들면, 디지털 디바이스(200)는 PC, PDA(Personal Digital Assistant), 노트북, 태블릿 피씨, 텔레비전 등 이미지 디스플레이가 가능하며 데이터 통신이 가능한 다양한 디바이스 들을 포함한다.
한편, 도 1에 도시된 HMD(100)는 디지털 디바이스(200)와 연동하여 작동할 수 있다. 상기 HMD(100)와 디지털 디바이스(200)간의 연동을 위해 별도의 페어링 또는 통신 접속이 수행될 수 있으며, 이러한 페어링 또는 통신 접속 작업은 HMD(100) 또는 디지털 디바이스(200)를 통한 유저 입력에 의해 수행될 수 있다. 예를 들어, HMD(100)는 디지털 디바이스(200)와의 페어링 또는 통신 접속을 위한 별도의 버튼 또는 유저 인터페이스를 제공할 수 있으며, 유저는 상기 버튼 또는 유저 인터페이스를 이용한 유저 입력을 통해 HMD(100)와 디지털 디바이스(200) 간의 페어링 또는 통신 접속을 수행할 수 있다.
HMD(100)는 구비된 디스플레이 유닛을 통해 이미지 디스플레이가 가능하다. 예를 들어, HMD(100) 자체의 유저 인터페이스, 유저 입력에 대한 리스폰스 등을 디스플레이 할 수 있으며, 네트워크(300)로 연결된 디지털 디바이스(200)와 연동하여 다양한 컨텐츠를 디스플레이 할 수 있다. 본 발명의 실시예에 따르면, HMD(100)는 기 설정된 범위의 화각 영역(102)을 가질 수 있다. 상기 화각 영역(102)은 HMD(100)를 착용한 유저의 시야에 대응하는 기 설정된 영역으로서, HMD(100)의 전방 방향으로 일정한 각도 범위의 구간을 포함할 수 있다.
본 발명의 실시예에 따르면, HMD(100)는 상기 HMD(100)와 연동된 디지털 디바이스(200)가 HMD(100)의 화각 영역(102)에 위치하는지 여부를 디텍트 할 수 있다. 즉, HMD(100)는 연동된 디지털 디바이스(200)의 위치 상태를 디텍트 할 수 있는데, 본 발명에서 상기 위치 상태는 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102)에 위치하는 제 1 상태와, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102)에 위치하지 않는 제 2 상태를 포함할 수 있다.
한편, 본 발명에서 네트워크(300)는 HMD(100)와 디지털 디바이스(200)간에 통신이 가능하도록 하는 다양한 형태의 유선 또는 무선 네트워크를 포함할 수 있다. 이때, 사용 가능한 무선 네트워크로는 NFC(Near Field Communication), Zigbee, 적외선 통신, 블루투스, 와이파이 등이 있으며, 본 발명은 이에 한정하지 않는다. 본 발명에서 HMD(100)와 디지털 디바이스(200)간의 통신은 앞서 열거된 네트워크(300) 중 어느 하나를 이용하여 이루어질 수도 있으며, 이들 간의 조합을 통하여 이루어질 수도 있다.
도 2는 본 발명의 실시예에 따른 HMD를 나타낸 블록도이다.
도 2를 참조로 하면, 본 발명의 HMD(100)는 프로세서(110), 디스플레이 유닛(120), 오디오 출력 유닛(130), 커뮤니케이션 유닛(140), 센서 유닛(150), 스토리지 유닛(160) 및 파워 유닛(180)을 포함할 수 있다.
먼저, 디스플레이 유닛(120)은 디스플레이 화면에 이미지를 출력한다. 상기 디스플레이 유닛(120)은 프로세서(110)에서 실행되는 컨텐츠 또는 프로세서(110)의 제어 명령에 기초하여 이미지를 출력할 수 있다. 또한, 본 발명의 실시예에 따르면 디스플레이 유닛(120)은 HMD(100)와 연동된 외부 디바이스 (예를 들면, 디지털 디바이스)의 제어 명령에 기초하여 이미지를 디스플레이 할 수 있다. 예를 들어, 디스플레이 유닛(120)은 HMD(100)와 연동된 디지털 디바이스가 실행중인 컨텐츠를 디스플레이 할 수 있다. 이때, HMD(100)는 커뮤니케이션 유닛(140)을 통해 상기 디지털 디바이스로부터 데이터를 수신하며, 수신 받은 데이터에 기초하여 이미지를 출력할 수 있다.
다음으로, 오디오 출력 유닛(130)은 스피커, 이어폰 등의 오디오 출력 수단을 포함한다. 상기 오디오 출력 유닛(130) 또한 프로세서(110)에서 실행되는 컨텐츠 또는 프로세서(110)의 제어 명령에 기초하여 음성을 출력할 수 있다. 또한, 본 발명의 실시예에 따르면 오디오 출력 유닛(130)은 HMD(100)와 연동된 디지털 디바이스의 제어 명령에 기초하여 음성을 출력할 수 있다. 예를 들어, 오디오 출력 유닛(130)은 HMD(100)와 연동된 디지털 디바이스가 실행중인 컨텐츠에 기초하여 음성을 출력할 수 있다. 본 발명에서 오디오 출력 유닛(130)은 HMD(100)상에 선택적으로 구비될 수 있다.
다음으로, 커뮤니케이션 유닛(140)은 외부 디바이스와 다양한 프로토콜을 사용하여 통신을 수행하여 데이터를 송/수신할 수 있다. 또한, 커뮤니케이션 유닛(140)은 유선 또는 무선으로 네트워크에 접속하여, 컨텐츠 등의 디지털 데이터를 송/수신할 수 있다. 본 발명에서 HMD(100)는 커뮤니케이션 유닛(140)을 이용하여 디지털 디바이스와 페어링 및 통신 접속을 수행할 수 있으며, 상기 접속된 디지털 디바이스와 데이터를 송/수신할 수 있다. 한편, 본 발명의 일 실시예에 따르면, 커뮤니케이션 유닛(140)은 복수의 안테나를 포함할 수 있다. 상기 HMD(100)는 복수의 안테나를 이용하여, HMD(100)와 통신 접속된 디지털 디바이스의 위치 상태를 디텍트 할 수 있다. 즉, HMD(100)에 구비된 복수의 안테나를 통해 각각 송/수신되는 신호의 시간차, 위상차 등을 이용하여, HMD(100)와 접속된 디지털 디바이스의 디스플레이 유닛이 HMD(100)의 화각 영역에 위치하는지 여부를 디텍트 할 수 있다.
센서 유닛(150)은 HMD(100)에 장착된 복수의 센서를 사용하여 유저 인풋 또는 상기 HMD가 인식하는 환경을 프로세서(110)로 전달할 수 있다. 이때, 상기 센서 유닛(150)은 복수의 센싱 수단을 포함할 수 있다. 일 실시예로서, 복수의 센싱 수단은 중력(gravity) 센서, 지자기 센서, 모션 센서, 자이로 센서, 가속도 센서, 적외선 센서, 기울임(inclination) 센서, 밝기 센서, 고도 센서, 후각 센서, 온도 센서, 뎁스 센서, 압력 센서, 밴딩 센서, 오디오 센서, 비디오 센서, GPS(Global Positioning System) 센서, 터치 센서 등의 센싱 수단을 포함할 수 있다. 센서 유닛(150)은 상술한 다양한 센싱 수단을 통칭하는 것으로, 사용자의 다양한 입력 및 사용자의 환경을 센싱하여, 프로세서(110)가 그에 따른 작동을 수행할 수 있도록 센싱 결과를 전달할 수 있다. 상술한 센서들은 별도의 엘리먼트로 HMD(100)에 포함되거나, 적어도 하나 이상의 엘리먼트로 통합되어 포함될 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 센서 유닛(150)은 촬상 센서(미도시)를 포함할 수 있다. 상기 촬상 센서는 HMD(100)의 기 설정된 화각 영역 내의 이미지를 디텍트하여 프로세서(110)에 제공할 수 있다. 본 발명의 일 실시예에 따르면, 프로세서(110)는 상기 촬상 센서를 통해 디텍트 된 이미지를 기초로 하여, HMD(100)의 화각 영역 내에 HMD(100)와 연동된 디지털 디바이스(또는, 해당 디지털 디바이스의 디스플레이 유닛)가 존재하는지 여부를 디텍트 할 수 있다. 상기 촬상 센서는 본 발명의 목적에 따라 적외선 센서 등으로 대체될 수 있다.
다음으로, 본 발명의 스토리지 유닛(160)은, 비디오, 오디오, 사진, 동영상, 애플리케이션 등 다양한 디지털 데이터를 저장할 수 있다. 스토리지 유닛(160)은 플래시 메모리, RAM(Random Access Memory), SSD(Solid State Drive) 등의 다양한 디지털 데이터 저장 공간을 나타낸다. 본 발명의 실시예에서, 스토리지 유닛(160)은 커뮤니케이션 유닛(140)을 통해 디지털 디바이스로부터 수신된 데이터를 임시적으로 저장할 수 있다. 이때, 상기 스토리지 유닛(160)은 디지털 디바이스로부터 수신된 데이터 또는 컨텐츠를 HMD(100) 상에서 출력하기 위한 버퍼링을 위해 사용될 수 있다. 본 발명에서 스토리지 유닛(160)은 HMD(100)상에 선택적으로 구비될 수 있다
파워 유닛(170)은 디바이스 내부의 배터리 또는 외부 전원과 연결되는 파워 소스로, HMD(100)에 파워를 공급할 수 있다.
본 발명의 프로세서(110)는 데이터 통신을 통해 수신된 컨텐츠, 또는 스토리지 유닛(160)에 저장된 컨텐츠 등을 실행할 수 있다. 또한, 다양한 애플리케이션을 실행하고, 디바이스 내부의 데이터를 프로세싱 할 수 있다. 이에 더하여, 상기 메인 컨트롤 유닛(110)은 상술한 HMD(100)의 각 유닛들을 제어하며, 유닛들 간의 데이터 송수신을 제어할 수도 있다.
도 2에 도시된 HMD(100)는 본 발명의 일 실시예에 따른 블록도로서, 분리하여 표시한 블록들은 디바이스의 엘러먼트들을 논리적으로 구별하여 도시한 것이다. 따라서 상술한 디바이스의 엘러먼트들은 디바이스의 설계에 따라 하나의 칩으로 또는 복수의 칩으로 장착될 수 있다.
도 3은 본 발명의 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타낸 순서도이다. 이하 설명하는 도 3의 각 단계는 도 2에 도시된 HMD(100)의 프로세서(110)에 의해 제어될 수 있다.
먼저, 본 발명의 HMD는 디지털 디바이스와 통신 접속을 수행할 수 있다(S310). 상기 통신 접속은 HMD 또는 디지털 디바이스를 통한 유저 입력에 의해 수행될 수 있다. 예를 들어, HMD는 디지털 디바이스와의 통신 접속을 위한 별도의 버튼 또는 유저 인터페이스를 제공할 수 있으며, 유저는 상기 버튼 또는 유저 인터페이스를 이용한 유저 입력을 통해 HMD와 디지털 디바이스 간의 통신 접속을 수행할 수 있다. 상기 HMD와 디지털 디바이스 간의 통신 접속이 수행되기 전에, HMD는 디지털 디바이스와 페어링이 수행된 상태일 수 있다. 본 발명의 HMD가 디지털 디바이스와의 통신 접속이 수행되면, HMD는 세션이 오픈 된 상태로 디지털 디바이스와 데이터를 송/수신할 수 있다.
다음으로, 본 발명의 HMD는 상기 접속된 디지털 디바이스의 위치 상태를 디텍트 할 수 있다(S320). 본 발명에서 상기 위치 상태는 디지털 디바이스의 디스플레이 유닛이 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태와, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치하지 않는 제 2 상태를 포함한다. 본 발명에서 상기 화각 영역은 HMD를 착용한 유저의 시야에 대응하는 기 설정된 영역으로서, HMD의 전방 방향으로 일정한 각도 범위의 구간을 포함할 수 있다.
본 발명의 일 실시예에 따르면, HMD는 복수의 안테나를 이용하여 디지털 디바이스의 위치 상태를 디텍트 할 수 있다. 즉, HMD에 구비된 복수의 안테나를 통해 디지털 디바이스와 데이터 송/수신을 수행할 수 있으며, 이때 상기 복수의 안테나에 각각 송/수신되는 신호의 시간차, 위상차 등을 이용하여, 상기 HMD와 접속된 디지털 디바이스 및 상기 HMD 간의 상대적인 위치 및 방향을 디텍트 할 수 있다. 본 발명의 실시예에 따르면 HMD에 구비된 복수의 안테나를 이용함으로, 디지털 디바이스와 HMD 간의 거리가 일정하게 유지된 채 디지털 디바이스가 위치하는 방향(방위각)이 변하는 상황에서도 디지털 디바이스의 위치 상태를 정확하게 디텍트 할 수 있다.
본 발명의 또 다른 실시예에 따르면, HMD는 촬상 센서를 이용하여 상기 디지털 디바이스의 위치 상태를 디텍트 할 수 있다. 즉, HMD가 디지털 디바이스와 통신 접속된 상태에서, 촬상 센서는 HMD의 기 설정된 화각 영역 내의 이미지를 디텍트하여 HMD의 프로세서에 제공할 수 있다. 상기 프로세서는 촬상 센서를 통해 디텍트 된 이미지를 기초로 하여, HMD의 화각 영역 내에 HMD와 접속된 디지털 디바이스(또는, 해당 디지털 디바이스의 디스플레이 유닛)가 존재하는지 여부를 디텍트 할 수 있다. 예를 들어, HMD와 접속된 디지털 디바이스는 기 설정된 광 패턴을 출력할 수 있으며, HMD는 촬상 센서를 이용하여 디지털 디바이스가 출력하는 광 패턴을 디텍트할 수 있다. 여기서, 상기 광 패턴은 시간 적인 패턴 및 공간 적인 패턴 중 적어도 하나를 포함할 수 있다. 또한, 본 발명의 실시예에 따르면 상기 광 패턴은 디지털 디바이스의 디스플레이 유닛을 통해 출력될 수 있다.
만약, HMD의 화각 영역 내에 HMD와 접속된 디지털 디바이스가 존재한다면, HMD는 디지털 디바이스가 출력하는 광 패턴을 촬상 센서를 통해 디텍트 할 수 있다. 그러나, HMD의 화각 영역 내에 HMD와 접속된 디지털 디바이스가 존재하지 않는다면, 디지털 디바이스가 출력하는 광 패턴이 상기 촬상 센서를 통해 디텍트 되지 않을 것이다. 한편, 본 발명의 실시예에 따라 광 패턴이 디지털 디바이스의 디스플레이 유닛을 통해 출력 되고, 디지털 디바이스가 HMD의 화각 영역 내에 있지만 해당 디지털 디바이스의 디스플레이 유닛이 유저에게 향하지 않을 경우에도 상기 광 패턴이 디텍트 되지 않을 것이다. 즉, 유저가 디지털 디바이스의 디스플레이 유닛을 볼 수 없는 상황에 있을 때, HMD는 광 패턴을 디텍트 할 수 없게 된다. 따라서, 본 발명의 HMD는 화각 영역 내에 디지털 디바이스의 광 패턴이 디텍트 되는지 여부를 기초로 하여, 디지털 디바이스의 위치 상태를 디텍트 할 수 있다.
상기 광 패턴은 본 발명의 실시예에 따라 디지털 디바이스가 HMD와 통신 접속이 수행되었을 때, 디지털 디바이스의 디스플레이 유닛을 통해 출력될 수 있다. 다만, 본 발명은 이에 한정하지 않으며, 디지털 디바이스가 HMD와 통신 접속이 수행되었는지 여부와 무관하게 디지털 디바이스 자체적으로 광 패턴을 출력할 수 있다.
다음으로, 본 발명의 HMD는 디텍트 된 디지털 디바이스의 위치 상태에 기초하여 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD로 출력할 수 있다. 이를 위해, 우선 HMD는 디텍트 된 디지털 디바이스의 위치 상태에 기초하여, 해당 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하는지 여부를 판별한다(S330). 만약, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치한다면, 본 발명의 HMD는 디지털 디바이스의 디스플레이 중인 컨텐츠를 출력하지 않을 수 있다(S340). 반면에, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치하지 않는다면, HMD는 디지털 디바이스의 디스플레이 중인 컨텐츠를 출력할 수 있다(S342). 이를 위해, HMD는 접속된 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 디지털 디바이스로부터 수신하고, 수신된 컨텐츠를 HMD의 디스플레이 유닛으로 출력할 수 있다.
이와 같이, 본 발명의 실시예에 따르면, HMD는 디지털 디바이스와 통신 접속한 상태에서, 디지털 디바이스와의 상대적인 위치 상태에 따라 디지털 디바이스의 컨텐츠를 출력할지 여부를 트리거링 할 수 있다. 즉, 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하는 제 1 상태에서는 HMD가 디지털 디바이스의 디스플레이 중인 컨텐츠를 출력하지 않고, 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하지 않는 제 2 상태에서는 HMD가 디지털 디바이스의 디스플레이 중인 컨텐츠를 출력할 수 있다. 이에 따라, 디지털 디바이스의 위치가 HMD를 착용한 유저의 시야에서 벗어난 제 2 상태에서, 유저는 HMD를 통해 디지털 디바이스의 컨텐츠를 제공 받을 수 있게 된다. 또한, 디지털 디바이스의 위치가 HMD를 착용한 유저의 시야 내에 있는 제 1 상태에서, 유저가 HMD의 디스플레이를 통한 간섭 없이 디지털 디바이스를 통해 컨텐츠를 제공 받을 수 있다.
한편, 본 발명의 다른 실시예에 따르면, 디텍트 된 디지털 디바이스의 위치 상태가 변환되고, 변환된 상기 위치 상태가 기 설정된 시간 이상 지속될 경우, HMD는 디지털 디바이스의 컨텐츠를 출력할지 여부를 트리거링 할 수 있다. 즉, 디지털 디바이스의 컨텐츠를 출력하지 않는 제 1 상태에서 디지털 디바이스의 위치 상태가 제 2 상태로 변환될 경우, HMD는 상기 디지털 디바이스의 위치 상태가 제 2 상태로 기 설정된 시간 이상 유지될 때 상기 디지털 디바이스의 컨텐츠를 출력할 수 있다. 또한, 디지털 디바이스의 컨텐츠를 출력하는 제 2 상태에서 디지털 디바이스의 위치 상태가 제 1 상태로 변환될 경우, HMD는 상기 디지털 디바이스의 위치 상태가 제 1 상태로 기 설정된 시간 이상 유지될 때 상기 디지털 디바이스의 컨텐츠 출력을 종료할 수 있다.
다음으로, 본 발명의 HMD는 디지털 디바이스와 통신 접속 중인지 여부를 판별 한다(S350). 만약, HMD가 디지털 디바이스와 통신 접속 중이면 S320 단계로 돌아가 페어링 된 디지털 디바이스의 위치 상태를 디텍트 한다. 만약, HMD와 디지털 디바이스 간의 통신 접속이 종료 되면, HMD는 디지털 디바이스의 컨텐츠 출력을 종료한다.
즉, 본 발명에 따른 HMD는 디지털 디바이스와 통신 접속된 상태에서 디지털 디바이스의 위치 상태를 실시간으로 디텍트 할 수 있다. 이때, 디텍트 된 상기 위치 상태에 기초하여, 디지털 디바이스에 의해 디스플레이 중인 컨텐츠가 HMD로 출력될 지 여부가 결정 된다. 만약, 디텍트 된 상기 위치 상태가 변경 되면, 변경된 위치 상태에 기초하여 상기 디지털 디바이스의 컨텐츠를 HMD로 출력할지 여부가 조정 된다. 상기 디지털 디바이스와의 통신 접속이 종료되면, HMD는 디지털 디바이스의 위치 상태 디텍트 작업 및 디지털 디바이스의 컨텐츠 출력 작업을 모두 종료할 수 있다.
도 4는 본 발명에 따른 HMD를 이용한 컨텐츠 출력 방법의 세부 실시예를 나타내고 있다. 본 발명에서 도 2에 도시된 HMD(100)의 프로세서(110)는 이하 설명하는 도 4의 각 단계의 작동을 제어할 수 있다. 도 4의 실시예에서, 전술한 도 3의 실시예와 동일하거나 상응하는 부분은 자세한 설명을 생략하도록 한다.
먼저, 본 발명의 HMD는 디지털 디바이스와 페어링을 수행한다(S410). 다음으로, 상기 HMD는 페어링 된 디지털 디바이스의 위치 상태를 디텍트 할 수 있다(S420). 상기 S410 및 S420 단계의 구체적인 실시예는 각각 도 3의 S310 및 S320 단계의 실시예와 동일하다. 다만, S420의 실시예에서 HMD는 디지털 디바이스와 통신 접속을 수행하기 전이라도, 상기 페어링 된 디지털 디바이스의 위치 상태를 디텍트 할 수 있다. 이를 위해, 본 발명의 일 실시예에 따르면, HMD는 디지털 디바이스가 출력하는 광 패턴을 디텍트 하는지 여부에 기초하여 해당 디지털 디바이스의 위치 상태를 디텍트 할 수 있다.
다음으로, 디텍트 된 디지털 디바이스의 위치 상태에 기초하여 HMD와 디지털 디바이스 간의 통신 접속 여부가 결정될 수 있다. 이를 위해, 우선 HMD는 디텍트 된 디지털 디바이스의 위치 상태에 기초하여, 해당 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하는지 여부를 판별한다(S430). 만약, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치한다면, 본 발명의 HMD는 디지털 디바이스와의 통신 접속을 수행하지 않는다(S440). 반면에, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치하지 않는다면, HMD는 디지털 디바이스와의 통신 접속을 수행할 수 있다(S442). HMD가 디지털 디바이스와 통신 접속을 수행하게 되면, 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 디지털 디바이스로부터 수신할 수 있다(S444). 본 발명의 HMD는 상기 수신한 컨텐츠를 출력할 수 있다(S446).
이와 같이, 본 발명의 실시예에 따르면, HMD는 디지털 디바이스와 페어링 된 상태에서, 상기 디지털 디바이스와의 상대적인 위치 상태에 따라 디지털 디바이스와의 통신 접속 여부를 트리거링 할 수 있다. 즉, 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하는 제 1 상태에서는 HMD와 디지털 디바이스간의 통신 접속이 수행되고, 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하지 않는 제 2 상태에서는 HMD와 디지털 디바이스간의 통신 접속이 수행되지 않는다. HMD와 디지털 디바이스간의 통신 접속이 수행되면, HMD는 실시간으로 디지털 디바이스의 실행중인 컨텐츠를 수신하고, 상기 수신된 컨텐츠를 출력할 수 있다.
한편, 본 발명의 다른 실시예에 따르면, 디텍트 된 디지털 디바이스의 위치 상태가 변환되고, 변환된 상기 위치 상태가 기 설정된 시간 이상 지속될 경우, HMD와 디지털 디바이스 간의 통신 접속 여부가 트리거링 될 수 있다. 즉, 디지털 디바이스와 통신 접속되지 않은 제 1 상태에서 디지털 디바이스의 위치 상태가 제 2 상태로 변환될 경우, HMD는 상기 디지털 디바이스의 위치 상태가 제 2 상태로 기 설정된 시간 이상 유지될 때 상기 디지털 디바이스와 통신 접속을 수행할 수 있다. 또한, 디지털 디바이스와 통신 접속된 제 2 상태에서 디지털 디바이스의 위치 상태가 제 1 상태로 변환될 경우, HMD는 상기 디지털 디바이스의 위치 상태가 제 1 상태로 기 설정된 시간 이상 유지될 때 상기 디지털 디바이스와의 통신 접속을 종료할 수 있다.
다음으로, 본 발명의 HMD는 디지털 디바이스와 페어링 중인지 여부를 판별 한다(S450). 만약, HMD가 디지털 디바이스와 페어링 중이면 S420 단계로 돌아가 페어링 된 디지털 디바이스의 위치 상태를 디텍트 한다. 만약, HMD와 디지털 디바이스 간의 페어링이 종료 되면, HMD는 디지털 디바이스의 컨텐츠 출력을 종료한다.
즉, 본 발명에 따른 HMD는 디지털 디바이스와 페어링 된 상태에서 페어링 된 디지털 디바이스의 위치 상태를 실시간으로 디텍트 한다. 이때, 디텍트 된 상기 위치 상태에 기초하여, HMD와 디지털 디바이스 간의 통신 접속 여부가 결정 된다. 만약, 디텍트 된 위치 상태가 변경 되면, 변경된 위치 상태에 기초하여 HMD와 디지털 디바이스 간의 통신 접속 여부가 조정 된다. 디지털 디바이스와의 페어링이 종료되면, HMD는 상기 디지털 디바이스의 위치 상태 디텍트 작업 및 상기 디지털 디바이스와의 통신 접속 작업을 모두 종료한다.
도 5 내지 도 7은 본 발명의 HMD(100)를 이용하여 컨텐츠(1)를 출력하는 구체적인 실시예를 나타내고 있다. 도 5 내지 도 7의 실시예에서 HMD(100)는 디지털 디바이스(200)와 페어링 된 상태에 있다. 도 5 내지 도 7을 참조로 하면, HMD(100)의 컨텐츠(1) 출력은 HMD(100)를 기준으로 한 디지털 디바이스(200)의 위치 상태 즉, HMD(100)와 디지털 디바이스(200)간의 상대적인 위치 및 방향에 기초하여 제어될 수 있다.
먼저, 도 5 및 도 6은 본 발명의 실시예에 따라 디지털 디바이스(200)의 위치 상태가 제 1 상태(도 5(a))에서 제 2 상태(도 5(b))로 전환되는 모습을 도시하고 있다. 이때, 디지털 디바이스(200)에서 디스플레이 중인 컨텐츠(1)는 HMD(100) 상으로 이동하여 디스플레이 될 수 있다.
먼저, 도 5(a)에 도시된 바와 같이 유저(10)는 본 발명의 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)에서 디스플레이 되는 컨텐츠(1)를 볼 수 있다. 이때, 디지털 디바이스(200)의 디스플레이 유닛(220)은 HMD(100)의 화각 영역(102) 내에 위치할 수 있다. 본 발명의 실시예에서, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 내에 있으면, HMD(100)는 컨텐츠(1)를 출력하지 않는다. 본 발명의 일 실시예에 따라, 도 5(a)에서 HMD(100)는 디지털 디바이스(200)와의 통신 접속이 수행되지 않은 상태일 수 있다.
한편, 본 발명의 실시예에 따르면 도 5(b)에 도시된 바와 같이 유저(10)가 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)이 아닌 다른 곳을 바라볼 수 있다. 이때, 디지털 디바이스(200)의 디스플레이 유닛(220)은 HMD(100)의 화각 영역(102) 밖에 위치할 수 있다. 이와 같이 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치하게 되면, HMD(100)는 컨텐츠(1)를 출력할 수 있다. 본 발명의 일 실시예에 따라, 도 5(b)에서 HMD(100)는 디지털 디바이스(200)와의 통신 접속이 수행된 상태일 수 있다. 이에 따라 HMD(100)는 네트워크(300)를 통해 실시간으로 디지털 디바이스(200)로부터 컨텐츠(1)를 수신하고, 수신된 상기 컨텐츠(1)를 출력할 수 있다. 한편, 본 발명의 실시예에 따르면, 디지털 디바이스(200)는 HMD(100)의 화각 영역(102) 밖에 위치한 제 2 상태에서 컨텐츠(1)의 디스플레이를 중단할 수 있다.
본 발명의 실시예에 따르면, 디지털 디바이스(200)의 위치 상태가 HMD(100)의 화각 영역(102) 이내에 위치하는 제 1 상태에서 HMD(100)의 화각 영역 밖에 위치하는 제 2 상태로 변환 시, HMD(100) 상에서 적절한 피드백을 제공할 수 있다. 예를 들어, 디지털 디바이스(200)의 위치 상태가 제 1 상태에서 제 2 상태로 변환 시, HMD(100)는 진동 피드백을 제공할 수 있다. 또는, 디지털 디바이스(200)의 위치 상태가 제 1 상태에서 제 2 상태로 변환 시, HMD(100)는 상기 컨텐츠(1)를 페이드 인(fade-in) 하여 출력할 수 있다. 또는, HMD(100)는 기 설정된 시간 이후에 상기 컨텐츠(1)를 출력할 수 있다. 즉, HMD(100)는 디지털 디바이스(200)의 위치 상태가 변환된 시점으로부터 기 설정된 시간 이후에 컨텐츠(1)를 출력할 수 있다. 또한, 디지털 디바이스(200)는 상기 디지털 디바이스(200)의 위치 상태가 변환된 시점으로부터 상기 기 설정된 시간 동안 컨텐츠(1)의 출력을 정지할 수 있으며, 상기 기 설정된 시간 이후에 계속해서 컨텐츠(1)를 출력할 수 있다. 예를 들어, 상기 컨텐츠(1)가 동영상 컨텐츠이고, 디지털 디바이스(200)의 위치 상태가 제 1 상태에서 제 2 상태로 변환될 경우, 디지털 디바이스(200)는 상기 동영상 컨텐츠의 출력을 기 설정된 시간 동안 정지할 수 있다.
한편 도 6에 도시된 본 발명의 다른 실시예에 따르면, 디지털 디바이스(200)의 위치 상태가 제 1 상태에서 제 2 상태로 변환될 때, HMD(100)는 상기 컨텐츠(1)를 슬라이딩 이동하여 출력할 수 있다. 이때, HMD(100)는 디지털 디바이스(200)의 디스플레이 유닛(220)이 화각 영역(102)을 벗어난 측에서 센터 영역으로 컨텐츠(1)가 슬라이딩 이동하도록 할 수 있다. 예를 들어, 도 6(a)에 도시된 바와 같이 제 1 상태에 있던 디지털 디바이스(200)가 HMD(100)의 화각 영역(102)을 좌측으로 벗어나 제 2 상태로 전환된 경우, HMD(100)는 도 6(b)에 도시된 바와 같이 디지털 디바이스(200)가 화각 영역(102)을 벗어난 좌측에서 센터 영역으로 상기 컨텐츠(1)를 슬라이딩 이동하여 디스플레이 할 수 있다. 여기서, 상기 센터 영역은 HMD(100)의 디스플레이 유닛이 디스플레이 하는 프레임의 중앙부에 위치하는 영역으로서, 상기 화각 영역(102)의 중앙부에 위치하는 기 설정된 영역이 될 수 있다.
다음으로, 도 7은 본 발명의 실시예에 따라 디지털 디바이스(200)의 위치 상태가 제 2 상태(도 7(a))에서 제 1 상태(도 7(b))로 전환되는 모습을 도시하고 있다. 이때, HMD(100)는 디스플레이 중인 컨텐츠(1)의 출력을 종료할 수 있다. 한편 본 발명의 다른 실시예에 따라 디지털 디바이스(200)가 제 2 상태에서 컨텐츠(1) 디스플레이를 중단한 경우, 상기 디지털 디바이스(200)는 중단된 상기 컨텐츠(1)의 디스플레이를 제 1 상태에서 재개할 수 있다. 이에 따라, HMD(100) 상에서 디스플레이 중인 컨텐츠(1)가 디지털 디바이스(200)로 이동하여 디스플레이 될 수 있다.
더욱 구체적으로, 본 발명의 실시예에 따르면 도 7(a)에 도시된 바와 같이 유저(10)가 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)이 아닌 다른 곳을 바라볼 수 있다. 이때, 디지털 디바이스(200)의 디스플레이 유닛(220)은 HMD(100)의 화각 영역(102) 밖에 위치할 수 있다. 이와 같이 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치하게 되면, HMD(100)는 컨텐츠(1)를 출력할 수 있다. 본 발명의 일 실시예에 따라, 도 7(a)에서 HMD(100)는 디지털 디바이스(200)와의 통신 접속이 수행된 상태일 수 있다. 이에 따라 HMD(100)는 네트워크(300)를 통해 실시간으로 디지털 디바이스(200)로부터 컨텐츠(1)를 수신하고, 수신된 상기 컨텐츠(1)를 출력할 수 있다. 한편, 본 발명의 실시예에 따르면, 디지털 디바이스(200)는 HMD(100)의 화각 영역(102) 밖에 위치한 제 2 상태에서 컨텐츠(1)의 디스플레이를 중단할 수 있다.
다음으로, 도 7(b)에 도시된 바와 같이 유저(10)는 본 발명의 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)을 바라볼 수 있다. 이때, 디지털 디바이스(200)의 디스플레이 유닛(220)은 HMD(100)의 화각 영역(102) 내에 위치할 수 있다. 본 발명의 실시예에서, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 내에 있으면, HMD(100)는 컨텐츠(1)를 출력하지 않는다. 본 발명의 일 실시예에 따라, 도 7(b)에서 HMD(100)는 디지털 디바이스(200)와의 통신 접속이 수행되지 않은 상태일 수 있다. 한편, 본 발명의 실시예에 따라 도 7(a)의 디지털 디바이스(200)가 컨텐츠(1) 디스플레이를 중단한 경우, 상기 디지털 디바이스(200)는 중단된 상기 컨텐츠(1)의 디스플레이를 재개할 수 있다.
도 8은 본 발명의 다른 실시예에 따라 디지털 디바이스(200)의 위치 상태가 제 2 상태(도 8(a))에서 제 1 상태(도 8(b))로 전환되는 모습을 도시하고 있다. 도 8의 실시예에서 디지털 디바이스(200)는 제 1 상태 및 2 상태에서 모두 컨텐츠(1)의 디스플레이를 수행할 수 있다. 본 발명의 일 실시예에 따르면, HMD(100)는 상기 HMD(100)의 화각 영역(102) 내에 위치한 디지털 디바이스(200)가 HMD(100)와 동일한 컨텐츠(1)를 디스플레이 하는지 여부를 기초로 하여 상기 컨텐츠(1)의 출력 여부를 조정할 수 있다.
먼저, 도 8(a)에 도시된 바와 같이 유저(10)는 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)이 아닌 다른 곳을 바라볼 수 있다. 이와 같이 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치하게 되면, HMD(100)는 컨텐츠(1)를 출력할 수 있다. 도 8의 실시예에 따르면, 디지털 디바이스(200)는 HMD(100)의 화각 영역(102) 밖에 위치한 제 2 상태에서 컨텐츠(1)를 디스플레이 하고 있다.
이때, 도 8(b)에 도시된 바와 같이 유저(10)는 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)을 바라볼 수 있다. 이때, HMD(100)의 화각 영역(102) 내에 들어온 디지털 디바이스(200)는 컨텐츠(1)를 디스플레이 하고 있다. 상기 디지털 디바이스(200)가 디스플레이 중인 컨텐츠(1)는 현재 HMD(100)가 출력 중인 컨텐츠(1)와 동일할 수도 있고 상이할 수도 있다. 즉, 디지털 디바이스(200)와 HMD(100)간에 실시간으로 데이터 송/수신이 진행되었다면, 디지털 디바이스(200)가 디스플레이 중인 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일할 수 있다. 그러나 디지털 디바이스(200)와 HMD(100)간에 실시간으로 데이터 송/수신이 이루어지지 않았다면, 디지털 디바이스(200)가 디스플레이 중인 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일하지 않을 수 있다. 예를 들어, 상기 컨텐츠(1)가 웹 페이지일 경우, 디지털 디바이스(200)의 URL 접속 변경에 따른 웹 페이지 변화가 HMD(100)에 아직 전달되지 않을 수 있다.
따라서, 본 발명의 실시예에 따른 HMD(100)는 화각 영역(102) 내에 들어온 상기 디지털 디바이스(200)가 디스플레이 하는 컨텐츠(1)가 현재 HMD(100)의 출력 중인 컨텐츠(1)와 동일한지 여부를 판별한다. 만약, 상기 디지털 디바이스(200)가 디스플레이 하는 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일한 경우, 도 8(b)에 도시된 바와 같이 HMD(100)는 컨텐츠(1) 출력을 종료함으로 컨텐츠(1) 디스플레이의 중첩을 피할 수 있다. 그러나, 상기 디지털 디바이스(200)가 디스플레이 하는 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일하지 않은 경우, HMD(100)는 컨텐츠(1) 출력을 종료하지 않을 수 있다.
한편, 본 발명의 실시예에 따르면, 디지털 디바이스(200)의 위치 상태가 HMD(100)의 화각 영역(102) 밖에 위치하는 제 2 상태에서 HMD(100)의 화각 영역 내에 위치하는 제 1 상태로 변환 시, HMD(100) 상에서 적절한 피드백을 제공할 수 있다. 예를 들어, 디지털 디바이스(200)의 위치 상태가 제 2 상태에서 제 1 상태로 변환 시, HMD(100)는 진동 피드백을 제공할 수 있다. 또는, 디지털 디바이스(200)의 위치 상태가 제 2 상태에서 제 1 상태로 변환 시, HMD(100)는 상기 컨텐츠(1)를 페이드 아웃(fade-out) 할 수 있다.
도 9는 본 발명의 HMD(100)를 이용하여 컨텐츠(1)를 출력하는 다른 실시예를 나타내고 있다. 본 발명의 실시예에 따르면, 디지털 디바이스(200)의 위치 상태는 디지털 디바이스(200)의 위치 및 상기 디지털 디바이스(200)의 디스플레이 유닛(220)의 방향에 기초하여 결정된다. 즉, 상기 위치 상태는 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 내에서 디텍트 되는지 여부를 기초로 결정될 수 있다. 본 발명의 일 실시예에 따르면, 디지털 디바이스(200)가 출력하는 광 패턴(5)이 디텍트 되는지 여부를 기초로 상기 디지털 디바이스(200)의 위치 상태가 디텍트 될 수 있다.
먼저 도 9(a)를 참조로 하면, 디지털 디바이스(200)가 HMD(100)의 화각 영역(102) 내에 위치한 상태에서, 상기 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)를 향하게 될 수 있다. 이때, HMD(100)는 디지털 디바이스(200)의 디스플레이 유닛(220)이 출력하는 광 패턴(5)을 디텍트 할 수 있다. HMD(100)는 상기 광 패턴(5)이 디텍트 되면, 디지털 디바이스(200)의 위치 상태를 제 1 상태로 인식하고, 이에 따라 디지털 디바이스(200)의 컨텐츠(1)를 출력하지 않는다.
한편, 도 9(b)에 도시된 바와 같이 도 9(a)의 디지털 디바이스(200)가 뒤집히게 될 수 있다. 즉, 디지털 디바이스(200)가 HMD(100)의 화각 영역(102) 내에 위치함에도 불구하고, 상기 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)를 향하지 않게 될 수 있다. 이때, HMD(100)는 디지털 디바이스(200)의 디스플레이 유닛(220)이 출력하는 광 패턴(5)을 디텍트 할 수 없게 된다. 본 발명의 실시예에 따르면, HMD(100)는 광 패턴(5)이 디텍트 되지 않는 도 9(b)의 디지털 디바이스의 위치 상태를 제 2 상태로 인식할 수 있다. 이에 따라 HMD(100)는 디지털 디바이스(200)의 컨텐츠(1)를 출력할 수 있다.
도 10은 본 발명의 HMD(100)를 이용하여 컨텐츠(1)를 출력하는 또 다른 실시예를 나타내고 있다. 본 발명의 실시예에 따르면, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102)에 위치하지 않는 제 2 상태에서, 상기 화각 영역(102)에 적어도 하나의 외부 디바이스(202)의 디스플레이 유닛(222)이 존재하는지 여부를 디텍트 할 수 있다. 만약, 상기 화각 영역(102)에 적어도 하나의 외부 디바이스(202)의 디스플레이 유닛(222)이 디텍트 될 경우, 해당 외부 디바이스(202)의 디스플레이 유닛(222)은 디지털 디바이스(200)의 컨텐츠(1)를 출력할 수 있다.
예를 들어, 도 10(a)에 도시된 바와 같이 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치할 수 있다. 이때, HMD(100)는 디지털 디바이스(200)의 컨텐츠(1)를 출력할 수 있으며, 구체적인 실시예는 도 7(a)에서 상술한 바와 같다.
한편, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치한 제 2 상태에서, 도 10(b)에 도시된 바와 같이 외부 디바이스(202)가 HMD(100)의 화각 영역(102)에 위치하게 될 수 있다. 즉, HMD(100)는 화각 영역(102) 내에 위치한 외부 디바이스(202)의 디스플레이 유닛(222)을 디텍트 할 수 있다. 이와 같이, 외부 디바이스(202)의 디스플레이 유닛(222)이 상기 화각 영역(102) 내에서 디텍트 되면, 해당 외부 디바이스(202)의 디스플레이 유닛(222)으로 컨텐츠(1)를 출력할 수 있다. 이를 위해, 상기 디텍트 된 외부 디바이스(202)는 디지털 디바이스(200)와 통신 접속을 수행할 수 있다. 외부 디바이스(202)와 디지털 디바이스(200)간의 통신 접속이 수행 되면, 외부 디바이스(202)는 네트워크(300)를 이용하여 디지털 디바이스(200)로부터 컨텐츠(1)를 수신할 수 있다. 수신된 상기 컨텐츠(1)는 외부 디바이스(202)의 디스플레이 유닛(222)으로 출력될 수 있다.
도 11 내지 도 13은 본 발명의 또 다른 실시예를 나타내고 있다.
먼저, 도 11은 본 발명의 또 다른 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타내고 있다. 본 발명에서 도 2에 도시된 HMD(100)의 프로세서(110)는 이하 설명하는 도 11의 각 단계의 작동을 제어할 수 있다. 도 11의 실시예에서, 전술한 도 3의 실시예와 동일하거나 상응하는 부분은 자세한 설명을 생략하도록 한다.
먼저, 본 발명의 HMD는 상기 HMD의 화각 영역에 위치하는 제 1 마커를 디텍트 한다(S1110). 본 발명의 마커는 컨텐츠 정보를 나타내는 식별자로서, 바코드, QR 코드, RFID, 컬러 코드, 이미지 코드 등을 포함할 수 있다.
다음으로, 상기 HMD는 제 1 마커의 위치 상태를 디텍트 할 수 있다(S1120). 본 발명의 상기 위치 상태는 제 1 마커가 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태와, 제 1 마커가 화각 영역에 위치하지 않는 제 2 상태를 포함한다. 본 발명의 실시예에 따르면, HMD는 촬상 센서를 이용하여 제 1 마커의 위치 상태를 디텍트 할 수 있다. 즉, 촬상 센서는 HMD의 기 설정된 화각 영역 내의 이미지를 디텍트하여 HMD의 프로세서에 제공할 수 있다. 상기 프로세서는 촬상 센서를 통해 디텍트 된 이미지를 기초로 하여, HMD의 화각 영역 내에 제 1 마커가 존재하는지 여부를 디텍트 할 수 있다.
다음으로, 디텍트 된 제 1 마커의 위치 상태에 기초하여, HMD는 제 1 마커에 대응하는 컨텐츠를 출력할지 여부를 결정할 수 있다. 이를 위해, 우선 HMD는 디텍트 된 제 1 마커의 위치 상태에 기초하여, 상기 제 1 마커가 HMD의 화각 영역에 위치하는지 여부를 판별한다(S1130). 만약, 제 1 마커가 HMD의 화각 영역에 위치한다면, HMD는 제 1 마커에 대응하는 컨텐츠를 출력하지 않는다(S1140). 반면에, 제 1 마커가 HMD의 화각 영역에 위치하지 않는다면, HMD는 제 1 마커에 대응하는 컨텐츠를 수신할 수 있다(S1142). 이때, HMD는 상기 네트워크를 통해 서버로부터 상기 컨텐츠를 수신할 수 있다. 서버로부터 상기 컨텐츠가 수신되면, HMD는 수신된 상기 컨텐츠를 출력한다(S1144).
다음으로, HMD는 화각 영역에 있는 마커의 디텍트 여부를 계속해서 판별한다. 이때, 본 발명의 HMD는 화각 영역 내에 상기 제 1 마커와 다른 제 2 마커가 디텍트 되는지 여부를 판별할 수 있다(S1150). 만약, 제 2 마커가 디텍트 되지 않는다면, HMD는 S1120 단계로 돌아가서 제 1 마커의 위치 상태에 따른 컨텐츠 출력 동작을 계속 한다. 즉, HMD는 제 1 마커의 위치 상태에 기초하여 제 1 마커에 대응하는 컨텐츠의 출력 여부를 트리거링 할 수 있다. 만약, 제 2 마커가 디텍트 되면, HMD는 제 1 마커의 위치 상태에 따른 컨텐츠 출력 동작을 종료한다. 이때, 상기 HMD는 새로 디텍트 된 제 2 마커의 위치 상태를 디텍트 할 수 있으며, 전술한 도 11의 실시예와 같은 방법으로 제 2 마커의 위치 상태에 따른 컨텐츠 출력을 수행할 수 있다.
도 12 및 도 13은 도 11의 실시예에 따라 HMD를 이용하여 컨텐츠 출력하는 구체적인 방법을 도시하고 있다.
먼저, 도 12에 도시된 바와 같이 유저(10)는 HMD(100)를 착용한 채로 마커(5)를 포함하는 컨텐츠(1)를 볼 수 있다. 상기 컨텐츠(1)는 디지털 컨텐츠가 아닌 아날로그 컨텐츠가 될 수 있으며, 예를 들어 책, 잡지, 신문, 사진 등의 일부 영역 또는 전체 영역이 될 수 있다. 상기 컨텐츠(1)는 해당 컨텐츠(1)의 정보를 나타내는 마커(5)를 포함할 수 있다. 본 발명의 실시예에서, 상기 마커(5)가 HMD(100)의 화각 영역(102) 내에 있으며, HMD(100)는 컨텐츠(1)를 출력하지 않는다.
다음으로, 본 발명의 실시예에 따르면 도 13(a)에 도시된 바와 같이 유저(10)가 HMD(100)를 착용한 채로 컨텐츠(1)가 아닌 다른 곳을 바라볼 수 있다. 이때, 상기 컨텐츠(1)에 포함된 마커(5)는 HMD(100)의 화각 영역(102) 밖에 위치할 수 있다. 즉, 상기 마커(5)의 위치 상태가 제 1 상태(도 12)에서 제 2 상태(도 13(a))로 전환될 수 있다. 이와 같이 마커(5)가 HMD(100)의 화각 영역(102) 밖에 위치하게 되면, HMD(100)는 마커(5)에 대응하는 컨텐츠(1)를 출력할 수 있다. 즉, HMD(100)는 네트워크(300)를 통해 서버(미도시)로부터 상기 마커(5)에 대응하는 컨텐츠(1)를 수신하고, 수신된 상기 컨텐츠를 출력할 수 있다.
한편, 도 13(b)에 도시된 바와 같이 유저(10)가 HMD(100)를 착용한 채로 다시 컨텐츠(1)를 바라볼 수 있다. 이때, 상기 컨텐츠(1)에 포함된 마커(5)는 HMD(100)의 화각 영역(102) 내에 위치할 수 있다. 즉, 상기 마커(5)의 위치 상태가 제 2 상태(도 13(a))에서 제 1 상태(도 13(b))로 전환될 수 있다. 이와 같이 마커(5)가 HMD(100)의 화각 영역(102) 내로 다시 들어오게 되면, HMD(100)는 마커(5)에 대응하는 컨텐츠(1)의 출력을 종료할 수 있다.
한편, 본 발명의 일 실시예에 따르면, HMD(100)는 상기 HMD(100)의 화각 영역(102) 내에 위치한 컨텐츠(1)가 HMD(100)에서 출력하는 컨텐츠(1)와 동일한지 여부를 기초로 상기 컨텐츠(1)의 출력 여부를 조정할 수 있다. 즉, HMD(100)는 화각 영역(102) 내에 들어온 컨텐츠(1)가 현재 HMD(100)의 출력 중인 컨텐츠(1)와 동일한지 여부를 판별한다. 만약, 화각 영역(102) 내에 들어온 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일한 경우, 도 13(b)에 도시된 바와 같이 HMD(100)는 컨텐츠(1) 출력을 종료함으로 컨텐츠(1) 디스플레이의 중첩을 피할 수 있다. 그러나, 상기 화각 영역(102) 내에 들어온 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일하지 않은 경우, HMD(100)는 컨텐츠(1) 출력을 종료하지 않을 수 있다.
본 발명에서 디지털 디바이스의 위치 상태는 HMD를 착용한 유저의 시선에 기초하여 결정될 수 있다. 본 발명의 HMD는 상기 HMD를 착용한 유저의 동공의 위치를 디텍트 하는 촬상 센서를 추가로 구비할 수 있으며, 상기 촬상 센서를 이용하여 해당 유저의 시선을 트래킹 할 수 있다. 이에 따라, 본 발명의 디지털 디바이스의 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 HMD를 착용한 유저의 시야 영역 내에 위치하는지 여부를 기초로 하여 결정될 수 있다. 여기서 상기 시야 영역은 HMD를 착용한 유저의 시선에 대응하는 일정 범위의 영역을 포함할 수 있다. 즉, 본 발명에서 디지털 디바이스의 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 HMD를 착용한 유저의 시야 영역에 위치하는 제 1 상태와, 상기 디지털 디바이스의 디스플레이 유닛이 HMD를 착용한 유저의 시야 영역에 위치하지 않는 제 2 상태를 포함할 수 있다. 한편 본 발명의 실시예에 따르면, 마커의 위치 상태 또한 전술한 바와 같은 방법으로 HMD를 착용한 유저의 시선에 기초하여 결정될 수 있다.
본 발명에서 설명한 HMD는 본 발명의 목적에 따라 다양한 디바이스로 변경 및 대체 가능하다. 예를 들어, 본 발명의 HMD는 EMD(Eye Mounted Display), eyeglass, eyepiece, eye wear, HWD(Head Worn Display) 등 유저에게 착용되어 디스플레이를 제공할 수 있는 다양한 디바이스를 포함하며, 본 발명에서 사용된 용어에 한정되지 않는다.
1 : 컨텐츠 10 : 유저
100 : HMD 102 : 화각 영역
200 : 디지털 디바이스 220 : 디스플레이 유닛
300 : 네트워크

Claims (30)

  1. 헤드 마운트 디스플레이(HMD, head mounted display)를 이용한 컨텐츠 출력 방법에 있어서,
    제 1 컨텐츠를 디스플레이하도록 구성된 적어도 하나의 디스플레이 유닛을 구비한 디지털 디바이스와의 페어링(pairing)을 수행하는 단계와,
    페어링된 디지털 디바이스의 위치 상태를 디텍트하는 단계로서, 상기 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 미리 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 상기 화각 영역에 위치하지 않는 제 2 상태를 포함하는 것인, 상기 디텍트하는 단계와,
    상기 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 변경될 때에, 상기 디지털 디바이스에 의해 디스플레이되는 상기 제 1 컨텐츠를 수신하는 단계와, 상기 HMD 상에 상기 제 1 컨텐츠를 출력하는 단계와,
    상기 위치 상태가 상기 제 2 상태에서 상기 제 1 상태로 변경될 때에, 상기 디지털 디바이스 상에 현재 디스플레이 중인 제 2 컨텐츠가 상기 HMD 상에 현재 출력 중인 제 1 컨텐츠와 동일한지 여부를 결정하고, 상기 제 2 컨텐츠가 상기 제 1 컨텐츠와 동일할 경우 상기 HMD 상으로의 상기 제 1 컨텐츠의 출력을 종료하거나, 상기 제 2 컨텐츠가 상기 제 1 컨텐츠와 동일하지 않을 경우에 상기 HMD 상으로의 상기 제 1 컨텐츠의 출력을 계속하는 단계
    를 포함하고,
    상기 HMD 상으로 출력되는 상기 제 1 컨텐츠는, 공간 치수(spatial dimension)의 변경 없이 그리고 상기 디지털 디바이스 상에 디스플레이되는 상기 제 1 컨텐츠의 현실 증강 없이, 상기 디지털 디바이스 상에 디스플레이되는 동일한 제 1 컨텐츠와 같은 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  2. 제1항에 있어서, 상기 수신하는 단계는,
    상기 디지털 디바이스와 통신 접속을 확립하는 단계와,
    상기 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 변경될 때에, 통신 접속된 디지털 디바이스 상에 현재 디스플레이 중인 상기 제 1 컨텐츠를 수신하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  3. 제1항에 있어서, 상기 출력하는 단계는,
    상기 디텍트된 위치 상태가 전환되고, 전환된 위치 상태가 미리 설정된 시간 이상 계속되면, 상기 제 1 컨텐츠를 상기 HMD 상에 출력할지 여부를 결정하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  4. 제1항에 있어서,
    상기 디텍트된 위치 상태가 상기 제 1 상태와 상기 제 2 상태 사이에서 전환되면, 상기 HMD 상에 진동 피드백을 제공하는 단계를 더 포함하는 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  5. 제1항에 있어서, 상기 출력하는 단계는, 상기 디텍트된 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 전환되면, 상기 제 1 컨텐츠를 페이드인(fading in)하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  6. 제1항에 있어서, 상기 출력하는 단계는, 상기 디텍트된 위치 상태가 상기 제 2 상태에서 상기 제 1 상태로 전환되면, 상기 제 1 컨텐츠를 페이드아웃(fading out)하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  7. 제1항에 있어서, 상기 출력하는 단계는, 상기 디텍트된 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 전환되면, 상기 디지털 디바이스의 디스플레이 유닛이 상기 화각 영역의 위치를 벗어난 측으로부터 센터 영역으로 상기 제 1 컨텐츠를 슬라이딩 이동시키는 방식으로 상기 제 1 컨텐츠를 출력하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  8. 제1항에 있어서, 상기 제 1 컨텐츠가 동영상 컨텐츠(video content)를 포함하고 상기 디텍트된 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 전환되면, 상기 디지털 디바이스의 상기 동영상 컨텐츠의 출력이 미리 설정된 시간 동안 정지(pause)되는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  9. 제1항에 있어서, 상기 디텍트하는 단계는, 상기 HMD에 포함된 복수의 안테나를 통해 상기 디지털 디바이스와 송수신한 신호를 이용하여 상기 위치 상태를 디텍트하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  10. 제1항에 있어서, 상기 디텍트하는 단계는, 상기 페어링된 디지털 디바이스가 출력하는 광 패턴(light pattern)이 디텍트되는지 여부를 기초로 상기 위치 상태를 디텍트하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  11. 제1항에 있어서,
    상기 디텍트된 위치 상태가 상기 제 2 상태이면, 상기 화각 영역에 적어도 하나의 외부 디바이스의 디스플레이 유닛이 존재하는지 여부를 디텍트하는 단계와,
    상기 화각 영역에서 상기 적어도 하나의 외부 디바이스의 디스플레이 유닛이 디텍트되면, 대응하는 외부 디바이스의 디스플레이 유닛에 상기 제 1 컨텐츠를 출력하는 단계
    를 더 포함하는 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  12. 제1항에 있어서, 상기 위치 상태는, 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD를 착용한 유저의 시야 영역(view angle region)에 위치하는 제 3 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD를 착용한 유저의 시야 영역에 위치하지 않는 제 4 상태를 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.
  13. 헤드 마운트 디스플레이(HMD)에 있어서,
    상기 HMD의 동작을 제어하도록 구성된 프로세서와,
    상기 프로세서에 의해 주어진 명령(command)에 기초하여 영상(image)을 출력하도록 구성된 디스플레이 유닛과,
    상기 프로세서에 의해 주어진 명령에 기초하여 적어도 하나의 디지털 디바이스와 데이터를 송수신하도록 구성된 커뮤니케이션 유닛
    을 포함하며,
    상기 프로세서는 또한,
    제 1 컨텐츠를 디스플레이하도록 구성된 적어도 하나의 디스플레이 유닛을 구비한 디지털 디바이스와의 페어링을 수행하고,
    페어링된 디지털 디바이스의 위치 상태를 디텍트하며, 상기 위치 상태는, 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 미리 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 상기 화각 영역에 위치하지 않는 제 2 상태를 포함하는 것이고,
    상기 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 변경될 때에, 상기 디지털 디바이스에 의해 디스플레이되는 상기 제 1 컨텐츠를 수신하여 상기 HMD 상에 상기 제 1 컨텐츠를 출력하며,
    상기 위치 상태가 상기 제 2 상태에서 상기 제 1 상태로 변경될 때에, 상기 디지털 디바이스 상에 현재 디스플레이 중인 제 2 컨텐츠가 상기 HMD 상에 현재 출력 중인 제 1 컨텐츠와 동일한지 여부를 결정하고, 상기 제 2 컨텐츠가 상기 제 1 컨텐츠와 동일하면 상기 HMD 상으로의 상기 제 1 컨텐츠의 출력을 종료하거나, 상기 제 2 컨텐츠가 상기 제 1 컨텐츠와 동일하지 않으면 상기 HMD 상으로의 상기 제 1 컨텐츠의 출력을 계속하도록 구성되고,
    상기 HMD 상으로 출력되는 상기 제 1 컨텐츠는, 공간 치수의 변경 없이 그리고 상기 디지털 디바이스 상에 디스플레이되는 상기 제 1 컨텐츠의 현실 증강 없이, 상기 디지털 디바이스 상에 디스플레이되는 동일한 제 1 컨텐츠와 같은 것인 헤드 마운트 디스플레이(HMD).
  14. 제13항에 있어서, 상기 HMD는 상기 디지털 디바이스와 통신 접속을 확립하고, 상기 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 변경될 때, 통신 접속된 디지털 디바이스 상에 현재 디스플레이되는 상기 제 1 컨텐츠를 수신하는 것인 헤드 마운트 디스플레이(HMD).
  15. 제13항에 있어서, 상기 프로세서는 또한, 상기 디텍트된 위치 상태가 전환되고, 전환된 위치 상태가 미리 설정된 시간 이상 계속될 때에, 상기 위치 상태를 결정하도록 구성되는 것인 헤드 마운트 디스플레이(HMD).
  16. 제13항에 있어서, 상기 디텍트된 위치 상태가 상기 제 1 상태와 상기 제 2 상태 사이에서 전환되면, 진동 피드백이 상기 HMD에 제공되는 것인 헤드 마운트 디스플레이(HMD).
  17. 제13항에 있어서, 상기 디텍트된 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 전환되면, 상기 제 1 컨텐츠는 페이드인되는 것인 헤드 마운트 디스플레이(HMD).
  18. 제13항에 있어서, 상기 디텍트된 위치 상태가 상기 제 2 상태에서 상기 제 1 상태로 전환되면, 상기 제 1 컨텐츠는 페이드아웃되는 것인 헤드 마운트 디스플레이(HMD).
  19. 제13항에 있어서, 상기 디텍트된 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 전환될 때에, 상기 제 1 컨텐츠는, 상기 디지털 디바이스의 디스플레이 유닛이 상기 화각 영역의 위치를 벗어난 측으로부터 센터 영역으로 상기 제 1 컨텐츠를 슬라이딩 이동시키는 방식으로 출력되는 것인 헤드 마운트 디스플레이(HMD).
  20. 제13항에 있어서, 상기 제 1 컨텐츠가 동영상 컨텐츠를 포함하고 상기 디텍트된 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 전환되면, 상기 디지털 디바이스 상으로의 상기 동영상 컨텐츠의 출력은 미리 설정된 시간 동안 정지되는 것인 헤드 마운트 디스플레이(HMD).
  21. 제13항에 있어서, 상기 커뮤니케이션 유닛은 복수의 안테나를 포함하며, 상기 프로세서는 상기 HMD에 포함된 복수의 안테나를 통해 상기 디지털 디바이스와 송수신한 신호를 이용하여 상기 위치 상태를 디텍트하는 것인 헤드 마운트 디스플레이(HMD).
  22. 제13항에 있어서, 상기 위치 상태는, 상기 페어링된 디지털 디바이스가 출력하는 광 패턴이 디텍트되는지 여부를 기초로 디텍트되는 것인 헤드 마운트 디스플레이(HMD).
  23. 제13항에 있어서, 상기 디텍트된 위치 상태가 상기 제 2 상태이면, 상기 화각 영역에 적어도 하나의 외부 디바이스의 디스플레이 유닛이 존재하는지 여부가 디텍트되고, 상기 화각 영역에서 상기 적어도 하나의 외부 디바이스의 디스플레이 유닛이 디텍트되면, 상기 제 1 컨텐츠는 대응하는 외부 디바이스의 디스플레이 유닛에 출력하는 것인 헤드 마운트 디스플레이(HMD).
  24. 제13항에 있어서, 상기 위치 상태는, 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD를 착용한 유저의 시야 영역에 위치하는 제 3 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD를 착용한 유저의 시야 영역에 위치하지 않는 제 4 상태를 포함하는 것인 헤드 마운트 디스플레이(HMD).
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
KR1020120077352A 2012-07-16 2012-07-16 헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이 Active KR101861380B1 (ko)

Priority Applications (7)

Application Number Priority Date Filing Date Title
KR1020120077352A KR101861380B1 (ko) 2012-07-16 2012-07-16 헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이
EP17197917.2A EP3309601B1 (en) 2012-07-16 2012-08-09 A head mounted dipslay and method of outputting a content using the same
PCT/KR2012/006344 WO2014014155A1 (en) 2012-07-16 2012-08-09 A head mounted dipslay and method of outputting a content using the same
EP12881212.0A EP2872945B1 (en) 2012-07-16 2012-08-09 A head mounted dipslay and method of outputting a content using the same
US13/587,527 US8427396B1 (en) 2012-07-16 2012-08-16 Head mounted display and method of outputting a content using the same in which the same identical content is displayed
US13/850,108 US8730131B2 (en) 2012-07-16 2013-03-25 Head mounted display and method of outputting a content using the same in which the same identical content is displayed
US14/203,315 US9423619B2 (en) 2012-07-16 2014-03-10 Head mounted display and method of outputting a content using the same in which the same identical content is displayed

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120077352A KR101861380B1 (ko) 2012-07-16 2012-07-16 헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이

Publications (2)

Publication Number Publication Date
KR20140010715A KR20140010715A (ko) 2014-01-27
KR101861380B1 true KR101861380B1 (ko) 2018-05-28

Family

ID=48094858

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120077352A Active KR101861380B1 (ko) 2012-07-16 2012-07-16 헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이

Country Status (4)

Country Link
US (3) US8427396B1 (ko)
EP (2) EP3309601B1 (ko)
KR (1) KR101861380B1 (ko)
WO (1) WO2014014155A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12299814B2 (en) 2021-11-29 2025-05-13 Samsung Electronics Co., Ltd. Electronic device for providing contents in connection with external electronic device and method of the same

Families Citing this family (151)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9158116B1 (en) 2014-04-25 2015-10-13 Osterhout Group, Inc. Temple and ear horn assembly for headworn computer
US9400390B2 (en) 2014-01-24 2016-07-26 Osterhout Group, Inc. Peripheral lighting for head worn computing
US9298007B2 (en) 2014-01-21 2016-03-29 Osterhout Group, Inc. Eye imaging in head worn computing
US9965681B2 (en) 2008-12-16 2018-05-08 Osterhout Group, Inc. Eye imaging in head worn computing
US9366867B2 (en) 2014-07-08 2016-06-14 Osterhout Group, Inc. Optical systems for see-through displays
US20150205111A1 (en) 2014-01-21 2015-07-23 Osterhout Group, Inc. Optical configurations for head worn computing
US9715112B2 (en) 2014-01-21 2017-07-25 Osterhout Group, Inc. Suppression of stray light in head worn computing
US9952664B2 (en) 2014-01-21 2018-04-24 Osterhout Group, Inc. Eye imaging in head worn computing
US9229233B2 (en) 2014-02-11 2016-01-05 Osterhout Group, Inc. Micro Doppler presentations in head worn computing
US20150277120A1 (en) 2014-01-21 2015-10-01 Osterhout Group, Inc. Optical configurations for head worn computing
US20180048750A1 (en) * 2012-06-15 2018-02-15 Muzik, Llc Audio/video wearable computer system with integrated projector
KR101969351B1 (ko) * 2012-09-10 2019-04-16 엘지전자 주식회사 헤드 마운트 디스플레이 및 그 출력 제어 방법
US9791921B2 (en) * 2013-02-19 2017-10-17 Microsoft Technology Licensing, Llc Context-aware augmented reality object commands
KR102063076B1 (ko) * 2013-07-10 2020-01-07 엘지전자 주식회사 모바일 디바이스, 헤드 마운트 디스플레이 및 제어 방법
KR102081934B1 (ko) * 2013-08-28 2020-02-26 엘지전자 주식회사 헤드 마운트 디스플레이 디바이스 및 그 제어 방법
WO2015031168A1 (en) * 2013-08-28 2015-03-05 Qualcomm Incorporated Dynamic display markers
US9466266B2 (en) 2013-08-28 2016-10-11 Qualcomm Incorporated Dynamic display markers
KR102105520B1 (ko) * 2013-11-12 2020-04-28 삼성전자주식회사 디스플레이 링크 기능을 수행하는 전자 장치 및 방법
US9448621B2 (en) * 2013-12-20 2016-09-20 Nokia Technologies Oy Causation of display of information on a see through display
EP2894508A1 (en) * 2013-12-31 2015-07-15 Thomson Licensing Method for displaying a content through either a head mounted display device or a display device, corresponding head mounted display device and computer program product
US10649220B2 (en) 2014-06-09 2020-05-12 Mentor Acquisition One, Llc Content presentation in head worn computing
US9829707B2 (en) 2014-08-12 2017-11-28 Osterhout Group, Inc. Measuring content brightness in head worn computing
US9939934B2 (en) 2014-01-17 2018-04-10 Osterhout Group, Inc. External user interface for head worn computing
US10191279B2 (en) 2014-03-17 2019-01-29 Osterhout Group, Inc. Eye imaging in head worn computing
US11103122B2 (en) 2014-07-15 2021-08-31 Mentor Acquisition One, Llc Content presentation in head worn computing
US11227294B2 (en) 2014-04-03 2022-01-18 Mentor Acquisition One, Llc Sight information collection in head worn computing
US9575321B2 (en) 2014-06-09 2017-02-21 Osterhout Group, Inc. Content presentation in head worn computing
US9299194B2 (en) 2014-02-14 2016-03-29 Osterhout Group, Inc. Secure sharing in head worn computing
US20150277118A1 (en) 2014-03-28 2015-10-01 Osterhout Group, Inc. Sensor dependent content position in head worn computing
US9746686B2 (en) 2014-05-19 2017-08-29 Osterhout Group, Inc. Content position calibration in head worn computing
US10684687B2 (en) 2014-12-03 2020-06-16 Mentor Acquisition One, Llc See-through computer display systems
US10001645B2 (en) * 2014-01-17 2018-06-19 Sony Interactive Entertainment America Llc Using a second screen as a private tracking heads-up display
US9594246B2 (en) 2014-01-21 2017-03-14 Osterhout Group, Inc. See-through computer display systems
US20160019715A1 (en) 2014-07-15 2016-01-21 Osterhout Group, Inc. Content presentation in head worn computing
US10254856B2 (en) 2014-01-17 2019-04-09 Osterhout Group, Inc. External user interface for head worn computing
US9448409B2 (en) 2014-11-26 2016-09-20 Osterhout Group, Inc. See-through computer display systems
US20150228119A1 (en) 2014-02-11 2015-08-13 Osterhout Group, Inc. Spatial location presentation in head worn computing
US9810906B2 (en) 2014-06-17 2017-11-07 Osterhout Group, Inc. External user interface for head worn computing
US9671613B2 (en) 2014-09-26 2017-06-06 Osterhout Group, Inc. See-through computer display systems
US9366868B2 (en) 2014-09-26 2016-06-14 Osterhout Group, Inc. See-through computer display systems
US9529195B2 (en) 2014-01-21 2016-12-27 Osterhout Group, Inc. See-through computer display systems
US9841599B2 (en) 2014-06-05 2017-12-12 Osterhout Group, Inc. Optical configurations for head-worn see-through displays
US9523856B2 (en) 2014-01-21 2016-12-20 Osterhout Group, Inc. See-through computer display systems
US12105281B2 (en) 2014-01-21 2024-10-01 Mentor Acquisition One, Llc See-through computer display systems
US9753288B2 (en) 2014-01-21 2017-09-05 Osterhout Group, Inc. See-through computer display systems
US11669163B2 (en) 2014-01-21 2023-06-06 Mentor Acquisition One, Llc Eye glint imaging in see-through computer display systems
US11892644B2 (en) 2014-01-21 2024-02-06 Mentor Acquisition One, Llc See-through computer display systems
US9494800B2 (en) 2014-01-21 2016-11-15 Osterhout Group, Inc. See-through computer display systems
US9811159B2 (en) 2014-01-21 2017-11-07 Osterhout Group, Inc. Eye imaging in head worn computing
US12093453B2 (en) 2014-01-21 2024-09-17 Mentor Acquisition One, Llc Eye glint imaging in see-through computer display systems
US9310610B2 (en) 2014-01-21 2016-04-12 Osterhout Group, Inc. See-through computer display systems
US9811152B2 (en) 2014-01-21 2017-11-07 Osterhout Group, Inc. Eye imaging in head worn computing
US9836122B2 (en) 2014-01-21 2017-12-05 Osterhout Group, Inc. Eye glint imaging in see-through computer display systems
US9766463B2 (en) 2014-01-21 2017-09-19 Osterhout Group, Inc. See-through computer display systems
US11487110B2 (en) 2014-01-21 2022-11-01 Mentor Acquisition One, Llc Eye imaging in head worn computing
US9615742B2 (en) 2014-01-21 2017-04-11 Osterhout Group, Inc. Eye imaging in head worn computing
US11737666B2 (en) 2014-01-21 2023-08-29 Mentor Acquisition One, Llc Eye imaging in head worn computing
US9651784B2 (en) 2014-01-21 2017-05-16 Osterhout Group, Inc. See-through computer display systems
US20150205135A1 (en) 2014-01-21 2015-07-23 Osterhout Group, Inc. See-through computer display systems
US9846308B2 (en) 2014-01-24 2017-12-19 Osterhout Group, Inc. Haptic systems for head-worn computers
US9401540B2 (en) 2014-02-11 2016-07-26 Osterhout Group, Inc. Spatial location presentation in head worn computing
US12112089B2 (en) 2014-02-11 2024-10-08 Mentor Acquisition One, Llc Spatial location presentation in head worn computing
US9852545B2 (en) 2014-02-11 2017-12-26 Osterhout Group, Inc. Spatial location presentation in head worn computing
US9691181B2 (en) 2014-02-24 2017-06-27 Sony Interactive Entertainment Inc. Methods and systems for social sharing head mounted display (HMD) content with a second screen
US20150245163A1 (en) * 2014-02-25 2015-08-27 Sony Corporation Proximity detection of candidate companion display device in same room as primary display using wi-fi or bluetooth signal strength
US9483997B2 (en) * 2014-03-10 2016-11-01 Sony Corporation Proximity detection of candidate companion display device in same room as primary display using infrared signaling
JP2015176186A (ja) * 2014-03-13 2015-10-05 ソニー株式会社 情報処理装置、情報処理方法、及び情報処理システム
KR102374584B1 (ko) * 2014-03-21 2022-03-16 삼성전자주식회사 영상을 디스플레이 하는 방법 및 디바이스
US20160187651A1 (en) 2014-03-28 2016-06-30 Osterhout Group, Inc. Safety for a vehicle operator with an hmd
WO2015163529A1 (en) * 2014-04-23 2015-10-29 Lg Electronics Inc. Head mounted display device displaying thumbnail image and method of controlling therefor
WO2015163539A1 (en) * 2014-04-24 2015-10-29 Lg Electronics Inc. Head mounted display and method for controlling the same
KR102246553B1 (ko) * 2014-04-24 2021-04-30 엘지전자 주식회사 Hmd 및 그 제어 방법
US9651787B2 (en) 2014-04-25 2017-05-16 Osterhout Group, Inc. Speaker assembly for headworn computer
US20150309534A1 (en) 2014-04-25 2015-10-29 Osterhout Group, Inc. Ear horn assembly for headworn computer
US10853589B2 (en) 2014-04-25 2020-12-01 Mentor Acquisition One, Llc Language translation with head-worn computing
US9423842B2 (en) 2014-09-18 2016-08-23 Osterhout Group, Inc. Thermal management for head-worn computer
US9672210B2 (en) 2014-04-25 2017-06-06 Osterhout Group, Inc. Language translation with head-worn computing
US20160137312A1 (en) 2014-05-06 2016-05-19 Osterhout Group, Inc. Unmanned aerial vehicle launch system
KR102257621B1 (ko) 2014-05-19 2021-05-28 엘지전자 주식회사 썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법
KR102229890B1 (ko) * 2014-05-30 2021-03-19 삼성전자주식회사 데이터 처리 방법 및 그 전자 장치
US10663740B2 (en) 2014-06-09 2020-05-26 Mentor Acquisition One, Llc Content presentation in head worn computing
US9092898B1 (en) 2014-07-03 2015-07-28 Federico Fraccaroli Method, system and apparatus for the augmentation of radio emissions
KR102251710B1 (ko) * 2014-11-04 2021-05-14 넥시스 주식회사 글라스형 웨어러블 디바이스를 이용한 외부디바이스 내 콘텐츠 관리 시스템, 방법 및 컴퓨터로 독출 가능한 기록매체
WO2016021252A1 (ja) * 2014-08-05 2016-02-11 ソニー株式会社 情報処理装置及び情報処理方法、並びに画像表示システム
CN106029190B (zh) 2014-08-11 2020-03-10 Vr考斯特有限及两合公司 操作装置，尤其为游乐设施、运输工具、健身设备等的方法
KR102232419B1 (ko) * 2014-08-26 2021-03-26 엘지전자 주식회사 웨어러블 디스플레이 디바이스 및 그 제어 방법
KR102271833B1 (ko) * 2014-09-01 2021-07-01 삼성전자주식회사 전자 장치, 그 제어 방법 및 기록 매체
KR102243656B1 (ko) * 2014-09-26 2021-04-23 엘지전자 주식회사 모바일 디바이스, hmd 및 시스템
CN107003739B (zh) * 2014-10-06 2020-10-27 皇家飞利浦有限公司 对接系统
KR102265086B1 (ko) 2014-11-07 2021-06-15 삼성전자 주식회사 정보를 공유하기 위한 가상 환경
US9684172B2 (en) 2014-12-03 2017-06-20 Osterhout Group, Inc. Head worn computer display systems
GB2533098B (en) * 2014-12-09 2016-12-14 Ibm Automated management of confidential data in cloud environments
USD743963S1 (en) 2014-12-22 2015-11-24 Osterhout Group, Inc. Air mouse
USD751552S1 (en) 2014-12-31 2016-03-15 Osterhout Group, Inc. Computer glasses
USD753114S1 (en) 2015-01-05 2016-04-05 Osterhout Group, Inc. Air mouse
US9933985B2 (en) * 2015-01-20 2018-04-03 Qualcomm Incorporated Systems and methods for managing content presentation involving a head mounted display and a presentation device
KR102274743B1 (ko) * 2015-01-30 2021-07-08 삼성전자주식회사 전자 장치 및 전자 장치의 화면 영역 처리 방법
KR101564964B1 (ko) * 2015-02-05 2015-11-02 계명대학교 산학협력단 가상현실 멀미를 감소시키는 전기 자극 헤드 마운트 디스플레이 장치
US10878775B2 (en) 2015-02-17 2020-12-29 Mentor Acquisition One, Llc See-through computer display systems
US20160239985A1 (en) 2015-02-17 2016-08-18 Osterhout Group, Inc. See-through computer display systems
WO2016141263A1 (en) * 2015-03-04 2016-09-09 Oculus Vr, Llc Sparse projection for a virtual reality system
JP6400197B2 (ja) * 2015-05-29 2018-10-03 京セラ株式会社 ウェアラブル装置
US10139966B2 (en) 2015-07-22 2018-11-27 Osterhout Group, Inc. External user interface for head worn computing
JP6686319B2 (ja) * 2015-08-04 2020-04-22 富士通株式会社 画像投影装置及び画像表示システム
JP6529383B2 (ja) * 2015-08-11 2019-06-12 京セラ株式会社 ウェアラブル装置及び出力システム
EP3342189B1 (en) 2015-08-24 2020-10-14 PCMS Holdings, Inc. Systems and methods for enhancing augmented reality experience with dynamic output mapping
US9865091B2 (en) * 2015-09-02 2018-01-09 Microsoft Technology Licensing, Llc Localizing devices in augmented reality environment
GB2542434A (en) 2015-09-21 2017-03-22 Figment Productions Ltd A System for Providing a Virtual Reality Experience
EP3360029B1 (en) 2015-10-08 2019-11-13 PCMS Holdings, Inc. Methods and systems of automatic calibration for dynamic display configurations
CN105657438A (zh) * 2015-11-09 2016-06-08 乐视致新电子科技（天津）有限公司 一种全景直播视频资源的处理方法及装置
US10591728B2 (en) 2016-03-02 2020-03-17 Mentor Acquisition One, Llc Optical systems for head-worn computers
US10850116B2 (en) 2016-12-30 2020-12-01 Mentor Acquisition One, Llc Head-worn therapy device
US10667981B2 (en) 2016-02-29 2020-06-02 Mentor Acquisition One, Llc Reading assistance system for visually impaired
US9826299B1 (en) 2016-08-22 2017-11-21 Osterhout Group, Inc. Speaker systems for head-worn computer systems
US9880441B1 (en) 2016-09-08 2018-01-30 Osterhout Group, Inc. Electrochromic systems for head-worn computer systems
CN105847627B (zh) * 2016-03-30 2018-11-23 北京小米移动软件有限公司 一种显示图像数据的方法和装置
US9910284B1 (en) 2016-09-08 2018-03-06 Osterhout Group, Inc. Optical systems for head-worn computers
US10684478B2 (en) 2016-05-09 2020-06-16 Mentor Acquisition One, Llc User interface systems for head-worn computers
US10466491B2 (en) 2016-06-01 2019-11-05 Mentor Acquisition One, Llc Modular systems for head-worn computers
US10824253B2 (en) 2016-05-09 2020-11-03 Mentor Acquisition One, Llc User interface systems for head-worn computers
US10210661B2 (en) 2016-04-25 2019-02-19 Microsoft Technology Licensing, Llc Location-based holographic experience
US10748339B2 (en) 2016-06-03 2020-08-18 A Big Chunk Of Mud Llc System and method for implementing computer-simulated reality interactions between users and publications
KR20180002255A (ko) * 2016-06-29 2018-01-08 엘지전자 주식회사 글래스 타입의 이동 단말기
US10690936B2 (en) 2016-08-29 2020-06-23 Mentor Acquisition One, Llc Adjustable nose bridge assembly for headworn computer
JP2018036993A (ja) * 2016-09-02 2018-03-08 オリンパス株式会社 表示システム、携帯情報機器、ウエラブル型端末、情報表示方法およびプログラム
USD840395S1 (en) 2016-10-17 2019-02-12 Osterhout Group, Inc. Head-worn computer
JP2018078475A (ja) * 2016-11-10 2018-05-17 富士通株式会社 制御プログラム、制御方法および制御装置
KR102739220B1 (ko) * 2016-12-23 2024-12-05 삼성전자주식회사 3차원 컨텐츠의 썸네일 관리 방법 및 그 장치
USD864959S1 (en) 2017-01-04 2019-10-29 Mentor Acquisition One, Llc Computer glasses
CN110383147B (zh) * 2017-03-13 2020-11-27 三井化学株式会社 眼睛佩戴物
AU2018239457B2 (en) 2017-03-22 2023-04-20 A Big Chunk Of Mud Llc Convertible satchel with integrated head-mounted display
US10422995B2 (en) 2017-07-24 2019-09-24 Mentor Acquisition One, Llc See-through computer display systems with stray light management
US11409105B2 (en) 2017-07-24 2022-08-09 Mentor Acquisition One, Llc See-through computer display systems
US10578869B2 (en) 2017-07-24 2020-03-03 Mentor Acquisition One, Llc See-through computer display systems with adjustable zoom cameras
US10969584B2 (en) 2017-08-04 2021-04-06 Mentor Acquisition One, Llc Image expansion optic for head-worn computer
US20190129607A1 (en) * 2017-11-02 2019-05-02 Samsung Electronics Co., Ltd. Method and device for performing remote control
JP7035510B2 (ja) * 2017-12-22 2022-03-15 セイコーエプソン株式会社 表示システム、及び、表示システムの制御方法
KR102013154B1 (ko) * 2018-02-02 2019-08-22 강근원 장거리 이동시 헤드 마운티드 디스플레이를 이용한 콘텐츠 서비스 방법 및 컴퓨터 프로그램
US10748021B2 (en) 2018-05-11 2020-08-18 Samsung Electronics Co., Ltd. Method of analyzing objects in images recorded by a camera of a head mounted device
CN116224596A (zh) 2018-06-25 2023-06-06 麦克赛尔株式会社 头戴式显示器、头戴式显示器协作系统及其方法
CN113273184B (zh) 2018-11-30 2025-01-03 Pcms控股公司 将3d对象镜像到光场显示器的方法
US10852819B2 (en) * 2019-01-11 2020-12-01 Dell Products, L.P. Systems and methods for eye-gaze tracking (EGT) handoff
JP6997129B2 (ja) * 2019-03-28 2022-01-17 ファナック株式会社 制御システム
EP4158446A1 (en) * 2020-05-27 2023-04-05 Telefonaktiebolaget Lm Ericsson (Publ) Method and device for controlling display of content
KR102290328B1 (ko) * 2020-11-16 2021-08-18 코리아에프티 주식회사 영상 출력 장치
JP7140890B1 (ja) * 2021-06-18 2022-09-21 株式会社ドワンゴ 視聴者端末、視聴者端末の制御方法、視聴者端末の制御プログラム、および、記録媒体
DE102021206568A1 (de) 2021-06-24 2022-12-29 Siemens Healthcare Gmbh Darstellungsvorrichtung zur Anzeige einer graphischen Darstellung einer erweiterten Realität
US11935201B2 (en) * 2022-04-28 2024-03-19 Dell Products Lp Method and apparatus for using physical devices in extended reality environments
JP2024052410A (ja) * 2022-09-30 2024-04-11 富士フイルム株式会社 プロセッサ、情報処理方法、及び情報処理プログラム
CN115633244B (zh) * 2022-10-17 2023-06-30 元化智能科技(深圳)有限公司 图像数据传输方法和图像数据传输设备
CN115942322B (zh) * 2023-02-15 2023-06-06 北京秒信科技有限公司 一种骚扰短信拦截方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110285704A1 (en) 2010-02-03 2011-11-24 Genyo Takeda Spatially-correlated multi-display human-machine interface
US20120127284A1 (en) 2010-11-18 2012-05-24 Avi Bar-Zeev Head-mounted display device which provides surround video

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3407383B2 (ja) * 1993-06-15 2003-05-19 オリンパス光学工業株式会社 頭部装着型ディスプレイシステム
EP1326122B1 (en) * 1993-08-12 2006-09-06 Seiko Epson Corporation Head-mounted image display device and data processing apparatus including the same
US6061064A (en) * 1993-08-31 2000-05-09 Sun Microsystems, Inc. System and method for providing and using a computer user interface with a view space having discrete portions
JP2000347596A (ja) * 1998-08-31 2000-12-15 Semiconductor Energy Lab Co Ltd 携帯情報処理システム
JP2000194726A (ja) * 1998-10-19 2000-07-14 Sony Corp 情報処理装置及び方法、情報処理システム並びに提供媒体
JP4178697B2 (ja) 1999-11-18 2008-11-12 ソニー株式会社 携帯型情報処理端末、情報入出力システム及び情報入出力方法
US7215322B2 (en) * 2001-05-31 2007-05-08 Siemens Corporate Research, Inc. Input devices for augmented reality applications
US7190331B2 (en) * 2002-06-06 2007-03-13 Siemens Corporate Research, Inc. System and method for measuring the registration accuracy of an augmented reality system
JP2004127024A (ja) * 2002-10-03 2004-04-22 Canon Inc 複合現実感システム用コンテンツ保護装置及び保護方法
US7331929B2 (en) * 2004-10-01 2008-02-19 General Electric Company Method and apparatus for surgical operating room information display gaze detection and user prioritization for control
JP2006267604A (ja) * 2005-03-24 2006-10-05 Canon Inc 複合情報表示装置
US8179423B2 (en) * 2005-08-22 2012-05-15 Ricoh Company, Ltd. Image display system, an image display method, a coding method, and a printed matter for stereoscopic viewing
US20070233759A1 (en) 2006-03-28 2007-10-04 The Regents Of The University Of California Platform for seamless multi-device interactive digital content
JP2009245390A (ja) * 2008-03-31 2009-10-22 Brother Ind Ltd 表示処理装置及び表示処理システム
JP5156571B2 (ja) * 2008-10-10 2013-03-06 キヤノン株式会社 画像処理装置、画像処理方法
EP2356809A2 (de) * 2008-12-10 2011-08-17 Siemens Aktiengesellschaft Verfahren zum übertragen eines bildes von einer ersten steuereinheit auf eine zweite steuereinheit und ausgabeeinheit
JP5310591B2 (ja) * 2010-02-14 2013-10-09 ブラザー工業株式会社 通信システムおよびヘッドマウントディスプレイ
US20120075167A1 (en) * 2010-09-29 2012-03-29 Eastman Kodak Company Head-mounted display with wireless controller
JP5622510B2 (ja) * 2010-10-01 2014-11-12 オリンパス株式会社 画像生成システム、プログラム及び情報記憶媒体
US20120223968A1 (en) * 2010-10-12 2012-09-06 Kazutoshi Kashimoto Display processing device, display method, and program
KR20120064557A (ko) * 2010-12-09 2012-06-19 한국전자통신연구원 증강형 3차원 입체 영상 제시를 위한 혼합현실 디스플레이 플랫폼 및 운영 방법
US9217867B2 (en) * 2011-03-24 2015-12-22 Seiko Epson Corporation Head-mounted display device and control method for the head-mounted display device
US9583032B2 (en) * 2012-06-05 2017-02-28 Microsoft Technology Licensing, Llc Navigating content using a physical object

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110285704A1 (en) 2010-02-03 2011-11-24 Genyo Takeda Spatially-correlated multi-display human-machine interface
US20120127284A1 (en) 2010-11-18 2012-05-24 Avi Bar-Zeev Head-mounted display device which provides surround video

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12299814B2 (en) 2021-11-29 2025-05-13 Samsung Electronics Co., Ltd. Electronic device for providing contents in connection with external electronic device and method of the same

Also Published As

Publication number Publication date
US8427396B1 (en) 2013-04-23
WO2014014155A1 (en) 2014-01-23
EP2872945B1 (en) 2017-12-13
US8730131B2 (en) 2014-05-20
US9423619B2 (en) 2016-08-23
EP3309601B1 (en) 2019-03-20
US20140191929A1 (en) 2014-07-10
US20140015736A1 (en) 2014-01-16
EP2872945A1 (en) 2015-05-20
KR20140010715A (ko) 2014-01-27
EP3309601A1 (en) 2018-04-18
EP2872945A4 (en) 2016-02-17

Similar Documents

Publication Publication Date Title
KR101861380B1 (ko) 헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이
CN108205197B (zh) 显示装置和显示装置的控制方法
KR101989893B1 (ko) 헤드 마운트 디스플레이 및 이를 이용한 오디오 신호 출력 방법
KR102088020B1 (ko) 헤드 마운트 디스플레이 및 제어 방법
KR101958778B1 (ko) 헤드 마운트 디스플레이 및 이를 이용한 디지털 디바이스 제어 방법
US11226689B2 (en) Display system that selects a character string according to movement detected
US9304320B2 (en) Head-mounted display and method of controlling the same
KR20190071839A (ko) 가상 현실 경험 공유
US20120068914A1 (en) Miniature communications gateway for head mounted display
US10718948B2 (en) Head-mounted display apparatus, display control method, and computer program
US20170289533A1 (en) Head mounted display, control method thereof, and computer program
KR20160125674A (ko) 이동 단말기 및 그 제어 방법
KR20150031614A (ko) 포터블 디바이스 및 그 제어 방법
US10122448B2 (en) Mobile terminal and control method therefor
US20160182860A1 (en) Methods for performing image capture and real-time image display on physically separated or separable devices and apparatus therefor
US9319980B1 (en) Efficient digital image distribution
US9495125B2 (en) Electronic device and display method
US9898037B2 (en) Electronic device and display method
JP6623888B2 (ja) 表示システム、表示装置、頭部装着型表示装置、表示制御方法、表示装置の制御方法、及び、プログラム
JP6932917B2 (ja) 頭部装着型表示装置、プログラム、及び頭部装着型表示装置の制御方法
KR102420166B1 (ko) 맞춤형 네트워크 전송 정보 퀄리티 조정 방법 및 시스템
KR102262019B1 (ko) 네트워크 속도 반응형 확장현실(xr) 커뮤니케이션 방법 및 시스템
KR20160009213A (ko) 헤드 마운트 디스플레이 및 이를 이용한 콘텐츠 제공 방법
KR20170139227A (ko) 헤드 마운트 디스플레이 기어
KR20160009214A (ko) 헤드 마운트 디스플레이 및 이를 이용한 모바일 게임 콘텐츠 제공 방법

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20120716

PG1501 Laying open of application
N231 Notification of change of applicant
PN2301 Change of applicant

Patent event date: 20150807

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20170609

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20120716

Comment text: Patent Application

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20180220

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20180518

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20180518

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20210415

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20240424

Start annual number: 7

End annual number: 7