[go: up one dir, main page]

KR20130056529A - 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법 - Google Patents

휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법 Download PDF

Info

Publication number
KR20130056529A
KR20130056529A KR1020110122176A KR20110122176A KR20130056529A KR 20130056529 A KR20130056529 A KR 20130056529A KR 1020110122176 A KR1020110122176 A KR 1020110122176A KR 20110122176 A KR20110122176 A KR 20110122176A KR 20130056529 A KR20130056529 A KR 20130056529A
Authority
KR
South Korea
Prior art keywords
information
augmented reality
portable terminal
guide screen
display information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
KR1020110122176A
Other languages
English (en)
Inventor
이공욱
이준호
신대규
이은주
황섬
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020110122176A priority Critical patent/KR20130056529A/ko
Priority to US13/684,070 priority patent/US20130127907A1/en
Priority to EP12193630.6A priority patent/EP2597623A3/en
Priority to AU2012258336A priority patent/AU2012258336B2/en
Priority to JP2012256842A priority patent/JP2013109768A/ja
Priority to PCT/KR2012/009927 priority patent/WO2013077643A1/en
Priority to CN201210479186.4A priority patent/CN103227848B/zh
Publication of KR20130056529A publication Critical patent/KR20130056529A/ko
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 휴대용 단말기에서 증강 현실 서비스를 제공하기 위한 장치 및 방법에 관한 것이다. 이때, 증강 현실 서비스를 제공하기 위한 방법은, 주변 정보를 이용하여 증강 현실 서비스 화면을 구성하는 과정과, 상기 증강 현실 서비스 화면을 고려하여 인식 가능한 적어도 하나의 표시(marker) 정보를 확인하는 과정과, 상기 인식 가능한 적어도 하나의 표시 정보를 고려하여 가이드 화면을 구성하는 과정과, 상기 증강 현실 서비스 화면의 일부분에 상기 가이드 화면을 추가 표시하는 과정을 포함한다.

Description

휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING AUGMENTED REALITY SERVICE IN PORTABLE TERMINAL}
본 발명은 휴대용 단말기에서 증강현실 서비스(Augmented Reality service)를 제공하기 위한 장치 및 방법에 관한 것이다.
증강 현실은 서비스 단말이 실제 공간에서 인식한 실제 정보와 가상 객체를 합성하여 표시하는 기술을 나타낸다. 여기서, 실제 정보는, 실제 영상, 소리, 위치 정보 등을 포함한다.
증강 현실 서비스를 제공하는 서비스 단말은 외부로부터 제공받은 실제 정보와 기 설정된 표시 정보가 매칭되는 경우, 매칭되는 표시 정보에 대한 부가 정보를 재생한다.
상술한 바와 같이 표시 정보를 이용하여 증강 현실 서비스를 제공하는 경우, 서비스 단말은 증강 현실의 인식 및 추적이 정확하여 실시간으로 동작에 용이한 이점이 있다.
하지만, 표시 정보를 이용하여 증강 현실 서비스를 제공하는 경우, 서비스 단말의 사용자는 부가 정보의 표시 정보를 인지하지 못해 부가 정보의 재생하기 위해 여러 번의 시행 착오를 겪어야 하는 문제가 발생할 수 있다.
따라서, 본 발명의 목적은 휴대용 단말기에서 증강 현실 서비스를 제공하기 위한 장치 및 방법을 제공함에 있다.
본 발명의 다른 목적은 휴대용 단말기에서 증강 현실 서비스의 표시 정보를 사용자에게 제공하기 위한 장치 및 방법을 제공함에 있다.
본 발명의 또 다른 목적은 휴대용 단말기에서 증강 현실 서비스에 대한 가이드 화면을 제공하기 위한 장치 및 방법을 제공함에 있다.
본 발명의 또 다른 목적은 휴대용 단말기에서 증강 현실 서비스의 표시 정보를 포함하는 가이드 화면을 제공하기 위한 장치 및 방법을 제공함에 있다.
본 발명의 또 다른 목적은 휴대용 단말기에서 증강 현실 서비스의 부가 정보에 대한 뷰 포트(view port)를 설정하기 위한 장치 및 방법을 제공함에 있다.
본 발명의 또 다른 목적은 휴대용 단말기에서 기 설정된 뷰 포트 정보에 따라 증강 현실 서비스의 부가 정보를 표시하기 위한 장치 및 방법을 제공함에 있다.
본 발명의 목적들을 달성하기 위한 본 발명의 제 1 견지에 따르면, 휴대용 단말기에서 증강 현실 서비스를 제공하기 위한 방법은, 주변 정보를 이용하여 증강 현실 서비스 화면을 구성하는 과정과, 상기 증강 현실 서비스 화면을 고려하여 인식 가능한 적어도 하나의 표시(marker) 정보를 확인하는 과정과, 상기 인식 가능한 적어도 하나의 표시 정보를 고려하여 가이드 화면을 구성하는 과정과, 상기 증강 현실 서비스 화면의 일부분에 상기 가이드 화면을 추가 표시하는 과정을 포함하는 것을 특징으로 한다.
또한, 상기 증강 현실 서비스 화면에서 표시 정보를 인식한 경우, 상기 표시 정보에 대한 증강 현실 부가 정보를 확인하는 과정과, 상기 증강 현실 부가 정보에 대한 뷰 포트가 설정되었는지 확인하는 과정과, 상기 증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 상기 뷰 포트 설정 정보에 따라 상기 증강 현실 부가 정보를 화면에 표시하는 과정을 더 포함하는 것을 특징으로 합니다.
본 발명의 제 2 견지에 따르면, 휴대용 단말기에서 증강 현실 서비스를 제공하기 위한 장치는, 주변 정보를 이용하여 구성한 증강 현실 서비스 화면을 고려하여 인식 가능한 적어도 하나의 표시(marker) 정보를 확인하고, 상기 인식 가능한 적어도 하나의 표시 정보를 고려하여 가이드 화면을 구성하는 제어부와, 상기 증강 현실 서비스 화면의 일부분에 상기 가이드 화면을 추가 표시하는 표시부를 포함하는 것을 특징으로 한다.
또한, 상기 제어부는, 상기 표시부에 표시된 증강 현실 서비스 화면에서 표시 정보를 인식한 경우, 상기 표시 정보에 대한 증강 현실 부가 정보를 확인하고, 상기 증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 상기 뷰 포트 설정 정보에 따라 상기 증강 현실 부가 정보를 화면에 표시하도록 제어하는 것을 특징으로 한다.
상술한 바와 같이 증강 현실 서비스를 제공하는 휴대용 단말기에서 인식 가능한 표시 정보에 대한 가이드 화면을 제공함으로써, 휴대용 단말기의 사용자가 증강 현실 부가 정보의 재생을 용이하게 수행할 수 있다.
또한, 증강 현실 서비스를 제공하는 휴대용 단말기에서 인식한 표시 정보에 대한 증강 현실 부가 정보를 뷰 포트 설정 정보에 따라 재생함으로써, 휴대용 단말기의 사용자의 증강 현실 서비스에 대한 활용도를 높일 수 있는 이점이 있다.
도 1은 본 발명에 따른 휴대용 단말기의 블록 구성을 도시하는 도면,
도 2는 본 발명의 실시 예에 따른 휴대용 단말기에서 가이드 화면을 표시하기 위한 절차를 도시하는 도면,
도 3은 본 발명의 다른 실시 예에 따른 휴대용 단말기에서 가이드 화면을 표시하기 위한 절차를 도시하는 도면,
도 4는 본 발명의 실시 예에 따른 휴대용 단말기에서 가이드 화면을 구성하기 위한 절차를 도시하는 도면,
도 5는 본 발명의 실시 예에 따른 휴대용 단말기에서 가이드 화면을 통해 증강 현실 부가 정보를 제공하기 위한 절차를 도시하는 도면,
도 6은 본 발명의 실시 예에 따른 휴대용 단말기에서 증강 현실 부가 정보를 제공하기 위한 절차를 도시하는 도면,
도 7은 본 발명의 다른 실시 예에 따른 휴대용 단말기에서 증강 현실 부가 정보를 제공하기 위한 절차를 도시하는 도면, 및
도 8은 본 발명의 실시 예에 따른 가이드 화면의 구성을 도시하는 도면.
이하 본 발명의 바람직한 실시 예를 첨부된 도면을 참조하여 상세히 설명한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
이하 본 발명은 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 기술에 대해 설명한다.
이하 설명에서 휴대용 단말기는 증강 현실 서비스를 제공하는 이동통신단말기, PDA(Personal Digital Assistant), 랩탑(Laptop), 스마트폰(Smart Phone), 넷북(Netbook), 휴대 인터넷 장치(MID: Mobile Internet Device), 울트라 모바일 PC(UMPC: Ultra Mobile PC), 태블릿 PC(Tablet Personal Computer) 등을 포함한다.
이하 설명에서 휴대용 단말기는 카메라를 통해 획득한 실제 영상을 이용하여 증강 현실 서비스를 제공하는 것으로 가정한다. 하지만, 휴대용 단말기가 외부로부터 제공받은 실제 정보를 이용하여 증강 현실 서비스를 제공하는 경우에도 동일하게 적용할 수 있다.
도 1은 본 발명에 따른 휴대용 단말기의 블록 구성을 도시하고 있다.
도시된 바와 같이 휴대용 단말기는 제어부(100), 저장부(110), 표시부(120), 입력부(130), 오디오 처리부(140), 통신부(150) 및 카메라부(160)를 포함한다.
제어부(100)는 휴대용 단말기의 전체적인 동작 제어를 수행한다.
제어부(100)는 카메라부(160)를 통해 제공받은 실제 영상과 가상 객체를 합성하여 증강 현실 서비스를 제공한다. 예를 들어, 제어부(100)는 카메라부(160)를 통해 제공받은 실제 영상을 포함하는 증강 현실 구성 정보를 이용하여 증강 현실 서비스 화면을 구성한다. 이후, 증강 현실 서비스 화면과 기 설정된 표시(marker) 정보가 매칭되는 경우, 제어부(100)는 증강 현실 서비스 화면에 매칭되는 표시 정보에 대한 증강 현실 부가 정보를 재생하도록 제어한다. 이때, 제어부(100)는 증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 뷰 포트 설정 정보에 따라 증강 현실 부가 정보를 출력하도록 제어한다. 여기서, 뷰 포트 설정 정보는 증강 현실 부가 정보 출력 시, 증강 현실 부가 정보에 대한 출력 각도, 출력 크기, 출력 색상, 재생 시작 위치, 재생 속도 등을 포함한다.
또한, 제어부(100)는 증강 현실 서비스를 제공하는 경우, 가이드 구성부(102)에서 구성한 가이드 화면을 증강 현실 서비스 화면과 함께 출력하도록 제어한다. 예를 들어, 제어부(100)는 도 2 또는 도 3에 도시된 바와 같이 증강 현실 서비스 화면과 매칭되는 표시 화면을 인식하기 이전에 가이드 화면을 제공하도록 제어한다.
만일, 휴대용 단말기의 사용자가 가이드 화면에 표시된 표시 정보를 선택하는 경우, 제어부(100)는 사용자가 선택한 표시 정보에 대한 증강 현실 부가 정보를 재생하도록 제어한다. 이때, 제어부(100)는 증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 뷰 포트 설정 정보에 따라 증강 현실 부가 정보를 출력하도록 제어한다.
가이드 구성부(102)는 제어부(100)에서 증강 현실 서비스를 통해 인식할 수 있는 표시 정보를 포함하는 가이드 화면을 구성한다. 예를 들어, 가이드 구성부(102)는 제어부(100)에서 증강 현실 서비스를 제공하기 위해 수집한 증강 현실 구성 정보를 토대로 인식 가능한 표시 정보를 확인한다. 이후, 가이드 구성부(102)는 제어부(100)에서 인식할 수 있는 모든 표시 정보들을 포함하도록 가이드 화면을 구성한다. 다른 예를 들어, 가이드 구성부(102)는 제어부(100)에서 인식할 수 있는 표시 정보들 중 기 설정된 개수의 표시 정보만을 포함하도록 가이드 화면을 구성할 수도 있다.
저장부(110)는 휴대용 단말기의 동작을 제어하기 위한 프로그램을 저장하는 프로그램 저장부 및 프로그램 수행 중에 발생되는 데이터를 저장하는 데이터 저장부로 구성될 수 있다. 예를 들어, 저장부(110)는 증강 현실 서비스의 표시 정보를 저장한다.
표시부(120)는 제어부(100)의 제어에 따라 휴대용 단말기의 상태 정보, 사용자가 입력하는 문자, 동화상(moving picture) 및 정화상(still picture) 등을 표시한다. 예를 들어, 표시부(120)는 제어부(100)의 제어에 따라 도 8에 도시된 바와 같이 증강 현실 서비스 화면(800)과 가이드 구성부(102)에서 구성한 가이드 화면(810)을 표시한다. 다른 예를 들어, 표시부(120)는 제어부(100)의 제어에 따라 증강 현실 부가 정보의 재생 화면을 표시한다. 이때, 표시부(120)는 제어부(100)의 제어에 따라 뷰 포트 설정 정보에 따라 증강 현실 부가 정보에 대한 재생 화면을 표시한다.
입력부(130)는 사용자의 선택에 의해 발생하는 입력 데이터를 제어부(100)로 제공한다. 예를 들어, 표시부(120)가 터치스크린으로 구성되는 경우, 입력부(130)는 휴대용 단말기의 제어를 위한 제어 버튼만을 포함하여 구성된다. 다른 예를 들어, 입력부(130)는 사용자로부터 입력 데이터를 제공받기 위한 키패드로 구성될 수도 있다.
오디오 처리부(140)는 오디오 신호의 입출력을 제어한다. 예를 들어, 오디오 처리부(140)는 제어부(800)로부터 제공받은 오디오 신호를 스피커를 통해 외부로 송출하고, 마이크로부터 제공받은 오디오 신호를 제어부(100)로 제공한다.
통신부(150)는 음성 및 데이터 통신을 위해 안테나를 통해 송수신되는 신호를 처리한다.
카메라부(160)는 피사체를 촬영한 화상데이터를 디지털데이터로 변환하고, 상기 디지털데이터로부터 획득한 정지영상을 제어부(100)로 제공한다.
상술한 바와 같이 가이드 구성부(102)는 제어부(100)에서 인식할 수 있는 표시 정보들 중 기 설정된 개수의 표시 정보만을 포함하도록 가이드 화면을 구성할 수도 있다. 예를 들어, 가이드 구성부(102)는 제어부(100)에서 인식할 수 있는 표시 정보들 중 인식될 확률이 높은 적어도 하나의 표시 정보를 포함하도록 가이드 화면을 구성한다. 여기서, 표시 정보의 인식될 확률은, 휴대용 단말기와 표시 정보와의 거리, 표시 정보의 인식 횟수 중 적어도 하나를 고려하여 결정될 수 있다.
이하 설명은 휴대용 단말기에서 가이드 화면을 제공하기 위한 방법에 대해 설명한다.
도 2는 본 발명의 실시 예에 따른 휴대용 단말기에서 가이드 화면을 표시하기 위한 절차를 도시하고 있다.
도 2를 참조하면 휴대용 단말기는 201단계에서 증강 현실 서비스를 제공할 것인지 확인한다. 예를 들어, 휴대용 단말기는 사용자의 조작에 의해 증강 현실 응용 프로그램을 실행할 것인지 확인한다.
증강 현실 서비스를 제공하지 않는 경우, 휴대용 단말기는 본 알고리즘을 종료한다.
한편, 증강 현실 서비스를 제공하는 경우, 휴대용 단말기는 203단계로 진행하여 증강 현실 구성 정보를 수집한다. 예를 들어, 휴대용 단말기는 주변 영상, 주변 소리, 상기 휴대용 단말기의 움직임 정보 및 상기 휴대용 단말기의 위치 정보 등의 증강 현실 구성 정보를 수집한다.
증강 현실 구성 정보를 수집한 후, 휴대용 단말기는 205단계로 진행하여 증강 현실 구성 정보를 이용하여 증강 현실 서비스를 위해 사용자에게 제공할 증강 현실 서비스 화면을 구성한다.
이후, 휴대용 단말기는 207단계로 진행하여 가이드 정보를 제공할 것인지 확인한다. 예를 들어, 휴대용 단말기는 가이드 정보 제공 메뉴가 설정되었는지 확인한다. 여기서, 가이드 정보는 휴대용 단말기의 사용자가 증강 현실 부가 정보에 대한 표시 정보를 용이하게 인식할 수 있도록 휴대용 단말기에서 인식할 수 있는 표시 정보를 사용자에게 제공하는 서비스를 나타낸다.
가이드 정보를 제공하는 경우, 휴대용 단말기는 209단계로 진행하여 인식 가능한 표시 정보를 확인한다. 예를 들어, 휴대용 단말기는 실행 중인 증강 현실 응용 프로그램에 따라 인식 가능한 표시 정보를 확인한다. 다른 예를 들어, 휴대용 단말기는 증강 현실 구성 정보를 고려하여 인식 가능한 표시 정보를 확인할 수도 있다.
인식 가능한 표시 정보를 확인한 후, 휴대용 단말기는 211단계로 진행하여 인식 가능한 표시 정보를 포함하는 가이드 화면을 구성한다. 예를 들어, 휴대용 단말기는 인식 가능한 모든 표시 정보들을 포함하도록 가이드 화면을 구성한다. 다른 예를 들어, 휴대용 단말기는 인식 가능한 표시 정보들 중 기 설정된 개수의 표시 정보만을 포함하도록 가이드 화면을 구성할 수도 있다. 이때, 휴대용 단말기는 표시 정보의 인식 확률을 고려하여 가이드 화면에 추가할 표시 정보를 선택한다. 여기서, 표시 정보의 인식 확률은, 휴대용 단말기와 표시 정보와의 거리, 표시 정보의 인식 횟수 중 적어도 하나를 고려하여 결정될 수 있다.
가이드 화면을 구성한 후, 휴대용 단말기는 213단계로 진행하여 205단계에서 구성한 증강 현실 서비스 화면과 가이드 화면을 함께 표시부(120)에 표시한다. 예를 들어, 휴대용 단말기는 도 8에 도시된 바와 같이 증강 현실 서비스 화면(800)과 가이드 화면(810)을 함께 표시한다.
한편, 207단계에서 가이드 정보를 제공하지 않는 경우, 휴대용 단말기는 215단계로 진행하여 205단계에서 구성한 증강 현실 서비스 화면을 표시부(120)에 표시한다.
이후, 휴대용 단말기는 본 알고리즘을 종료한다.
도 3은 본 발명의 다른 실시 예에 따른 휴대용 단말기에서 가이드 화면을 표시하기 위한 절차를 도시하고 있다.
도 3을 참조하면 휴대용 단말기는 301단계에서 증강 현실 서비스를 제공할 것인지 확인한다. 예를 들어, 휴대용 단말기는 사용자의 조작에 의해 증강 현실 응용 프로그램을 실행할 것인지 확인한다.
증강 현실 서비스를 제공하지 않는 경우, 휴대용 단말기는 본 알고리즘을 종료한다.
한편, 증강 현실 서비스를 제공하는 경우, 휴대용 단말기는 303단계로 진행하여 증강 현실 구성 정보를 수집한다. 예를 들어, 휴대용 단말기는 주변 영상, 주변 소리, 상기 휴대용 단말기의 움직임 정보 및 상기 휴대용 단말기의 위치 정보 등의 증강 현실 구성 정보를 수집한다.
증강 현실 구성 정보를 수집한 후, 휴대용 단말기는 305단계로 진행하여 증강 현실 구성 정보를 이용하여 증강 현실 서비스를 위해 사용자에게 제공할 증강 현실 서비스 화면을 구성한다.
증강 현실 서비스 화면을 구성한 후, 휴대용 단말기는 307단계로 진행하여 증강 현실 서비스 화면을 표시부(120)에 표시한다.
이후, 휴대용 단말기는 309단계로 진행하여 가이드 정보를 제공할 것인지 확인한다. 예를 들어, 휴대용 단말기는 가이드 정보 제공 메뉴가 설정되었는지 확인한다.
가이드 정보를 제공하지 않는 경우, 휴대용 단말기는 본 알고리즘을 종료한다.
한편, 가이드 정보를 제공하는 경우, 휴대용 단말기는 311단계로 진행하여 인식 가능한 표시 정보를 확인한다. 예를 들어, 휴대용 단말기는 실행 중인 증강 현실 응용 프로그램에 따라 인식 가능한 표시 정보를 확인한다. 다른 예를 들어, 휴대용 단말기는 증강 현실 구성 정보를 고려하여 인식 가능한 표시 정보를 확인할 수도 있다.
인식 가능한 표시 정보를 확인한 후, 휴대용 단말기는 313단계로 진행하여 인식 가능한 표시 정보를 포함하는 가이드 화면을 구성한다. 예를 들어, 휴대용 단말기는 인식 가능한 모든 표시 정보들을 포함하도록 가이드 화면을 구성한다. 다른 예를 들어, 휴대용 단말기는 인식 가능한 표시 정보들 중 기 설정된 개수의 표시 정보만을 포함하도록 가이드 화면을 구성할 수도 있다. 이때, 휴대용 단말기는 표시 정보의 인식 확률을 고려하여 가이드 화면에 추가할 표시 정보를 선택한다. 여기서, 표시 정보의 인식 확률은, 휴대용 단말기와 표시 정보와의 거리, 표시 정보의 인식 횟수 중 적어도 하나를 고려하여 결정될 수 있다.
가이드 화면을 구성한 후, 휴대용 단말기는 315단계로 진행하여 307단계에서 표시부(120)에 표시할 증강 현실 서비스 화면에 가이드 화면을 추가한다. 예를 들어, 휴대용 단말기는 도 8에 도시된 바와 같이 표시부(120)에 표시된 증강 현실 서비스 화면(800)에 가이드 화면(810)을 추가한다.
이후, 휴대용 단말기는 본 알고리즘을 종료한다.
상술한 실시 예에서 휴대용 단말기는 증강 현실 서비스 화면과 가이드 화면을 함께 표시부(120)에 표시한다. 이때, 휴대용 단말기는 표시 정보를 인식하여 증강 현실 부가 정보를 재생하는 경우, 가이드 화면을 표시하지 않는다. 이후, 휴대용 단말기는 증강 현실 부가 정보의 재생이 종료되면 가이드 화면을 다시 표시한다. 다른 예를 들어, 휴대용 단말기는 표시 정보를 인식하여 증강 현실 부가 정보를 재생하는 경우, 인식한 표시 정보와 다른 표시 정보를 포함하는 가이드 화면을 지속적으로 표시할 수도 있다.
상술한 바와 같이 도 2와 도 3에 도시된 바와 같이 휴대용 단말기는 가이드 정보를 제공하는 경우, 증강 현실 서비스 화면에 가이드 화면을 추가하여 표시한다. 이때, 휴대용 단말기는 도 4에 도시된 바와 같이 가이드 화면을 구성할 수 있다.
도 4는 본 발명의 실시 예에 따른 휴대용 단말기에서 가이드 화면을 구성하기 위한 절차를 도시하고 있다. 이하 설명에서 휴대용 단말기는 도 3의 313단계에서 가이드 화면을 구성하는 것으로 가정한다.
도 4를 참조하면 도 3의 311단계에서 인식 가능한 표시 정보를 확인한 후, 휴대용 단말기는 401단계로 진행하여 인식 가능한 표시 정보의 개수가 1개인지 확인한다.
인식 가능한 표시 정보의 개수가 한 개인 경우, 휴대용 단말기는 405단계로 진행하여 가이드 화면 구성 정보를 확인한다. 예를 들어, 휴대용 단말기는 저장부(110)에 저장된 가이드 화면 구성 정보를 확인한다. 다른 예를 들어, 휴대용 단말기는 주변 밝기, 휴대용 단말기의 움직임 등을 포함하는 주변 정보를 고려하여 가이드 화면 구성 정보를 결정할 수도 있다. 여기서, 가이드 화면 구성 정보는 가이드 화면의 크기, 가이드 화면의 투명도, 가이드 화면의 색상 중 적어도 하나를 포함한다.
한편, 인식 가능한 표시 정보의 개수가 다수 개인 경우, 휴대용 단말기는 403단계로 진행하여 인식 가능한 표시 정보들 중 가이드 화면에 포함시킬 적어도 하나의 표시 정보를 선택한다. 예를 들어, 휴대용 단말기는 인식 가능한 표시 정보들의 인식 확률을 결정한다. 이후, 휴대용 단말기는 인식 가능한 표시 정보들 중 인식 확률이 높은 적어도 하나의 표시 정보를 선택한다. 여기서, 표시 정보의 인식 확률은, 휴대용 단말기와 표시 정보와의 거리, 표시 정보의 인식 횟수 중 적어도 하나를 고려하여 결정될 수 있다.
이후, 휴대용 단말기는 405단계로 진행하여 가이드 화면 구성 정보를 확인한다. 여기서, 가이드 화면 구성 정보는 가이드 화면의 크기, 가이드 화면의 투명도, 가이드 화면의 색상 중 적어도 하나를 포함한다.
가이드 화면 구성 정보를 확인한 후, 휴대용 단말기는 407단계로 진행하여 가이드 화면 구성 정보에 따라 적어도 하나의 표시 정보를 포함하는 가이드 화면을 구성한다.
이후, 휴대용 단말기는 도 3의 315단계로 진행하여 307단계에서 표시부(120)에 표시할 증강 현실 서비스 화면에 가이드 화면을 추가한다.
상술한 실시 예에서 휴대용 단말기는 인식 가능한 표시 정보의 개수가 다수 개인 경우, 가이드 화면에 포함시킬 적어도 하나의 표시 정보를 선택한다.
다른 실시 예에서 휴대용 단말기는 인식 가능한 모든 표시 정보들을 포함하도록 가이드 화면을 구성할 수도 있다.
상술한 바와 같이 휴대용 단말기는 휴대용 단말기의 사용자의 증강 현실 부가 정보 인식을 돕기 위해 적어도 하나의 표시 정보를 포함하는 가이드 화면을 제공한다. 이때, 휴대용 단말기는 가이드 화면을 이용하여 하기 도 5에 도시된 바와 같이 증강 현실 부가 정보를 제공할 수도 있다.
도 5는 본 발명의 실시 예에 따른 휴대용 단말기에서 가이드 화면을 통해 증강 현실 부가 정보를 제공하기 위한 절차를 도시하고 있다.
도 5를 참조하면 휴대용 단말기는 501단계에서 가이드 화면을 표시부(120)에 표시한다. 예를 들어, 휴대용 단말기는 도 2에 도시된 바와 같이 증강 현실 서비스 화면과 가이드 화면을 함께 표시부(120)에 표시한다. 다른 예를 들어, 휴대용 단말기는 도 3에 도시된 바와 같이 표시부(120)에 표시된 증강 현실 서비스 화면에 가이드 화면을 추가 표시할 수도 있다.
이후, 휴대용 단말기는 503단계로 진행하여 사용자가 가이드 화면에 표시된 표시 정보를 선택하는지 확인한다.
사용자가 가이드 화면에 표시된 표시 정보를 선택하지 않은 경우, 휴대용 단말기는 501단계로 진행하여 가이드 화면을 표시부(120)에 표시한다.
한편, 사용자가 가이드 화면에 표시된 표시 정보를 선택한 경우, 휴대용 단말기는 505단계로 진행하여 사용자가 선택한 표시 정보를 고려하여 증강 현실 서비스 화면을 변경한다. 예를 들어, 휴대용 단말기는 사용자가 선택한 표시 정보와 매칭되도록 증강 현실 서비스 화면을 변경한다.
이후, 휴대용 단말기는 507단계로 진행하여 503단계에서 선택한 표시 정보에 대한 증강 현실 부가 정보를 재생한다.
이후, 휴대용 단말기는 본 알고리즘을 종료한다.
상술한 실시 예에서 휴대용 단말기는 사용자가 가이드 화면에 표시된 표시 정보를 선택한 경우, 사용자가 선택한 표시 정보와 매칭되도록 증강 현실 서비스 화면을 변경한다.
다른 실시 예에서 휴대용 단말기는 사용자가 가이드 화면에 표시된 표시 정보를 선택한 경우, 증강 현실 서비스 화면을 변경하지 않고, 선택한 표시 정보에 대한 증강 현실 부가 정보를 재생할 수도 있다.
이하 설명은 휴대용 단말기에서 증강 현실 부가 정보를 재생하기 위한 방법에 대해 설명한다.
도 6은 본 발명의 실시 예에 따른 휴대용 단말기에서 증강 현실 부가 정보를 제공하기 위한 절차를 도시하고 있다.
도 6을 참조하면 휴대용 단말기는 601단계에서 증강 현실 서비스를 제공할 것인지 확인한다. 예를 들어, 휴대용 단말기는 사용자의 조작에 의해 증강 현실 응용 프로그램을 실행할 것인지 확인한다.
증강 현실 서비스를 제공하지 않는 경우, 휴대용 단말기는 본 알고리즘을 종료한다.
한편, 증강 현실 서비스를 제공하는 경우, 휴대용 단말기는 603단계로 진행하여 증강 현실 구성 정보를 수집한다. 예를 들어, 휴대용 단말기는 주변 영상, 주변 소리, 상기 휴대용 단말기의 움직임 정보 및 상기 휴대용 단말기의 위치 정보 등의 증강 현실 구성 정보를 수집한다.
증강 현실 구성 정보를 수집한 후, 휴대용 단말기는 605단계로 진행하여 증강 현실 구성 정보를 이용하여 증강 현실 서비스를 위해 사용자에게 제공할 증강 현실 서비스 화면을 구성하여 표시부(102)에 표시한다.
이후, 휴대용 단말기는 607단계로 진행하여 표시 정보가 인식되는지 확인한다. 예를 들어, 휴대용 단말기는 인식 가능한 표시 정보와 일치하는 증강 현실 서비스 화면이 인식되는지 확인한다.
표시 정보가 인식된 경우, 휴대용 단말기는 609단계로 진행하여 607단계에서 인식한 표시 정보의 증강 현실 부가 정보에 대한 뷰 포트가 설정되었는지 확인한다.
표시 정보의 증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 휴대용 단말기는 611단계로 진행하여 607단계에서 인식한 표시 정보의 증강 현실 부가 정보에 대한 뷰 포트 설정 정보를 확인한다. 여기서, 뷰 포트 설정 정보는 증강 현실 부가 정보 출력 시, 증강 현실 부가 정보에 대한 출력 각도, 출력 크기, 출력 색상, 재생 시작 위치, 재생 속도 등을 포함한다.
뷰 포트 설정 정보를 확인한 후, 휴대용 단말기는 613단계로 진행하여 뷰 포트 설정 정보에 따라 607단계에서 인식한 표시 정보에 대한 증강 현실 부가 정보를 재생한다. 예를 들어, 증강 현실 부가 정보가 3D 이미지인 경우, 휴대용 단말기는 뷰 포트 설정 정보에 포함된 출력 각도 및 출력 크기를 고려하여 607단계에서 인식한 표시 정보에 대한 증강 현실 부가 정보를 재생한다.
이후, 휴대용 단말기는 615단계로 진행하여 뷰 포트 설정 이벤트가 발생하는지 확인한다. 예를 들어, 휴대용 단말기는 613단계에서 재생하는 증강 현실 부가 정보에 대한 뷰 포트를 다시 설정하기 위한 뷰 포트 설정 메뉴를 휴대용 단말기의 사용자가 선택하는지 확인한다.
뷰 포트 설정 이벤트가 발생하지 않은 경우, 휴대용 단말기는 613단계로 진행하여 607단계에서 인식한 표시 정보에 대한 증강 현실 부가 정보를 재생한다.
한편, 뷰 포트 설정 이벤트가 발생한 경우, 휴대용 단말기는 617단계로 진행하여 증강 현실 부가 정보에 대한 뷰 포트 설정 정보를 다시 설정한다. 예를 들어, 뷰 포트 설정 이벤트가 발생한 경우, 휴대용 단말기는 뷰 포트 조절 인터페이스를 표시부(120)에 표시한다. 이후, 휴대용 단말기는 뷰 포트 조절 인터페이스를 통해 사용자로부터 제공받은 뷰 포트 설정 정보를 저장한다. 이때, 휴대용 단말기는 뷰 포트 조절 인터페이스를 통해 사용자로부터 제공받은 뷰 포트 설정 정보에 따라 증강 현실 부가 정보의 표시 화면을 조절한다.
한편, 609단계에서 표시 정보의 증강 현실 부가 정보에 대한 뷰 포트가 설정되지 않은 경우, 휴대용 단말기는 619단계로 진행하여 607단계에서 인식한 표시 정보에 대한 증강 현실 부가 정보를 재생한다. 예를 들어, 휴대용 단말기는 휴대용 단말기의 상태 정보를 고려하여 증강 현실 부가 정보를 표시한다.
이후, 휴대용 단말기는 621단계로 진행하여 뷰 포트 설정 이벤트가 발생하는지 확인한다. 예를 들어, 휴대용 단말기는 619단계에서 재생하는 증강 현실 부가 정보에 대한 뷰 포트를 설정하기 위한 뷰 포트 설정 메뉴를 휴대용 단말기의 사용자가 선택하는지 확인한다.
뷰 포트 설정 이벤트가 발생하지 않은 경우, 휴대용 단말기는 619단계로 진행하여 607단계에서 인식한 표시 정보에 대한 증강 현실 부가 정보를 재생한다.
한편, 뷰 포트 설정 이벤트가 발생한 경우, 휴대용 단말기는 623단계로 진행하여 증강 현실 부가 정보에 대한 뷰 포트 설정 정보를 설정한다. 예를 들어, 뷰 포트 설정 이벤트가 발생한 경우, 휴대용 단말기는 뷰 포트 조절 인터페이스를 표시부(120)에 표시한다. 이후, 휴대용 단말기는 뷰 포트 조절 인터페이스를 통해 사용자로부터 제공받은 뷰 포트 설정 정보를 저장한다. 이때, 휴대용 단말기는 뷰 포트 조절 인터페이스를 통해 사용자로부터 제공받은 뷰 포트 설정 정보에 따라 증강 현실 부가 정보의 표시 화면을 조절한다.
이후, 휴대용 단말기는 본 알고리즘을 종료한다.
상술한 실시 예에서 휴대용 단말기는 증강 현실 부가 정보 재생 중 뷰 포트를 설정한다.
다른 실시 예에서 휴대용 단말기는 도 7에 도시된 바와 같이 증강 현실 서비스 전에 설정된 뷰 포트 설정 정보에 따라 증강 현실 부가 정보를 재생시킬 수도 있다.
도 7은 본 발명의 다른 실시 예에 따른 휴대용 단말기에서 증강 현실 부가 정보를 제공하기 위한 절차를 도시하고 있다.
도 7을 참조하면 휴대용 단말기는 701단계에서 증강 현실 서비스를 제공할 것인지 확인한다. 예를 들어, 휴대용 단말기는 사용자의 조작에 의해 증강 현실 응용 프로그램을 실행할 것인지 확인한다.
증강 현실 서비스를 제공하지 않는 경우, 휴대용 단말기는 본 알고리즘을 종료한다.
한편, 증강 현실 서비스를 제공하는 경우, 휴대용 단말기는 703단계로 진행하여 증강 현실 구성 정보를 수집한다. 예를 들어, 휴대용 단말기는 주변 영상, 주변 소리, 상기 휴대용 단말기의 움직임 정보 및 상기 휴대용 단말기의 위치 정보 등의 증강 현실 구성 정보를 수집한다.
증강 현실 구성 정보를 수집한 후, 휴대용 단말기는 705단계로 진행하여 증강 현실 구성 정보를 이용하여 증강 현실 서비스를 위해 사용자에게 제공할 증강 현실 서비스 화면을 구성하여 표시부(102)에 표시한다.
이후, 휴대용 단말기는 707단계로 진행하여 표시 정보가 인식되는지 확인한다. 예를 들어, 휴대용 단말기는 인식 가능한 표시 정보와 일치하는 증강 현실 서비스 화면이 인식되는지 확인한다.
표시 정보가 인식된 경우, 휴대용 단말기는 709단계로 진행하여 증강 현실 부가 정보에 대한 뷰 포트가 설정되었는지 확인한다.
뷰 포트가 설정된 경우, 휴대용 단말기는 711단계로 진행하여 기 설정된 뷰 포트 설정 정보를 확인한다. 여기서, 뷰 포트 설정 정보는 증강 현실 부가 정보 출력 시, 증강 현실 부가 정보에 대한 출력 각도, 출력 크기, 출력 색상, 재생 시작 위치, 재생 속도 등을 포함한다.
뷰 포트 설정 정보를 확인한 후, 휴대용 단말기는 713단계로 진행하여 뷰 포트 설정 정보에 따라 707단계에서 인식한 표시 정보에 대한 증강 현실 부가 정보를 재생한다. 예를 들어, 증강 현실 부가 정보가 3D 이미지인 경우, 휴대용 단말기는 뷰 포트 설정 정보에 포함된 출력 각도 및 출력 크기를 고려하여 707단계에서 인식한 표시 정보에 대한 증강 현실 부가 정보를 재생한다.
이후, 휴대용 단말기는 본 알고리즘을 종료한다.
한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능하다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.

Claims (20)

  1. 휴대용 단말기에서 증강 현실 서비스를 제공하기 위한 방법에 있어서,
    주변 정보를 이용하여 증강 현실 서비스 화면을 구성하는 과정과,
    상기 증강 현실 서비스 화면을 고려하여 인식 가능한 적어도 하나의 표시(marker) 정보를 확인하는 과정과,
    상기 인식 가능한 적어도 하나의 표시 정보를 고려하여 가이드 화면을 구성하는 과정과,
    상기 증강 현실 서비스 화면의 일부분에 상기 가이드 화면을 추가 표시하는 과정을 포함하는 것을 특징으로 하는 방법.
  2. 제 1항에 있어서,
    상기 주변 정보는, 주변 영상, 주변 소리, 상기 휴대용 단말기의 움직임 정보 및 상기 휴대용 단말기의 위치 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 방법.
  3. 제 1항에 있어서,
    상기 가이드 화면을 구성하는 과정은,
    상기 인식 가능한 적어도 하나의 표시 정보를 포함하는 가이드 화면을 구성하는 과정을 포함하는 것을 특징으로 하는 방법.
  4. 제 1항에 있어서,
    상기 가이드 화면을 구성하는 과정은,
    상기 인식 가능한 적어도 하나의 표시 정보의 인식 확률을 고려하여 적어도 하나의 표시 정보를 선택하는 과정과,
    상기 선택한 적어도 하나의 표시 정보를 포함하는 가이드 화면을 구성하는 과정을 포함하며,
    상기 표시 정보의 인식 확률은, 상기 휴대용 단말기와 해당 표시 정보와의 거리, 해당 표시 정보의 인식 횟수 중 적어도 하나를 고려하여 결정되는 것을 특징으로 하는 방법.
  5. 제 1항에 있어서,
    상기 가이드 화면을 구성하는 과정은,
    가이드 화면 구성 정보를 확인하는 과정과,
    상기 가이드 화면 구성 정보에 따라 적어도 하나의 표시 정보를 포함하는 가이드 화면을 구성하는 과정을 포함하며,
    상기 가이드 화면 구성 정보는, 가이드 화면의 크기, 가이드 화면의 투명도 및 가이드 화면의 색상 중 적어도 하나를 포함하는 것을 특징으로 하는 방법.
  6. 제 5항에 있어서,
    상기 가이드 화면 구성 정보를 확인하는 과정은,
    상기 휴대용 단말기의 주변 밝기 및 휴대용 단말기의 움직임 중 적어도 하나를 고려하여 가이드 화면 구성 정보를 결정하는 과정을 포함하는 것을 특징으로 하는 방법.
  7. 제 1항에 있어서,
    상기 가이드 화면에 표시된 표시 정보가 선택되는 경우, 상기 표시 정보에 대한 증강 현실 부가 정보를 재생시키는 과정을 더 포함하는 것을 특징으로 하는 방법.
  8. 제 1항에 있어서,
    상기 증강 현실 서비스 화면에서 표시 정보를 인식한 경우, 상기 표시 정보에 대한 증강 현실 부가 정보를 확인하는 과정과,
    상기 증강 현실 부가 정보에 대한 뷰 포트가 설정되었는지 확인하는 과정과,
    상기 증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 상기 뷰 포트 설정 정보에 따라 상기 증강 현실 부가 정보를 화면에 표시하는 과정을 더 포함하며,
    상기 뷰 포트 설정 정보는, 증강 현실 부가 정보에 대한 출력 각도, 출력 크기, 출력 색상, 재생 시작 위치, 재생 속도 중 적어도 하나를 포함하는 것을 특징으로 하는 방법.
  9. 제 8항에 있어서,
    상기 증강 현실 부가 정보를 화면에 표시한 후, 뷰 포트 설정 이벤트가 발생하는지 확인하는 과정과,
    상기 뷰 포트 설정 이벤트가 발생한 경우, 상기 휴대용 단말기의 사용자에 의한 입력되는 뷰 포트 설정 값을 확인하는 과정과,
    상기 뷰 포트 설정 값을 상기 증강 현실 부가 정보에 대한 뷰 포트 설정 값으로 저장하는 과정을 더 포함하는 것을 특징으로 하는 방법.
  10. 제 1항에 있어서,
    상기 증강 현실 서비스 화면에서 표시 정보를 인식한 경우, 증강 현실 부가 정보에 대한 뷰 포트가 설정되었는지 확인하는 과정과,
    증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 상기 뷰 포트 설정 정보에 따라 상기 인식한 표시 정보에 대한 증강 현실 부가 정보를 화면에 표시하는 과정을 더 포함하며,
    상기 뷰 포트 설정 정보는, 증강 현실 부가 정보에 대한 출력 각도, 출력 크기, 출력 색상, 재생 시작 위치, 재생 속도 중 적어도 하나를 포함하는 것을 특징으로 하는 방법.
  11. 휴대용 단말기에서 증강 현실 서비스를 제공하기 위한 장치에 있어서,
    주변 정보를 이용하여 구성한 증강 현실 서비스 화면을 고려하여 인식 가능한 적어도 하나의 표시(marker) 정보를 확인하고, 상기 인식 가능한 적어도 하나의 표시 정보를 고려하여 가이드 화면을 구성하는 제어부와,
    상기 증강 현실 서비스 화면의 일부분에 상기 가이드 화면을 추가 표시하는 표시부를 포함하는 것을 특징으로 하는 장치.
  12. 제 11항에 있어서,
    상기 제어부는, 주변 영상, 주변 소리, 상기 휴대용 단말기의 움직임 정보 및 상기 휴대용 단말기의 위치 정보 중 적어도 하나를 포함하는 주변 정보를 이용하여 증강 현실 서비스 화면을 구성하는 것을 특징으로 하는 장치.
  13. 제 11항에 있어서,
    상기 제어부는, 상기 인식 가능한 적어도 하나의 표시 정보를 포함하는 가이드 화면을 구성하는 것을 특징으로 하는 장치.
  14. 제 11항에 있어서,
    상기 제어부는, 상기 인식 가능한 적어도 하나의 표시 정보의 인식 확률을 고려하여 선택한 적어도 하나의 표시 정보를 포함하는 가이드 화면을 구성하며,
    상기 표시 정보의 인식 확률은, 상기 휴대용 단말기와 해당 표시 정보와의 거리, 해당 표시 정보의 인식 횟수 중 적어도 하나를 고려하여 결정되는 것을 특징으로 하는 장치.
  15. 제 11항에 있어서,
    상기 제어부는, 가이드 화면 구성 정보에 따라 적어도 하나의 표시 정보를 포함하는 가이드 화면을 구성하며,
    상기 가이드 화면 구성 정보는, 가이드 화면의 크기, 가이드 화면의 투명도 및 가이드 화면의 색상 중 적어도 하나를 포함하는 것을 특징으로 하는 장치.
  16. 제 15항에 있어서,
    상기 제어부는, 상기 휴대용 단말기의 주변 밝기 및 휴대용 단말기의 움직임 중 적어도 하나를 고려하여 가이드 화면 구성 정보를 결정하는 것을 특징으로 하는 장치.
  17. 제 11항에 있어서,
    상기 제어부는, 상기 가이드 화면에 표시된 표시 정보가 선택되는 경우, 상기 표시 정보에 대한 증강 현실 부가 정보를 재생시키는 것을 특징으로 하는 장치.
  18. 제 11항에 있어서,
    상기 제어부는, 상기 표시부에 표시된 증강 현실 서비스 화면에서 표시 정보를 인식한 경우, 상기 표시 정보에 대한 증강 현실 부가 정보를 확인하고,
    상기 증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 상기 뷰 포트 설정 정보에 따라 상기 증강 현실 부가 정보를 화면에 표시하도록 제어하며,
    상기 뷰 포트 설정 정보는, 증강 현실 부가 정보에 대한 출력 각도, 출력 크기, 출력 색상, 재생 시작 위치, 재생 속도 중 적어도 하나를 포함하는 것을 특징으로 하는 장치.
  19. 제 18항에 있어서,
    상기 제어부는, 상기 표시부에 표시한 증강 현실 부가 정보에 대한 뷰 포트 설정 이벤트가 발생한 경우, 입력부를 통해 제공받은 뷰 포트 설정 값을 상기 증강 현실 부가 정보에 대한 뷰 포트 설정 값으로 저장하는 것을 특징으로 하는 장치.
  20. 제 11항에 있어서,
    상기 제어부는, 상기 표시부에 표시된 증강 현실 서비스 화면에서 표시 정보를 인식한 경우, 증강 현실 부가 정보에 대한 뷰 포트가 설정되었는지 확인하고, 증강 현실 부가 정보에 대한 뷰 포트가 설정된 경우, 상기 뷰 포트 설정 정보에 따라 상기 인식한 표시 정보에 대한 증강 현실 부가 정보를 화면에 표시하도록 제어하며,
    상기 뷰 포트 설정 정보는, 증강 현실 부가 정보에 대한 출력 각도, 출력 크기, 출력 색상, 재생 시작 위치, 재생 속도 중 적어도 하나를 포함하는 것을 특징으로 하는 장치.
KR1020110122176A 2011-11-22 2011-11-22 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법 Withdrawn KR20130056529A (ko)

Priority Applications (7)

Application Number Priority Date Filing Date Title
KR1020110122176A KR20130056529A (ko) 2011-11-22 2011-11-22 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법
US13/684,070 US20130127907A1 (en) 2011-11-22 2012-11-21 Apparatus and method for providing augmented reality service for mobile terminal
EP12193630.6A EP2597623A3 (en) 2011-11-22 2012-11-21 Apparatus and method for providing augmented reality service for mobile terminal
AU2012258336A AU2012258336B2 (en) 2011-11-22 2012-11-22 Apparatus and method for providing augmented reality service for mobile terminal
JP2012256842A JP2013109768A (ja) 2011-11-22 2012-11-22 ポータブル端末で拡張現実サービスを提供するための方法、及びポータブル端末装置
PCT/KR2012/009927 WO2013077643A1 (en) 2011-11-22 2012-11-22 Apparatus and method for providing augmented reality service for mobile terminal
CN201210479186.4A CN103227848B (zh) 2011-11-22 2012-11-22 用于针对便携式终端提供增强现实服务的设备和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110122176A KR20130056529A (ko) 2011-11-22 2011-11-22 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20130056529A true KR20130056529A (ko) 2013-05-30

Family

ID=47665793

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110122176A Withdrawn KR20130056529A (ko) 2011-11-22 2011-11-22 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법

Country Status (7)

Country Link
US (1) US20130127907A1 (ko)
EP (1) EP2597623A3 (ko)
JP (1) JP2013109768A (ko)
KR (1) KR20130056529A (ko)
CN (1) CN103227848B (ko)
AU (1) AU2012258336B2 (ko)
WO (1) WO2013077643A1 (ko)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103760972B (zh) * 2013-12-18 2017-03-01 微软技术许可有限责任公司 跨平台的增强现实体验
WO2015124962A1 (en) * 2014-02-18 2015-08-27 Sony Corporation Transparency determination for overlaying images on an electronic display
JP6146869B2 (ja) * 2014-03-19 2017-06-14 Kddi株式会社 撮影動画像に指示画像を同期して重畳する映像指示表示方法、システム、端末、及びプログラム
CN103942049B (zh) * 2014-04-14 2018-09-07 百度在线网络技术（北京）有限公司 增强现实的实现方法、客户端装置和服务器
KR102223308B1 (ko) 2014-05-29 2021-03-08 삼성전자 주식회사 영상처리 방법 및 이를 구현한 전자 장치
KR102178892B1 (ko) 2014-09-15 2020-11-13 삼성전자주식회사 정보 제공 방법 및 그 전자 장치
KR102276847B1 (ko) 2014-09-23 2021-07-14 삼성전자주식회사 가상 오브젝트 제공 방법 및 그 전자 장치
JP6424601B2 (ja) * 2014-12-10 2018-11-21 富士通株式会社 表示制御方法、情報処理プログラム、及び情報処理装置
US10841557B2 (en) * 2016-05-12 2020-11-17 Samsung Electronics Co., Ltd. Content navigation
CN109074204B (zh) * 2016-07-22 2022-08-12 惠普发展公司，有限责任合伙企业 补充信息的显示
US10489651B2 (en) 2017-04-14 2019-11-26 Microsoft Technology Licensing, Llc Identifying a position of a marker in an environment
KR102428921B1 (ko) * 2017-09-22 2022-08-04 삼성전자주식회사 Ar 서비스를 제공하는 방법 및 디바이스

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020044152A1 (en) * 2000-10-16 2002-04-18 Abbott Kenneth H. Dynamic integration of computer generated and real world images
JP3406965B2 (ja) * 2000-11-24 2003-05-19 キヤノン株式会社 複合現実感提示装置及びその制御方法
JP2006145988A (ja) * 2004-11-22 2006-06-08 Olympus Corp 情報重畳表示装置及び情報重畳表示システム
JP5517397B2 (ja) * 2006-08-11 2014-06-11 キヤノン株式会社 画像処理方法、画像処理装置
KR101397214B1 (ko) * 2007-06-05 2014-05-20 삼성전자주식회사 증강 현실 기술을 이용하여 가상 객체를 생성하기 위한시스템 및 방법
US8711176B2 (en) * 2008-05-22 2014-04-29 Yahoo! Inc. Virtual billboards
EP2378392B1 (en) * 2008-12-25 2016-04-13 Panasonic Intellectual Property Management Co., Ltd. Information displaying apparatus and information displaying method
JP4834116B2 (ja) * 2009-01-22 2011-12-14 株式会社コナミデジタルエンタテインメント 拡張現実表示装置、拡張現実表示方法、ならびに、プログラム
US8078152B2 (en) * 2009-08-13 2011-12-13 Palo Alto Research Center Incorporated Venue inference using data sensed by mobile devices
US8830267B2 (en) * 2009-11-16 2014-09-09 Alliance For Sustainable Energy, Llc Augmented reality building operations tool
US8400548B2 (en) * 2010-01-05 2013-03-19 Apple Inc. Synchronized, interactive augmented reality displays for multifunction devices
KR101082285B1 (ko) * 2010-01-29 2011-11-09 주식회사 팬택 증강 현실 제공 단말기 및 방법
KR101730881B1 (ko) * 2010-04-21 2017-04-27 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
CN101833896B (zh) * 2010-04-23 2011-10-19 西安电子科技大学 基于增强现实的地理信息指引方法与系统
JP5512378B2 (ja) * 2010-04-28 2014-06-04 株式会社Ｎｔｔドコモ オブジェクト表示装置、オブジェクト表示システム及びオブジェクト表示方法
KR101108542B1 (ko) * 2010-05-12 2012-01-30 고려대학교 산학협력단 위치기반 증강현실을 이용하는 이동통신 단말기 및 이의 제어방법
JP4696184B1 (ja) * 2010-06-02 2011-06-08 任天堂株式会社 画像表示システム、画像表示装置および画像表示方法

Also Published As

Publication number Publication date
AU2012258336B2 (en) 2016-02-04
JP2013109768A (ja) 2013-06-06
CN103227848B (zh) 2017-03-01
AU2012258336A1 (en) 2013-06-06
WO2013077643A1 (en) 2013-05-30
EP2597623A3 (en) 2014-07-02
EP2597623A2 (en) 2013-05-29
CN103227848A (zh) 2013-07-31
US20130127907A1 (en) 2013-05-23

Similar Documents

Publication Publication Date Title
KR20130056529A (ko) 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법
CN109819313B (zh) 视频处理方法、装置及存储介质
CN111246300B (zh) 剪辑模板的生成方法、装置、设备及存储介质
CN110572722B (zh) 视频剪辑方法、装置、设备及可读存储介质
KR102004884B1 (ko) 전자 장치에서 움직이는 사진 제어 장치 및 방법
CN110572716B (zh) 多媒体数据播放方法、装置及存储介质
TWI530157B (zh) 多視角影像之顯示系統、方法及其非揮發性電腦可讀取紀錄媒體
CN111970456B (zh) 拍摄控制方法、装置、设备及存储介质
US10560752B2 (en) Apparatus and associated methods
CN109089170A (zh) 弹幕显示方法及装置
KR20130083179A (ko) 증강 현실 제공 방법 및 이를 지원하는 단말기
CN110855893A (zh) 一种视频拍摄的方法及电子设备
CN110662105A (zh) 动画文件的生成方法、装置及存储介质
KR20220148915A (ko) 오디오 처리 방법, 장치, 판독 가능 매체 및 전자기기
CN112115282A (zh) 基于搜索的问答方法、装置、设备及存储介质
CN110300274A (zh) 视频文件的录制方法、装置及存储介质
JP2023512966A (ja) 画像処理方法、電子機器及びコンピュータ可読記憶媒体
CN112866584B (zh) 视频合成方法、装置、终端及存储介质
KR20130096983A (ko) 얼굴을 포함하는 영상 처리 방법 및 장치
CN113489903A (zh) 一种拍摄方法、装置、终端设备及存储介质
KR20200041554A (ko) 모바일 장치 및 모바일 장치의 제어 방법
CN112822544A (zh) 视频素材文件生成方法、视频合成方法、设备及介质
CN115086759A (zh) 视频处理方法、装置、计算机设备及介质
CN111367492A (zh) 网页页面展示方法及装置、存储介质
CN110662113B (zh) 视频播放方法、装置和计算机可读存储介质

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20111122

PG1501 Laying open of application
PC1203 Withdrawal of no request for examination
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid