KR102627612B1 - 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치 - Google Patents
증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치 Download PDFInfo
- Publication number
- KR102627612B1 KR102627612B1 KR1020190019172A KR20190019172A KR102627612B1 KR 102627612 B1 KR102627612 B1 KR 102627612B1 KR 1020190019172 A KR1020190019172 A KR 1020190019172A KR 20190019172 A KR20190019172 A KR 20190019172A KR 102627612 B1 KR102627612 B1 KR 102627612B1
- Authority
- KR
- South Korea
- Prior art keywords
- poi
- information
- electronic device
- location
- focus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 230000003190 augmentative effect Effects 0.000 title abstract description 9
- 238000004891 communication Methods 0.000 claims description 59
- 230000033001 locomotion Effects 0.000 claims description 8
- 230000006399 behavior Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 13
- 230000008859 change Effects 0.000 description 11
- 230000000694 effects Effects 0.000 description 6
- 230000004044 response Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 239000003381 stabilizer Substances 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 230000000638 stimulation Effects 0.000 description 3
- 230000000712 assembly Effects 0.000 description 2
- 238000000429 assembly Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000010267 cellular communication Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003155 kinesthetic effect Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 235000011888 snacks Nutrition 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0261—Targeted advertisements based on user location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3679—Retrieval, searching and output of POI information, e.g. hotels, restaurants, shops, filling stations, parking facilities
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/20—Instruments for performing navigational calculations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3647—Guidance involving output of stored or live camera images or video streams
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20101—Interactive definition of point of interest, landmark or seed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/004—Annotating, labelling
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Automation & Control Theory (AREA)
- Development Economics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Game Theory and Decision Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Architecture (AREA)
- User Interface Of Digital Computer (AREA)
- Navigation (AREA)
- Telephone Function (AREA)
Abstract
Description
도 2는, 다양한 실시예들에 따른, 카메라 모듈의 블록도이다.
도 3은 다양한 실시예들에 따른 전자 장치의 기능적 구성의 예를 도시한 도면이다.
도 4는 다양한 실시예들에 따른 전자 장치의 화면에 지정된 포커스 영역의 일 예를 도시한 도면이다.
도 5는 다양한 실시예들에 따른 전자 장치의 디스플레이 화면에 POI 정보를 표시하는 일 예를 도시한 도면이다.
도 6은 다양한 실시예들에 따른 전자 장치의 디스플레이 화면에 상세 POI 정보를 표시하는 일 예를 도시한 도면이다.
도 7은 다양한 실시예들에 따른 전자 장치의 디스플레이 화면에 POI 정보를 표시하는 또 다른 일 예를 도시한 도면이다.
도 8은 다양한 실시예들에 따른 전자 장치의 주변 정보를 디스플레이 화면에 표시하는 동작을 도시한 흐름도이다.
도 9는 다양한 실시예들에 따른 전자 장치의 주변 정보를 디스플레이 화면에 표시하는 동작의 다른 예를 도시한 흐름도이다.
도 10은 다양한 실시예들에 따른 POI 그룹을 고려하여 전자 장치의 주변 정보를 디스플레이 화면에 표시하는 동작의 예를 도시한 흐름도이다.
도면의 설명과 관련하여, 동일 또는 유사한 구성요소에 대해서는 동일 또는 유사한 참조 부호가 사용될 수 있다.
Claims (20)
- 전자 장치에 있어서,
외부 장치와의 통신을 수행하는 통신 모듈;
정지 영상 및 동영상을 촬영하는 카메라 모듈;
상기 통신 모듈 및 상기 카메라 모듈과 작동적으로 연결되는 적어도 하나의 프로세서; 및
상기 적어도 하나의 프로세서와 작동적으로 연결되는 적어도 하나의 메모리를 포함하고,
상기 적어도 하나의 메모리는, 실행 시에, 상기 적어도 하나의 프로세서가,
상기 카메라 모듈을 제어하여 상기 카메라 모듈이 촬영하는 프리뷰 영상을 획득하고,
상기 전자 장치의 위치 정보를 획득하고,
상기 위치 정보를 기초로 주변에 위치하는 적어도 하나의 POI(point of interest)에 대한 정보를 획득하고,
상기 전자 장치와 상기 POI 간의 위치 또는 방향 정보 중 적어도 하나에 기초하여 상기 프리뷰 영상 내의 일부를 포커스 영역으로 설정하고,
상기 적어도 하나의 POI에 대한 정보에 기초하여 상기 적어도 하나의 POI 중 포커스 POI를 상기 포커스 영역 내에서 선정하고,
상기 적어도 하나의 POI 중 상기 선정된 포커스 POI를 제외한 나머지 POI를 포함하는 일반 POI에 대해 사용자에게 제공할 제1 정보를 결정하고,
상기 포커스 POI에 대해 상기 사용자에게 제공할 제2 정보를 결정하되, 상기 제2 정보는 상기 제1 정보에 비하여 더 많은 정보를 포함하고,
상기 적어도 하나의 POI의 정보가 표시될 상기 프리뷰 영상이 제공되는 화면 상의 위치를 결정하고,
상기 적어도 하나의 POI의 전부 또는 일부 POI의 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제1 정보 및 상기 제2 정보를 제공하는 표시를 하도록 하는 인스트럭션들을 저장하는 전자 장치.
- 제1항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 적어도 하나의 POI 중에서 상기 적어도 하나의 POI에 대한 정보에 광고 및/또는 이벤트 정보를 포함하는 POI를 광고 POI로 선정하고,
상기 광고 POI에 대해 상기 사용자에게 제공할 제3 정보를 결정하되, 상기 제3 정보는 상기 광고 및/또는 이벤트 정보를 포함하고,
상기 광고 POI에 대해 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제3 정보를 제공하는 표시를 하도록 하는, 전자 장치.
- 제1항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 카메라 모듈이 상기 프리뷰 영상을 촬영하는 방향 및 상기 카메라 모듈의 화각에 기초하여 상기 적어도 하나의 POI 중에서 상기 프리뷰 영상이 제공되는 화면 상에 표시할 상기 일부 POI를 선정하고,
상기 선정된 일부 POI의 각 POI의 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제1 정보 또는 상기 제2 정보를 제공하는 표시를 하도록 하는, 전자 장치.
- 제1항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 포커스 POI에 해당하는 조건을 설정하고,
상기 적어도 하나의 POI에 대한 정보가 상기 포커스 POI에 해당하는 조건을 만족하는 POI에 대해 포커스 POI로 선정하도록 하는, 전자 장치.
- 제4항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 프리뷰 영상 내의 일부 영역을 포커스 영역으로 설정하고,
실제 위치가 상기 포커스 영역에 포함되는 POI로 상기 포커스 POI에 해당하는 조건으로 설정하도록 하는, 전자 장치.
- 제4항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 포커스 POI에 해당하는 조건으로 상기 전자 장치의 위치 정보 및 상기 적어도 하나의 POI에 대한 정보에 포함된 각 POI의 위치 정보를 기초로 상기 전자 장치와 각 POI 간의 거리를 결정하고,
상기 결정된 전자 장치와 각 POI 간의 거리에 기초하여, 상기 전자 장치와 POI 간의 거리가 미리 설정된 일정 값 이내인 POI로 설정하도록 하는, 전자 장치. - 제4항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 포커스 POI에 해당하는 조건으로 사용자가 기존에 방문한 POI, 이전에 정보를 검색해 본 적이 있는 POI를 포함하는 사용자의 행위를 기초로 설정한 사용자의 선호도에 기초하여 선호도가 높은 POI를 설정하도록 하는, 전자 장치.
- 제1항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 프리뷰 영상이 제공되는 화면 상의 일부를 포커스 영역으로 지정하고,
상기 포커스 POI에 대한 상기 제2 정보를 제공하는 표시를 상기 포커스 영역 내에 표시하도록 하는, 전자 장치.
- 제1항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 적어도 하나의 POI의 정보에 포함된 각 POI의 위치 정보 또는 상기 적어도 하나의 POI의 정보가 표시될 화면 상의 위치를 기초로, 서로 간의 거리가 미리 설정된 일정 거리 이내인 POI들을 POI 그룹으로 설정하고,
상기 POI 그룹 내의 POI 중에서 대표 POI를 선정하고,
상기 POI 그룹을 대표하여 상기 대표 POI의 상기 화면 상의 위치에 상기 대표 POI의 정보를 제공하는 표시를 하도록 하는, 전자 장치.
- 제1항에 있어서,
상기 인스트럭션들은 상기 적어도 하나의 프로세서가,
상기 제1 정보는 POI의 카테고리로 결정하고,
상기 제2 정보는 POI 관련 이미지, 이름, 전자 장치의 현재 위치와의 거리 중의 적어도 하나를 포함하도록 결정하고,
상기 제1 정보를 제공하는 표시로 상기 카테고리에 대응하는 아이콘을 표시하고,
상기 제2 정보를 제공하는 표시로 상기 제2 정보를 포함하는 UI(user interface)를 표시하도록 하는, 전자 장치.
- 전자 장치의 동작 방법에 있어서,
카메라 모듈이 촬영하는 프리뷰 영상을 획득하는 동작;
상기 전자 장치의 위치 정보를 획득하는 동작;
상기 위치 정보를 기초로 주변에 위치하는 적어도 하나의 POI(point of interest)에 대한 정보를 획득하는 동작;
상기 전자 장치와 상기 POI 간의 위치 또는 방향 정보 중 적어도 하나에 기초하여 상기 프리뷰 영상 내의 일부를 포커스 영역으로 설정하는 동작;
상기 적어도 하나의 POI에 대한 정보에 기초하여 상기 적어도 하나의 POI 중 포커스 POI를 상기 포커스 영역 내에서 선정하는 동작;
상기 적어도 하나의 POI 중 상기 선정된 포커스 POI를 제외한 나머지 POI를 포함하는 일반 POI에 대해 사용자에게 제공할 제1 정보를 결정하는 동작;
상기 포커스 POI에 대해 상기 사용자에게 제공할 상기 제1 정보에 비하여 더 많은 정보를 포함하는 제2 정보를 결정하는 동작;
상기 프리뷰 영상 내에서 상기 제2 정보를 표시하는 UI 크기를 상기 제1 정보를 표시하는 UI 크기와 다르게 결정하는 동작;
상기 적어도 하나의 POI의 정보가 표시될 상기 프리뷰 영상이 제공되는 화면 상의 위치를 결정하는 동작; 및
상기 적어도 하나의 POI의 전부 또는 일부 POI의 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제1 정보 및 상기 제2 정보를 제공하는 표시를 하는 동작을 포함하는, 방법.
- 제11항에 있어서,
상기 적어도 하나의 POI 중에서 상기 적어도 하나의 POI에 대한 정보에 광고 및/또는 이벤트 정보를 포함하는 POI를 광고 POI로 선정하는 동작;
상기 광고 POI에 대해 상기 사용자에게 제공할 제3 정보를 결정하는 동작 -상기 제3 정보는 상기 광고 및/또는 이벤트 정보를 포함함-; 및
상기 광고 POI에 대해 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제3 정보를 제공하는 표시를 하는 동작을 더 포함하는 방법.
- 제11항에 있어서,
상기 적어도 하나의 POI의 전부 또는 일부 POI의 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제1 정보 또는 상기 제2 정보를 제공하는 표시를 하는 동작은,
상기 카메라 모듈이 상기 프리뷰 영상을 촬영하는 방향 및 상기 카메라 모듈의 화각에 기초하여 상기 적어도 하나의 POI 중에서 상기 프리뷰 영상이 제공되는 화면 상에 표시할 상기 일부 POI를 선정하는 동작; 및
상기 선정된 일부 POI의 각 POI의 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제1 정보 또는 상기 제2 정보를 제공하는 표시를 하는 동작을 포함하는 방법.
- 제11항에 있어서,
상기 적어도 하나의 POI에 대한 정보에 기초하여 상기 적어도 하나의 POI 중 포커스 POI를 선정하는 동작은,
상기 프리뷰 영상 내의 일부 영역을 포커스 영역으로 설정하는 동작; 및
실제 위치가 상기 포커스 영역에 포함되는 POI를 상기 포커스 POI로 선정하는 동작을 포함하는 방법.
- 제11항에 있어서,
상기 적어도 하나의 POI에 대한 정보에 기초하여 상기 적어도 하나의 POI 중 포커스 POI를 선정하는 동작은,
상기 전자 장치의 위치 정보 및 상기 적어도 하나의 POI에 대한 정보에 포함된 각 POI의 위치 정보를 기초로 상기 전자 장치와 각 POI 간의 거리를 결정하는 동작; 및
상기 결정된 전자 장치와 각 POI 간의 거리에 기초하여, 상기 전자 장치와 POI 간의 거리가 미리 설정된 일정 값 이내인 POI를 상기 포커스 POI로 선정하는 동작을 포함하는 방법.
- 제11항에 있어서,
상기 적어도 하나의 POI의 정보가 표시될 상기 프리뷰 영상이 제공되는 화면 상의 위치를 결정하는 동작은,
상기 프리뷰 영상이 제공되는 화면 상의 일부를 포커스 영역으로 지정하는 동작; 및
상기 포커스 POI의 정보가 표시될 상기 프리뷰 영상이 제공되는 화면 상의 위치로 상기 지정된 포커스 영역 내의 위치를 결정하는 동작을 포함하는 방법.
- 제11항에 있어서,
상기 적어도 하나의 POI의 정보에 포함된 각 POI의 위치 정보 또는 상기 적어도 하나의 POI의 정보가 표시될 화면 상의 위치를 기초로, 서로 간의 거리가 미리 설정된 일정 거리 이내인 POI들을 POI 그룹으로 설정하는 동작; 및
상기 POI 그룹 내의 POI 중에서 대표 POI를 선정하는 동작을 더 포함하고,
상기 적어도 하나의 POI의 전부 또는 일부 POI의 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제1 정보 또는 상기 제2 정보를 제공하는 표시를 하는 동작은,
상기 POI 그룹을 대표하여 상기 대표 POI의 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 대표 POI의 정보를 제공하는 표시를 하는 동작을 포함하는 방법.
- 제11항에 있어서,
상기 제1 정보는 POI의 카테고리이고,
상기 제2 정보는 POI 관련 이미지, 이름, 전자 장치의 현재 위치와의 거리 중의 적어도 하나를 포함하고,
상기 적어도 하나의 POI의 전부 또는 일부 POI의 상기 결정된 프리뷰 영상이 제공되는 화면 상의 위치에 상기 제1 정보 또는 상기 제2 정보를 제공하는 표시를 하는 동작은,
상기 제1 정보를 제공하는 표시로 상기 카테고리에 대응하는 아이콘을 표시하는 동작; 및
상기 제2 정보를 제공하는 표시로 상기 제2 정보를 포함하는 UI(user interface)를 표시하는 동작을 포함하는 방법.
- 전자 장치의 동작 방법에 있어서,
상기 전자 장치의 위치 정보를 콘텐트 제공자(content provider; CP) 서버로 전달하는 동작;
상기 CP 서버로부터 주변에 위치하는 적어도 하나의 POI(point of interest)에 대한 정보를 획득하는 동작;
상기 전자 장치와 상기 POI 간의 위치 또는 방향 정보 중 적어도 하나에 기초하여 프리뷰 영상 내의 일부를 포커스 영역으로 설정하는 동작;
상기 전자 장치의 위치 정보를 기초로 상기 적어도 하나의 POI를 상기 전자 장치와의 거리에 따라 정렬하는 동작;
상기 전자 장치의 위치 및 상기 전자 장치의 프리뷰 영상 촬영 방향을 기초로 상기 적어도 하나의 POI의 각 POI의 표시 위치를 설정하는 동작;
상기 표시 위치가 설정된 포커스 영역 내인 포커스 POI의 경우,
상기 포커스 POI 관련하여 표시할 정보를 설정하는 동작; 및
상기 프리뷰 영상이 표시되는 화면 상의 상기 설정된 표시 위치에 상기 설정된 정보를 포함하는 UI(user interface)를 표시하는 동작을 포함하고,
상기 표시 위치가 설정된 포커스 영역 밖인 일반 POI의 경우,
상기 일반 POI의 카테고리 정보를 획득하는 동작; 및
상기 프리뷰 영상이 표시되는 화면 상의 상기 설정된 표시 위치에 상기 카테고리에 대응하고, 상기 UI 보다 작은 크기인 아이콘을 표시하는 동작을 포함하는 방법.
- 제19항에 있어서,
상기 프리뷰 영상 화면에 하나의 표시로 표시되는 적어도 하나의 POI를 포함하는 POI 그룹의 생성이 가능한지 판단하는 동작;
POI 그룹의 생성이 가능하다면, POI 그룹을 생성하고, POI 그룹 별 대표 POI를 선정하는 동작을 더 포함하고,
상기 프리뷰 영상이 표시되는 화면 상의 상기 설정된 표시 위치에 상기 설정된 정보를 포함하는 UI(user interface)를 표시하는 동작은,
상기 프리뷰 영상이 표시되는 화면 상의 상기 대표 POI의 상기 설정된 표시 위치에 상기 대표 POI의 상기 설정된 정보를 포함하는 UI(user interface)를 표시하는 동작을 포함하고,
상기 프리뷰 영상이 표시되는 화면 상의 상기 설정된 표시 위치에 상기 카테고리에 대응하는 아이콘을 표시하는 동작은,
상기 프리뷰 영상이 표시되는 화면 상의 상기 대표 POI의 상기 설정된 표시 위치에 상기 대표 POI의 상기 카테고리에 대응하는 아이콘을 표시하는 동작을 포함하는 방법.
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190019172A KR102627612B1 (ko) | 2019-02-19 | 2019-02-19 | 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치 |
EP20759343.5A EP3912140A4 (en) | 2019-02-19 | 2020-02-17 | METHOD AND DEVICE FOR DISPLAYING ENVIRONMENTAL INFORMATION USING AUGMENTED REALITY |
CN202080028264.1A CN113692604B (zh) | 2019-02-19 | 2020-02-17 | 用于使用增强现实来显示周围信息的方法和装置 |
PCT/KR2020/002246 WO2020171513A1 (en) | 2019-02-19 | 2020-02-17 | Method and apparatus for displaying surrounding information using augmented reality |
US16/795,400 US11592311B2 (en) | 2019-02-19 | 2020-02-19 | Method and apparatus for displaying surrounding information using augmented reality |
US18/156,270 US12072201B2 (en) | 2019-02-19 | 2023-01-18 | Method and apparatus for displaying surrounding information using augmented reality |
US18/780,310 US20240377217A1 (en) | 2019-02-19 | 2024-07-22 | Method and apparatus for displaying surrounding information using augmented reality |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190019172A KR102627612B1 (ko) | 2019-02-19 | 2019-02-19 | 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20200101034A KR20200101034A (ko) | 2020-08-27 |
KR102627612B1 true KR102627612B1 (ko) | 2024-01-22 |
Family
ID=72043195
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190019172A Active KR102627612B1 (ko) | 2019-02-19 | 2019-02-19 | 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치 |
Country Status (5)
Country | Link |
---|---|
US (3) | US11592311B2 (ko) |
EP (1) | EP3912140A4 (ko) |
KR (1) | KR102627612B1 (ko) |
CN (1) | CN113692604B (ko) |
WO (1) | WO2020171513A1 (ko) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102418992B1 (ko) * | 2017-11-23 | 2022-07-11 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 증강 현실 서비스 제공 방법 |
KR102627612B1 (ko) * | 2019-02-19 | 2024-01-22 | 삼성전자주식회사 | 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치 |
US11263787B2 (en) * | 2020-03-05 | 2022-03-01 | Rivian Ip Holdings, Llc | Augmented reality detection for locating autonomous vehicles |
US11538225B2 (en) | 2020-09-30 | 2022-12-27 | Snap Inc. | Augmented reality content generator for suggesting activities at a destination geolocation |
US12039499B2 (en) * | 2020-09-30 | 2024-07-16 | Snap Inc. | Augmented reality content generators for identifying destination geolocations and planning travel |
US11836826B2 (en) | 2020-09-30 | 2023-12-05 | Snap Inc. | Augmented reality content generators for spatially browsing travel destinations |
US11809507B2 (en) | 2020-09-30 | 2023-11-07 | Snap Inc. | Interfaces to organize and share locations at a destination geolocation in a messaging system |
KR20220110967A (ko) * | 2021-02-01 | 2022-08-09 | 현대자동차주식회사 | 사용자 단말 및 그 제어 방법 |
KR20220132863A (ko) | 2021-03-24 | 2022-10-04 | 현대자동차주식회사 | 모바일 장치 및 차량 |
KR20220163731A (ko) * | 2021-06-03 | 2022-12-12 | 현대자동차주식회사 | 사용자 단말 및 그 제어 방법 |
KR20220167932A (ko) * | 2021-06-15 | 2022-12-22 | 현대자동차주식회사 | 증강현실 기반의 관심 지점 안내 장치 및 방법 |
KR102433948B1 (ko) * | 2021-07-20 | 2022-08-19 | 주식회사 제이어스 | 증강현실 기반의 마케팅 시스템 |
KR20230041406A (ko) * | 2021-09-17 | 2023-03-24 | 현대자동차주식회사 | 모바일 디바이스의 관심 지점 표시를 위한 사용자 인터페이스 |
KR20230048864A (ko) * | 2021-10-05 | 2023-04-12 | 현대자동차주식회사 | 사용자 단말 및 그 제어 방법 |
US11789685B1 (en) * | 2022-08-29 | 2023-10-17 | International Business Machines Corporation | Training and using a machine learning module to determine locales and augmented reality representations of information on locales to render in an augmented reality display |
CN117793522A (zh) * | 2022-09-28 | 2024-03-29 | 华为技术有限公司 | 一种图片拍摄与分享方法及电子设备 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101205485B1 (ko) * | 2005-01-13 | 2012-11-28 | 엘지전자 주식회사 | Poi 서비스 장치 및 방법 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011013910A2 (ko) | 2009-07-30 | 2011-02-03 | 에스케이텔레콤 주식회사 | 증강 현실을 제공하는 방법과 그를 위한 서버 및 휴대용 단말기 |
DE102009037835B4 (de) * | 2009-08-18 | 2012-12-06 | Metaio Gmbh | Verfahren zur Darstellung von virtueller Information in einer realen Umgebung |
KR101648339B1 (ko) * | 2009-09-24 | 2016-08-17 | 삼성전자주식회사 | 휴대용 단말기에서 영상인식 및 센서를 이용한 서비스 제공 방법 및 장치 |
US20110279446A1 (en) * | 2010-05-16 | 2011-11-17 | Nokia Corporation | Method and apparatus for rendering a perspective view of objects and content related thereto for location-based services on mobile device |
KR101658087B1 (ko) | 2010-07-02 | 2016-09-21 | 엘지전자 주식회사 | 이동단말기 및 그의 증강현실을 이용한 정보 표시 방법 |
KR101659089B1 (ko) | 2010-08-11 | 2016-09-22 | 주식회사 엘지유플러스 | 위치 정보를 이용한 증강 현실 장치 |
JP5405412B2 (ja) | 2010-08-11 | 2014-02-05 | 株式会社Nttドコモ | オブジェクト表示装置及びオブジェクト表示方法 |
KR101329882B1 (ko) | 2010-08-12 | 2013-11-15 | 주식회사 팬택 | Ar 정보창 표시를 위한 사용자 장치 및 그 방법 |
US9710554B2 (en) | 2010-09-23 | 2017-07-18 | Nokia Technologies Oy | Methods, apparatuses and computer program products for grouping content in augmented reality |
KR101324336B1 (ko) * | 2010-12-28 | 2013-10-31 | 주식회사 팬택 | 증강 현실 제공 단말기 |
US20130328926A1 (en) | 2012-06-08 | 2013-12-12 | Samsung Electronics Co., Ltd | Augmented reality arrangement of nearby location information |
US9870642B2 (en) | 2012-08-10 | 2018-01-16 | Here Global B.V. | Method and apparatus for layout for augmented reality view |
CN104102678B (zh) * | 2013-04-15 | 2018-06-05 | 腾讯科技(深圳)有限公司 | 增强现实的实现方法以及实现装置 |
JPWO2015190138A1 (ja) * | 2014-06-11 | 2017-05-25 | ソニー株式会社 | 表示制御装置、表示制御方法、およびプログラム |
KR102411421B1 (ko) * | 2015-08-06 | 2022-06-22 | 팅크웨어(주) | 사용자 관심 지점에 대한 정보를 표시하는 방법, 전자 장치 및 컴퓨터 판독 가능한 기록 매체 |
KR101810189B1 (ko) * | 2017-01-11 | 2018-01-18 | 네이버 주식회사 | 사용자 리뷰 제공 방법, 장치 및 컴퓨터 프로그램 |
KR101921743B1 (ko) | 2017-05-23 | 2019-02-13 | 부동산일일사 주식회사 | 부동산 증강 현실 서비스 제공 장치 및 제공 방법 |
US11765323B2 (en) * | 2017-05-26 | 2023-09-19 | Calumino Pty Ltd. | Apparatus and method of location determination in a thermal imaging system |
TWI677841B (zh) * | 2018-05-11 | 2019-11-21 | 開曼群島商粉迷科技股份有限公司 | 在贊助下的興趣點媒體內容管理方法與系統 |
KR102627612B1 (ko) * | 2019-02-19 | 2024-01-22 | 삼성전자주식회사 | 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치 |
IT201900005806A1 (it) * | 2019-04-15 | 2020-10-15 | Pikkart Srl | Metodo per realizzare realta' aumentata |
-
2019
- 2019-02-19 KR KR1020190019172A patent/KR102627612B1/ko active Active
-
2020
- 2020-02-17 CN CN202080028264.1A patent/CN113692604B/zh active Active
- 2020-02-17 WO PCT/KR2020/002246 patent/WO2020171513A1/en unknown
- 2020-02-17 EP EP20759343.5A patent/EP3912140A4/en active Pending
- 2020-02-19 US US16/795,400 patent/US11592311B2/en active Active
-
2023
- 2023-01-18 US US18/156,270 patent/US12072201B2/en active Active
-
2024
- 2024-07-22 US US18/780,310 patent/US20240377217A1/en active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101205485B1 (ko) * | 2005-01-13 | 2012-11-28 | 엘지전자 주식회사 | Poi 서비스 장치 및 방법 |
Also Published As
Publication number | Publication date |
---|---|
US20200264007A1 (en) | 2020-08-20 |
KR20200101034A (ko) | 2020-08-27 |
WO2020171513A1 (en) | 2020-08-27 |
CN113692604A (zh) | 2021-11-23 |
US20240377217A1 (en) | 2024-11-14 |
US12072201B2 (en) | 2024-08-27 |
CN113692604B (zh) | 2025-05-23 |
EP3912140A1 (en) | 2021-11-24 |
US20230160716A1 (en) | 2023-05-25 |
EP3912140A4 (en) | 2022-03-23 |
US11592311B2 (en) | 2023-02-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102627612B1 (ko) | 증강현실을 이용한 주변 정보 표시 방법 및 그 전자 장치 | |
CN108415705B (zh) | 网页生成方法、装置、存储介质及设备 | |
KR102560689B1 (ko) | Ar 객체를 표시하기 위한 장치 및 방법 | |
KR102583682B1 (ko) | 전자 장치 및 증강 현실 기반의 공유 정보 표시 방법 | |
CN107885533B (zh) | 管理组件代码的方法及装置 | |
CN111052727A (zh) | 用于根据使用图像获得的深度信息的属性结合图像存储深度信息的电子装置及其控制方法 | |
CN111737547A (zh) | 商户信息的获取系统、方法、装置、设备及存储介质 | |
US20220076469A1 (en) | Information display device and information display program | |
US11238622B2 (en) | Method of providing augmented reality contents and electronic device therefor | |
US12302204B2 (en) | Mobile information terminal, information presentation system and information presentation method | |
KR102603254B1 (ko) | 웹 콘텐츠를 ar모드에서 표시하는 전자 장치 및 방법 | |
KR102646344B1 (ko) | 이미지를 합성하기 위한 전자 장치 및 그의 동작 방법 | |
CN112230914A (zh) | 小程序的制作方法、装置、终端及存储介质 | |
KR20190019606A (ko) | 심도 맵을 이용하여 객체를 합성하기 위한 장치 및 그에 관한 방법 | |
CN110990728A (zh) | 兴趣点信息的管理方法、装置、设备及存储介质 | |
KR102620877B1 (ko) | 이미지의 촬영 장소를 추천하는 전자 장치 및 방법 | |
CN113051485A (zh) | 群组搜索方法、装置、终端及存储介质 | |
US20240171854A1 (en) | Electronic device, method, and computer-readable storage media for identifying visual object corresponding to code information using a plurality of cameras | |
KR20200093760A (ko) | 복수의 렌즈를 구비하는 전자 장치 및 그 제어 방법 | |
KR20190021140A (ko) | 그래픽컬 콘텐트를 제공하는 전자 장치 및 제어 방법 | |
KR20210101653A (ko) | 가이드 맵 제공 방법 및 이를 지원하는 전자 장치 | |
CN115639937A (zh) | 界面显示方法、装置、计算机设备及存储介质 | |
CN113705677A (zh) | 图像识别方法、装置、电子设备及存储介质 | |
CN113157310A (zh) | 配置信息的获取方法、装置、设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20190219 |
|
PG1501 | Laying open of application | ||
A201 | Request for examination | ||
PA0201 | Request for examination |
Patent event code: PA02012R01D Patent event date: 20220210 Comment text: Request for Examination of Application Patent event code: PA02011R01I Patent event date: 20190219 Comment text: Patent Application |
|
E902 | Notification of reason for refusal | ||
PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20221125 Patent event code: PE09021S01D |
|
E902 | Notification of reason for refusal | ||
PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20230508 Patent event code: PE09021S01D |
|
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20231103 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20240117 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20240118 End annual number: 3 Start annual number: 1 |
|
PG1601 | Publication of registration |