KR20170101758A - Augmented Reality Head Up Display Navigation - Google Patents
Augmented Reality Head Up Display Navigation Download PDFInfo
- Publication number
- KR20170101758A KR20170101758A KR1020160110590A KR20160110590A KR20170101758A KR 20170101758 A KR20170101758 A KR 20170101758A KR 1020160110590 A KR1020160110590 A KR 1020160110590A KR 20160110590 A KR20160110590 A KR 20160110590A KR 20170101758 A KR20170101758 A KR 20170101758A
- Authority
- KR
- South Korea
- Prior art keywords
- information
- route guidance
- vehicle
- lane
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3667—Display of a road map
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3635—Guidance using 3D or perspective road maps
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
본 발명은 증강현실 헤드 업 디스플레이 내비게이션에 관한 것으로 더욱 상세하게는 차량의 주행차선을 파악하여 주행차도에 경로정보를 원근법으로 표시하는 장치에 관한 것이다.The present invention relates to an augmented reality head-up display navigation, and more particularly, to an apparatus for grasping a driving lane of a vehicle and displaying the route information on a driving vehicle in a perspective manner.
최근 내비게이션 장치의 보급으로 운전자의 시야가 내비게이션을 응시하게 되면서 사고의 발생이 높아지고 있다.Recently, with the spread of the navigation apparatus, the sight of the driver is gazing at the navigation, and the occurrence of accidents is increasing.
때문에 일부 완성차 업체에서는 헤드 업 디스플레이를 통해 내비게이션을 경로정보를 제공하고 있다. Therefore, some car makers provide navigation information through head-up display.
도 1은 종래의 헤드 업 디스플레이 내비게이션의 경로정보를 도시한 도면으로, 종래의 헤드 업 디스플레이 내비게이션은 도 1에 도시된 바와 같이 현재의 주행차선과 차선 변경여부 등에 관계 없이 단순한 경로정보만 디스플레이 되고 있다. FIG. 1 is a view showing path information of a conventional head-up display navigation. As shown in FIG. 1, conventional head-up display navigation displays only simple route information regardless of the current driving lane and whether or not the lane is changed .
때문에 실제 도로와 경로정보가 매칭되지 않고 차량의 주행차선을 고려 하지 않는 경로안내 때문에 길을 잘못 들어가거나 U턴 또는 좌회전을 위해 갑작스러운 차선 변경 등으로 사고가 자주 발생되는 등의 문제가 있다.Therefore, there is a problem that the actual road and the route information are not matched, the route guidance is not taken into consideration of the driving lane of the vehicle, and the accident often occurs due to sudden change of lane for the U-turn or the left turn.
상기의 배경기술로서 설명된 사항들은 본 발명의 배경에 대한 이해증진을 위한 것일 뿐, 이 기술분야에서 통상의 지식을 가진 자에게 이미 알려진 종래기술에 해당함을 인정하는 것으로 받아들여져서는 안 될 것이다.It should be understood that the foregoing description of the background art is merely for the purpose of promoting an understanding of the background of the present invention and is not to be construed as an admission that the prior art is known to those skilled in the art.
본 발명은 상기의 문제를 해결하기 위해 제안된 것으로 정밀한 GPS시스템을 통해 주행차선을 파악하고 주행차선을 고려하여 증강현실로 경로정보를 제공하고 경로정보를 차도에 원근법으로 경로정보를 매칭하여 운전자가 쉽게 경로를 따라 주행하도록 하는 증강현실 헤드 업 디스플레이 내비게이션을 제공함에 그 목적이 있다.The present invention has been proposed in order to solve the above problems, and it is an object of the present invention to provide a route guidance system that grasps a driving lane through an accurate GPS system, provides route information to augmented reality in consideration of a driving lane, And to provide an augmented reality head-up display navigation that allows easy navigation along the route.
상기한 바의 목적을 달성하기 위한 본 발명에 따른 증강 현실 내비게이션은 먼저, 차량의 위치정보를 수신한다. According to an aspect of the present invention, an augmented reality navigation system receives position information of a vehicle.
수신된 차량의 위치정보를 통해 차량의 현재위치를 차선 별 도로 데이터 정보와 비교하여 상기 차량의 주행차선을 파악한다.The current position of the vehicle is compared with the road data information of each lane through the position information of the received vehicle to grasp the driving lane of the vehicle.
그리고, 주행차선이 파악되면 현재 주행 시점에서의 경로 안내 정보를 수신한다. When the driving lane is recognized, route guidance information at the current driving time is received.
수신된 경로안내 정보를 통해 윈드실드에 경로안내 정보를 표시하되, 차량의 주행차선을 고려하여, 경로안내 정보를 표시한다.The route guidance information is displayed on the windshield through the received route guidance information, and route guidance information is displayed in consideration of the driving lane of the vehicle.
경로안내 정보를 표시할 때는 윈드실드에 증강현실로 표시하고, 윈드실드를 통해 보여지는 주행차선에 경로 안내 정보가 원근법으로 표시되도록 할 수 있다.When the route guidance information is displayed, the augmented reality can be displayed on the windshield and the route guidance information can be displayed in perspective on the driving lane shown through the windshield.
또한, 경로안내 정보를 표시를 할 때는 U턴 이 필요한 경우, 차량이 1차선 주행으로 판단되면, 경로안내정보를 U턴으로 표시하고, 차량이 2차선 내지 n차선 주행으로 판단되면, 차량이 1차선으로 변경하도록 경로안내정보를 1차선으로 변경 표시를 한 후 경로안내정보를 U턴으로 표시하도록 하여 차량이 윈드실드를 넘어 보이는 도로와 경로안내 정보가 매칭되도록 하는 것이 가능해진다.If it is determined that the vehicle is traveling in the first lane, the route guidance information is indicated by the U-turn. If the vehicle is determined to be in the second lane or the n-lane travel, It is possible to display the route guidance information in a U-turn after changing and displaying the route guidance information to the first lane so as to change to the lane so that the road and the route guidance information that the vehicle crosses the windshield can be matched.
또 다른 실시 예로 경로안내 정보를 표시할 때 좌회전이 필요한 경우, 차량이 1차선 주행으로 판단되면, 경로안내정보를 죄회전으로 표시하고, 차량이 2차선 내지 n차선 주행으로 판단되면, 차량이 상기 1차선으로 변경하도록 경로 안내정보를 1차선으로 변경 표시를 한 후 좌회전으로 표시하여 상기의 U턴 상황과 동일하게 윈드실드를 넘어 보이는 도로와 경로정보가 매칭되도록 할 수 있다.According to another embodiment of the present invention, when it is determined that the vehicle is in the first lane of travel when the left turn is required to display the route guidance information, the route guidance information is indicated as sin rotation, and when the vehicle is judged as a two- The route guidance information is changed to the first lane so that the route guidance information is changed to the first lane and displayed as the left turn so that the road and the route information that exceed the wind shield can be matched with the U-turn situation.
그리고, 본 발명의 일 실시 예에 따른 증강현실 내비게이션 시스템은 메모리, 위치확인부, 주행차선 확인부, 주변 상황 정보 획득부, 경로안내부, 헤드 업 디스플레이를 포함한다.In addition, the augmented reality navigation system according to an embodiment of the present invention includes a memory, a location confirmation unit, a driving lane confirmation unit, a surrounding situation information acquisition unit, a route guidance unit, and a head up display.
메모리는 각 차선별 도로정보를 가지고 있는 맵데이터를 저장하고 있다. 맵데이터는 차선별 도로 정보를 가지고 있고, 차선별 도로 정보는 후술하는 차선 포인트를 포함한다.The memory stores map data having road information for each car line. The map data has road information for each car line, and the road information for each car line includes lane points to be described later.
위치확인부는 차량 위치를 수신하며, 차량의 현재 위치 수신은 GPS가 바람직하다.The position confirming unit receives the vehicle position, and GPS is preferable to receive the current position of the vehicle.
위치확인부는 실시 예에 따라 오차범위 10cm이내인 고정밀 GPS일 수 있고, 기준국으로부터 오차 보정 값을 DMB주파수로 받아 오차가 보정된 GPS일 수 있다.The position check unit may be a high precision GPS within an error range of 10 cm or less according to an embodiment, and may be a GPS whose error is corrected by receiving an error correction value from the reference station as a DMB frequency.
주행차선 확인부는 차량 위치와 맵데이터 정보를 비교하여 현재 주행중인 차선을 파악한다.The driving lane confirming unit compares the vehicle position and the map data information and grasps the lane in which the vehicle is currently running.
경로안내부는 사용자의 입력에 의해 결정된 목표 지점까지의 경로안내 정보를 포함하고, 목표지점까지의 경로를 사용자에게 표시한다.The route guidance unit includes route guidance information to the target point determined by the user's input, and displays the route to the target point to the user.
헤드업 디스플레이는 경로안내부로부터 수신한 경로안내 정보를 윈드실드에 디스플레이 하되, 결정된 주행 차선 정보에 따라 경로 안내 정보를 디스플레이 한다.The head-up display displays route guidance information received from the route guidance unit on the windshield, and displays route guidance information according to the determined driving lane information.
헤드 업 디스플레이는 경로 안내부로부터 전송된 경로안내 정보를 상기 윈드실드에 증강현실로 표시하며, 헤드업 디스플레이는 윈드실드를 통해 보여지는 주행차선에 경로안내 정보를 원근법으로 표시할 수 있다. The head-up display displays the route guidance information transmitted from the route guide section as an augmented reality on the windshield, and the head-up display can display the route guidance information on the driving lane viewed through the windshield in a perspective manner.
경로정보를 원근법으로 표시 함으로써, 윈드실드를 통해 보여지는 도로와 경로정보가 매칭되어 사용자가 경로를 보다 쉽게 파악 할 수 있다.By displaying the route information in a perspective manner, the road and the route information seen through the windshield are matched to allow the user to grasp the route more easily.
경로안내부는 U턴 이 필요한 경우에 차량이 1차선 주행으로 판단되면, U턴경로를 헤드 업 디스플레이로 전송하고, 차량이 2차선 내지 n차선 주행으로 판단되면, 차량이 1차선으로 변경하도록 1차선 변경경로를 먼저 전송하고 U턴경로를 헤드 업 디스플레이로 전송한다. If the vehicle is determined to be in the first lane travel when the U-turn is required, the route guide unit transmits the U-turn route to the head-up display, and if the vehicle is judged to be in the second- Transmits the change path first and sends the U-turn path to the head-up display.
경로안내부는 좌회전이 필요한 경우에 차량이 1차선 주행으로 판단되면, 좌회전경로를 헤드 업 디스플레이로 전송하고, 차량이 2차선 내지 n차선 주행으로 판단되면, 차량이 1차선으로 변경하도록 1차선 변경경로를 먼저 전송하고 좌회전경로를 헤드 업 디스플레이로 전송 한다.If it is determined that the vehicle is running in the first lane in the case where it is necessary to make a left turn, the path guide unit transmits the left turn path to the head up display, and if the vehicle is judged as a two- And transmits the left turn path to the head-up display.
주변 상황 정보 획득부는 차량의 주행 중 주변 상황 정보를 획득하여, 경로 안내부는 주변 상황 정보를 고려하여 주변 차량과의 충돌 가능성이 있는 경우, 경로 안내 정보를 변경 표시하도록 변경 경로를 헤드 업 디스플레이로 전송한다. The circumstance information acquiring unit acquires the circumstance information during driving of the vehicle, and when the possibility of collision with the surrounding vehicle is considered in consideration of the surrounding situation information, the path guide unit transmits the change path to the head- do.
맵데이터는 도로 정보를 포함하고, 도로정보는 위도와 경도정보와 차선 정보를 가지는 도로 포인트를 포함한다.The map data includes road information, and the road information includes road points having latitude and longitude information and lane information.
상술한 바와 같은 구조로 이루어진 증강현실 내비게이션에 따르면, 윈드실드를 넘어 보여지는 도로에 원근법으로 경로정보가 표시되고 차량의 주행차선을 고려하여 만약 U턴을 해야 하는 상황일 때 1차로주행중인 경우 U턴표시를 하고 그 외 다른 차선인 경우 1차로로 차선을 변경하도록 경로정보를 표시한 후에 1차로에 차량이 주행하면 U턴표시를 하므로 실제 도로상황과 경로정보가 정확히 매칭될 수 있는 장점이 있다.According to the augmented reality navigation having the above-described structure, when route information is displayed on the road beyond the windshield in a perspective manner and the U-turn is required in consideration of the driving lane of the vehicle, U The road information is displayed so as to change the lane to the first lane in the case of turning on the lane, and the U-turn is displayed when the vehicle is driven in the first lane, so that the actual road situation and the route information can be accurately matched .
또한, 차량의 현재위치를 고정밀 GPS와 차선별 도로 포인트를 통해 파악하기 때문에 카메라를 이용한 증강현실 헤드 업 디스플레이보다 구조가 간단해지고 오차발생이 줄어드는 장점이 있다.In addition, since the present position of the vehicle can be grasped through a high-precision GPS and a road point by a car line, the structure is simpler and error generation is reduced than augmented reality head-up display using a camera.
또한, 전방 교통 상황 정보에 따라 경로 안내 정보의 색상을 가변시켜 표시함으로써, 운전자는 목적지로 향하는 경로 안내 정보뿐 아니라 전방 교통 상황을 인지하여 예컨대 정체 구간에 이르기 전 이에 대한 대비(서행)을 하는 것이 가능한 효과가 있다. Further, by displaying the color of the route guidance information by varying the color of the route guidance information according to the front traffic situation information, the driver recognizes the front traffic situation as well as route guidance information directed to the destination and performs contrasting (slowing) There is a possible effect.
또한, 주변 상황 정보를 고려하여 주변 차량과의 충돌 가능성이 있는 경우 헤드 업 디스플레이를 통해 실제 도로상황과 매칭되는 경로 정보를 변경하여 표시함으로써, 사고 위험을 미리 방지하고 주행 상황에 맞게 경로 안내 정보를 표시하여 신뢰성을 높이는 효과가 있다. In addition, when there is a possibility of collision with the surrounding vehicle in consideration of the surrounding situation information, the route information matching with the actual road situation is changed and displayed through the head-up display, thereby preventing accident risk in advance, Thereby enhancing the reliability.
본 발명의 효과는 이상에서 언급한 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to those mentioned above, and other effects not mentioned can be clearly understood by those skilled in the art from the following description.
도 1은 종래의 헤드 업 디스플레이 내비게이션을 도시한 도면이다.
도 2는 본 발명의 실시예에 따른 주행차선을 파악하는 방법을 도시한 도면이다.
도 3은 본 발명의 실시예에 따른 증강현실 헤드업 디스플레이가 장착된 차량을 도시한 도면이다.
도 4는 본 발명의 실시예에 따른 경로안내 정보가 차량의 윈드실드를 통해 보여지는 도로에 원근법으로 고가도로진입 안내 정보가 표시되는 모습을 도시한 도면이다.
도 5는 본 발명의 실시예에 따른 경로안내 정보가 차량의 윈드실드를 통해 보여지는 도로에 원근법으로 U턴 안내 정보가 표시되는 모습을 도시한 도면이다.
도 6은 본 발명의 실시예에 따른 경로안내 정보가 차량의 윈드실드를 통해 보여지는 도로에 원근법으로 좌회전 직전에 1차선으로 변경하도록 사전 안내 정보가 표시되는 모습을 도시한 도면이다.
도 7은 본 발명의 실시예에 따른 증강현실 헤드 업 디스플레이 방법을 나타내는 순서도이다.
도 8은 본 발명의 실시예에 따른 경로 안내 정보의 색상 가변 표시를 나타내는 도면이다.
도 9는 본 발명의 실시예에 따른 경로 안내 정보의 변경 표시를 나타내는 도면이다. 1 is a diagram showing a conventional head-up display navigation.
2 is a diagram showing a method of grasping a driving lane according to an embodiment of the present invention.
3 is a view illustrating a vehicle equipped with an augmented reality head-up display according to an embodiment of the present invention.
FIG. 4 is a view showing a manner in which guidance information for approaching a highway is displayed on a road through which a route guidance information according to an embodiment of the present invention is viewed through a windshield of a vehicle.
FIG. 5 is a view showing a manner in which route guidance information according to an embodiment of the present invention is displayed on a road viewed through a windshield of a vehicle, with U-turn guidance information being displayed in a perspective manner.
FIG. 6 is a view showing a state in which the guidance information is displayed so that the route guidance information according to the embodiment of the present invention changes to a single lane immediately before the left turn by a perspective view on the road viewed through the windshield of the vehicle.
7 is a flowchart illustrating an augmented reality head-up display method according to an embodiment of the present invention.
8 is a diagram showing color variable display of route guidance information according to an embodiment of the present invention.
9 is a diagram showing a change display of route guidance information according to an embodiment of the present invention.
본 발명의 전술한 목적 및 그 이외의 목적과 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. BRIEF DESCRIPTION OF THE DRAWINGS The above and other objects, advantages and features of the present invention and methods of achieving them will be apparent from the following detailed description of embodiments thereof taken in conjunction with the accompanying drawings.
그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 이하의 실시예들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 목적, 구성 및 효과를 용이하게 알려주기 위해 제공되는 것일 뿐으로서, 본 발명의 권리범위는 청구항의 기재에 의해 정의된다. The present invention may, however, be embodied in many different forms and should not be construed as being limited to the exemplary embodiments set forth herein. Rather, these embodiments are provided so that this disclosure will be thorough and complete, And advantages of the present invention are defined by the description of the claims.
한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성소자, 단계, 동작 및/또는 소자가 하나 이상의 다른 구성소자, 단계, 동작 및/또는 소자의 존재 또는 추가됨을 배제하지 않는다.It is to be understood that the terminology used herein is for the purpose of describing particular embodiments only and is not intended to be limiting of the invention. In the present specification, the singular form includes plural forms unless otherwise specified in the specification. &Quot; comprises "and / or" comprising ", as used herein, unless the recited component, step, operation, and / Or added.
이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예에 따른 증강현실 헤드 업 디스플레이 내비게이션에 대하여 살펴본다.Hereinafter, augmented reality head-up display navigation according to a preferred embodiment of the present invention will be described with reference to the accompanying drawings.
도 2는 본 발명의 실시예에 따른 주행차선을 파악하는 방법을 도시한 도면이다. 2 is a diagram showing a method of grasping a driving lane according to an embodiment of the present invention.
증강 현실 내비게이션은 차량(100)의 위치정보를 수신하여 차량(100)의 위도, 경도를 산출한다.The augmented reality navigation system receives the position information of the
그리고, 차량(100)의 위도, 경도 값을 도로 포인트(31,32,41,42)에 포함된 위도, 경도 정보와 비교하여 차량(100)의 주행차선을 파악하며, 도로의 주행차선을 파악하는 방법은 후술한다.The latitude and longitude values of the
도로 포인트(31,32,41,42) 정보는 차선정보를 추가로 포함하고, 실시 예에 따라 도로 포인트(31,32,41,42)가 도로를 따라 10cm ~ 1m간격으로 형성될 수 있다.The
차량(100)은 현재 주행 시점에서의 경로 안내 정보를 수신한다. The
사용자가 목적지를 입력하면 출발지는 현재 차량(100)의 위치정보이고 도착지는 사용자가 임의로 지정한 위치정보이다. When the user inputs the destination, the starting point is the position information of the
출발지와 목적지를 가장 빠르게 갈 수 있는 최적의 경로가 산출되며, 경로를 산출하는 방법은 종래의 내비게이션과 유사하므로 상세한 설명은 생략한다.The optimal route for the fastest route to the departure point and the destination route is calculated, and the route calculation method is similar to that of the conventional navigation system, and thus a detailed description thereof will be omitted.
차량(100)은 경로 안내 정보를 수신하여 윈드실드에 경로안내 정보를 표시하되, 차량(100)의 주행차선을 고려하여, 경로안내 정보를 표시한다.The
경로안내 정보를 표시할 때는 윈드실드에 증강현실로 표시하고, 윈드실드를 통해 보여지는 도로에 경로 안내 정보가 원근법으로 표시될 수 있다.When the route guidance information is displayed, the augmented reality is displayed on the windshield, and the route guidance information can be displayed on the road viewed through the windshield in a perspective manner.
경로안내 정보를 표시할 때 U턴 이 필요한 경우, 차량(100)이 1차선 주행으로 판단되면, 경로안내정보를 U턴으로 표시하고, 차량(100)이 2차선 내지 n차선 주행으로 판단되면, 차량(100)이 1차선으로 변경하도록 경로안내정보를 1차선으로 변경 표시를 한 후 경로안내정보를 U턴으로 표시한다.When the U-turn is required to display the route guidance information, if the
만약 좌회전이 필요한 경우에는 차량(100)이 1차선 주행으로 판단되면, 경로안내정보를 좌회전으로 표시하고, 차량(100)이 2차선 내지 n차선 주행으로 판단되면, 차량(100)이 1차선으로 변경하도록 경로안내정보를 1차선으로 변경 표시를 한 후 좌회전으로 표시한다.If it is determined that the
차량(100)이 주행차선을 확인할 때는 다음과 같은 방법으로 파악한다. When the
먼저 차량(100)의 위도, 경도 정보를 수신하는데, 도로(200)는 각각의 도로 포인트(31,32,41,42)를 가지고 있다. First, the
도로 포인트(31,32,41,42)는 위도, 경도 정보를 포함하며, 각각의 차선 정보를 포함한다. The road points 31, 32, 41, and 42 include latitude and longitude information, and include respective lane information.
도 2를 참조하면 차량(100)이 도로(200)를 주행하고 있고, 차량(100) 주변에 도로 포인트(31,32,41,42)가 있다. 2, the
도 2에서는 차량(100)과 가장 가까운 도로 포인트(32)가 3차선 정보를 가지고 있다고 가정하면 차량(100)은 현재 3차선 도로(200)를 주행 중인 것이 된다. In FIG. 2, assuming that the
도로 포인트(31,32,41,42)는 차량(100)의 주행방향으로 일정간격으로 맵데이터에 형성되어 있다.The road points 31, 32, 41, and 42 are formed in the map data at regular intervals in the running direction of the
다음은 도 3을 참조하여 증강현실 내비게이션의 구성을 설명한다.Next, the configuration of the augmented reality navigation will be described with reference to Fig.
증강현실 내비게이션은 메모리(300), 위치확인부(400), 주행차선 확인부(500), 주변 상황 정보 획득부(600), 경로안내부(700), 헤드 업 디스플레이(800)를 포함한다.The augmented reality navigation includes a
메모리(300)는 맵데이터를 저장하고 있으며, 맵데이터는 지도정보와 지도에 개시된 지형지물, 도로정보를 포함한다. The
각각의 지형지물과 도로에는 위도, 경도를 포함하고, 도로의 경우에는 차량(100) 진행방향으로 일정간격으로 이격되어 형성된 도로포인트를 포함한다.Each feature and road includes latitude and longitude, and in the case of a road, a road point formed at a certain distance in the traveling direction of the
위치확인부(400)는 차량(100) 위치를 수신하고 확인하며 위치확인부(400)는 고정밀 GPS 또는 기준국으로부터 보정된 오차 보정 값을 DMB주파수로 수신하는 GPS가 사용될 수 있다. The
고정밀 GPS는 오차범위 10cm이내인 것이 사용될 수 있다.High-precision GPS can be used with an error within 10cm.
주행차선 확인부(500)는 상기에 언급한 방법으로 차량(100) 위치와 상기 맵데이터 정보를 비교하여 현재 주행중인 차선을 파악한다.The driving
경로안내부(700)는 사용자의 입력에 의해 결정된 목표 지점까지의 경로안내 정보를 포함하고, 경로안내시 차량(100)의 주행차선을 고려하여 경로 안내 정보를 산출한다.The
헤드 업 디스플레이(800)는 차량(100)의 대시보드에 설치되고 차량(100) 전방의 윈드실드에 경로안내부(700)로부터 수신한 경로안내 정보를 디스플레이 하되, 경로안내부(700)로부터 수신된 주행 차선 정보를 고려하여 상기 경로 안내 정보를 디스플레이 한다. Up
헤드 업 디스플레이(800)는 상기 경로 안내부로부터 전송된 경로안내 정보를 상기 윈드실드에 증강현실로 표시하며, 헤드업 디스플레이는 윈드실드를 통해 보여지는 주행도로에 경로안내 정보를 도4 내지 도6에 도시된 바와 같이 원근법으로 표시할 수 있다.The head-up
본 발명의 실시예에 따른 주변 상황 정보 획득부(600)는 차량에 배치된 측후방 감지 센서인 것이 바람직하다. The peripheral situation
주변 상황 정보 획득부(600)는 주행 차량의 양 옆차선의 측후방에서 접근하는 타 차량의 존재 여부를 감지하여, 타 차량이 기설정된 거리 이내로 접근하는 경우, 위험 인식 정보를 경로 안내부(700)로 전송한다. The surrounding situation
헤드 업 디스플레이(800)는 경로 안내부(700)로부터 전송된 경로 안내 정보를 윈드실드에 증강현실로 표시하게 되는데, 위험 인식 정보를 수신한 경로 안내부(700)는 해당 경로 안내 정보의 색상을 가변시키거나, 경로 안내 정보의 지시선을 변경한다. The head-up
도 8은 본 발명의 실시예에 따른 경로 안내 정보 색상의 가변을 나타내는 도면이다. 8 is a diagram illustrating variable color of route guidance information according to an embodiment of the present invention.
도 8의 (a)에 도시된 바와 같이, 헤드 업 디스플레이부(800)는 경로 안내부(700)로부터 전송된 경로 안내 정보를 윈드실드에 증강현실로 표시하며, "현재 주행 차선을 기준으로 왼쪽 차선으로 차선 변경하여 전방 400미터에서 고가도로로 진입할 것"을 안내한다. 8A, the head-up
이 때, 주변 상황 획득부(600)가 모니터링하는 주변 상황 정보에 있어서 현재 주행 차선을 기준으로 왼족 차선에서 접근하는 측후방 차량이 존재하는 경우, 종전 안내되는 경로 안내 정보(예: 파란색)의 색상을 가변하여 변경 후 색상(예: 붉은색)으로 경로 안내 정보를 변경하여 헤드 업 디스플레이부(800)로 전송한다. In this case, when there is a rear-side vehicle approaching from the left lane on the basis of the present driving lane in the surrounding situation information monitored by the surrounding
도 8의 (b)에 도시한 바와 같이, 운전자는 경로 안내(왼쪽 차선으로 차선 변경하여 전방 350미터에서 고가도로 진입)의 지시선은 그대로 인지하면서도, 해당 경로 안내 정보의 색상이 붉은색으로 가변되었음을 인지하도록 하여, 측후방 차량과의 충돌을 방지하도록 한다. As shown in (b) of FIG. 8, the driver recognizes the leader line of the route guidance (lane change from the left lane to the upper road at 350 meters ahead), but recognizes that the color of the route guidance information is changed to red So as to prevent collision with the side rear vehicle.
이 때, 경로 안내부(700)의 경로 안내 색상 변경과 더불어, 스피커 등을 통하여 알람을 제공하거나, 도 8의 (b)에 도시한 바와 같이 헤드 업 디스플레이(800)를 통해 충돌 위험을 알리는 문자 정보(WARNING)를 제공하는 것이 바람직하다. At this time, in addition to changing the route guidance color of the
이러한 경로 안내 정보의 색상 변경은 전술한 충돌 위험성이 있는 경우 이외에도, 외부 서버로부터 수신한 전방 교통 상황 정보에 따라 가변되는 것 역시 가능하다. In addition to the above-described risk of collision, it is also possible to change the color of the route guidance information according to the forward traffic situation information received from the external server.
이 경우, 기설정된 상황별 색상(예: 원활인 경우 파란색, 정체인 경우 주황색, 지체인 경우 붉은색)으로 경로 안내 정보를 표시함으로써, 운전자로 하여금 전방의 교통 상황에 대비하여 운전할 수 있도록 지원한다. In this case, by displaying the route guidance information in a predetermined color (for example, blue in case of smooth, orange in case of static, and red in case of delay), the driver can be provided to operate the vehicle in preparation for traffic conditions ahead.
또한, 본 발명에 따르면 운전자 상태 정보 획득부를 더 포함하여, 경로 안내 정보의 색상 변경을 수행하는 것 역시 가능하다. In addition, according to the present invention, it is also possible to further change the color of the route guidance information, including the driver state information obtaining unit.
본 발명의 운전자 상태 정보 획득부는 카메라, 센서 등을 포함하여 구성되며, 운전자의 현재 운전 상태가 정상 상태인지 또는 비정상 상태인지 여부를 판별한다. The driver state information obtaining unit of the present invention includes a camera, a sensor, and the like, and determines whether the current driving state of the driver is a normal state or an abnormal state.
예컨대 운전자의 동공 상태를 감지하여 피곤한 징후가 보여지는지 여부를 확인하거나, 시선 방향을 측정하거나, 운전자 고개의 끄덕거림 등의 각도를 인식하여, 졸음운전 또는 스마트폰 사용 등으로 인하여 운전 상태가 비정상 상태인지 여부를 판별한다. For example, the driver's pupil state is detected to determine whether or not a tired symptom is displayed, a direction of a gaze direction is measured, an angle of a nod of a driver's head is recognized, and an operation state is abnormal .
운전 상태가 비정상 상태인 것으로 확인되는 경우, 경로 안내부(700)는 이를 고려하여 헤드 업 디스플레이(800)를 통해 표시되는 경로 안내 정보의 색상을 변경시킨다(예: 정상 상태인 경우 파란색이던 경로 안내 정보의 색상을 비정상 상태인 경우에는 붉은색으로 변경 표시). If it is determined that the driving state is abnormal, the
또한, 운전 상태가 비정상 상태인 경우, 경로 안내 정보의 색상을 가변시킴과 더불어 경고 메시지를 함께 표출하거나, 경고음을 발생시킴으로써 운전자에게 자신의 상태를 자각하게 하는 수단으로 활용한다. In addition, when the driving state is in an abnormal state, the color of the route guidance information is changed and a warning message is displayed together, or a warning sound is generated, thereby making the driver aware of his / her state.
본 발명에 따른 경로 안내 정보 색상 변경은 이러한 운전자 상태 정보를 고려함에 국한되는 것이 아니며, 운전자 부하(Driver Workload)를 종합적으로 고려한 결과에 따라 수행됨이 바람직하다. The color change of the route guidance information according to the present invention is not limited to the consideration of such driver state information but is preferably performed according to a result of comprehensive consideration of the driver load.
전술한 바와 같이 운전자가 졸음 운전을 하거나 주행 중 스마트폰을 사용하는 등 운전자 상태(driver state)가 비정상 상태인 경우 외에도, 운전 상황(driving situation), 운전자 조작(driver input), 주행 성능 및 반응(vehicle performance and response) 등을 고려하게 된다. As described above, in addition to the case where the driver is in a drowsy state or the driver state is abnormal due to the use of a smartphone during driving, the driving state, the driver input, the driving performance and the reaction vehicle performance and response.
즉 본 발명의 실시예에 따르면, 도로너비, 곡률, 제한속도, 회전경로 등의 운전 상황 정보와, 차량의 종/횡방향 제어 등의 운전자 조작 정보와, 차량 속도, 차로 위치, 가속 정보 등의 주행 성능 및 반응 정보와, 운전자의 주의 분산 등의 운전자 상태에 기반하여, 운전자 부하가 기설정 수준 이상으로 증가하는 경우 헤드 업 디스플레이부(800)에 표시되는 경로 정보의 색상을 변경시켜 운전자가 스스로 안전 운행을 위한 상황별 경고 알림을 확인할 수 있도록 한다. That is, according to the embodiment of the present invention, the driving state information such as the road width, the curvature, the limited speed, and the turning path, the driver operation information such as longitudinal / lateral control of the vehicle, Up
도 9는 본 발명의 실시예에 따른 경로 안내 정보의 변경 표시를 나타내는 도면이다. 9 is a diagram showing a change display of route guidance information according to an embodiment of the present invention.
도 9의 (a)에 도시된 바와 같이, 헤드 업 디스플레이부(800)는 경로 안내부(700)로부터 전송된 경로 안내 정보를 윈드실드에 증강현실로 표시하며, "현재 주행 차선을 기준으로 왼쪽 차선으로 차선 변경하여 전방 400미터에서 고가도로로 진입할 것"을 안내한다. 9A, the head-up
주변 상황 획득부(600)가 모니터링하는 주변 상황 정보에 있어서 현재 주행 차선을 기준으로 왼족 차선에서 접근하는 측후방 차량이 존재하는 경우, 경로 안내부(700)는 종전 안내되는 경로 안내 정보인 도 9(a)의 "왼쪽 차선으로 차선 변경"을 도 9(b)의 "직진"으로 변경한다. When there is a rear-side vehicle approaching from the left lane on the basis of the current driving lane in the peripheral situation information monitored by the surrounding
이 때, 측후방 차량과의 충돌을 방지하기 위하여 경로 안내 정보가 변경되는 경우에도, 하단의 내비게이션 정보(63km/h, 350미터 전방에 왼쪽 고가도로 진입)는 그대로 유지될 수 있다. At this time, even if the route guidance information is changed in order to prevent collision with the side rear vehicle, the navigation information at the lower end (63 km / h, entering the upper left road at 350 meters ahead) can be maintained.
운전자가 헤드 업 디스플레이(800)에 표출되는 경로 안내 정보만을 신뢰하여 주행하는 경우, 미처 변경하고자 하는 목적 차선에서 접근하는 타 차량과의 충돌을 미연에 확인 및 방지하지 못할 수도 있으므로, 주변 상황 정보를 고려하여 경로 안내를 변경하여 증강현실을 통해 제공함으로써, 운전자가 직관적으로 충돌 위험을 회피하도록 한다. When the driver trusts only the route guidance information displayed on the head-up
이 때, 경로 안내부(700)의 경로 안내 변경과 더불어, 스피커 등을 통하여 알람을 제공하거나, 헤드 업 디스플레이(800)를 통해 충돌 위험을 알리는 문자 정보를 제공하는 것이 바람직하다. At this time, it is preferable to provide an alarm through a speaker or the like, in addition to route guidance change of the
주변 상황 정보 획득부(600)의 인식 결과 충돌 위험이 사라진 이후에는, 경로 안내부(700)는 도 9의 (c)에 도시한 바와 같이 종전의 경로 안내 정보와 같이 "왼쪽 차선으로 차선 변경하여 전방 200미터에서 고가도로로 진입"으로 표출되도록 경로 안내 정보를 변경하여 헤드 업 디스플레이(800)로 전송한다. After the collision risk of the recognition result of the surrounding situation
본 발명의 실시예에 따르면 운전자의 제스처 및 음성 중 적어도 어느 하나를 인식하는 인식부를 더 포함한다. According to an embodiment of the present invention, the apparatus further includes a recognition unit for recognizing at least one of a gesture and voice of the driver.
인식부는 스티어링 휠 파지/조작 상태, 사이드 미러를 향하는 운전자의 시선 방향, 음성 중 적어도 어느 하나를 인식하여 운전자의 주행 의도를 파악한다. The recognition unit recognizes at least one of the steering wheel grasping / operating state, the driver's gaze direction toward the side mirror, and the voice to grasp the driving intention of the driver.
즉, 도 8 (a)및 도 9(a)에 도시된 경로 안내 정보를 신뢰한 운전자가 왼쪽 차선으로 변경하려고 하는 경우이거나, 현재 주행 차선의 전방 차량을 추월하고자 하는 주행 의도를 보이는 경우 등, 주행 의도가 차선 변경 또는 추월에 해당하는 경우에 해당되는지 여부를 인식하게 된다. That is, when the driver who trusts the route guidance information shown in Figs. 8 (a) and 9 (a) tries to change to the left lane, or when the driver intends to pass the vehicle ahead of the present lane, It is recognized whether or not the driving intention corresponds to a lane change or overtaking.
경로 안내부(700)는 인식부의 인식 결과 차선 변경에 해당하는 주행 의도가 있는 경우, 주변 상황 정보 획득부(600)가 획득한 정보에 따른 충돌 가능성을 고려하여, 경로 안내 정보를 변경하여 헤드 업 디스플레이(800)로 전송한다. When there is a driving intention corresponding to the lane change of the recognition result of the recognition unit, the
도 7은 본 발명의 실시예에 따른 증강현실 헤드 업 디스플레이 방법을 나타내는 순서도이다. 7 is a flowchart illustrating an augmented reality head-up display method according to an embodiment of the present invention.
본 발명의 실시예에 따른 증강현실 헤드 업 디스플레이 방법은 차량의 위치정보를 수신하는 단계(S100)와, 차량의 현재 위치를 맵데이터의 도로 포인트 정보와 비교하여 상기 차량의 주행차선을 파악하고, 주변 상황 정보를 파악하는 단계(S200) 및 현재 주행 시점에서의 경로 안내 정보를 수신하여 윈드실드에 경로안내 정보를 표시하되, 차량의 주행차선을 고려하여 상기 경로안내 정보를 표시하는 단계(S300)을 포함한다. A method of displaying an augmented reality head-up according to an embodiment of the present invention includes receiving position information of a vehicle (S100), comparing a current position of the vehicle with road point information of the map data to grasp a driving lane of the vehicle, (S300) of receiving the route guidance information at the current driving time and displaying the route guidance information in the windshield, and displaying the route guidance information in consideration of the driving lane of the vehicle (S300) .
S100 단계는 고정밀 GPS 또는 기준국으로부터 보정된 오차 보정 값을 DMB주파수로 수신하는 GPS를 사용하여 차량의 위치 정보를 수신한다. In step S100, the position information of the vehicle is received using a high-precision GPS or a GPS receiving the corrected error correction value from the reference station at the DMB frequency.
S200 단계는 차량의 위도, 경도 값을 도로 포인트에 포함된 위도, 경도 정보와 비교하여 차량의 주행차선을 파악하며, 측후방 감지 센서를 통해 주변 상황 정보를 파악한다. In step S200, the latitude and longitude values of the vehicle are compared with the latitude and longitude information included in the road point to grasp the driving lane of the vehicle, and the surrounding situation information is obtained through the side rear direction sensor.
S300 단계는 현재 주행 차선을 고려하여 경로 안내 정보를 헤드 업 디스플레이를 통해 증강 현실로 표시한다. In step S300, the route guidance information is displayed as augmented reality through the head-up display in consideration of the present driving lane.
즉, S300 단계는 U턴이 필요한 경우 차량이 1차선 주행인 것으로 판단되면, 경로 안내 정보를 U턴으로 표시하고, 차량이 1차선 주행이 아닌 것으로 판단되면, 차량을 먼저 1차선으로 변경하도록 경로 안내 정보를 표시하고, 그 후 경로 안내 정보를 U턴으로 표시함으로써, 운전자로 하여금 직관적인 경로 안내 인지가 가능하도록 한다. That is, in step S300, when it is determined that the vehicle is in the first lane, if the U-turn is required, the route guidance information is displayed as a U-turn. If it is determined that the vehicle is not in the first lane, The guidance information is displayed, and then the route guidance information is displayed in the U-turn, thereby enabling the driver to intuitively guide the route.
이 때, 운전자가 제공되는 경로 안내 정보만을 신뢰하여 사이드 미러를 확인하지 않고 차선 변경을 하는 경우, 측후방으로부터 접근하는 타 차량과 충돌이 발생할 위험이 있다. At this time, when the lane change is made without confirming the side mirror by trusting only the route guidance information provided by the driver, there is a risk of collision with another vehicle approaching from the rear side.
따라서, S300 단계는 S200 단계에서 획득된 주변 상황 정보에 기초하여, 주변 차량과의 충돌 가능성이 예견되는 경우 경로 안내 정보의 색상을 가변시키거나, 경로 안내 정보의 지시선을 가변하여 표시한다. Accordingly, in step S300, the color of the route guidance information is changed or the leader line of the route guidance information is variably displayed when the possibility of collision with the neighboring vehicle is predicted, based on the surrounding situation information obtained in step S200.
전술한 바와 같이, 도 8은 본 발명의 실시예에 따른 경로 안내 정보 색상의 가변을 나타내는 도면이고, 도 9는 본 발명의 실시예에 따른 경로 안내 정보의 변경 표시를 나타내는 도면이다. As described above, FIG. 8 is a diagram illustrating variable color of route guidance information according to an embodiment of the present invention, and FIG. 9 is a diagram illustrating a change display of route guidance information according to an embodiment of the present invention.
또한, S300 단계는 외부 서버로부터 수신한 전방 교통 상황 정보에 따라 경로 안내 정보의 색상을 가변 표시한다. In step S300, the color of the route guidance information is variably displayed according to the forward traffic situation information received from the external server.
운전자는 전방 교통 상황 정보에 따라 가변되는 경로 안내 정보의 색상(예: 원활인 경우 파란색, 정체인 경우 주황색, 지체인 경우 붉은색)을 인지하여, 전방 교통 흐름에 따라 미리 안전 운행에 대비한 조작(예: 서행)을 수행할 수 있다. The driver recognizes the color of the route guidance information (eg, blue in case of smooth, orange in case of congestion, red in case of congestion) according to forward traffic situation information, For example, slowing down).
본 발명의 실시예에 따르면 S200 단계에서 운전자의 주행 의도를 추가적으로 파악하고, S300 단계는 전술한 주변 상황 정보에 기초하여 충돌 가능성을 고려하여 경로 안내 정보의 방향 또는 색상을 가변 표시한다. According to an embodiment of the present invention, the driver's intention to drive is additionally recognized in step S200, and in step S300, the direction or color of the route guidance information is variably displayed in consideration of the possibility of collision based on the above-described surrounding situation information.
이 때, S200 단계에서는 스티어링 휠 조작 상태, 운전자의 제스처(예: 사이드 미러 응시), 음성 단어 발화 등 적어도 어느 하나를 인식하여, 차선을 변경하고자 하는 운전자의 주행 의도를 파악한다. At this time, at step S200, at least one of the steering wheel operating state, the driver's gesture (for example, looking at the side mirror) and the voice word utterance is recognized and the driving intention of the driver who wants to change the lane is grasped.
운전자의 주행 의도 및 주변 상황 정보에 기초하여 S300 단계는 경로 안내 정보의 색상 또는 방향을 가변 표시함으로써, 운전자는 증강 현실로 보여지는 경로 안내 정보를 신뢰하여 사고의 위험이 방지된 주행을 수행하는 것이 가능한 효과가 있다. In step S300, the color or direction of the route guidance information is variably displayed based on the driver's intention to run and the surrounding situation information, so that the driver can trust the route guidance information, which is viewed as an augmented reality, There is a possible effect.
본 발명의 실시예에 따르면, S200 단계는 운전자의 상태 정보를 추가적으로 파악하며, 운전자 부하 정보를 획득하는 것이 가능하다.According to the embodiment of the present invention, the step S200 can additionally grasp the driver's state information and obtain the driver load information.
S300 단계는 전술한 운전자의 상태 정보(졸음운전, 스마트폰 사용 등으로 인한 시선 분산)를 통해 졸음운전 중이거나, 전방 시선 주의 의무가 제대로 이행되지 않는 것으로 확인되는 경우 경로안내 정보의 색상을 가변시켜 표시한다. In step S300, if it is determined that the driver is in a drowsy driving state through the above-described driver's state information (drowsiness driving, sight line dispersion due to smartphone use, etc.), or if it is confirmed that the observer's obligation is not properly performed, Display.
이 때, S300 단계는 운전자의 상태 정보 외에 운전 부하를 종합적으로 고려하여, 운전 부하가 기설정된 수준 이상으로 증가하는 경우 경로안내 정보의 색상을 가변시키게 되며, HUD를 통해 표출되는 경로안내 정보의 색상 가변 외에 경고 알림 문구를 디스플레이 하거나 경고음을 발생시키는 것 역시 가능하다.At this time, in step S300, the driving load is comprehensively considered in addition to the driver's state information, and the color of the route guidance information is changed when the driving load is increased to a predetermined level or more. The color of the route guidance information displayed through the HUD It is also possible to display warning notices in addition to the variables, or to generate a warning sound.
이제까지 본 발명의 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다. The embodiments of the present invention have been described above. It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. Therefore, the disclosed embodiments should be considered in an illustrative rather than a restrictive sense. The scope of the present invention is defined by the appended claims rather than by the foregoing description, and all differences within the scope of equivalents thereof should be construed as being included in the present invention.
100: 차량
200: 도로
300: 메모리
400: 위치확인부
500: 주행차선 확인부
600: 주변 상황 정보 획득부
700: 경로 안내부
800: 헤드 업 디스플레이
31, 32, 41, 42: 도로 포인트100: vehicle 200: road
300: memory 400:
500: driving lane check unit 600: peripheral situation information obtaining unit
700: Path guide 800: Head-up display
31, 32, 41, 42: road point
Claims (20)
(b) 상기 차량의 현재 위치를 맵데이터의 도로 포인트 정보와 비교하여 상기 차량의 주행차선을 파악하고, 주변 상황 정보를 파악하는 단계; 및
(c) 현재 주행 시점에서의 경로 안내 정보를 수신하여 윈드실드에 경로안내 정보를 표시하되, 상기 차량의 주행차선을 고려하여 상기 경로안내 정보를 표시하는 단계
를 포함하는 것을 특징으로 하는 증강현실 내비게이션 헤드 업 디스플레이 방법.
(a) receiving position information of a vehicle;
(b) comparing the current position of the vehicle with the road point information of the map data to grasp the driving lane of the vehicle and grasp the surrounding situation information; And
(c) displaying route guidance information on the windshield by receiving the route guidance information at the current driving time, and displaying the route guidance information in consideration of the driving lane of the vehicle
Up display of the augmented reality navigation head-up display.
상기 (c) 단계는 상기 윈드실드에 증강현실로 표시하고, 상기 윈드실드를 통해 보여지는 상기 주행차선에 상기 경로 안내 정보가 원근법으로 표시되는 것을 특징으로 하는 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 1,
Wherein the step (c) comprises displaying the augmented reality on the windshield and the route guidance information on the driving lane shown through the windshield is displayed in a perspective manner.
상기 (c) 단계는 U턴 이 필요한 경우, 상기 차량이 1차선 주행으로 판단되면, 상기 경로안내정보를 U턴으로 표시하고, 상기 차량이 2차선 내지 n차선 주행으로 판단되면, 상기 차량이 상기 1차선으로 변경하도록 상기 경로안내정보를 상기 1차선으로 변경 표시를 한 후 상기 경로안내정보를 U턴으로 표시하는 것을 특징으로 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 1,
Wherein the step (c) includes the step of displaying the route guidance information as a U-turn if the vehicle is judged to be a first lane travel, and if the vehicle is judged to be a two-lane to n- Wherein the route guidance information is changed to the first lane so that the route guidance information is changed to the first lane, and then the route guidance information is displayed as a U-turn.
상기 (c) 단계는 좌회전이 필요한 경우, 상기 차량이 1차선 주행으로 판단되면, 상기 경로안내정보를 좌회전으로 표시하고,
상기 차량이 2차선 내지 n차선 주행으로 판단되면, 상기 차량이 상기 1차선으로 변경하도록 상기 경로안내정보를 상기 1차선으로 변경 표시를 한 후 상기 좌회전으로 표시하는 것을 특징으로 하는 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 1,
In the step (c), when it is determined that the vehicle is running in the first lane in a case where a left turn is required, the route guidance information is displayed in a left turn,
When the vehicle is judged to be a two-lane to n-lane running, the route guidance information is changed to the first lane so that the vehicle changes to the first lane, and then displayed as the left turn. Display method.
상기 도로 포인트 정보는 위도와 경도 정보와 차선정보를 포함하는 것을 특징으로 하는 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 1,
Wherein the road point information includes latitude, longitude, and lane information.
상기 차량의 위치정보는 위도와 경도정보를 포함하는 것을 특징으로 하는 증강현실 내비게이션 헤드 업 디스플레이 방법.
6. The method of claim 5,
Wherein the position information of the vehicle includes latitude and longitude information.
상기 (b) 단계는 상기 차량의 위치정보와 상기 차량과 가장 가까운 상기 도로 포인트의 위도 및 경도 값을 매칭하되, 상기 도로포인트가 몇 차선의 도로 포인트인지 파악하여 상기 차량의 주행차선을 파악하는 것을 특징으로 하는 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 6,
The step (b) includes matching the latitude and longitude values of the road point closest to the vehicle with the position information of the vehicle, and grasping the driving lane of the vehicle by recognizing the lane points of the lane Wherein the head-up display method comprises the steps of:
상기 (c) 단계는 외부 서버로부터 수신한 전방 교통 상황 정보에 따라 상기 경로 안내 정보의 색상을 가변 표시하는 것
인 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 1,
Wherein the step (c) comprises: variably displaying the color of the route guidance information according to the forward traffic situation information received from the external server
In-augmented reality navigation head-up display method.
상기 (c) 단계는 상기 주변 상황 정보에 기초하여 주변 차량과의 충돌 가능성이 있는 경우 상기 경로 안내 정보를 변경 표시하는 것
인 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 1,
The step (c) may include the step of changing and displaying the route guidance information when there is a possibility of collision with a nearby vehicle based on the surrounding situation information
In-augmented reality navigation head-up display method.
상기 (b) 단계는 스티어링 휠 조작 상태, 운전자의 제스처, 음성 중 적어도 어느 하나를 고려하여 운전자의 주행 의도를 추가적으로 파악하고, 상기 (b) 단계에서 파악한 상기 운전자의 주행 의도가 차선 변경 또는 추월에 해당하는 경우, 상기 (c) 단계는 상기 주변 상황 정보에 기초하여 충돌 가능성을 고려하여 상기 경로 안내 정보의 방향 또는 색상을 가변 표시하는 것
인 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 1,
In the step (b), the driving intention of the driver is further considered in consideration of at least one of the operation state of the steering wheel, the gesture of the driver and the voice, and the driving intention of the driver grasped in the step (b) If so, the step (c) variably displays the direction or color of the route guidance information in consideration of the possibility of collision based on the surrounding situation information
In-augmented reality navigation head-up display method.
상기 (b) 단계는 사이드 미러를 향하는 운전자의 시선 방향 또는 운전자의 얼굴 움직임을 감지하여 상기 운전자의 주행 의도를 파악하는 것
인 증강현실 내비게이션 헤드 업 디스플레이 방법.
11. The method of claim 10,
The step (b) includes sensing the direction of the driver's gaze toward the side mirror or the motion of the driver's face to grasp the driving intention of the driver
In-augmented reality navigation head-up display method.
상기 (b) 단계는 운전자 상태 정보를 포함하는 운전 부하 정보를 추가적으로 획득하고, 상기 (c) 단계는 상기 운전 부하 정보에 기초하여 상기 경로 안내 정보의 색상을 가변시키는 것
인 증강현실 내비게이션 헤드 업 디스플레이 방법.
The method according to claim 1,
Wherein the step (b) additionally obtains the operation load information including the driver status information, and the step (c) changes the color of the route guidance information based on the operation load information
In-augmented reality navigation head-up display method.
차량 위치를 수신하는 위치확인부;
상기 차량 위치와 상기 맵데이터 정보를 비교하여 현재 주행중인 차선을 파악하는 주행차선 확인부;
상기 차량의 주행 중 주변 상황 정보를 획득하는 주변 상황 정보 획득부;
사용자의 입력에 의해 결정된 목표 지점까지의 경로안내 정보를 포함하는 경로안내부;
상기 경로안내부로부터 수신한 경로안내 정보를 윈드실드에 디스플레이하되, 상기 경로안내부로부터 수신된 주행 차선 정보를 고려하여 상기 경로 안내정보를 디스플레이 하는 헤드 업 디스플레이;
를 포함하는 것을 특징으로 하는 증강현실 헤드 업 디스플레이 내비게이션.
A memory for storing map data;
A position confirmation unit for receiving the vehicle position;
A driving lane identifying unit for comparing the vehicle position and the map data information to identify a lane in which the vehicle is currently running;
A peripheral situation information acquisition unit for acquiring peripheral environment information during running of the vehicle;
A route guidance unit including route guidance information to a target point determined by an input of a user;
A head-up display for displaying the route guidance information received from the route guidance unit on the windshield, and displaying the route guidance information in consideration of the driving lane information received from the route guidance unit;
Up head-up display navigation.
상기 헤드 업 디스플레이는 상기 경로 안내부로부터 전송된 상기 경로안내정보를 상기 윈드실드에 증강현실로 표시하며, 상기 헤드업 디스 플레이는 상기 윈드실드를 통해 보여지는 상기 주행차선에 상기 경로안내 정보를 원근법으로 표시하는 것을 특징으로 하는 증강현실 헤드 업 디스플레이 내비게이션.
14. The method of claim 13,
Wherein the head-up display displays the route guidance information transmitted from the route guide section as an augmented reality on the windshield, and the head-up display displays the route guidance information on the driving lane shown through the windshield, Of the head-up display.
상기 맵데이터는 도로 정보를 포함하고, 상기 도로정보는 위도와 경도정보와 차선 정보를 가지는 도로 포인트를 포함하는 것을 특징으로 하는 증강현실 헤드 업 디스플레이 내비게이션.
14. The method of claim 13,
Wherein the map data includes road information, and the road information includes road points having latitude and longitude information and lane information.
상기 위치확인부는 오차범위 10cm이내인 고정밀 GPS인 것을 특징으로 하는 증강현실 헤드 업 디스플레이 내비게이션.
14. The method of claim 13,
Wherein the position checking unit is a high-precision GPS having an error range of 10 cm or less.
상기 경로 안내부는 외부 서버로부터 수신한 전방 교통 상황 정보에 따라 상기 경로 안내 정보의 색상을 가변시키는 것
인 증강현실 헤드 업 디스플레이 내비게이션.
14. The method of claim 13,
The route guidance unit may change the color of the route guidance information according to the forward traffic situation information received from the external server
Augmented reality head-up display navigation.
상기 경로 안내부는 상기 주변 상황 정보를 고려하여 주변 차량과의 충돌 가능성이 있는 경우, 상기 경로 안내 정보를 변경하여 상기 헤드업 디스플레이로 전송하는 것
인 증강현실 헤드 업 디스플레이 내비게이션.
14. The method of claim 13,
Wherein the route guidance unit changes the route guidance information and transmits the route guidance information to the head-up display when there is a possibility of collision with a nearby vehicle in consideration of the surrounding situation information
Augmented reality head-up display navigation.
상기 운전자의 제스처 또는 음성을 인식하는 인식부를 더 포함하고, 상기 인식부는 스티어링 휠 조작 상태, 사이드 미러를 향하는 운전자의 시선 방향, 음성 중 적어도 어느 하나에 기초하여 상기 운전자의 주행 의도를 파악하고, 상기 경로 안내부는 상기 주행 의도가 차선 변경 또는 추월에 해당하는 경우 상기 주변 상황 정보에 따른 충돌 가능성을 고려하여 상기 경로 안내 정보를 변경하여 상기 헤드 업 디스플레이로 전송하는 것
인 증강현실 헤드 업 디스플레이 내비게이션.
14. The method of claim 13,
Wherein the recognition unit recognizes the driving intention of the driver based on at least one of a steering wheel operating state, a driver's gaze direction toward the side mirror, and a voice, The route guidance unit changes the route guidance information in consideration of the possibility of collision according to the surrounding situation information when the driving intention corresponds to a lane change or overtaking, and transmits the changed route guidance information to the head-up display
Augmented reality head-up display navigation.
운전자의 동공, 시선 방향 및 고개 각도 중 적어도 어느 하나를 인식하는 운전자 상태 정보 획득부를 더 포함하고, 상기 경로 안내부는 상기 운전자의 상태가 비정상상태인 것으로 확인된 경우 상기 경로 안내 정보의 색상을 변경하여 표출시키는 것
인 증강현실 헤드 업 디스플레이 내비게이션.14. The method of claim 13,
Further comprising a driver state information obtaining unit for recognizing at least one of a driver's pupil, a line of sight direction, and a head angle, wherein the route guide unit changes color of the route guidance information when it is determined that the driver's state is abnormal Display
Augmented reality head-up display navigation.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR20160023491 | 2016-02-26 | ||
| KR1020160023491 | 2016-02-26 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20170101758A true KR20170101758A (en) | 2017-09-06 |
| KR102007009B1 KR102007009B1 (en) | 2019-10-02 |
Family
ID=59925226
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020160110590A Active KR102007009B1 (en) | 2016-02-26 | 2016-08-30 | Augmented Reality Head Up Display Navigation |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102007009B1 (en) |
Cited By (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107941226A (en) * | 2017-11-16 | 2018-04-20 | 百度在线网络技术（北京）有限公司 | Method and apparatus for the direction guide line for generating vehicle |
| CN108195387A (en) * | 2017-12-22 | 2018-06-22 | 联创汽车电子有限公司 | AR-HUD navigation system and its GPS data verification modification method |
| CN108917778A (en) * | 2018-05-11 | 2018-11-30 | 广州海格星航信息科技有限公司 | Navigation hint method, navigation equipment and storage medium |
| KR20190048176A (en) * | 2017-10-30 | 2019-05-09 | 차영천 | Flying car using drone |
| WO2019117459A1 (en) * | 2017-12-11 | 2019-06-20 | 삼성전자 주식회사 | Device and method for displaying content |
| CN109931944A (en) * | 2019-04-02 | 2019-06-25 | 百度在线网络技术（北京）有限公司 | A kind of AR air navigation aid, device, vehicle end equipment, server-side and medium |
| KR102009031B1 (en) * | 2018-09-07 | 2019-08-08 | 네이버랩스 주식회사 | Method and system for indoor navigation using augmented reality |
| US10488215B1 (en) | 2018-10-26 | 2019-11-26 | Phiar Technologies, Inc. | Augmented reality interface for navigation assistance |
| US10495476B1 (en) | 2018-09-27 | 2019-12-03 | Phiar Technologies, Inc. | Augmented reality navigation systems and methods |
| US10573183B1 (en) | 2018-09-27 | 2020-02-25 | Phiar Technologies, Inc. | Mobile real-time driving safety systems and methods |
| CN111412924A (en) * | 2019-01-04 | 2020-07-14 | 阿里巴巴集团控股有限公司 | Navigation processing method and device, electronic equipment and readable medium |
| WO2020149433A1 (en) * | 2019-01-17 | 2020-07-23 | 엘지전자 주식회사 | Image output device and method for controlling same |
| WO2020159247A1 (en) * | 2019-01-31 | 2020-08-06 | 엘지전자 주식회사 | Image output device |
| CN112166301A (en) * | 2018-06-01 | 2021-01-01 | 大众汽车股份公司 | Method for calculating an "augmented reality" fade-in for presenting a navigation route on an AR display unit, device for carrying out the method, motor vehicle and computer program |
| CN112683293A (en) * | 2020-12-15 | 2021-04-20 | 东风汽车有限公司 | Vehicle-mounted navigation method, electronic equipment and storage medium |
| CN112781600A (en) * | 2020-12-25 | 2021-05-11 | 深圳市万集科技有限公司 | Vehicle navigation method, device and storage medium |
| WO2021091041A1 (en) * | 2019-11-06 | 2021-05-14 | 엘지전자 주식회사 | Vehicle display device and control method thereof |
| CN114355902A (en) * | 2021-12-17 | 2022-04-15 | 重庆长安汽车股份有限公司 | Navigation enhancement display method based on high-precision map and automobile |
| US20220161805A1 (en) * | 2020-11-26 | 2022-05-26 | Hyundai Motor Company | Vehicle controller and method thereof |
| CN114572112A (en) * | 2022-02-25 | 2022-06-03 | 智己汽车科技有限公司 | Augmented reality method and system for automobile front windshield |
| US11448518B2 (en) | 2018-09-27 | 2022-09-20 | Phiar Technologies, Inc. | Augmented reality navigational overlay |
| WO2023238993A1 (en) * | 2022-06-10 | 2023-12-14 | 엘지전자 주식회사 | Ar display device of vehicle and operation method thereof |
| US20250091597A1 (en) * | 2023-09-18 | 2025-03-20 | GM Global Technology Operations LLC | Risk informed route planner |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021235576A1 (en) * | 2020-05-22 | 2021-11-25 | 엘지전자 주식회사 | Route provision apparatus and route provision method therefor |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006096286A (en) * | 2004-09-30 | 2006-04-13 | Nissan Motor Co Ltd | Drive assisting device |
| JP2013109505A (en) * | 2011-11-18 | 2013-06-06 | Toyota Motor Corp | Periphery monitoring device |
| KR20140031466A (en) * | 2012-08-31 | 2014-03-13 | 삼성전자주식회사 | Method and vehicle for providing information |
| KR20140144336A (en) * | 2013-06-10 | 2014-12-19 | 한양대학교 산학협력단 | Method and apparatus for classifying of lane |
| KR20150054022A (en) * | 2013-11-08 | 2015-05-20 | 현대오트론 주식회사 | Apparatus for displaying lane changing information using head-up display and method thereof |
-
2016
- 2016-08-30 KR KR1020160110590A patent/KR102007009B1/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006096286A (en) * | 2004-09-30 | 2006-04-13 | Nissan Motor Co Ltd | Drive assisting device |
| JP2013109505A (en) * | 2011-11-18 | 2013-06-06 | Toyota Motor Corp | Periphery monitoring device |
| KR20140031466A (en) * | 2012-08-31 | 2014-03-13 | 삼성전자주식회사 | Method and vehicle for providing information |
| KR20140144336A (en) * | 2013-06-10 | 2014-12-19 | 한양대학교 산학협력단 | Method and apparatus for classifying of lane |
| KR20150054022A (en) * | 2013-11-08 | 2015-05-20 | 현대오트론 주식회사 | Apparatus for displaying lane changing information using head-up display and method thereof |
Cited By (41)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190048176A (en) * | 2017-10-30 | 2019-05-09 | 차영천 | Flying car using drone |
| CN107941226A (en) * | 2017-11-16 | 2018-04-20 | 百度在线网络技术（北京）有限公司 | Method and apparatus for the direction guide line for generating vehicle |
| CN107941226B (en) * | 2017-11-16 | 2021-03-02 | 百度在线网络技术（北京）有限公司 | Method and device for generating a direction guideline for a vehicle |
| WO2019117459A1 (en) * | 2017-12-11 | 2019-06-20 | 삼성전자 주식회사 | Device and method for displaying content |
| KR20230069893A (en) * | 2017-12-11 | 2023-05-19 | 삼성전자주식회사 | Method and apparatus for displaying content |
| US11560057B2 (en) | 2017-12-11 | 2023-01-24 | Samsung Electronics Co., Ltd | Device and method for displaying content |
| CN108195387A (en) * | 2017-12-22 | 2018-06-22 | 联创汽车电子有限公司 | AR-HUD navigation system and its GPS data verification modification method |
| CN108195387B (en) * | 2017-12-22 | 2021-06-08 | 联创汽车电子有限公司 | AR-HUD navigation system and GPS data checking and correcting method thereof |
| CN108917778B (en) * | 2018-05-11 | 2020-11-03 | 广州海格星航信息科技有限公司 | Navigation prompting method, navigation equipment and storage medium |
| CN108917778A (en) * | 2018-05-11 | 2018-11-30 | 广州海格星航信息科技有限公司 | Navigation hint method, navigation equipment and storage medium |
| CN112166301A (en) * | 2018-06-01 | 2021-01-01 | 大众汽车股份公司 | Method for calculating an "augmented reality" fade-in for presenting a navigation route on an AR display unit, device for carrying out the method, motor vehicle and computer program |
| KR102009031B1 (en) * | 2018-09-07 | 2019-08-08 | 네이버랩스 주식회사 | Method and system for indoor navigation using augmented reality |
| US10495476B1 (en) | 2018-09-27 | 2019-12-03 | Phiar Technologies, Inc. | Augmented reality navigation systems and methods |
| US11313695B2 (en) | 2018-09-27 | 2022-04-26 | Phiar Technologies, Inc. | Augmented reality navigational indicator |
| US11448518B2 (en) | 2018-09-27 | 2022-09-20 | Phiar Technologies, Inc. | Augmented reality navigational overlay |
| US11545036B2 (en) | 2018-09-27 | 2023-01-03 | Google Llc | Real-time driving behavior and safety monitoring |
| US10573183B1 (en) | 2018-09-27 | 2020-02-25 | Phiar Technologies, Inc. | Mobile real-time driving safety systems and methods |
| US11085787B2 (en) | 2018-10-26 | 2021-08-10 | Phiar Technologies, Inc. | Augmented reality interface for navigation assistance |
| US10488215B1 (en) | 2018-10-26 | 2019-11-26 | Phiar Technologies, Inc. | Augmented reality interface for navigation assistance |
| US11156472B2 (en) | 2018-10-26 | 2021-10-26 | Phiar Technologies, Inc. | User interface for augmented reality navigation |
| CN111412924B (en) * | 2019-01-04 | 2024-05-28 | 斑马智行网络(香港)有限公司 | Navigation processing method and device, electronic equipment and readable medium |
| CN111412924A (en) * | 2019-01-04 | 2020-07-14 | 阿里巴巴集团控股有限公司 | Navigation processing method and device, electronic equipment and readable medium |
| WO2020149433A1 (en) * | 2019-01-17 | 2020-07-23 | 엘지전자 주식회사 | Image output device and method for controlling same |
| WO2020159247A1 (en) * | 2019-01-31 | 2020-08-06 | 엘지전자 주식회사 | Image output device |
| US11790613B2 (en) | 2019-01-31 | 2023-10-17 | Lg Electronics Inc. | Image output device |
| CN109931944A (en) * | 2019-04-02 | 2019-06-25 | 百度在线网络技术（北京）有限公司 | A kind of AR air navigation aid, device, vehicle end equipment, server-side and medium |
| WO2021091041A1 (en) * | 2019-11-06 | 2021-05-14 | 엘지전자 주식회사 | Vehicle display device and control method thereof |
| US11453346B2 (en) | 2019-11-06 | 2022-09-27 | Lg Electronics Inc. | Display device for a vehicle and method for controlling the same |
| US12187197B2 (en) | 2019-11-06 | 2025-01-07 | Lg Electronics Inc. | Vehicle display device and control method thereof |
| US20220161805A1 (en) * | 2020-11-26 | 2022-05-26 | Hyundai Motor Company | Vehicle controller and method thereof |
| US12252135B2 (en) * | 2020-11-26 | 2025-03-18 | Hyundai Motor Company | Vehicle controller and method thereof |
| CN112683293A (en) * | 2020-12-15 | 2021-04-20 | 东风汽车有限公司 | Vehicle-mounted navigation method, electronic equipment and storage medium |
| CN112781600A (en) * | 2020-12-25 | 2021-05-11 | 深圳市万集科技有限公司 | Vehicle navigation method, device and storage medium |
| CN114355902B (en) * | 2021-12-17 | 2024-02-09 | 重庆长安汽车股份有限公司 | Navigation enhancement display method based on high-precision map and automobile |
| CN114355902A (en) * | 2021-12-17 | 2022-04-15 | 重庆长安汽车股份有限公司 | Navigation enhancement display method based on high-precision map and automobile |
| CN114572112A (en) * | 2022-02-25 | 2022-06-03 | 智己汽车科技有限公司 | Augmented reality method and system for automobile front windshield |
| WO2023239002A1 (en) * | 2022-06-10 | 2023-12-14 | 엘지전자 주식회사 | Vehicle ar display device and operating method therefor |
| WO2023238992A1 (en) * | 2022-06-10 | 2023-12-14 | 엘지전자 주식회사 | Ar display device of vehicle and operating method thereof |
| WO2023239003A1 (en) * | 2022-06-10 | 2023-12-14 | 엘지전자 주식회사 | Ar display device for vehicle and operation method thereof |
| WO2023238993A1 (en) * | 2022-06-10 | 2023-12-14 | 엘지전자 주식회사 | Ar display device of vehicle and operation method thereof |
| US20250091597A1 (en) * | 2023-09-18 | 2025-03-20 | GM Global Technology Operations LLC | Risk informed route planner |
Also Published As
| Publication number | Publication date |
|---|---|
| KR102007009B1 (en) | 2019-10-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102007009B1 (en) | Augmented Reality Head Up Display Navigation | |
| US10710632B2 (en) | Automatic driving control device | |
| JP4604103B2 (en) | Intersection line-of-sight detection device | |
| CN106952489B (en) | Drive assistance device | |
| JP5429180B2 (en) | Driving support apparatus and method | |
| US9827907B2 (en) | Drive assist device | |
| JP6635428B2 (en) | Car peripheral information display system | |
| US9218739B2 (en) | Method for analyzing traffic flow at an intersection | |
| US9248796B2 (en) | Visually-distracted-driving detection device | |
| US8620571B2 (en) | Driving assistance apparatus, driving assistance method, and driving assistance program | |
| US9266429B2 (en) | Human machine interface | |
| US8718906B2 (en) | Method for analyzing traffic flow at an intersection | |
| US20120245756A1 (en) | Driver assistance system | |
| CN102044169A (en) | Driving support apparatus | |
| JP2013196359A (en) | Driving assistance device | |
| KR101442702B1 (en) | Method for vehicles change lanes and turn lanes at the crash protection system | |
| US20220194411A1 (en) | Vehicle collision avoidance system and method | |
| US10930148B2 (en) | Method and device for reminding a driver about an approach to a light signal apparatus | |
| JP2016205918A (en) | Route information provision device and route information provision method | |
| KR102188637B1 (en) | Lane change information system | |
| JP2008097278A (en) | Driving support apparatus | |
| US11555708B2 (en) | Apparatus and method for detecting deviation vehicle | |
| JP2006343904A (en) | Driving support device | |
| KR20160074974A (en) | Overspeed notifiying apparatus and operating method for the same | |
| JP6421925B2 (en) | Driving support system, traffic information generation device, and route guidance device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20160830 |
|
| PG1501 | Laying open of application | ||
| PA0201 | Request for examination |
Patent event code: PA02012R01D Patent event date: 20171222 Comment text: Request for Examination of Application Patent event code: PA02011R01I Patent event date: 20160830 Comment text: Patent Application |
|
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20190411 Patent event code: PE09021S01D |
|
| E701 | Decision to grant or registration of patent right | ||
| PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20190724 |
|
| GRNT | Written decision to grant | ||
| PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20190729 Patent event code: PR07011E01D |
|
| PR1002 | Payment of registration fee |
Payment date: 20190730 End annual number: 3 Start annual number: 1 |
|
| PG1601 | Publication of registration | ||
| PR1001 | Payment of annual fee |
Payment date: 20220622 Start annual number: 4 End annual number: 4 |
|
| PR1001 | Payment of annual fee |
Payment date: 20230621 Start annual number: 5 End annual number: 5 |
|
| PR1001 | Payment of annual fee |
Payment date: 20240625 Start annual number: 6 End annual number: 6 |
|
| PR1001 | Payment of annual fee |
Payment date: 20250626 Start annual number: 7 End annual number: 7 |