[go: up one dir, main page]

JP2009085750A - Installation determination system and installation determination device - Google Patents

Installation determination system and installation determination device Download PDF

Info

Publication number
JP2009085750A
JP2009085750A JP2007255306A JP2007255306A JP2009085750A JP 2009085750 A JP2009085750 A JP 2009085750A JP 2007255306 A JP2007255306 A JP 2007255306A JP 2007255306 A JP2007255306 A JP 2007255306A JP 2009085750 A JP2009085750 A JP 2009085750A
Authority
JP
Japan
Prior art keywords
facility
information
gazing point
map
navigation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007255306A
Other languages
Japanese (ja)
Inventor
Tomoki Kubota
智氣 窪田
Hideto Miyazaki
秀人 宮崎
Toshihiro Mori
俊宏 森
Keita Seki
啓太 関
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Priority to JP2007255306A priority Critical patent/JP2009085750A/en
Publication of JP2009085750A publication Critical patent/JP2009085750A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Instructional Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an installation determination system and an installation determination device for accurately determining an installation watched by an occupant from a plurality of sight line directions. <P>SOLUTION: An installation is searched for which is located within a prescribed search distance from a watched point detected based on navigation map data 58 stored in a navigation device 4 to determine a pertinent installation as an installation watched by a driver. If no installation can be searched for within a maximum search distance from the watched point of the driver on the navigation device 4, an installation is searched for which is located within the prescribed search distance from a watched point detected based on basic map data 14 stored in a map delivery center 2 to determine a pertinent installation as an installation watched by the driver. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、車両の乗員が注視する施設を特定する施設特定システム及び施設特定装置に関する。   The present invention relates to a facility specifying system and a facility specifying device for specifying a facility to be watched by a passenger of a vehicle.

従来より、車載用のナビゲーション装置、PDA(Personal Digital Assistant)や携帯電話機などの携帯情報機器、パーソナルコンピュータ等では、地図情報として一般道路及び高速道路等の道路や施設名称等を各種記憶デバイスに記憶するか、又はサーバ等からダウンロードすることにより、利用者に対して所望のエリアの地図を表示することが可能となっている。   Conventionally, in-vehicle navigation devices, portable information devices such as PDAs (Personal Digital Assistants) and mobile phones, personal computers, etc., roads and facility names such as general roads and expressways are stored in various storage devices as map information. Alternatively, a map of a desired area can be displayed to the user by downloading from a server or the like.

更に、従来のナビゲーション装置等では地図を表示するのみでなく、利用者の利便性をより向上させる為に、表示された道路の近辺に存在する施設(ショッピングセンタ、レストラン等)に関する情報(施設名称、提供する料理の種類、営業時間等)を案内することについても行われていた。しかし、車両周辺に施設が多数ある場合に、その全ての施設についての案内を行うことは乗員にとって煩わしいものとなっていた。   In addition to displaying a map in a conventional navigation device or the like, information (facility names) about facilities (shopping centers, restaurants, etc.) that exist in the vicinity of the displayed road in order to further improve user convenience , The type of food to be served, business hours, etc.). However, when there are many facilities around the vehicle, it is troublesome for the occupant to provide guidance for all the facilities.

そこで、乗員が案内を必要とする施設を特定する技術として、例えば特開平11−288341号公報には、乗員の視線方向を検出し、その視線方向から乗員の注視する施設を乗員が案内を必要とする施設として特定して、その施設の案内を行うナビゲーション装置について記載されている。
特開平11−288341号公報(第4頁〜第6頁、図8、図9)
Therefore, as a technique for identifying a facility for which an occupant needs guidance, for example, in Japanese Patent Application Laid-Open No. 11-288341, the occupant needs guidance to detect the sight line direction of the occupant and to watch the occupant from the sight line direction. A navigation device that specifies the facility and guides the facility is described.
Japanese Patent Application Laid-Open No. 11-288341 (pages 4 to 6, FIGS. 8 and 9)

ここで、日本全国においては毎年新しい施設が建設されたり、営業を開始している。また、これに伴って、既存の施設が取り壊されたり、場所を移転したりもする。その際、ナビゲーション装置に記憶される地図情報が生成された後に新しく建設された(又は営業を開始した)施設に関する情報は、その地図情報に登録されていないという問題が生じる。そこで、このような不具合を回避するために、ナビゲーション装置が記憶する地図情報を定期的に更新することが行われているが、この地図情報の更新は常に全てのユーザが実行するわけではない。従って、古いバージョン地図情報を記憶したままのナビゲーション装置も多数存在する。   Here, in Japan, new facilities are being constructed and started operating every year. Along with this, existing facilities are demolished or relocated. At this time, there is a problem that information regarding a facility newly constructed (or started business) after the map information stored in the navigation device is generated is not registered in the map information. Thus, in order to avoid such a problem, the map information stored in the navigation device is regularly updated. However, not all users always update the map information. Accordingly, there are many navigation devices that store old version map information.

そして、前記した特許文献1に記載されたナビゲーション装置で行われる施設の特定には、ナビゲーション装置に記憶されている地図情報が用いられるが、上述したようにナビゲーション装置には常に最新の地図情報が記憶されているとは限らない。従って、ナビゲーション装置に記憶されている地図情報が生成された時より後に建設された(又は営業を開始した)施設を運転者が注視していた場合には、その施設は検索の対象にならないため、乗員が注視する施設を正しく特定することができなかった。   And the map information memorize | stored in the navigation apparatus is used for specification of the facility performed with the navigation apparatus described in above-mentioned patent document 1, but as mentioned above, the navigation apparatus always has the newest map information. It is not always remembered. Therefore, if the driver is paying attention to a facility constructed (or started business) after the map information stored in the navigation device is generated, the facility is not subject to search. , Could not correctly identify the facility that the crew watched.

本発明は前記従来における問題点を解消するためになされたものであり、ナビゲーション装置に記憶されている地図情報が古いバージョンの地図情報であったとしても、乗員が注視する施設を正確に特定することが可能とした施設特定システム及び施設特定装置を提供することを目的とする。   The present invention has been made to solve the above-described conventional problems, and even if the map information stored in the navigation device is an old version of map information, the facility to which the occupant is gazing accurately is specified. An object of the present invention is to provide a facility identification system and a facility identification device that enable this.

前記目的を達成するため本願の請求項1に係る施設特定システム(1)は、ナビゲーション装置(4)と、前記ナビゲーション装置と通信を行う情報センタ(2)とを有し、車両の乗員が注視する施設を特定する施設特定システムにおいて、前記ナビゲーション装置は、地図上における施設の位置を含む地図情報を記憶するナビ地図情報記憶手段(56)と、車両の乗員の視線方向を異なるタイミングで複数検出する視線方向検出手段(33)と、前記視線方向検出手段により検出された乗員の複数の視線方向から乗員の注視点を検出する注視点検出手段(33)と、前記ナビ地図情報記憶手段に記憶された地図情報を用いて、前記注視点検出手段により検出された乗員の注視点から所定の検索距離内にある施設を検索するナビ施設検索手段(33)と、前記ナビ施設検索手段によって前記注視点検出手段により検出された乗員の注視点から前記検索距離内に施設が検索できなかった場合に、前記注視点検出手段により検出された乗員の注視点の位置情報を情報センタに送信する注視点情報送信手段(33)と、を備え、前記情報センタ(2)は、地図上における施設の位置を含む地図情報を記憶するセンタ地図情報記憶手段(11)と、前記注視点情報送信手段によって前記乗員の注視点の位置情報が送信された場合に、前記センタ地図情報記憶手段に記憶された地図情報を用いて、前記注視点検出手段により検出された乗員の注視点から所定の検索距離内にある施設を検索するセンタ施設検索手段(10)と、を備え、前記ナビ施設検索手段又は前記センタ施設検索手段によって検索された施設を乗員の注視する施設として特定することを特徴とする。
尚、「異なるタイミング」とは、時間を基準としたタイミングでも良いし、車両の走行距離を基準としたタイミングでも良い。また、乗員の操作に基づくタイミングでも良い。
In order to achieve the above object, a facility identification system (1) according to claim 1 of the present application includes a navigation device (4) and an information center (2) that communicates with the navigation device, and a vehicle occupant closely watches. In the facility identification system for identifying the facility to be operated, the navigation device detects a plurality of navigation map information storage means (56) for storing map information including the location of the facility on the map, and the line-of-sight direction of the vehicle occupant at different timings. Gazing direction detection means (33) for detecting, gazing point detection means (33) for detecting the gazing point of the occupant from a plurality of sighting directions of the occupant detected by the sight line direction detection means, and stored in the navigation map information storage means Navigation facility search means for searching for a facility within a predetermined search distance from the gazing point of the occupant detected by the gazing point detection means using the map information 33), and if the facility cannot be searched within the search distance from the gazing point of the occupant detected by the gazing point detection unit by the navigation facility searching unit, the caution of the occupant detected by the gazing point detection unit Gazing point information transmitting means (33) for transmitting the position information of the viewpoint to the information center, and the information center (2) is a center map information storage means for storing map information including the position of the facility on the map ( 11), and when the position information of the gazing point of the occupant is transmitted by the gazing point information transmission unit, it is detected by the gazing point detection unit using the map information stored in the center map information storage unit. Center facility search means (10) for searching for facilities within a predetermined search distance from the gazing point of the occupant, and the navigation facility search means or the center facility search means And identifies the searched facilities as the occupant of the gaze to property.
The “different timing” may be a timing based on time or a timing based on the travel distance of the vehicle. Moreover, the timing based on a passenger | crew's operation may be sufficient.

また、請求項2に係る施設特定システム(1)は、請求項1に記載の施設特定システムであって、前記情報センタ(2)は、前記センタ施設検索手段(10)によって前記注視点検出手段により検出された乗員の注視点から前記検索距離内に施設が検索できた場合に、検索された施設を含む所定範囲の地図情報を更新する為の地図更新情報を前記ナビゲーション装置(4)へ送信する更新情報送信手段(10)を備え、前記ナビゲーション装置は、前記更新情報送信手段によって送信された地図更新情報を用いて前記ナビ地図情報記憶手段に記憶された地図情報の内、前記所定範囲の地図情報を更新する地図更新手段(33)を備えることを特徴とする。   The facility specifying system (1) according to claim 2 is the facility specifying system according to claim 1, wherein the information center (2) is detected by the center facility searching means (10). When the facility can be searched within the search distance from the gazing point of the passenger detected by the above, map update information for updating the map information of a predetermined range including the searched facility is transmitted to the navigation device (4). Update information transmission means (10) for performing the predetermined range of the map information stored in the navigation map information storage means using the map update information transmitted by the update information transmission means. A map update means (33) for updating the map information is provided.

また、請求項3に係る施設特定システム(1)は、請求項1又は請求項2に記載の施設特定システムであって、前記注視点検出手段(33)は、前記乗員の複数の視線方向が交差する地点を乗員の注視点として検出することを特徴とする。   Further, the facility specifying system (1) according to claim 3 is the facility specifying system according to claim 1 or 2, wherein the gaze point detecting means (33) has a plurality of gaze directions of the occupant. It is characterized by detecting a crossing point as a gazing point of an occupant.

更に、請求項4に係る施設特定装置(4)は、地図上における施設の位置を含む地図情報を記憶するナビ地図情報記憶手段(33)と、車両の乗員の視線方向を異なるタイミングで複数検出する視線方向検出手段(33)と、前記視線方向検出手段により検出された乗員の複数の視線方向から乗員の注視点を検出する注視点検出手段(33)と、前記ナビ地図情報記憶手段に記憶された地図情報を用いて、前記注視点検出手段により検出された乗員の注視点から所定の検索距離内にある施設を検索するナビ施設検索手段(33)と、前記ナビ施設検索手段によって前記注視点検出手段により検出された乗員の注視点から前記検索距離内に施設が検索できなかった場合に、前記注視点検出手段により検出された乗員の注視点の位置情報を情報センタに送信する注視点情報送信手段(33)と、前記情報センタにおいて実行された検索結果に基づいて、前記注視点検出手段により検出された乗員の注視点から所定の検索距離内にある施設に関する情報を取得する施設情報取得手段(33)と、を有し、前記施設情報取得手段によって情報を取得した施設を乗員の注視する施設として特定することを特徴とする。   Further, the facility specifying device (4) according to claim 4 detects a plurality of navigation map information storage means (33) for storing map information including the location of the facility on the map, and a plurality of gaze directions of the vehicle occupants at different timings. Gazing direction detection means (33) for detecting, gazing point detection means (33) for detecting the gazing point of the occupant from a plurality of sighting directions of the occupant detected by the sight line direction detection means, and stored in the navigation map information storage means The navigation facility search means (33) for searching for a facility within a predetermined search distance from the gazing point of the occupant detected by the gazing point detection means using the map information thus obtained, and the navigation facility search means When the facility cannot be searched within the search distance from the gazing point of the occupant detected by the viewpoint detection unit, the position information of the gazing point of the occupant detected by the gazing point detection unit is stored in the information section. Gazing point information transmitting means (33) for transmitting to the vehicle, and a facility within a predetermined search distance from the gazing point of the occupant detected by the gazing point detection means based on the search result executed in the information center. And a facility information acquisition means (33) for acquiring information, wherein the facility for which information has been acquired by the facility information acquisition means is specified as a facility to be watched by a passenger.

前記構成を有する請求項1に記載の施設特定システムによれば、ナビゲーション装置において先ず施設の検索を行い、ナビゲーション装置において施設が検索できなかった場合には、更に情報センタで施設の検索を行うので、ナビゲーション装置に記憶されている地図情報が古いバージョンの地図情報であったとしても、情報センタに記憶された最新の地図情報に基づいて乗員が注視する施設を正確に特定することが可能となる。従って、例えば乗員の注視する施設を案内する際には、乗員にとって不要な施設情報については案内を抑制することができる。また、乗員の注視する施設をナビゲーション装置の目的地に設定する場合には、乗員の希望する目的地を複雑な操作を課すことなく設定することができ、利便性が向上する。   According to the facility specifying system according to claim 1 having the above-described configuration, the facility is first searched in the navigation device, and if the facility cannot be searched in the navigation device, the facility is further searched in the information center. Even if the map information stored in the navigation device is an old version of map information, the facility to be watched by the occupant can be accurately specified based on the latest map information stored in the information center. . Therefore, for example, when guiding a facility watched by an occupant, guidance can be suppressed for facility information unnecessary for the occupant. Further, when the facility watched by the occupant is set as the destination of the navigation device, the destination desired by the occupant can be set without imposing a complicated operation, and convenience is improved.

また、請求項2に記載の施設特定システムによれば、ナビゲーション装置において施設が検索できなかったエリアの地図情報を新たな地図情報に更新するので、ナビゲーション装置に記憶されている地図情報が古いバージョンの地図情報であった場合には、乗員の注視する施設の特定と共に地図情報の更新も合わせて行うことが可能となる。   Further, according to the facility specifying system according to claim 2, the map information of the area where the facility could not be searched in the navigation device is updated to new map information, so the map information stored in the navigation device is an old version. If the map information is the map information, it is possible to update the map information together with the identification of the facility watched by the passenger.

また、請求項3に記載の施設特定システムによれば、乗員が同一の施設を注視し続けている場合において、乗員の複数の視線方向から乗員の注視する施設を確実に特定する事が可能となる。   Further, according to the facility specifying system according to claim 3, when the occupant continues to watch the same facility, it is possible to reliably specify the facility that the occupant is watching from a plurality of sight line directions of the occupant. Become.

更に、請求項4に記載の施設特定装置によれば、施設特定装置において先ず施設の検索を行い、施設特定装置において施設が検索できなかった場合には、更に情報センタで施設の検索を行うので、施設特定装置に記憶されている地図情報が古いバージョンの地図情報であったとしても、情報センタに記憶された最新の地図情報に基づいて乗員が注視する施設を正確に特定することが可能となる。従って、例えば乗員の注視する施設を案内する際には、乗員にとって不要な施設情報については案内を抑制することができる。また、乗員の注視する施設をナビゲーション装置の目的地に設定する場合には、乗員の希望する目的地を複雑な操作を課すことなく設定することができ、利便性が向上する。   Further, according to the facility specifying device described in claim 4, the facility is first searched for in the facility specifying device, and if the facility cannot be searched in the facility specifying device, the facility is further searched in the information center. Even if the map information stored in the facility specifying device is an old version of map information, it is possible to accurately specify the facility to be watched by the occupant based on the latest map information stored in the information center. Become. Therefore, for example, when guiding a facility watched by an occupant, guidance can be suppressed for facility information unnecessary for the occupant. Further, when the facility watched by the occupant is set as the destination of the navigation device, the destination desired by the occupant can be set without imposing a complicated operation, and convenience is improved.

以下、本発明に係る施設特定システムについて具体化した第1実施形態及び第2実施形態について図面を参照しつつ詳細に説明する。   DESCRIPTION OF EMBODIMENTS Hereinafter, a first embodiment and a second embodiment embodied about a facility specifying system according to the present invention will be described in detail with reference to the drawings.

〔第1実施形態〕
先ず、第1実施形態に係る施設特定システム1の概略構成について図1を用いて説明する。図1は第1実施形態に係る施設特定システム1を示した概略構成図である。
図1に示すように、第1実施形態に係る施設特定システム1は、地図配信センタ2と、全国の各道路を走行する車両3と、車両3に設置されるナビゲーション装置(施設特定装置)4とから基本的に構成されている。
[First Embodiment]
First, a schematic configuration of the facility identification system 1 according to the first embodiment will be described with reference to FIG. FIG. 1 is a schematic configuration diagram showing a facility identification system 1 according to the first embodiment.
As shown in FIG. 1, a facility identification system 1 according to the first embodiment includes a map distribution center 2, a vehicle 3 traveling on each road in the country, and a navigation device (facility identification device) 4 installed in the vehicle 3. And basically consists of

ここで、地図配信センタ2は、定期的にナビゲーション装置4に記憶された古いバージョンの地図データを新設された新規道路を含む新たなバージョンの地図データへと更新する為の更新データの生成、並びに生成した更新データの車両3への配信を行う配信センタである。更に、第1実施形態に係る地図配信センタ2では、後述のようにナビゲーション装置4で車両3の運転者の注視する施設が検索できなかった場合に、地図配信センタ2の備える地図データに基づいて運転者の注視する施設の検索を行う。
尚、更新データとしてはナビゲーション装置4に記憶された地図データを全て書き換えて更新する(以下、全更新という)為の全更新データと、地図データの特定エリアのみを書き換えて更新する(以下、差分更新という)差分更新データの2種類がある。
Here, the map distribution center 2 generates update data for periodically updating the old version of map data stored in the navigation device 4 to a new version of map data including a new road, and This is a distribution center that distributes the generated update data to the vehicle 3. Furthermore, in the map distribution center 2 according to the first embodiment, when the facility watched by the driver of the vehicle 3 cannot be searched with the navigation device 4 as described later, based on the map data provided in the map distribution center 2. Search for facilities that the driver is watching.
As update data, all update data for rewriting and updating all the map data stored in the navigation device 4 (hereinafter referred to as “all update”) and only a specific area of the map data are rewritten and updated (hereinafter referred to as difference). There are two types of differential update data.

また、車両3は全国の各道路を走行する車両であり、車載機としてナビゲーション装置4を備える。そして、第1実施形態に係る施設特定システム1では、後述のように車両3の運転者が注視する施設を特定することを特徴とする。尚、地図配信センタ2と通信可能にある車両3は複数台である必要はなく、1台のみであっても良い。   Further, the vehicle 3 is a vehicle that travels on roads throughout the country, and includes a navigation device 4 as an in-vehicle device. And in the facility identification system 1 which concerns on 1st Embodiment, the facility which the driver | operator of the vehicle 3 gazes is specified as mentioned later. The number of vehicles 3 that can communicate with the map distribution center 2 is not necessarily plural, and may be only one.

また、ナビゲーション装置4は車両3に設置され、格納する地図データに基づいて自車位置周辺の地図を表示したり設定された目的地までの経路の探索及び案内を行う車載機である。ここで、地図配信センタ2とナビゲーション装置4は予め車両に搭載されたDCMや携帯電話機等の車両用の通信モジュール5(以下、単に通信モジュール5という)を用いて双方向に通信可能に構成されており、両者間で運転者の注視点の位置情報、運転者の注視する施設として特定された施設の案内情報及び差分更新データ等の各種情報を送受信する。
また、第1実施形態に係るナビゲーション装置4は、地図配信センタ2から差分更新データが送信された場合には、送信された差分更新データに基づいて格納する地図データの更新を行う。
The navigation device 4 is an in-vehicle device that is installed in the vehicle 3 and displays a map around the vehicle position based on the stored map data and searches and guides a route to a set destination. Here, the map distribution center 2 and the navigation device 4 are configured to be capable of bidirectional communication using a vehicle communication module 5 (hereinafter simply referred to as a communication module 5) such as a DCM or a mobile phone mounted in advance in the vehicle. The driver transmits and receives various types of information such as the position information of the driver's point of sight, the guidance information of the facility specified as the facility to be watched by the driver, and difference update data.
Moreover, the navigation apparatus 4 which concerns on 1st Embodiment updates the map data stored based on the transmitted difference update data, when difference update data is transmitted from the map delivery center 2. FIG.

続いて、施設特定システム1を構成する地図配信センタ2について図2を用いてより詳細に説明する。図2は第1実施形態に係る施設特定システム1の構成を示したブロック図である。   Next, the map distribution center 2 constituting the facility specifying system 1 will be described in detail with reference to FIG. FIG. 2 is a block diagram showing the configuration of the facility identification system 1 according to the first embodiment.

地図配信センタ2は、図2に示すようにサーバ(センタ施設検索手段、更新情報送信手段)10と、サーバ10に接続された情報記録部としてのセンタ側地図情報DB(センタ地図情報記憶手段)11と、バージョン管理DB12と、センタ側通信装置13とを備える。   As shown in FIG. 2, the map distribution center 2 includes a server (center facility search means, update information transmission means) 10 and a center side map information DB (center map information storage means) as an information recording unit connected to the server 10. 11, a version management DB 12, and a center side communication device 13.

サーバ10は、サーバ10の全体の制御を行う演算装置及び制御装置としてのCPU21、並びにCPU21が各種の演算処理を行うに当たってワーキングメモリとして使用されるRAM22、制御プログラムが記録されたROM23等の内部記憶装置を備えている。また、CPU21はROM23に記憶された各種プログラムに基づいて、ナビゲーション装置4から送信された運転者の注視点の位置情報とセンタ側地図情報DB11に記憶された基本地図データ14に基づいて運転者の注視する施設を検索する施設検索処理、検索された施設を運転者の注視する施設として特定する施設特定処理、古いバージョンの地図データを新しいバージョンの地図データに更新する差分更新データを生成する更新データ生成処理、生成した差分更新データを要求のあったナビゲーション装置4に対して配信する地図データ配信処理等を行う。   The server 10 includes an arithmetic device that controls the entire server 10, a CPU 21 as a control device, a RAM 22 that is used as a working memory when the CPU 21 performs various arithmetic processes, and an internal storage such as a ROM 23 that stores a control program. Equipment. Further, the CPU 21 is based on various programs stored in the ROM 23 and based on the driver's point of interest position information transmitted from the navigation device 4 and the basic map data 14 stored in the center-side map information DB 11. Facility search processing for searching the facility to be watched, facility identification processing for identifying the searched facility as a facility to be watched by the driver, update data for generating differential update data for updating the old version of the map data to the new version of the map data Generation processing, map data distribution processing for distributing the generated difference update data to the requested navigation device 4 are performed.

また、センタ側地図情報DB11には、外部からの入力データや入力操作に基づいて生成され、ナビゲーション装置4に記憶されたナビ地図データを更新する際の基本となる地図データである基本地図データ14がバージョン毎に区分されて記憶されている。ここで、バージョンとは地図データが作成された時期を特定する為の作成時期情報であり、バージョンを参照することによって地図データが作成された時期を特定することが可能となっている。また、センタ側地図情報DB11には、基本地図データ14に基づいてサーバ10により生成され、ナビゲーション装置4に格納された地図データの一部を新たなバージョンの地図データへと差分更新する為の差分更新データ15についてもそれぞれバージョン毎に区分されて記憶されている。   Further, in the center-side map information DB 11, basic map data 14, which is map data that is generated based on external input data and input operations and is the basis for updating the navigation map data stored in the navigation device 4. Are stored separately for each version. Here, the version is creation time information for specifying the time when the map data was created, and the time when the map data was created can be specified by referring to the version. Further, in the center-side map information DB 11, a difference for updating a part of the map data generated by the server 10 based on the basic map data 14 and stored in the navigation device 4 to a new version of map data. The update data 15 is also stored separately for each version.

ここで、基本地図データ14は、経路案内、交通情報案内及び地図表示に必要なデータが記録されている。具体的には、道路(リンク)形状に関するリンクデータ、ノード点に関するノードデータ、各交差点に関する交差点データ、経路を探索するための探索データ、施設に関する施設データ(POI(Point of Interest)情報)、地点を検索するための検索データ、地図、道路、交通情報等の画像を液晶ディスプレイに描画するための画像描画データ等から構成されている。   Here, the basic map data 14 records data necessary for route guidance, traffic information guidance, and map display. Specifically, link data regarding road (link) shape, node data regarding node points, intersection data regarding each intersection, search data for searching for routes, facility data regarding facilities (POI (Point of Interest) information), points Search data for searching for images, image drawing data for drawing images such as maps, roads, and traffic information on a liquid crystal display.

ここで、特に、第1実施形態に係る地図配信センタ2に記憶される施設データについて図3を用いて説明する。
図3に示すように施設データは、地図上に位置する各種施設について、識別情報としての施設IDと、施設の位置を特定する位置座標(x、y)と、施設のジャンル(飲食店、イタリア料理、中華料理、書店、コンビニ等)と、施設の営業時間等が記憶される。
そして、後述するようにサーバ10は施設データの特に施設の位置座標に基づいて、運転者が注視する施設を特定する。また、運転者が注視する施設が特定された場合には、その施設に関するジャンルや営業時間等に関する情報をナビゲーション装置4に送信する。
Here, in particular, facility data stored in the map distribution center 2 according to the first embodiment will be described with reference to FIG.
As shown in FIG. 3, the facility data includes a facility ID as identification information, a position coordinate (x, y) that specifies the location of the facility, and a genre of the facility (restaurant, Italy) for various facilities located on the map. Food, Chinese food, bookstore, convenience store, etc.) and facility opening hours.
Then, as will be described later, the server 10 specifies the facility that the driver pays attention to based on the location coordinates of the facility data. In addition, when a facility to be watched by the driver is specified, information related to the genre, business hours, and the like regarding the facility is transmitted to the navigation device 4.

一方、バージョン管理DB12には、各ナビゲーション装置4に格納されているナビ地図データのバージョンに関する情報が記録されている。   On the other hand, information related to the version of the navigation map data stored in each navigation device 4 is recorded in the version management DB 12.

更に、センタ側通信装置13はナビゲーション装置4とネットワーク8を介して通信を行う為の通信装置である。ここで、ネットワーク8としては、例えばLAN(Local Area Network)、WAN(Wide Area Network)、イントラネット、携帯電話回線網、電話回線網、公衆通信回線網、専用通信回線網、インターネット等の通信回線網等の通信系を使用することができる。そして、放送衛星によるCS放送、BS放送、地上波ディジタルテレビ放送、FM多重放送等を利用する通信系を使用することもできる。更に、高度道路交通システム(ITS)において利用されるノンストップ自動料金支払いシステム(ETC)、狭域通信システム(DSRC)等の通信系を使用することもできる。   Further, the center side communication device 13 is a communication device for communicating with the navigation device 4 via the network 8. Here, as the network 8, for example, a LAN (Local Area Network), a WAN (Wide Area Network), an intranet, a mobile phone network, a telephone network, a public communication network, a dedicated communication network, a communication network such as the Internet Etc. can be used. A communication system using CS broadcasting, BS broadcasting, terrestrial digital television broadcasting, FM multiplex broadcasting, or the like by a broadcasting satellite can also be used. Furthermore, a communication system such as a non-stop automatic fee payment system (ETC) or a narrow area communication system (DSRC) used in an intelligent road traffic system (ITS) can also be used.

次に、第1実施形態に係る施設特定システム1を構成するナビゲーション装置4の概略構成について図4を用いて説明する。図4は第1実施形態に係るナビゲーション装置4の構成を示したブロック図である。   Next, a schematic configuration of the navigation device 4 configuring the facility specifying system 1 according to the first embodiment will be described with reference to FIG. FIG. 4 is a block diagram showing the configuration of the navigation device 4 according to the first embodiment.

図4に示すように第1実施形態に係るナビゲーション装置4は、自車の現在位置を検出する現在位置検出部31と、各種のデータが記録されたデータ記録部32と、入力された情報に基づいて、各種の演算処理を行うナビゲーションECU(視線方向検出手段、注視点検出手段、ナビ施設検索手段、地図更新手段)33と、操作者からの操作を受け付ける操作部34と、操作者に対して自車周辺の地図や施設に関する施設情報を表示する液晶ディスプレイ35と、経路案内に関する音声ガイダンスや施設に関する案内音声を出力するスピーカ36と、記憶媒体であるDVDを読み取るDVDドライブ37と、地図配信センタ2等の情報センタとの間で通信を行う通信モジュール5と、運転者の発話音声を解析する音声認識部38とから構成されている。また、ナビゲーションECU33には、自車の走行速度を検出する車速センサ40と、運転者の発話音声を録取するマイク41と、車内で運転者の顔を撮像する車内カメラ42が接続される。   As shown in FIG. 4, the navigation device 4 according to the first embodiment includes a current position detection unit 31 that detects the current position of the host vehicle, a data recording unit 32 that records various data, and input information. Based on the navigation ECU (line-of-sight direction detection means, gazing point detection means, navigation facility search means, map update means) 33 that performs various arithmetic processing, an operation unit 34 that receives operations from the operator, and the operator A liquid crystal display 35 that displays facility information related to a map and facilities around the vehicle, a speaker 36 that outputs voice guidance related to route guidance and guidance sound related to facilities, a DVD drive 37 that reads a DVD as a storage medium, and map distribution The communication module 5 communicates with an information center such as the center 2 and a voice recognition unit 38 that analyzes a driver's voice. To have. The navigation ECU 33 is connected with a vehicle speed sensor 40 that detects the traveling speed of the vehicle, a microphone 41 that records the driver's speech, and an in-vehicle camera 42 that captures the driver's face in the vehicle.

以下に、ナビゲーション装置4を構成する各構成要素について順に説明する。
現在位置検出部31は、GPS51、地磁気センサ52、距離センサ53、ステアリングセンサ54、方位検出部としてのジャイロセンサ55、高度計(図示せず)等からなり、現在の自車の位置、方位等を検出することが可能となっている。
Below, each component which comprises the navigation apparatus 4 is demonstrated in order.
The current position detection unit 31 includes a GPS 51, a geomagnetic sensor 52, a distance sensor 53, a steering sensor 54, a gyro sensor 55 as an azimuth detection unit, an altimeter (not shown), and the like. It is possible to detect.

また、データ記録部32は、外部記憶装置及び記録媒体としてのハードディスク(図示せず)と、ハードディスクに記録された地図情報DB56、後述のナビゲーションECU33により検出された運転者の視線方向を累積的に記憶する視線方向DB57、所定のプログラム等を読み出すとともにハードディスクに所定のデータを書き込む為のドライバである記録ヘッド(図示せず)とを備えている。   The data recording unit 32 cumulatively displays a hard disk (not shown) as an external storage device and a recording medium, a map information DB 56 recorded in the hard disk, and a driver's line-of-sight direction detected by a navigation ECU 33 described later. A line-of-sight direction DB 57 to be stored, a recording head (not shown) that is a driver for reading predetermined programs and the like and writing predetermined data to the hard disk are provided.

ここで、地図情報DB56は、ナビゲーション装置4の走行案内、経路探索、地図表示に使用されるナビ地図データ58が記憶される。
ここで、ナビ地図データ58は前記した基本地図データ14と同様に経路案内及び地図表示に必要な各種情報から構成されており、例えば、道路(リンク)形状に関するリンクデータ、ノード点に関するノードデータ、各交差点に関する交差点データ、経路を探索するための探索データ、図3に示す施設に関する施設データ(POI(Point of Interest)情報)、地点を検索するための検索データ、地図、道路、交通情報等の画像を液晶ディスプレイ35に描画するための画像描画データ等から構成されている。
Here, the map information DB 56 stores navigation map data 58 used for travel guidance, route search, and map display of the navigation device 4.
Here, the navigation map data 58 is composed of various information necessary for route guidance and map display in the same manner as the basic map data 14 described above, for example, link data relating to road (link) shape, node data relating to node points, Intersection data for each intersection, search data for searching for routes, facility data (POI (Point of Interest) information) for the facilities shown in FIG. 3, search data for searching points, maps, roads, traffic information, etc. It is composed of image drawing data for drawing an image on the liquid crystal display 35 and the like.

そして、後述するようにナビゲーションECU33は施設データの特に施設の位置座標に基づいて、運転者が注視する施設を特定する。また、運転者が注視する施設が特定された場合には、その施設に関するジャンルや営業時間等に関する情報を液晶ディスプレイ35に表示したり、音声でスピーカ36から出力することにより運転者に施設の案内を行う。
また、ナビ地図データ58は、全国の全エリアの地図データを一括で更新する全更新、又は特定のエリアのみの地図データを更新する差分更新のいずれかによって更新される。尚、全更新及び差分更新の具体的な更新処理の方法については、既に公知の技術であるので、ここでは説明を省略する。
Then, as will be described later, the navigation ECU 33 specifies the facility that the driver pays attention to based on the position coordinates of the facility data, particularly the facility. In addition, when a facility to be watched by the driver is specified, information on the genre, business hours, etc. regarding the facility is displayed on the liquid crystal display 35 or is output from the speaker 36 by voice to guide the facility to the driver. I do.
Further, the navigation map data 58 is updated by either a full update that updates the map data of all areas in the country at once or a differential update that updates the map data of only a specific area. Note that a specific update processing method for full update and differential update is a known technique and will not be described here.

また、視線方向DB57は、運転者の視線方向の検出結果が検出時刻とともに記憶されるDBである。具体的には、車内カメラ42で撮像した撮像画像に基づいてナビゲーションECU33により検出された運転者の視線方向が、車両方位に対する相対角度(視線角度)によって相対的に特定され、GPS51やジャイロセンサ55等によって検出された現在時刻、車両の現在位置、方位とともに視線方向データとして記憶される。尚、運転者の視線方向は絶対方位によって特定しても良い。   The line-of-sight direction DB 57 is a DB in which the detection result of the driver's line-of-sight direction is stored together with the detection time. Specifically, the driver's line-of-sight direction detected by the navigation ECU 33 based on the captured image captured by the in-vehicle camera 42 is relatively specified by a relative angle (line-of-sight angle) with respect to the vehicle direction, and the GPS 51 and the gyro sensor 55 Are stored as line-of-sight direction data together with the current time, the current position, and the direction of the vehicle detected by the above. The driver's line-of-sight direction may be specified by an absolute direction.

ここで、特に、第1実施形態に係るナビゲーション装置4の視線方向DB57に記憶される視線方向データについて図5の具体例を用いて説明する。
図5では、車両71が道路72を走行中の場合において、所定のタイミングでの車両71を運転する運転者73の視線方向Eを特定する視線方向データを示す。そして、視線方向データは、現在の時刻(視線方向Eを検出した時刻)と、車両の現在位置(X,Y)と、車両の絶対方位φと、車両方位に対する運転者73の視線方向Eの相対角度(視線角度)θとから構成される。そして、上記視線方向データに基づいて運転者73の絶対的な視線方向Eが特定可能となる。
Here, in particular, the gaze direction data stored in the gaze direction DB 57 of the navigation device 4 according to the first embodiment will be described using the specific example of FIG.
FIG. 5 shows line-of-sight data for specifying the line-of-sight direction E of the driver 73 driving the vehicle 71 at a predetermined timing when the vehicle 71 is traveling on the road 72. The gaze direction data includes the current time (the time when the gaze direction E is detected), the current position (X, Y) of the vehicle, the absolute direction φ of the vehicle, and the gaze direction E of the driver 73 with respect to the vehicle direction. And a relative angle (line-of-sight angle) θ. And it becomes possible to specify the absolute gaze direction E of the driver 73 based on the gaze direction data.

一方、ナビゲーションECU(エレクトロニック・コントロール・ユニット)33は、目的地が選択された場合に現在位置から目的地までの誘導経路を設定する誘導経路設定処理、ナビ地図データ58に基づいて運転者の注視する施設を特定する施設特定処理等のナビゲーション装置4の全体の制御を行う電子制御ユニットである。そして、演算装置及び制御装置としてのCPU61、並びにCPU61が各種の演算処理を行うに当たってワーキングメモリとして使用されるとともに、経路が探索されたときの経路データ等が記憶されるRAM62、制御用のプログラムのほか、施設特定処理プログラム(図6、図7参照)等が記録されたROM63、ROM63から読み出したプログラムを記録するフラッシュメモリ64等の内部記憶装置を備えている。   On the other hand, the navigation ECU (Electronic Control Unit) 33 pays attention to the driver based on the navigation map data 58, which is a guidance route setting process for setting a guidance route from the current position to the destination when the destination is selected. This is an electronic control unit that performs overall control of the navigation device 4 such as a facility identification process for identifying a facility to be performed. The CPU 61 as the arithmetic device and the control device, the RAM 61 that is used as a working memory when the CPU 61 performs various arithmetic processes, stores the route data when the route is searched, and the control program. In addition, an internal storage device such as a ROM 63 in which a facility identification processing program (see FIGS. 6 and 7) and the like are recorded, and a flash memory 64 in which a program read from the ROM 63 is recorded is provided.

操作部34は、走行開始時の現在位置を修正し、案内開始地点としての出発地及び案内終了地点としての目的地を入力する際等に操作され、各種のキー、ボタン等の複数の操作スイッチ(図示せず)から構成される。また、ナビゲーション装置4で音声認識を開始する際に操作されるトークスイッチも操作部34に含まれる。
そして、ナビゲーションECU33は、各スイッチの押下等により出力されるスイッチ信号に基づき、対応する各種の動作を実行すべく制御を行う。尚、操作部34は液晶ディスプレイ35の前面に設けたタッチパネルによって構成することもできる。
The operation unit 34 is operated when correcting the current position at the start of traveling and inputting a departure point as a guidance start point and a destination point as a guidance end point, and a plurality of operation switches such as various keys and buttons. (Not shown). The operation unit 34 also includes a talk switch that is operated when voice recognition is started by the navigation device 4.
Then, the navigation ECU 33 performs control to execute various corresponding operations based on switch signals output by pressing the switches. The operation unit 34 can also be configured by a touch panel provided on the front surface of the liquid crystal display 35.

また、液晶ディスプレイ35には、道路を含む地図画像、交通情報、操作案内、操作メニュー、キーの案内、現在位置から目的地までの誘導経路、誘導経路に沿った案内情報、ニュース、天気予報、時刻、メール、テレビ番組等が表示される。更に、第1実施形態では、運転者の注視する施設の施設情報についても表示される。   Further, the liquid crystal display 35 has a map image including a road, traffic information, operation guidance, operation menu, key guidance, guidance route from the current position to the destination, guidance information along the guidance route, news, weather forecast, Time, mail, TV program, etc. are displayed. Furthermore, in 1st Embodiment, it displays also about the facility information of the facility which a driver | operator watches.

また、スピーカ36は、ナビゲーションECU33からの指示に基づいて誘導経路に沿った走行を案内する音声ガイダンスや、交通情報の案内を出力する。更に、第1実施形態では、運転者の注視する施設に関する案内音声についても出力される。   The speaker 36 outputs voice guidance for guiding traveling along the guidance route and traffic information guidance based on an instruction from the navigation ECU 33. Furthermore, in 1st Embodiment, the guidance audio | voice regarding the facility which a driver | operator gazes is also output.

また、DVDドライブ37は、DVDやCD等の記録媒体に記録されたデータを読み取り可能なドライブである。そして、読み取ったデータに基づいて地図情報DB56の更新等が行われる。   The DVD drive 37 is a drive that can read data recorded on a recording medium such as a DVD or a CD. Then, the map information DB 56 is updated based on the read data.

また、通信モジュール5は、地図配信センタ2、交通情報センタ、例えば、VICS(登録商標:Vehicle Information and Communication System)センタ等から送信された、差分更新データ、渋滞情報、規制情報、駐車場情報、交通事故情報等の各情報から成る交通情報を受信する為の通信装置であり、例えば携帯電話機やDCMが該当する。   Further, the communication module 5 includes difference update data, traffic jam information, regulation information, parking lot information, transmitted from the map distribution center 2, traffic information center, for example, VICS (registered trademark: Vehicle Information and Communication System) center, etc. This is a communication device for receiving traffic information composed of information such as traffic accident information, and corresponds to, for example, a mobile phone or DCM.

また、音声認識部38は、操作部34のトークスイッチがONされている間にマイク41によって録取された音声を解析する装置である。そして、第1実施形態に係るナビゲーション装置4では、音声認識部38によって運転者の発声した音声が認識されたことをトリガとして、運転者の注視する施設の特定が行われる。   The voice recognition unit 38 is a device that analyzes the voice recorded by the microphone 41 while the talk switch of the operation unit 34 is ON. And in the navigation apparatus 4 which concerns on 1st Embodiment, the facility which a driver | operator gazes is specified by having recognized the audio | voice which the driver uttered by the audio | voice recognition part 38 as a trigger.

一方、車速センサ40は、車両の車輪の回転に応じて車速パルスを発生させ、車両の移動距離や車速を検出可能とするセンサである。   On the other hand, the vehicle speed sensor 40 is a sensor that generates a vehicle speed pulse in accordance with the rotation of the vehicle wheel, and can detect the moving distance and the vehicle speed of the vehicle.

また、マイク41は、音を電気信号に変換する機器であり、電気信号に変換された音は音声認識部38へと送信される。ここで、マイク41はインストルメントパネルの上面に取り付けられ、集音方向が運転席方向となるように設置される。   The microphone 41 is a device that converts sound into an electric signal, and the sound converted into the electric signal is transmitted to the voice recognition unit 38. Here, the microphone 41 is attached to the upper surface of the instrument panel, and is installed so that the sound collection direction is the driver seat direction.

また、車内カメラ42は、例えばCCD等の固体撮像素子を用いたものであり、インストルメントパネルの上面に取り付けられ、視線方向を運転席に向けて設置される。そして、運転席に座った運転者の顔を撮像する。また、ナビゲーションECU33は後述するように撮像された撮像画像から運転者の視線方向を検出し、検出した運転者の視線方向から運転者が注視する施設を特定する。   The in-vehicle camera 42 uses a solid-state image sensor such as a CCD, for example, is attached to the upper surface of the instrument panel, and is installed with the line-of-sight direction facing the driver's seat. Then, the face of the driver sitting in the driver's seat is imaged. Further, the navigation ECU 33 detects the driver's line-of-sight direction from a captured image captured as will be described later, and identifies the facility where the driver is gazing from the detected driver's line-of-sight direction.

続いて、前記構成を有する第1実施形態に係るナビゲーション装置4及び地図配信センタ2においてナビゲーションECU33及びサーバ10が実行する施設特定処理プログラムについて図6及び図7に基づき説明する。図6及び図7は第1実施形態に係る施設特定処理プログラムのフローチャートである。ここで、施設特定処理プログラムは、運転者が注視する施設を特定するプログラムである。尚、以下の図6及び図7にフローチャートで示されるプログラムは、ナビゲーション装置4が備えているRAM62やROM63、及び地図配信センタ2が備えているRAM22やROM23に記憶されており、CPU61又はCPU21により所定間隔(例えば200ms毎)で実行される。   Next, the facility identification processing program executed by the navigation ECU 33 and the server 10 in the navigation device 4 and the map distribution center 2 according to the first embodiment having the above-described configuration will be described with reference to FIGS. 6 and 7. 6 and 7 are flowcharts of the facility identification processing program according to the first embodiment. Here, the facility identification processing program is a program that identifies the facility that the driver is watching. 6 and 7 are stored in the RAM 62 and the ROM 63 provided in the navigation device 4 and the RAM 22 and the ROM 23 provided in the map distribution center 2, and are executed by the CPU 61 or the CPU 21. It is executed at a predetermined interval (for example, every 200 ms).

先ず、図6及び図7に基づいてナビゲーション装置4のCPU61が実行する施設特定処理プログラムについて説明すると、先ずステップ(以下、Sと略記する)1において、CPU61はメモリの初期化などの初期化処理を実行する。   First, the facility identification processing program executed by the CPU 61 of the navigation device 4 will be described with reference to FIGS. 6 and 7. First, in step (hereinafter abbreviated as S) 1, the CPU 61 performs initialization processing such as memory initialization. Execute.

次に、S2でCPU61は運転者の注視する施設の特定を開始する開始トリガが入力されたか否かを判定する。ここで、第1実施形態では、トークスイッチがONされて運転者による発話を音声認識部38で認識した場合に開始トリガが入力されたと判定する。尚、トークスイッチがONされたことのみを開始トリガの入力の条件としても良い。また、特定の発話内容(例えば、「あの店は?」)を認識したことを開始トリガの入力の条件としても良い。   Next, in S <b> 2, the CPU 61 determines whether or not a start trigger for starting the identification of the facility watched by the driver is input. Here, in the first embodiment, when the talk switch is turned on and the speech recognition unit 38 recognizes the utterance by the driver, it is determined that the start trigger is input. It should be noted that only the start of the talk switch may be set as the start trigger input condition. In addition, recognition of specific utterance content (for example, “What is that store?”) May be used as a condition for input of a start trigger.

その結果、開始トリガが入力されたと判定された場合(S2:YES)にはS3へと移行する。一方、開始トリガが入力されていないと判定された場合(S2:NO)には、開始トリガが入力されるまで待機する。   As a result, when it is determined that the start trigger is input (S2: YES), the process proceeds to S3. On the other hand, when it is determined that the start trigger is not input (S2: NO), the process waits until the start trigger is input.

S3においてCPU61は、GPS51により自車の現在位置(仮にA地点とする)での位置座標(X1,Y1)を検出するとともに、地磁気センサ52やジャイロセンサ55により自車の絶対方位φ1を検出する。
更に、S3でCPU61は自車の現在位置(A地点)での運転者の視線方向Eを検出する。具体的には、車内カメラ42によって運転席に座った運転者の顔を撮像し、撮像画像に所定の画像処理を施すことによって運転者の顔の向きや瞳孔の位置を検出する。そして、検出された運転者の顔の向きや瞳孔の位置、車内カメラ42の設置位置や設置角度から運転者の視線方向Eを検出する。尚、視線方向Eは図8に示すように自車方位φ1に対する相対角度(視線角度)θ1によって相対的に特定される。
In S3, the CPU 61 detects the position coordinates (X1, Y1) at the current position of the vehicle (assumed to be a point A) by the GPS 51, and detects the absolute direction φ1 of the vehicle by the geomagnetic sensor 52 and the gyro sensor 55. .
Furthermore, in S3 CPU 61 detects the visual line direction E A driver at the current position of the vehicle (A point). Specifically, the driver's face seated in the driver's seat is imaged by the in-vehicle camera 42, and the driver's face orientation and pupil position are detected by applying predetermined image processing to the captured image. Then, the position of the orientation and the pupil of the face of the detected driver, detects the visual line direction E A of the driver from the installation position and installation angle of the vehicle camera 42. Incidentally, the line-of-sight direction E A is relatively specified by the relative angle (viewing angle) .theta.1 with respect to the host vehicle orientation φ1 as shown in FIG.

そして、S4でCPU61は、前記S3で検出された自車位置(X1,Y1)、自車方位φ1、視線角度θ1を含むA地点での視線方向データを視線方向DBに記憶する。   In S4, the CPU 61 stores the gaze direction data at the point A including the own vehicle position (X1, Y1), the own vehicle orientation φ1, and the gaze angle θ1 detected in S3 in the gaze direction DB.

続いて、S5でCPU61は所定時間T(例えば2sec)待機する。   Subsequently, in S5, the CPU 61 waits for a predetermined time T (for example, 2 seconds).

そして、S6においてCPU61は、GPS51により自車の現在位置(仮にB地点とする)での位置座標(X2,Y2)を検出するとともに、地磁気センサ52やジャイロセンサ55により自車の絶対方位φ2を検出する。
更に、S6でCPU61は自車の現在位置(B地点)での運転者の視線方向Eを検出する。具体的には、車内カメラ42によって運転席に座った運転者の顔を撮像し、撮像画像に所定の画像処理を施すことによって運転者の顔の向きや瞳孔の位置を検出する。そして、検出された運転者の顔の向きや瞳孔の位置、車内カメラ42の設置位置や設置角度から運転者の視線方向Eを検出する。尚、視線方向Eは図8に示すように自車方位φ2に対する相対角度(視線角度)θ2によって相対的に特定される。また、上記S3及びS6が視線方向検出手段の処理に相当する。
In S6, the CPU 61 detects the position coordinates (X2, Y2) at the current position of the host vehicle (assumed to be point B) by the GPS 51, and sets the absolute direction φ2 of the host vehicle by the geomagnetic sensor 52 and the gyro sensor 55. To detect.
Furthermore, S6 in CPU61 detects the visual line direction E B of the driver at the current position of the vehicle (B point). Specifically, the driver's face seated in the driver's seat is imaged by the in-vehicle camera 42, and the driver's face orientation and pupil position are detected by applying predetermined image processing to the captured image. Then, the position of the orientation and the pupil of the face of the detected driver, detects the visual line direction E B of the driver from the installation position and installation angle of the vehicle camera 42. Incidentally, the line-of-sight direction E B is relatively specified by the relative angle (viewing angle) .theta.2 with respect to the host vehicle orientation φ2 as shown in FIG. Further, S3 and S6 correspond to the processing of the line-of-sight direction detecting means.

そして、S7でCPU61は、前記S6で検出された自車位置(X2,Y2)、自車方位φ2、視線角度θ2を含むB地点での視線方向データを視線方向DB57に記憶する。   In S7, the CPU 61 stores the gaze direction data at the point B including the own vehicle position (X2, Y2), the own vehicle direction φ2, and the gaze angle θ2 detected in S6 in the gaze direction DB 57.

その後、S8でCPU61は、前記S4で記憶されたA地点での視線方向データと前記S7で記憶されたB地点での視線方向データとに基づいて、運転者が注視する注視点C(XX,YY)を検出する。具体的に、第1実施形態では図8に示すように運転者が同一の注視点Cを見続けると仮定し、異なるタイミング(第1実施形態では2sec間隔)で検出されたA地点とB地点での運転者の視線方向E,Eが交差する地点の座標を、三角測量による位置測定技術を用いて算出する。そして、算出された地点を運転者が注視する注視点C(XX,YY)として検出する。尚、上記S8が注視点検出手段の処理に相当する。 Thereafter, in S8, the CPU 61 determines the gaze point C (XX, XX) that the driver gazes based on the gaze direction data at the point A stored in S4 and the gaze direction data at the point B stored in S7. YY) is detected. Specifically, in the first embodiment, as shown in FIG. 8, it is assumed that the driver keeps watching the same gazing point C, and the points A and B detected at different timings (2 sec intervals in the first embodiment). The coordinates of the point at which the driver's line-of-sight directions E A and E B intersect are calculated using a triangulation position measurement technique. Then, the calculated point is detected as a gaze point C (XX, YY) at which the driver gazes. Note that S8 corresponds to the processing of the gazing point detection means.

続いて、S9でCPU61は、前記S8で検出された注視点Cと、ナビ地図データ58から取得した注視点周辺の施設の位置座標に基づいて、注視点Cから所定の検索距離以内(例えば、10m〜50m)にある施設を検索する。尚、検索距離は初期段階では最も短い最短距離(例えば10m)であり、その後に検索範囲(注視点Cを中心に半径を検索距離とした円形範囲)内に施設が位置しないと判定された場合に後述のように最大距離(例えば50m)まで徐々に拡大される(S13)。尚、上記S9がナビ施設検索手段の処理に相当する。   Subsequently, in S9, the CPU 61 determines that the gazing point C detected in S8 and the position coordinates of the facility around the gazing point acquired from the navigation map data 58 are within a predetermined search distance from the gazing point C (for example, Search for facilities located between 10m and 50m). Note that the search distance is the shortest shortest distance (for example, 10 m) in the initial stage, and then it is determined that the facility is not located in the search range (a circular range with the radius of search centered on the gazing point C). As will be described later, the distance is gradually enlarged to a maximum distance (for example, 50 m) (S13). Note that S9 corresponds to the processing of the navigation facility search means.

そして、S10でCPU61は、注視点Cから現在の検索距離以内で施設が検索できたか否か判定する。その結果、現在の検索距離で施設が検索できたと判定された場合(S10:YES)には、S11へと移行する。   In S10, the CPU 61 determines whether or not the facility has been searched within the current search distance from the gazing point C. As a result, when it is determined that the facility can be searched at the current search distance (S10: YES), the process proceeds to S11.

S11においてCPU61は、前記S9で検索された施設を運転者の注視する施設として特定する。そして、特定した施設に対する案内を液晶ディスプレイ35やスピーカ36を用いて行う(S12)。また、特定した施設をナビゲーション装置4の目的地に設定しても良い。   In S11, the CPU 61 specifies the facility searched in S9 as a facility to be watched by the driver. Then, guidance for the specified facility is performed using the liquid crystal display 35 and the speaker 36 (S12). Further, the specified facility may be set as the destination of the navigation device 4.

ここで、図9及び図10を用いて上記S9〜S11で実行される運転者の注視する施設の検索処理及び特定処理について、より詳細に説明する。
図9は注視点Cを中心とした検索範囲75内に一の施設のみが位置する場合を示した図である。そして、図9に示す状況で前記S9の施設の検索処理が行われると、注視点Cを中心とした検索範囲75内において施設(B)のみが検索される。従って、前記S11では施設(B)が運転者の注視する施設として特定される。
Here, using FIG. 9 and FIG. 10, the facility search process and identification process performed by the driver in S9 to S11 will be described in more detail.
FIG. 9 is a diagram showing a case where only one facility is located within the search range 75 with the gazing point C as the center. Then, when the facility search process of S9 is performed in the situation shown in FIG. 9, only the facility (B) is searched within the search range 75 centered on the gazing point C. Therefore, in S11, the facility (B) is specified as the facility that the driver watches.

図10は注視点Cを中心とした検索範囲75内に2以上の施設が位置する場合を示した図である。そして、図10に示す状況で前記S9の施設の検索処理が行われると、注視点Cを中心とした検索範囲75内において施設(A)と施設(B)が検索される。従って、前記S11では施設(A)と施設(B)が運転者の注視する施設として特定される。尚、検索範囲内に2以上の施設が位置する場合には、注視点に最も近い施設(図10では施設(B))のみを運転者の注視する施設として特定しても良い。   FIG. 10 is a diagram showing a case where two or more facilities are located in the search range 75 with the gazing point C as the center. Then, when the facility search process of S9 is performed in the situation shown in FIG. 10, the facility (A) and the facility (B) are searched within the search range 75 centering on the gazing point C. Therefore, in S11, the facility (A) and the facility (B) are specified as facilities to be watched by the driver. When two or more facilities are located within the search range, only the facility closest to the gazing point (the facility (B) in FIG. 10) may be specified as the facility to be watched by the driver.

一方、現在の検索距離では施設が検索できないと判定された場合(S10:NO)には、検索距離を所定距離(例えば10m)だけ拡張する(S13)。   On the other hand, when it is determined that the facility cannot be searched at the current search distance (S10: NO), the search distance is extended by a predetermined distance (for example, 10 m) (S13).

更に、S14においてCPU61は、その拡張された検索距離が最大距離(例えば50m)を越えたか否か判定する。そして、検索距離が最大距離を越えたと判定された場合(S14:YES)には、図7のS15へと移行する。   Furthermore, in S14, the CPU 61 determines whether or not the extended search distance exceeds a maximum distance (for example, 50 m). If it is determined that the search distance exceeds the maximum distance (S14: YES), the process proceeds to S15 in FIG.

ここで、図11は運転者が注視する施設を特定できない場合を示した図である。図11に示すように、検索距離が最大距離となった状態で検索範囲75内にいずれの施設も位置しない場合では、前記S9の施設の検索処理によってはいずれの施設(A)〜(C)も検索されない。従って、運転者の注視する施設は特定されない。   Here, FIG. 11 is a diagram illustrating a case in which the facility to be watched by the driver cannot be specified. As shown in FIG. 11, when no facility is located in the search range 75 with the search distance being the maximum distance, any facility (A) to (C) depending on the facility search process of S9. Is also not searched. Therefore, the facility that the driver watches is not specified.

尚、検索距離の最大値は、運転者の視野角と車両から注視点までの距離によって決定される。ここで、図12は検索距離の最大値の決定方法について示した図である。
図12に示すように、車両71を運転する運転者73の視野角が2αであって、車両71から注視点Cまでの距離がLである場合には、検索距離の最大値は“L×tanα”と決定する。尚、運転者の視野角又は車両から注視点までの距離のいずれか一方のみに基づいて検索距離の最大値を決定しても良い。
The maximum value of the search distance is determined by the driver's viewing angle and the distance from the vehicle to the gazing point. Here, FIG. 12 is a diagram showing a method for determining the maximum value of the search distance.
As shown in FIG. 12, when the viewing angle of the driver 73 driving the vehicle 71 is 2α and the distance from the vehicle 71 to the gazing point C is L, the maximum value of the search distance is “L × tan α ″ is determined. Note that the maximum value of the search distance may be determined based only on either the driver's viewing angle or the distance from the vehicle to the gazing point.

それに対して、前記S14において検索距離が最大距離を越えていないと判定された場合(S14:NO)にはS9へと戻り、拡張した検索距離に基づいて、再度、施設の検索が行われる。   On the other hand, if it is determined in S14 that the search distance does not exceed the maximum distance (S14: NO), the process returns to S9 and the facility is searched again based on the extended search distance.

次に、図7のS15でCPU61は、前記S8で検出された運転者の注視点C(XX,YY)の位置情報を地図配信センタ2へと通信モジュール5を介して送信する。尚、上記S15が注視点情報送信手段の処理に相当する。   Next, in S15 of FIG. 7, the CPU 61 transmits the position information of the driver's gazing point C (XX, YY) detected in S8 to the map distribution center 2 via the communication module 5. Note that S15 corresponds to the process of the point of interest information transmission unit.

その後、S16でCPU61は、地図配信センタ2から送信された施設案内データと差分更新データを受信する。ここで、施設案内データは後述する地図配信センタ2で実行される処理(S102〜S104)によって運転者の注視する施設として特定された施設に関する案内情報である。また、差分更新データは同じく地図配信センタ2で実行される処理によって運転者の注視する施設として特定された施設を含むエリア(具体的には施設を中心とし、半径が最大検索距離(図12参照)の円内)のナビ地図データ58を新しいバージョンの地図データに更新する為のデータである。尚、地図配信センタ2でも運転者の注視する施設が検索できなかった場合には施設案内データのみ送信される。尚、上記S16がナビ施設情報取得手段の処理に相当する。
Thereafter, in S16, the CPU 61 receives the facility guidance data and the difference update data transmitted from the map distribution center 2. Here, the facility guidance data is guidance information related to a facility identified as a facility to be watched by the driver by processing (S102 to S104) executed in the map distribution center 2 described later. Similarly, the difference update data is an area including a facility specified as a facility to be watched by the driver by the process executed in the map distribution center 2 (specifically, the center is the facility and the radius is the maximum search distance (see FIG. 12). This is data for updating the navigation map data 58 in the circle)) to a new version of map data. In addition, only the facility guidance data is transmitted when the facility to be watched by the driver cannot be retrieved even in the map distribution center 2. Note that S16 corresponds to the processing of the navigation facility information acquisition means.

次に、S17においてCPU61は、前記S16で受信した施設案内データに基づいて、地図配信センタ2において運転者の注視する施設として特定された施設に対する案内を液晶ディスプレイ35やスピーカ36を用いて行う。尚、地図配信センタ2においても運転者の注視する施設が特定できなかった場合には、該当する施設が無い旨の案内を行う。また、地図配信センタ2において特定された施設をナビゲーション装置4の目的地に設定しても良い。   Next, in S17, the CPU 61 uses the liquid crystal display 35 and the speaker 36 to guide the facility specified as the facility to be watched by the driver in the map distribution center 2 based on the facility guidance data received in S16. In the map distribution center 2, if the facility that the driver is gazing at cannot be specified, guidance is provided that there is no corresponding facility. Further, the facility specified in the map distribution center 2 may be set as the destination of the navigation device 4.

続いて、S18では前記S16で受信した差分更新データを用いて地図情報DB56に格納されたナビ地図データ58の差分更新処理を行う。その結果、ナビ地図データ58は、地図配信センタ2によって運転者の注視する施設として特定された施設を含む新たな地図データへと更新される。尚、上記S18の処理は前記S16で差分更新データを受信していない場合には行われない。また、上記S18が地図更新手段の処理に相当する。   Subsequently, in S18, the difference update processing of the navigation map data 58 stored in the map information DB 56 is performed using the difference update data received in S16. As a result, the navigation map data 58 is updated to new map data including the facility specified as the facility to be watched by the driver by the map distribution center 2. The process of S18 is not performed when the difference update data is not received in S16. Further, S18 corresponds to the processing of the map update means.

次に、図7に基づいて地図配信センタ2のCPU21が実行する施設特定処理プログラムについて説明すると、先ずS101において、CPU21は前記S15でナビゲーション装置4から送信された運転者の注視点C(XX,YY)の位置情報を受信する。   Next, the facility identification processing program executed by the CPU 21 of the map distribution center 2 will be described with reference to FIG. 7. First, in S101, the CPU 21 sends the driver's gaze C (XX, XX,) transmitted from the navigation device 4 in S15. YY) position information is received.

続いて、S102でCPU21は、前記S101で受信した注視点Cと、基本地図データ14から取得した注視点周辺の施設の位置座標に基づいて、注視点Cから所定の検索距離以内にある施設を検索する。尚、検索距離は初期段階では最も短い最短距離であり、その後に検索範囲(注視点Cを中心に半径を検索距離とした円形範囲)内に施設が位置しないと判定された場合に最大距離まで徐々に拡大される。尚、上記地図配信センタ2が実行する施設の検索処理の具体的内容については、既に説明したナビゲーション装置4が実行する施設の検索処理(S9、S10、S13、S14)と同様の処理であるので、省略する。また、上記S102がセンタ施設検索手段の処理に相当する。   Subsequently, in S102, the CPU 21 selects a facility within a predetermined search distance from the gazing point C based on the gazing point C received in S101 and the position coordinates of the facility around the gazing point acquired from the basic map data 14. Search for. The search distance is the shortest shortest distance in the initial stage, and then reaches the maximum distance when it is determined that the facility is not located in the search range (a circular range centered on the gazing point C and having a radius as the search distance). It is gradually enlarged. The specific content of the facility search process executed by the map distribution center 2 is the same as the facility search process (S9, S10, S13, S14) executed by the navigation device 4 described above. Omitted. Further, the above S102 corresponds to the processing of the center facility search means.

次に、S103でCPU21は、施設が検索できたか否か判定する。その結果、施設が検索できたと判定された場合(S103:YES)には、S104へと移行する。   Next, in S103, the CPU 21 determines whether or not the facility has been searched. As a result, when it is determined that the facility has been searched (S103: YES), the process proceeds to S104.

S104においてCPU21は、前記S102で検索された施設を運転者の注視する施設として特定する。そして、特定した施設に対する案内データ(例えば、施設名称や施設ジャンル等)を地図データ14に基づいて作成する(S105)。   In S104, the CPU 21 specifies the facility searched in S102 as the facility to be watched by the driver. Then, guidance data (for example, facility name, facility genre, etc.) for the specified facility is created based on the map data 14 (S105).

その後、S106においてCPU21は、前記S104で特定された施設を含むエリア(具体的には施設を中心とし、半径が最大検索距離(図12参照)の円内)を新しいバージョンの地図情報に更新する為に必要となる差分更新データをセンタ側地図情報DB11から取得する。   After that, in S106, the CPU 21 updates the area including the facility specified in S104 (specifically, in the circle centered on the facility and whose radius is the maximum search distance (see FIG. 12)) to the new version of the map information. Difference update data necessary for this purpose is acquired from the center-side map information DB 11.

そして、S107においてCPU21は、前記S105で作成された施設案内データと、前記S106で取得した差分更新データを該当のナビゲーション装置4へと送信する。それに対して、施設案内データ及び差分更新データを受信したナビゲーション装置4は、前記したように運転者の注視する施設についての案内を行うとともに、ナビ地図データ58の更新を行う(S17、S18)。尚、上記S107が更新情報送信手段の処理に相当する。   In S107, the CPU 21 transmits the facility guidance data created in S105 and the difference update data acquired in S106 to the corresponding navigation device 4. On the other hand, the navigation apparatus 4 that has received the facility guidance data and the difference update data guides the facility that the driver is watching as described above, and updates the navigation map data 58 (S17, S18). Note that S107 corresponds to the processing of the update information transmission unit.

一方、前記S103で施設が検索できないと判定された場合(S103:NO)には、該当する施設が無い旨を案内する案内データを作成し(S108)、該当のナビゲーション装置4へと送信する(S107)。   On the other hand, when it is determined in S103 that the facility cannot be searched (S103: NO), guidance data for informing that there is no corresponding facility is created (S108) and transmitted to the corresponding navigation device 4 ( S107).

以上詳細に説明した通り、第1実施形態に係る施設特定システム1及びナビゲーション装置4では、異なる2以上のタイミングにおいて車両を運転する運転者の複数の視線方向を車内カメラ42の撮像画像から検出し(S3、S6)、検出された運転者の複数の視線方向が交差する地点から運転者の注視点を検出し(S8)、先ず、ナビゲーション装置4において記憶されたナビ地図データ58に基づいて検出された注視点から所定の検索距離内に位置する施設を検索し、該当する施設を運転者の注視する施設として特定する(S9〜S14)。また、ナビゲーション装置4において運転者の注視点から最大の検索距離内に施設が検索できなかった場合には、地図配信センタ2において記憶された基本地図データ14に基づいて検出された注視点から所定の検索距離内に位置する施設を検索し、該当する施設を運転者の注視する施設として特定する(S102〜S104)ので、ナビゲーション装置4に記憶されている地図情報が古いバージョンの地図情報であったとしても、地図配信センタ2に記憶された最新の地図情報に基づいて運転者が注視する施設を正確に特定することが可能となる。従って、例えば運転者の注視する施設を案内する際には、運転者にとって不要な施設情報については案内を抑制することができる。また、運転者の注視する施設をナビゲーション装置4の目的地に設定する場合には、運転者の希望する目的地を複雑な操作を課すことなく設定することができ、利便性が向上する。
また、ナビゲーション装置4において施設が検索できなかったエリアの地図情報を新たな地図情報に更新する(S18)ので、ナビゲーション装置4に記憶されている地図情報が古いバージョンの地図情報であった場合には、運転者の注視する施設の特定と共に地図情報の更新も合わせて行うことが可能となる。
また、視線方向の交点を運転者の注視点として検出するので、運転者が同一の施設を注視し続けている場合において、運転者の複数の視線方向から運転者の注視する施設を確実に特定する事が可能となる。
As described in detail above, the facility identification system 1 and the navigation device 4 according to the first embodiment detect a plurality of line-of-sight directions of the driver who drives the vehicle from two images taken by the in-vehicle camera 42 at two or more different timings. (S3, S6), the driver's gaze point is detected from the point where the detected plurality of gaze directions of the driver intersect (S8), and firstly detected based on the navigation map data 58 stored in the navigation device 4 A facility located within a predetermined search distance from the gazed point is searched, and the corresponding facility is specified as a facility to be watched by the driver (S9 to S14). In addition, when the navigation device 4 cannot find the facility within the maximum search distance from the driver's point of sight, the navigation device 4 determines from the point of sight detected based on the basic map data 14 stored in the map distribution center 2. Since the facility located within the search distance is searched and the corresponding facility is identified as the facility to be watched by the driver (S102 to S104), the map information stored in the navigation device 4 is the old version of the map information. Even so, it is possible to accurately identify the facility that the driver is gazing on based on the latest map information stored in the map distribution center 2. Therefore, for example, when guiding a facility watched by the driver, guidance can be suppressed for facility information unnecessary for the driver. Further, when the facility watched by the driver is set as the destination of the navigation device 4, the destination desired by the driver can be set without imposing a complicated operation, and convenience is improved.
In addition, since the map information of the area where the facility could not be searched in the navigation device 4 is updated to new map information (S18), the map information stored in the navigation device 4 is an old version of map information. The map information can be updated together with the identification of the facility to be watched by the driver.
In addition, since the intersection of the line-of-sight direction is detected as the driver's gaze point, when the driver keeps gazing at the same facility, the facility that the driver gazes from the driver's multiple line-of-sight directions can be reliably identified It becomes possible to do.

〔第2実施形態〕
次に、第2実施形態に係る施設特定システムについて図13を用いて説明する。尚、以下の説明において上記図1乃至図12の第1実施形態に係る施設特定システム1の構成と同一符号は、前記第1実施形態に係る施設特定システム1等の構成と同一あるいは相当部分を示すものである。
[Second Embodiment]
Next, a facility identification system according to the second embodiment will be described with reference to FIG. In the following description, the same reference numerals as those of the facility specifying system 1 according to the first embodiment in FIGS. 1 to 12 denote the same or corresponding parts as those of the facility specifying system 1 according to the first embodiment. It is shown.

この第2実施形態に係る施設特定システムの概略構成は、第1実施形態に係る施設特定システム1とほぼ同じ構成である。また、各種制御処理も第1実施形態に係る施設特定システム1とほぼ同じ制御処理である。   The schematic configuration of the facility identification system according to the second embodiment is substantially the same as that of the facility identification system 1 according to the first embodiment. Various control processes are also substantially the same as those in the facility identification system 1 according to the first embodiment.

但し、第2実施形態に係る施設特定システムでは、ナビゲーション装置4において運転者の注視点から最大の検索距離内に施設が検索できなかった場合に、注視点を含む所定範囲のエリアを新しいバージョンの地図情報に更新し、再度、ナビゲーション装置4が施設の検索を行う点で第1実施形態に係る施設特定システム1と異なっている。   However, in the facility specifying system according to the second embodiment, when a facility cannot be searched within the maximum search distance from the driver's gazing point in the navigation device 4, an area of a predetermined range including the gazing point is a new version. It is different from the facility identification system 1 according to the first embodiment in that it is updated to map information and the navigation device 4 searches for facilities again.

以下に、第2実施形態に係る施設特定システムを構成するナビゲーション装置4においてナビゲーションECU33が実行する施設特定処理プログラムについて図13に基づき説明する。図13は第2実施形態に係る施設特定処理プログラムのフローチャートである。尚、以下の図13にフローチャートで示されるプログラムは、ナビゲーション装置4が備えているRAM62やROM63に記憶されており、CPU61により所定間隔(例えば200ms毎)で実行される。   Below, the facility specific process program which navigation ECU33 performs in the navigation apparatus 4 which comprises the facility specific system which concerns on 2nd Embodiment is demonstrated based on FIG. FIG. 13 is a flowchart of the facility identification processing program according to the second embodiment. The program shown in the flowchart of FIG. 13 below is stored in the RAM 62 and the ROM 63 provided in the navigation device 4, and is executed by the CPU 61 at predetermined intervals (for example, every 200 ms).

ここで、S201〜S214の処理は、前述した第1実施形態に係るナビゲーション装置4が実行する施設特定処理プログラムのS1〜S14(図6)と同様の処理であるので、説明は省略する。   Here, the processing of S201 to S214 is the same processing as S1 to S14 (FIG. 6) of the facility identification processing program executed by the navigation device 4 according to the first embodiment described above, and thus the description thereof is omitted.

そして、S215においてCPU61は、後述のS216の処理によってナビ地図データ58が既に更新されているか否か判定する。そして、ナビ地図データ58が更新済みであると判定された場合(S215:YES)にはS212へと移行し、該当する施設が無い旨を案内する(S212)。一方、ナビ地図データ58が更新されていないと判定された場合(S215:NO)には、S216へと移行する。   In S215, the CPU 61 determines whether or not the navigation map data 58 has already been updated by the process in S216 described later. And when it determines with the navigation map data 58 having been updated (S215: YES), it transfers to S212 and guides that there is no applicable facility (S212). On the other hand, if it is determined that the navigation map data 58 has not been updated (S215: NO), the process proceeds to S216.

S216においてCPU61は、地図配信センタ2に対して前記S208で検出された注視点Cを含むエリア(具体的には注視点Cを中心とし、半径が最大検索距離(図12参照)の円内)のナビ地図データ58を新しいバージョンの地図データに更新する。具体的には、更新要求を地図配信センタ2へ送信し、その要求に応じて地図配信センタ2から配信された差分更新データに基づいて注視点Cを含むエリアを新しいバージョンの地図情報に更新する。その後、S209へと戻り、更新されたナビ地図データ58に基づいて、再度、施設の検索を行う。   In S216, the CPU 61 determines the area including the gazing point C detected in S208 with respect to the map distribution center 2 (specifically, in the circle having the gazing point C as the center and the radius being the maximum search distance (see FIG. 12)). The navigation map data 58 is updated to a new version of map data. Specifically, an update request is transmitted to the map distribution center 2, and the area including the gazing point C is updated to a new version of map information based on the difference update data distributed from the map distribution center 2 in response to the request. . Thereafter, the process returns to S209, and the facility is searched again based on the updated navigation map data 58.

以上詳細に説明した通り、第2実施形態に係る施設特定システム及びナビゲーション装置4では、異なる2以上のタイミングにおいて車両を運転する運転者の複数の視線方向を車内カメラ42の撮像画像から検出し(S203、S206)、検出された運転者の複数の視線方向が交差する地点から運転者の注視点を検出し(S208)、ナビ地図データ58に基づいて検出された注視点から所定の検索距離内に位置する施設を検索し(S209)、運転者の注視点から最大の検索距離内に施設が検索できなかった場合には、検出された注視点を含むエリアの地図情報を新たなバージョンの地図情報へと更新し(S216)、再度施設の検索を行うので、ナビゲーション装置4に記憶されている地図情報が古いバージョンの地図情報であったとしても、新たに更新した最新の地図情報に基づいて運転者が注視する施設を正確に特定することが可能となる。従って、例えば運転者の注視する施設を案内する際には、運転者にとって不要な施設情報については案内を抑制することができる。また、運転者の注視する施設をナビゲーション装置4の目的地に設定する場合には、運転者の希望する目的地を複雑な操作を課すことなく設定することができ、利便性が向上する。   As described in detail above, the facility identification system and the navigation device 4 according to the second embodiment detect a plurality of line-of-sight directions of a driver who drives the vehicle at two or more different timings from captured images of the in-vehicle camera 42 ( S203, S206), the driver's gaze point is detected from a point where the plurality of gaze directions of the detected driver intersect (S208), and within a predetermined search distance from the gaze point detected based on the navigation map data 58 If the facility located within the maximum search distance from the driver's gazing point is searched for, the map information of the area including the detected gazing point is updated to a new version of the map. Since the information is updated (S216) and the facility search is performed again, the map information stored in the navigation device 4 is an old version of the map information. Also, it is possible for the driver to accurately identify the facility to watch based on the newly updated latest map information. Therefore, for example, when guiding a facility watched by the driver, guidance can be suppressed for facility information unnecessary for the driver. Further, when the facility watched by the driver is set as the destination of the navigation device 4, the destination desired by the driver can be set without imposing a complicated operation, and convenience is improved.

尚、本発明は前記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることは勿論である。
例えば、第1実施形態及び第2実施形態では運転者の注視した施設を検出することとしているが、運転者以外でも助手席や後部座席に着座する乗員の注視した施設を検出することとしても良い。
Note that the present invention is not limited to the above-described embodiment, and various improvements and modifications can be made without departing from the scope of the present invention.
For example, in the first embodiment and the second embodiment, the facility watched by the driver is detected, but it is also possible to detect the facility watched by the passenger seated on the passenger seat or the rear seat other than the driver. .

また、第1実施形態及び第2実施形態では運転者の視線方向を検出するA地点とB地点は、所定時間(例えば、2sec)だけ時刻の異なるタイミングとしているが、所定距離(例えば、100m)だけ走行距離の異なるタイミングとしても良い。また、運転者の操作に基づいてA地点とB地点を特定しても良い。   In the first embodiment and the second embodiment, the points A and B for detecting the driver's line-of-sight direction have different times for a predetermined time (for example, 2 sec), but a predetermined distance (for example, 100 m). It is good also as the timing from which a travel distance differs. Moreover, you may pinpoint A point and B point based on a driver | operator's operation.

また、第1実施形態及び第2実施形態ではナビ地図データ58の更新を行う場合に、該当エリアの全地図データを更新することとしているが、施設に関するデータのみを更新するようにしても良い。   In the first embodiment and the second embodiment, when the navigation map data 58 is updated, all map data in the corresponding area is updated. However, only the data related to the facility may be updated.

また、第1実施形態では、地図配信センタ2で運転者の注視する施設の検索を行う場合に、地図配信センタ2が運転者が注視する施設の特定についても行う(S104)こととしているが、S102で実行した施設の検索結果のみをナビゲーション装置4へと送信し、運転者が注視する施設の特定はナビゲーション装置4で行うようにしても良い。   In the first embodiment, when the map distribution center 2 searches for facilities to be watched by the driver, the map distribution center 2 also specifies the facilities to be watched by the driver (S104). Only the facility search result executed in S <b> 102 may be transmitted to the navigation device 4, and the facility to be watched by the driver may be specified by the navigation device 4.

また、第1実施形態では、地図配信センタ2は前記S107において施設案内データと差分更新データとを同時にナビゲーション装置4へ送信することとしているが、差分更新データを取得(S106)する前に施設案内データのみを先にナビゲーション装置4へ送信するようにしても良い。それによって、運転者が施設を注視してから該当施設を案内するまでのタイムラグを減らすことができる。   In the first embodiment, the map distribution center 2 transmits the facility guidance data and the difference update data to the navigation device 4 at the same time in S107, but the facility guidance before acquiring the difference update data (S106). Only the data may be transmitted to the navigation device 4 first. As a result, the time lag from when the driver watches the facility until the driver guides the facility can be reduced.

第1実施形態に係る施設特定システムを示した概略構成図である。1 is a schematic configuration diagram illustrating a facility identification system according to a first embodiment. 第1実施形態に係る施設特定システムの構成を示したブロック図である。It is the block diagram which showed the structure of the facility specific system which concerns on 1st Embodiment. 地図配信センタ及びナビゲーション装置に記憶される施設データの一例を示した図である。It is the figure which showed an example of the facility data memorize | stored in a map delivery center and a navigation apparatus. 第1実施形態に係るナビゲーション装置の概略構成図である。1 is a schematic configuration diagram of a navigation device according to a first embodiment. 視線方向DBに記憶される視線方向データの一例を示した図である。It is the figure which showed an example of the gaze direction data memorize | stored in gaze direction DB. 第1実施形態に係る施設特定処理プログラムのフローチャートである。It is a flowchart of the facility specific process program which concerns on 1st Embodiment. 第1実施形態に係る施設特定処理プログラムのフローチャートである。It is a flowchart of the facility specific process program which concerns on 1st Embodiment. 運転者の注視点の検出方法を説明した説明図である。It is explanatory drawing explaining the detection method of a driver | operator's gaze point. 注視点を中心とした検索範囲内に一の施設のみが位置する場合を示した図である。It is the figure which showed the case where only one facility is located in the search range centering on a gazing point. 注視点を中心とした検索範囲内に2以上の施設が位置する場合を示した図である。It is the figure which showed the case where two or more facilities are located in the search range centering on a gaze point. 運転者が注視する施設を特定できない場合を示した図である。It is the figure which showed the case where the driver | operator's gaze facility cannot be specified. 検索距離の最大値の決定方法について示した図である。It is the figure shown about the determination method of the maximum value of search distance. 第2実施形態に係る施設特定処理プログラムのフローチャートである。It is a flowchart of the facility specific process program which concerns on 2nd Embodiment.

符号の説明Explanation of symbols

1 施設特定システム
2 地図配信センタ
3 車両
4 ナビゲーション装置
10 サーバ
11 センタ側地図情報DB
33 ナビゲーションECU
56 地図情報DB
21、61 CPU
22、62 RAM
23、63 ROM
DESCRIPTION OF SYMBOLS 1 Facility identification system 2 Map distribution center 3 Vehicle 4 Navigation apparatus 10 Server 11 Center side map information DB
33 Navigation ECU
56 Map information DB
21, 61 CPU
22, 62 RAM
23, 63 ROM

Claims (4)

ナビゲーション装置と、前記ナビゲーション装置と通信を行う情報センタとを有し、車両の乗員が注視する施設を特定する施設特定システムにおいて、
前記ナビゲーション装置は、
地図上における施設の位置を含む地図情報を記憶するナビ地図情報記憶手段と、
車両の乗員の視線方向を異なるタイミングで複数検出する視線方向検出手段と、
前記視線方向検出手段により検出された乗員の複数の視線方向から乗員の注視点を検出する注視点検出手段と、
前記ナビ地図情報記憶手段に記憶された地図情報を用いて、前記注視点検出手段により検出された乗員の注視点から所定の検索距離内にある施設を検索するナビ施設検索手段と、
前記ナビ施設検索手段によって前記注視点検出手段により検出された乗員の注視点から前記検索距離内に施設が検索できなかった場合に、前記注視点検出手段により検出された乗員の注視点の位置情報を情報センタに送信する注視点情報送信手段と、
を備え、
前記情報センタは、
地図上における施設の位置を含む地図情報を記憶するセンタ地図情報記憶手段と、
前記注視点情報送信手段によって前記乗員の注視点の位置情報が送信された場合に、前記センタ地図情報記憶手段に記憶された地図情報を用いて、前記注視点検出手段により検出された乗員の注視点から所定の検索距離内にある施設を検索するセンタ施設検索手段と、
を備え、
前記ナビ施設検索手段又は前記センタ施設検索手段によって検索された施設を乗員の注視する施設として特定することを特徴とする施設特定システム。
In a facility identification system that includes a navigation device and an information center that communicates with the navigation device, and identifies a facility that a vehicle occupant watches,
The navigation device
Navigation map information storage means for storing map information including the location of the facility on the map;
Gaze direction detection means for detecting a plurality of gaze directions of occupants of the vehicle at different timings;
Gazing point detection means for detecting an occupant's gazing point from a plurality of sight line directions of the occupant detected by the sight line direction detection means;
Using the map information stored in the navigation map information storage means, a navigation facility search means for searching for a facility within a predetermined search distance from the gazing point of the occupant detected by the gazing point detection means;
Position information of the gazing point of the occupant detected by the gazing point detection unit when the facility cannot be searched within the search distance from the gazing point of the occupant detected by the gazing point detection unit by the navigation facility search unit Gaze information transmitting means for transmitting the information to the information center;
With
The information center
Center map information storage means for storing map information including the location of the facility on the map;
When the position information of the gazing point of the occupant is transmitted by the gazing point information transmission unit, the gait of the occupant detected by the gazing point detection unit is detected using the map information stored in the center map information storage unit. Center facility search means for searching for facilities within a predetermined search distance from the viewpoint;
With
A facility specifying system for specifying a facility searched by the navigation facility searching means or the center facility searching means as a facility watched by an occupant.
前記情報センタは、
前記センタ施設検索手段によって前記注視点検出手段により検出された乗員の注視点から前記検索距離内に施設が検索できた場合に、検索された施設を含む所定範囲の地図情報を更新する為の地図更新情報を前記ナビゲーション装置へ送信する更新情報送信手段を備え、
前記ナビゲーション装置は、
前記更新情報送信手段によって送信された地図更新情報を用いて前記ナビ地図情報記憶手段に記憶された地図情報の内、前記所定範囲の地図情報を更新する地図更新手段を備えることを特徴とする請求項1に記載の施設特定システム。
The information center
A map for updating map information in a predetermined range including the searched facility when the facility can be searched within the search distance from the gazing point of the occupant detected by the gazing point detecting unit by the center facility searching unit Update information transmitting means for transmitting update information to the navigation device,
The navigation device
The map update means for updating the predetermined range of map information among the map information stored in the navigation map information storage means using the map update information transmitted by the update information transmission means. The facility identification system according to Item 1.
前記注視点検出手段は、前記乗員の複数の視線方向が交差する地点を乗員の注視点として検出することを特徴とする請求項1又は請求項2に記載の施設特定システム。   The facility identification system according to claim 1, wherein the gazing point detection unit detects a point where a plurality of gaze directions of the occupant intersect as a gazing point of the occupant. 地図上における施設の位置を含む地図情報を記憶するナビ地図情報記憶手段と、
車両の乗員の視線方向を異なるタイミングで複数検出する視線方向検出手段と、
前記視線方向検出手段により検出された乗員の複数の視線方向から乗員の注視点を検出する注視点検出手段と、
前記ナビ地図情報記憶手段に記憶された地図情報を用いて、前記注視点検出手段により検出された乗員の注視点から所定の検索距離内にある施設を検索するナビ施設検索手段と、
前記ナビ施設検索手段によって前記注視点検出手段により検出された乗員の注視点から前記検索距離内に施設が検索できなかった場合に、前記注視点検出手段により検出された乗員の注視点の位置情報を情報センタに送信する注視点情報送信手段と、
前記情報センタにおいて実行された検索結果に基づいて、前記注視点検出手段により検出された乗員の注視点から所定の検索距離内にある施設に関する情報を取得する施設情報取得手段と、を有し、
前記施設情報取得手段によって情報を取得した施設を乗員の注視する施設として特定することを特徴とする施設特定装置。
Navigation map information storage means for storing map information including the location of the facility on the map;
Gaze direction detection means for detecting a plurality of gaze directions of occupants of the vehicle at different timings;
Gazing point detection means for detecting an occupant's gazing point from a plurality of sight line directions of the occupant detected by the sight line direction detection means;
Using the map information stored in the navigation map information storage means, a navigation facility search means for searching for a facility within a predetermined search distance from the gazing point of the occupant detected by the gazing point detection means;
Position information of the gazing point of the occupant detected by the gazing point detection unit when the facility cannot be searched within the search distance from the gazing point of the occupant detected by the gazing point detection unit by the navigation facility search unit Gaze information transmitting means for transmitting the information to the information center;
Facility information acquisition means for acquiring information on a facility within a predetermined search distance from the gazing point of the occupant detected by the gazing point detection means based on the search result executed in the information center;
A facility identification device that identifies a facility for which information has been acquired by the facility information acquisition means as a facility to be watched by a passenger.
JP2007255306A 2007-09-28 2007-09-28 Installation determination system and installation determination device Pending JP2009085750A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007255306A JP2009085750A (en) 2007-09-28 2007-09-28 Installation determination system and installation determination device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007255306A JP2009085750A (en) 2007-09-28 2007-09-28 Installation determination system and installation determination device

Publications (1)

Publication Number Publication Date
JP2009085750A true JP2009085750A (en) 2009-04-23

Family

ID=40659364

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007255306A Pending JP2009085750A (en) 2007-09-28 2007-09-28 Installation determination system and installation determination device

Country Status (1)

Country Link
JP (1) JP2009085750A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010261817A (en) * 2009-05-07 2010-11-18 Alpine Electronics Inc Navigation apparatus
JP2014120112A (en) * 2012-12-19 2014-06-30 Aisin Aw Co Ltd Travel support system, travel support method, and computer program
JP2014120110A (en) * 2012-12-19 2014-06-30 Aisin Aw Co Ltd Travel support system, travel support method, and computer program
JP2016081513A (en) * 2014-10-15 2016-05-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America Information acquisition method, information acquisition system, and information acquisition program
JP2020106997A (en) * 2018-12-26 2020-07-09 アルパイン株式会社 In-vehicle device and communication system
WO2020217337A1 (en) * 2019-04-24 2020-10-29 三菱電機株式会社 Travel environment analysis device, travel environment analysis system, and travel environment analysis method

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010261817A (en) * 2009-05-07 2010-11-18 Alpine Electronics Inc Navigation apparatus
JP2014120112A (en) * 2012-12-19 2014-06-30 Aisin Aw Co Ltd Travel support system, travel support method, and computer program
JP2014120110A (en) * 2012-12-19 2014-06-30 Aisin Aw Co Ltd Travel support system, travel support method, and computer program
JP2016081513A (en) * 2014-10-15 2016-05-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America Information acquisition method, information acquisition system, and information acquisition program
JP2020106997A (en) * 2018-12-26 2020-07-09 アルパイン株式会社 In-vehicle device and communication system
JP7233918B2 (en) 2018-12-26 2023-03-07 アルパイン株式会社 In-vehicle equipment, communication system
WO2020217337A1 (en) * 2019-04-24 2020-10-29 三菱電機株式会社 Travel environment analysis device, travel environment analysis system, and travel environment analysis method
JPWO2020217337A1 (en) * 2019-04-24 2021-10-14 三菱電機株式会社 Driving environment analyzer, driving environment analysis system and driving environment analysis method
JP7042974B2 (en) 2019-04-24 2022-03-28 三菱電機株式会社 Driving environment analysis device, driving environment analysis system and driving environment analysis method

Similar Documents

Publication Publication Date Title
JP5316292B2 (en) MAP INFORMATION GUIDANCE DEVICE, MAP INFORMATION GUIDANCE METHOD, AND COMPUTER PROGRAM
RU2519568C2 (en) Navigation device and method of providing access to parking places
EP2890955A1 (en) Method and apparatus for predicting destinations
JP6813347B2 (en) Communication terminals, mobile guidance systems and computer programs
JP2015155857A (en) Driving assist screen generation device, driving assist device, and method for generating driving assist screen
JP6476870B2 (en) Movement guide device, map information update method for movement guide device, and computer program
WO2016113957A1 (en) Poi information provision server, poi information provision device, poi information provision system, and program
JP6160364B2 (en) Map information update system, map information update device, map information update method, and computer program
JP2017181103A (en) Communication terminal, server device, movement guide system, and computer program
JP2009085750A (en) Installation determination system and installation determination device
JP2011099815A (en) Navigation system and traffic lane guide method
JP2009031943A (en) Facility specification device, facility specification method, and computer program
JP3891231B2 (en) Vehicle navigation device
US7912636B2 (en) Apparatus and program for navigation
JP4289241B2 (en) Route setting device and vehicle-mounted navigation device
JP2009031065A (en) System and method for informational guidance for vehicle, and computer program
JP2007010549A (en) Navigation system
WO2010040384A1 (en) Navigation apparatus having a three-dimensional display
JP2012145440A (en) Facility guiding device, facility guiding method and computer program
JPH11248477A (en) Voice guided navigator, voice guidance type navigating method, and medium with recorded voice guided navigation program
JP2008160447A (en) Broadcast program receiving device, broadcast program reception planning device, broadcast program receiving method, broadcast program reception planning method, program, and recording medium
JP2003207352A (en) Navigation system and route search method
JP2005233972A (en) Navigation device
WO2018180757A1 (en) Communication terminal, server device, movement guidance system and computer program
JP2019138728A (en) Communication terminal, movement guiding system, and computer program