CN103425733A - 对话装置、对话系统和对话控制方法 - Google Patents
对话装置、对话系统和对话控制方法 Download PDFInfo
- Publication number
- CN103425733A CN103425733A CN2013101915639A CN201310191563A CN103425733A CN 103425733 A CN103425733 A CN 103425733A CN 2013101915639 A CN2013101915639 A CN 2013101915639A CN 201310191563 A CN201310191563 A CN 201310191563A CN 103425733 A CN103425733 A CN 103425733A
- Authority
- CN
- China
- Prior art keywords
- dialogue
- driver
- candidate item
- focus
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0872—Driver physiology
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/21—Voice
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/221—Physiology, e.g. weight, heartbeat, health or special needs
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- General Physics & Mathematics (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明提供了一种对话装置、对话系统和对话控制方法。配置成与驾驶车辆的驾驶者进行对话的对话装置包括存储单元、专注度测量单元和对话单元。存储单元配置成保存偏好数据库,在该偏好数据库中,对话候选项和对话效果彼此相关联,其中对话候选项是与驾驶者的对话内容的候选项,并且对话效果表示使驾驶者的驾驶专注度得到提高的程度。专注度测量单元配置成测量驾驶者的驾驶专注度。对话单元配置成在由专注度测量单元测量的专注度下降至预定阈值以下时,基于偏好数据库中的对话效果选择对话候选项,随后利用所选择的对话候选项执行对话,基于执行对话前和执行对话后的专注度来计算对话的对话效果,并且更新偏好数据库的对话效果。
Description
技术领域
本发明涉及用于在车辆中与驾驶者进行对话的系统,例如汽车导航系统等。
背景技术
近来,由于感到厌烦、极为匆忙、感到瞌睡、陷入沉思等原因而缺乏注意力的驾驶者所引起的交通事故在不断增加。此外,由于操作蜂窝电话的驾驶者疏忽驾驶而引起的交通事故也在不断增加。当驾驶者没有专注于驾驶(例如散漫驾驶或疏忽驾驶)时,驾驶者倾向于违反交通规则(例如闯红灯或超速行驶)或者倾向于延缓对驾驶操作的确定,这会导致交通事故。
为了解决这样的问题,在驾驶者没有专注于驾驶时唤起驾驶者注意的驾驶支持方法是已知的(参见日本特开2008-250775号公报、日本特开2006-350567号公报)。
日本特开2008-250775号公报公开的技术根据车辆的制动器的操作信息、距前方车辆的距离、方向盘的操作信息、以及速度信息获取车辆的操作状况。同时,该技术根据利用摄像机拍摄的驾驶者的面部图像获取驾驶者的眼睛行为,并生成驾驶者在预定时间内的注视信息分布模式。随后,该技术基于所获取的车辆的操作状况和所生成的注视信息分布模式,来估计驾驶者的驾驶专注度。当车辆的操作状况满足表明需要唤起注意的预定条件时,该技术根据驾驶者的驾驶专注度的估计结果来唤起驾驶者注意。
在车辆的操作状况和注视信息分布模式之间存在相关性,使得在左转弯的情况下注视信息倾向于向左移动,并且在直行驾驶的情况下注视信息倾向于上下移动以检查仪表(例如速度计)。基于该相关性,可以决定与车辆的操作状况相应的作为参考基准的注视信息分布模式。例如,当识别出与作为参考基准的注视信息分布模式不同的横向注视信息分布模式时,疏忽驾驶得以估计出来。当通过将作为参考基准的注视信息分布模式与驾驶者的实际注视信息分布模式进行比较来估计驾驶者的驾驶专注度、从而估计出专注度较低时,唤起驾驶者注意。
另一方面,日本特开2006-350567号公报公开的技术除了具有唤起驾驶者注意的功能之外,还具有将驾驶者朝向更安全的驾驶习惯引导的功能。
该技术获取关于车辆行为的信息(例如速度、纵向加速度、横向加速度、和偏航角)以及关于车辆环境的信息(例如行驶环境、行人的有无、摩托车的往来),基于驾驶操作的标准模型并且基于这些类型的信息来确定驾驶者的驾驶操作是否处于安全驾驶习惯中。当驾驶者的驾驶操作和标准模型之间的差别较大时,确定驾驶者的驾驶操作不在安全趋势中,然后通过包括语音合成功能和语音识别功能在内的对话功能为驾驶者提供驾驶建议。
在提供驾驶建议之后,该技术基于车辆的操作状况、根据图像识别等获得的驾驶者精神状态估计结果、以及驾驶者回应内容的语音识别结果,来确定驾驶者是否遵循了驾驶建议。当驾驶者没有遵循驾驶建议时,该技术改变表达驾驶建议的方式(例如改变提供驾驶建议的音量或时机)。当驾驶者遵循了驾驶建议时,该技术存储表达该驾驶建议的方式以便从下一次驾驶建议开始使用该方式。利用该处理序列,该技术实现将驾驶者朝向更安全的驾驶习惯引导的驾驶建议系统。
然而,当日本特开2008-250775号公报的技术唤起驾驶者注意时,没有考虑驾驶者已经在多大程度上遵循了用于支持驾驶的注意力唤起建议,因此注意力唤起建议在一些情况下无法有效地起作用。例如,当驾驶者没有遵循注意力唤起建议时,该技术不断提供带有相同内容的注意力唤起建议,这可能会进一步减低驾驶者的驾驶专注度(例如使驾驶者厌烦)。此外,驾驶者可能会停用驾驶支持功能从而减轻厌烦情绪。
日本特开2006-350567号公报的技术把驾驶者对驾驶建议的响应反映到表达驾驶建议的方式(例如提供驾驶建议的音量或时机)上。然而,驾驶建议的内容不会被驾驶者的响应改变。因此,即使驾驶者的驾驶专注度没有通过驾驶建议的一些内容而得到提高,相同的驾驶建议仍会被重复,因此注意力唤起建议可能不会有效地起作用。例如,由于相同内容的驾驶建议的重复使驾驶者习惯于该驾驶建议,所以驾驶者的驾驶专注度可能无法通过该驾驶建议而得到提高。
本发明的目的是提供一种技术,其使得能够实现具有有效地提高驾驶者的驾驶专注度的内容的对话。
发明内容
根据本发明的一方面的对话装置是一种配置成与驾驶车辆的驾驶者进行对话的对话装置,其包括:配置成保存偏好数据库的存储单元,在所述偏好数据库中,对话候选项和对话效果彼此相关联,其中对话候选项是与驾驶者的对话内容的候选项,并且对话效果表示由于利用对话候选项进行对话而使驾驶者的驾驶专注度得到提高的程度;专注度测量单元,其被配置成测量驾驶者的驾驶专注度;以及对话单元,其被配置成在由专注度测量单元测量的专注度下降至预定阈值以下时,基于偏好数据库中的对话效果选择对话候选项,随后利用所选择的对话候选项执行对话,基于执行对话前和执行对话后的专注度来计算对话的对话效果,并且更新偏好数据库的对话效果。
参考示出本发明的实例的附图,根据下面的说明,本发明的上述及其他目的、特征和优点将变得明了。
附图说明
图1是示出根据实施例的对话装置的功能配置的框图;
图2是根据第一实例的总体系统的框图;
图3是根据第一实例的专注度测量单元200的框图;
图4是通用对话功能装置的框图;
图5是描述根据第一实例的对话功能装置300的操作实例的流程图;
图6是示出根据第一实例的对话单元500的基本配置实例的框图;
图7是示出根据第一实例的偏好数据库140的配置实例的图;
图8是示出根据第一实例的对话内容数据库540的配置实例的图;
图9是描述根据一实例的对话效果保存单元520和对话控制单元510的处理实例的流程图;
图10是根据第二实例的车内终端的框图;
图11是描述根据第二实例的能够通过车内终端的服务功能进行对话请求接收的车内终端的操作的流程图;
图12是根据第三实例的总体系统的框图;
图13是根据第三实例的终端侧对话单元1100的框图;
图14是根据第三实例的服务器侧对话单元1130的框图;
图15是描述根据第三实例的终端侧对话单元1100的操作的流程图;
图16是描述图15的步骤S1420中所述的服务器侧对话单元1130中的对话处理实例的流程图;并且
图17是描述图15的步骤S1450中所述的服务器侧对话单元1130中的专注度提高效果的确定处理实例的流程图。
具体实施方式
首先,将参考附图描述本发明的基本实施例。
图1是示出根据本实施例的对话装置的功能配置的框图。对话装置11具有存储单元12、专注度测量单元13、对话单元14、对话候选项添加单元15、对话候选项删除单元16、以及服务功能单元17。
对话装置11例如是配备在诸如汽车之类的车辆中的汽车导航装置,并且在与驾驶车辆的驾驶者进行对话的同时提供去往目的地的路线引导的服务功能。这里描述的对话包括与服务功能有关的对话和用于提高驾驶者的专注度的对话。
存储单元12保存偏好数据库,在该偏好数据库中,对话候选项和对话效果彼此相关联,其中对话候选项是与驾驶者的对话内容的候选项,并且对话效果表示由于利用对话候选项进行对话而使驾驶者的驾驶专注度得到提高的程度。
专注度测量单元13测量驾驶者的驾驶专注度。测量方法不受特别限制,并且任何常规方法都可以使用。
当由专注度测量单元13测量的专注度下降至预定阈值以下时,对话单元14基于存储单元12中保存的偏好数据库中的对话效果选择适合的对话候选项,随后通过所选择的对话候选项与驾驶者进行对话。然后,对话单元14基于由专注度测量单元13测量的执行对话前和执行对话后的专注度来计算所执行的对话的对话效果,并且更新偏好数据库中保存的对话效果。
如上所述,根据本实施例,由于选择并执行了在提高驾驶者的专注度方面高度有效的对话、并且根据需要利用对话的结果对偏好数据库进行了更新,所以可以执行具有有效地提高驾驶者的驾驶专注度的内容的对话。
此外,在本实施例中,服务功能单元17向驾驶者提供各种服务功能。服务功能的类型包括例如路线引导和音乐回放。对偏好数据库中记录的每个对话候选项赋予类别(对话类别)。即,在偏好数据库中,针对多个对话候选项记录对话类别和对话效果。对于对话类别中的一些,对话效果取决于服务功能单元17的操作状态而不同。例如,以音乐相关内容作为对话类别的对话可以在提高驾驶者的专注度方面有效,从而在作为服务功能单元17的操作状态的音乐回放期间被执行。
对话单元14根据服务功能单元17的操作状态选择对话类别,并且基于对话效果选择来自该对话类别的对话候选项。结果,由于执行了针对为驾驶者提供的服务的状态而有所不同的对话类别的对话,所以可以防止相同对话的重复,同时可以执行适合于该状态的更有效的对话。
此外,可以向每个对话候选项赋予对话类别的详细偏好内容。带有适合于驾驶者的偏好的内容(偏好内容)的对话在提高驾驶者的专注度方面高度有效。例如,当与驾驶者偏好的风格的音乐有关的对话被选为偏好内容时,专注度的改善效果提高。对话单元14可以根据服务功能单元17的操作状态来选择对话类别和偏好内容以执行对话。
对话单元14可以通过排除在预定次数的最近对话中使用的对话候选项来选择对话候选项。结果,可以防止相同对话的重复,并且可以防止专注度的改善效果降低。对话单元14可以适于选择与用于前一次对话的对话类别不同的对话类别的对话候选项。通过将对话切换到不同类别的对话,对话效果可以得到提高。
此外,根据本实施例的对话装置11具有不仅更新偏好数据库中的对话候选项的对话效果、而且更新对话候选项自身的功能。
对话候选项添加单元15把基于驾驶者的使用行为而被选择的、但是没有被登记在偏好数据库中的对话候选项添加到偏好数据库中。适合于驾驶者偏好的新对话可以得到提供。
对话候选项删除单元16从偏好数据库中删除在偏好数据库中所登记的对话候选项当中的具有预定值以下的对话效果的对话候选项。对话装置可以适于不使用对话效果较低的对话内容和对话效果降低的对话内容。
对话单元14可以控制用于提高专注度的对话和由服务功能单元17提供的服务功能所进行的对话,并且调整所述两种对话使得它们不被同时执行。
接下来,将描述进一步体现本实施例的实例。
[第一实例]
图2是根据第一实例的总体系统的框图。
车内终端10配备在车辆20中,并且包括浏览器110、通信控制单元112、通信装置114、导航单元120、GPS(全球定位系统)122、地图数据库124、交通信息单元126、摄像机128、CAN(控制器局域网)信息获取单元130、车辆传感器信息获取单元132、车内终端传感器134、偏好数据库140、音乐回放单元150、音乐文件152、无线电调谐器154、活动图像回放单元160、活动图像文件162、电视调谐器164、输入接口182、显示器184、麦克风186、扬声器188、专注度测量单元200、以及对话单元500。
GPS122是用于利用地球上的纬度和路线的指示信息来对自身进行定位的装置。
地图数据库124包含在路线引导中由导航单元120使用的地图信息,该地图信息包括地址信息、道路信息、建筑物信息(例如加油站或学校)、以及地图相关信息(包括诸如速度限制之类的交通规则信息)。
交通信息单元126获取并保存在每时每刻变化的交通信息,其包括从诸如VICS(注册商标)(车辆信息通信系统)之类的源获取的交通堵塞信息、交通事故信息和施工信息。由于交通信息每时每刻都在变化,所以交通信息无法预先累积从而被连续使用。交通信息由导航单元120用于路线引导,并且用于向驾驶者通知交通信息。
摄像机128拍摄驾驶车辆20的驾驶者的图像。例如,驾驶者的面部图像在测量专注度的过程中被使用。
CAN信息获取单元130与车辆20上的CAN21连接,以便获取制动器的操作信息、方向盘的操纵信息、速度信息、加速度信息、偏航角信息、燃料消耗等作为车辆20的操作信息。
车辆传感器信息获取单元132与测量距车辆20周围的障碍物的距离的车辆传感器22连接,以便获取由车辆传感器22检测的信息。例如,获取关于距前方车辆的距离的信息。
车内终端传感器134是配备在车内终端10中的传感器,并且是例如陀螺仪。陀螺仪用于车辆20的定位、并且由导航单元120用于路线引导。
导航单元120是一种服务功能单元,并且基于车辆20的位置负责从出发地到驾驶者指定的目的地的路线引导。例如,导航单元120通过根据从GPS122和车内终端传感器134获取的表示装置自身位置的定位信息、以及从CAN信息获取单元130获取的速度信息等估计车辆20的位置、并将车辆20的估计位置与地图数据库124中的信息进行比较以校正差别等,来对车辆20进行定位。然后,导航单元120基于车辆20的当前位置向驾驶者呈现去往目的地的路线引导。
专注度测量单元200测量驾驶者的驾驶专注度。专注度测量单元200通过使用由摄像机128拍摄的正在驾驶车辆20的驾驶者的面部图像、以及从CAN信息获取单元130和车辆传感器信息获取单元132获取的车辆20的操作信息,来计算专注度。
对话单元500通过使用语音识别功能和语音合成功能来执行对话。当驾驶者的专注度从专注度测量单元200的专注度测量结果下降到威胁驾驶安全的水平时,对话单元500与驾驶者执行对话,该对话存储在偏好数据库140中并且具有对专注度有高度提高效果的偏好。
音乐回放单元150是一种服务功能单元,并且从音乐文件152或无线电调谐器154获取音乐信息,对该音乐信息进行解码,并且经由扬声器188输出解码的信息。
活动图像回放单元160也是一种服务功能单元,并且从活动图像文件162或电视调谐器164获取活动图像信息,对该活动图像信息进行解码,并且经由显示器184和扬声器188输出解码的信息。
通信网络30是蜂窝电话网络或互联网。
通信装置114连接到蜂窝电话的通信网络30、无线LAN(局域网)等,并且与另一终端或服务器通信。
通信控制单元112执行诸如TCP/IP(传输控制协议/互联网协议)之类的通信协议的处理,并且从另一终端或服务器接收信息,或者从借以执行通信的应用软件(例如浏览器110)获取信息、根据另一终端或服务器指定的通信协议添加信息、并发送该信息。
浏览器110经由通信控制单元112和通信装置114连接到通信网络30,并获取网页以在显示监视器上显示网页,或者从麦克风输出语音信息。
同时,已变得陈旧或需要替换的地图数据库124、交通信息126、偏好数据库140、音乐文件152、活动图像文件162等可以通过像浏览器110所做的那样经由通信控制单元112和通信装置114与通信网络30连接、并从与通信网络30连接的服务器获取信息,而得到更新。
输入接口182是供驾驶者用手指操作车内终端10的操作单元(例如按钮、开关、键盘、触摸面板等)。显示器184是用于向驾驶者显示图像信息的装置(例如液晶显示器、有机EL(电致发光)显示器等),并且例如与用于通过触摸操作获取输入信息的触摸面板一体地形成。麦克风186是用于采集驾驶者的语音、并向对话单元500发送该语音的输入装置。扬声器188是输出装置,其用于为驾驶者提供:来自音乐回放单元150和活动图像回放单元160的音乐信息,用于路线引导的语音引导和操作声音,从依靠音频与驾驶者对话的对话单元500输出的音乐合成声音。
接下来,将描述在本发明中使用的专注度的计算方法实例。
图3是根据第一实例的专注度测量单元200的框图。专注度测量单元200包括注视信息分布模式检测单元210、操作状况确定单元220、注视信息分布参考模型230、以及专注度计算单元240。
下面将描述专注度测量单元200的处理实例。
注视信息分布模式检测单元210与摄像机128和操作状况确定单元220连接,并且响应于操作状况确定单元220的指令,在由摄像机128拍摄的驾驶者的面部图像中检测特定时间段内的注视信息分布模式,并将该注视信息分布模式发送给专注度计算单元240。
操作状况确定单元220与CAN信息获取单元130和车辆传感器信息获取单元132连接,并且根据车辆20的方向盘的操作信息、速度信息、制动器的操作信息等来确定在该时刻车辆20的操作状况,并且在向注视信息分布参考模型230通知操作状况之前指示注视信息分布模式检测单元210检测驾驶者的注视信息分布模式。这里的操作状况是指表示由驾驶者执行的操作的状况的信息,例如以某个速度直线行驶、向左转弯、踩制动踏板来减速、踩加速踏板来加速、等等。
注视信息分布参考模型230存储与操作状况相对应的注视信息分布参考模型。注视信息分布参考模型230基于从操作状况确定单元220通知的关于操作状况的信息来搜索与操作状况相对应的注视信息分布参考模型,并将其发送给专注度计算单元240。当操作状况是向左转弯时,与操作状况相对应的注视信息分布参考模型在这里是例如意图检查左后方向、左侧视镜和室内镜的注视信息的模式化移动。
专注度计算单元240将从注视信息分布模式检测单元210输出的驾驶者的注视信息分布模式与从注视信息分布参考模型230输出的驾驶者的注视信息分布模式的和操作状况相对应的注视信息分布参考模型进行比较,并将结果数字化。当驾驶者的注视信息分布模式关于与操作状况相对应的注视信息分布参考模型的一致程度较高时,专注度计算单元240认为驾驶者在专注于驾驶,并且向对话单元500输出大值作为专注度。另一方面,当驾驶者的注视信息分布模式和与操作状况相对应的注视信息分布参考模型之间的差别较大时,专注度计算单元240认为驾驶者没有专注于驾驶,并且向对话单元500输出小值作为专注度。这样,将专注度输出为与注视信息分布参考模型和驾驶者的注视信息分布模式的一致程度相应的数值。
然后,在描述对话单元500之前将参考图4和图5描述通用对话功能。
图4是通用对话功能装置的框图。对话功能装置300包括:配置成把从麦克风获取的人类对话方的语音转换成字符信息的语音识别单元310,配置成根据字符信息解释人类对话方所讲出的内容的对话意图解释单元320,配置成基于所解释的人类对话方讲出的内容生成对话内容的对话内容生成单元330,存储与对话内容相应的对话内容信息的对话内容信息存储单元340,以及配置成把对话内容的所生成的字符信息转换成语音信息的语音合成单元350。
图5是描述对话功能装置300的操作实例的流程图。对话功能装置300通过使用麦克风186获取人类对话方的语音(步骤S400)。然后,所获取的语音信息由语音识别单元310转换成字符信息(步骤S404),并且由对话意图解释单元320根据转换出的字符信息解释人类对话方讲出的内容(步骤S408)。接着,基于对人类对话方的内容的解释结果,由对话内容生成单元330确定对话的内容,其表示在将来要执行何种对话(步骤S412)。随后,对话内容生成单元330通过使用对话内容信息存储单元340生成与对话的内容相应的字符信息(步骤S416)。字符信息由语音合成单元350转换成语音信息(步骤S420),并且经由扬声器等输出语音信息作为响应(步骤S424)。
该实例中的对话单元500具有执行用于提高驾驶者的专注度的对话、以及图4和5中描述的通用对话功能装置300的处理的功能。
图6是示出对话单元500的基本配置实例的框图。对话单元500包括语音识别单元310、对话意图解释单元320、语音合成单元350、对话控制单元510、对话效果保存单元520、开始对话前专注度522、完成对话后专注度524、驾驶者识别单元530、终端协作单元532、以及对话内容数据库540。
对话效果保存单元520连接到专注度测量单元200、对话控制单元510、开始对话前专注度522以及完成对话后专注度524。对话效果保存单元520通过定期地从专注度测量单元200接收专注度,来监视驾驶者的驾驶专注度。当驾驶者的专注度降低到预定值以下、并且检测到专注度已降低到驾驶者不会专注于驾驶的水平时,对话效果保存单元520将该专注度存储为开始对话前专注度522,并且还向对话控制单元510通知驾驶者的专注度已降低到驾驶者不会专注于驾驶的水平。当对话效果保存单元520从对话控制单元510接收到对话完成的通知时,其从专注度测量单元200接收专注度,并将该专注度存储为完成对话后专注度524。然后,对话效果保存单元520将存储在开始对话前专注度522中的开始对话前专注度与存储在完成对话后专注度524中的完成对话后专注度进行比较,并将该对话对专注度的提高效果发送给对话控制单元510。
驾驶者识别单元530获取识别个体驾驶者的信息,该信息表示谁被车内终端10识别为驾驶者。把识别出的个体以后述的图7的驾驶者标识符600的形式发送给对话控制单元510。通过以下方法来识别个体驾驶者:在起动车内终端10时让驾驶者选择该驾驶者是谁,或者利用面部识别功能识别由摄像机128拍摄的驾驶者的面部图像,或者通过语音识别功能使用个体语音的特征来确定。
终端协作单元532执行与车内终端10的服务功能协作的功能。具体地,无论路线引导是否正在执行,无论音乐是否被回放,或者当音乐正在被回放时,终端协作单元532都识别车内终端10的操作状态(例如哪个音乐曲调正在被回放)。另一方面,当车内终端10基于对从驾驶者接收的语言信息进行解释的结果而被操作时,终端协作单元532将操作请求输出给车内终端10。
对话控制单元510与偏好数据库140、对话意图解释单元320、对话效果保存单元520、驾驶者识别单元530、终端协作单元532以及对话内容数据库540连接。当对话效果保存单元520检测到驾驶者的专注度降低到驾驶者不会专注于驾驶的状态时,对话控制单元510接收目的为提高专注度的对话请求,从偏好数据库140中选择对驾驶者的专注度有高度提高效果的偏好,通过使用该偏好生成对话内容,并且执行带有该内容的对话。
此外,对话控制单元510与对话效果保存单元520协作,基于将开始对话前专注度与完成对话后专注度进行比较的结果,来确定由于所执行的对话而产生的专注度提高效果,并将该提高效果存储在偏好数据库140中作为在对话中使用的偏好的属性信息。结果,偏好数据库140在每次执行对话时得到更新。
偏好数据库140的配置实例在图7中示出。偏好数据库140存储驾驶者标识符600、对话类别602、偏好A604、偏好B606、以及对话效果608。
驾驶者标识符600是标识由驾驶者识别单元530识别的个体驾驶者的信息。例如,当由驾驶者识别单元530识别的个体驾驶者是带有标识符A的驾驶者时,使用带有在驾驶者标识符600中存储为A的属性的记录。
对话类别602存储偏好A604和偏好B606可以应用于的对话内容的类别。当对话控制单元510决定对话内容时,对话类别602在识别与该类别相对应的偏好的过程中被使用。例如,当对话类别602是“音乐”时,该对话类别602被用于与音乐回放有关的对话,当对话类别602是“地点”时,该对话类别602被用于与位置搜索或引导有关的对话,并且当对话类别602是“兴趣”时,该对话类别602被用于与对驾驶者进行的信息提供有关的对话。
在偏好A604和偏好B606中,存储有与驾驶者标识符600中所存储的个体驾驶者的偏好有关的关键词。对话控制单元510在生成对话内容的过程中使用该关键词作为驾驶者的偏好关键词。
对话效果608存储当使用对话类别602、偏好A604和偏好B606所构成的记录所表示的对话时专注度的提高效果。例如,在对话效果的最小值是1、最大值是10、并且初始值是5的情况下,当由对话控制单元510确定专注度已提高时增加1,并且当确定专注度已降低时减去1,并且当确定专注度没有改变时,可以执行没有增加和减去的处理。
对话控制单元510使用具有相同对话类别602的记录中的在对话效果608中具有最大值的偏好A604和偏好B606。
对话内容数据库540的配置实例在图8中示出。对话内容数据库540包括对话类别700、对话内容标识符702和对话内容基本字符信息704。当对话控制单元510决定对话内容时,对话类别700在识别与该类别相对应的对话内容的过程中被使用。例如,当对话类别700是“音乐”时,对话类别700被用于与音乐回放有关的对话,当对话类别700是“地点”时,该对话类别700被用于与位置搜索或引导有关的对话,并且当对话类别700是“兴趣”时,该对话类别700被用于与对驾驶者进行的信息提供有关的对话。
当对话控制单元510决定对话内容时,对话内容标识符702被用来指定对话内容基本字符信息704。尽管对话内容标识符702存储数值做为图8中的实例,但是对话内容标识符702也可以以任何形式存储信息,只要该信息可以标识对话内容。
对话内容基本字符信息704是对话控制单元510在生成对话内容的过程中使用的字符信息。在对话内容基本字符信息704中用XX代替的单词由在偏好数据库140中搜索出的在对话效果608中具有大数值的偏好来替换,即表示对话的专注度提高效果较高的偏好的单词。
将参考图9描述对话效果保存单元520和对话控制单元510的流程实例。对话控制单元510首先从驾驶者识别单元530获取驾驶者标识符600,并识别正在驾驶车辆20的个体驾驶者(步骤S800)。然后,对话效果保存单元520定期地观察由专注度测量单元200计算的专注度(步骤S804),并检查专注度是否已降低到驾驶者不会专注于驾驶的水平(步骤S808)。
当专注度没有降低到驾驶者不会专注于驾驶的水平时,对话效果保存单元520继续观察专注度。当专注度已降低到驾驶者不会专注于驾驶的水平时,对话效果保存单元520将该专注度存储在开始对话前专注度522中(步骤S812),并且还向对话控制单元510通知专注度已降低到驾驶者不会专注于驾驶的水平。
当对话控制单元510从对话效果保存单元520接收到专注度已降低到驾驶者不会专注于驾驶的水平的通知时,对话控制单元510开始用于提高专注度的目的的对话处理(步骤S814)。
首先,为了决定对话内容,对话控制单元510检查终端协作单元532以便识别车内终端10的操作状态,例如车内终端10是否处于路线引导的过程中、车内终端10是否正在回放音乐、等等(步骤S816),并决定适合该操作状态的对话类别(步骤S818)。
然后,对话控制单元510检查偏好数据库140,并通过从步骤S818中所决定的对话类别当中的在对话效果608中具有最大数值的偏好A604和偏好B606中读出记录内容,来决定在对话中要使用的偏好关键词(步骤S820)。
随后,对话控制单元510搜索对话内容数据库540中的作为步骤S818中决定的对话类别的对话类别700,并且从该对话类别700中选择适合车内终端10的操作状态的对话内容基本字符信息704(步骤S824)。对话控制单元510通过将偏好关键词插入到所选择的对话内容基本字符信息中来生成对话内容字符信息(步骤S828),并通过向语音合成单元350发送该信息来开始对话(步骤S832)。
为了检查对话内容的目标是否已通过与驾驶者进行信息交换而实现,对话控制单元510首先检查带有步骤S828中生成的对话内容字符信息的所安排的语音对话是否已完成(步骤S836)。当语音对话尚未完成时,驾驶者可能正在通过操作输入接口182来执行对话中所安排的操作、而不是做出语音响应,因此对话控制单元510通过检查终端协作单元532来检查带有步骤S828中生成的对话内容字符信息的所安排的操作是否已完成(步骤S840)。当在步骤S840中未确认操作已完成时,对话控制单元510继续步骤S836和S840中的处理,直到逝去特定一段时间(步骤S844)。
当确认对话或所安排的操作已完成时,或者在特定一段时间之后还未确认对话或所安排的操作已完成时,对话控制单元510向对话效果保存单元520请求测量对专注度的提高效果。然后,对话效果保存单元520接收来自对话控制单元510的请求,从专注度测量单元200获取专注度,并将该专注度存储在完成对话后专注度524中,从完成对话后专注度中减去开始对话前专注度522中所存储的专注度,并将所获得的专注度差值发送给对话控制单元510(步骤S848)。
对话控制单元510根据从对话效果保存单元520接收的从完成对话后专注度中减去开始对话前专注度所得的结果,来确定由于该对话而产生的专注度提高效果(步骤S852)。具体地,当从完成对话后专注度中减去开始对话前专注度所得的结果是正数时,确定对话具有提高效果,并且当两个专注度相等或者差值微小时,确定对话没有效果,并且当所述结果是负数时,确定对话使专注度变得更坏。最终,对话控制单元510在偏好数据库140中累积步骤S852中确定的对话所产生的专注度提高效果(步骤S856)。具体地,偏好和偏好对话的效果以如下方式被累积:当在对话控制单元510中确定专注度已提高时,由于提高效果已得到确认因此增加1,并且当专注度已降低时,由于对话使专注度变得更坏因此减去1,并且当专注度没有变化或者变化值微小时,确定对话对改善效果无效,并且增加和减去都不执行。当S856中的处理已完成时,对话控制单元510和对话效果保存单元520返回到步骤S804中的观察专注度的处理,并且继续监视专注度。
图9中描述的处理流程可以通过使用图7和图8而被例示为:对话控制单元510在步骤S800中从驾驶者识别单元530得到驾驶者标识符是A。当在步骤S808中确认专注度已降低到驾驶者不会专注于驾驶的水平时,对话控制单元510执行步骤S816中的处理以便确认车内终端10的操作状态。当对话控制单元510确认古典音乐正在回放时,对话控制单元510在步骤S818中决定对话类别是音乐。
然后,对话控制单元510检查偏好数据库140,并且从在驾驶者标识符600中存储有A、且还存储有音乐作为对话类别602的偏好中决定具有对话效果608的最大数值8的偏好A=流行音乐、偏好B=歌手名G,作为将要插入到对话内容中的偏好关键词(步骤S820)。然后,对话控制单元510从在对话内容数据库540的对话类别700中存储有音乐的偏好中获取流行音乐可以作为偏好A插入其中、并且具有1作为对话内容标识符702的对话内容基本字符信息(步骤S824),并生成一系列字符信息,例如生成“你为什么不把风格改变成流行音乐?”作为提供给驾驶者的问题,生成“风格被改变成流行音乐”以便在从驾驶者返回同意响应的情况下使用,以及生成“我明白了。请在你改变主意时呼叫我”以便在从驾驶者返回不同意响应的情况下使用(步骤S828)。随后,对话控制单元510通过向语音合成单元350发送字符信息“你为什么不把风格改变成流行音乐?”来执行对话,并等待来自驾驶者的同意响应或不同意响应(步骤S832)。
当从驾驶者返回响应“是的,请改变风格”时,对话意图解释单元320确定从驾驶者获得了同意,并且把大意是如此的消息发送给对话控制单元510。由于从驾驶者获得了同意,因此对话控制单元510通过使用终端协作单元532将车内终端10中回放的音乐的风格从古典音乐改变成流行音乐,同时向语音合成单元350发送在从驾驶者返回同意响应的情况下使用的字符信息“风格被改变成流行音乐”,并完成对话。
由于对话已完成,因此对话控制单元510请求对话效果保存单元520计算对专注度的提高效果(步骤S848),接收结果并确定对专注度的提高效果。由于从对话效果保存单元520接收的结果是正数值,因此对话控制单元510确定对话具有对专注度的提高效果(步骤S852),向偏好数据库140中具有A作为驾驶者标识符600、具有音乐作为对话类别602、具有流行音乐作为偏好A604、并且具有歌手名G作为偏好B的那条记录的对话效果608的数值8增加1,并用9对8进行重写。
当在步骤S852的确定由于对话而产生的对专注度的提高效果的过程中确定对话使专注度变得更坏时,从偏好数据库140中用于该对话的那条记录的对话效果608的数值中减去1。在图7的实例中,驾驶者标识符600是A、对话类别602是音乐、偏好A604是流行音乐、并且偏好B是歌手名G的那条记录的对话效果608的数值从8被重写成7。当利用驾驶者标识符600是A、对话类别602是音乐、偏好A604是流行音乐、并且偏好B是歌手名G的那条记录进行的对话使专注度变得更坏的效果又重复两次时,驾驶者标识符600是A、对话类别602是音乐、偏好A604是流行音乐、并且偏好B是歌手名G的对话的对话效果608的数值变为5。
在该情况下,在图9中的步骤S820中下一次决定用于驾驶者标识符A的偏好的过程中,由于因对话而产生的专注度提高效果具有对话效果6而发生提高,因此驾驶者标识符600是A、对话类别602是音乐、偏好A604是摇滚音乐、并且偏好B是歌手名H的那条记录被选择。
同时,在许多情况下使专注度变得更坏、并且具有对话效果608的低数值的偏好记录可以从外部经由通信网络30等而被改变成另一偏好记录。
例如,关于驾驶者偏好的信息可以根据驾驶者在车辆外部(例如在家)使用的计算机、蜂窝电话或智能电话的使用历史来累积,并且一条新的偏好信息可以从计算机定期地登记到偏好数据库140中或者在预定操作被执行时登记到偏好数据库140。例如,关于音乐的偏好可以从驾驶者在家使用的个体计算机中所存储的音乐文件的回放次数或回放频率获取。此外,各种驾驶者偏好可以从计算机中网页的搜索历史或浏览历史中的具有许多搜索次数或许多浏览次数的条目获取。此外,例如,对话效果的改变可以针对偏好数据库中登记的每条偏好被保存为历史,并且基于该历史,连续地表示对话效果的低值的偏好可以周期性地从偏好数据库中删除。可替换地,对话效果等于或低于特定值的状态的持续时间超过特定一段时间的偏好可以被删除。
通过以上述方式根据需要更新偏好数据库的内容,可以实现驾驶者的驾驶专注度的连续的进一步提高。
如上所述,当在车内终端和通过语音识别功能和语音合成功能与驾驶者进行对话的对话系统(例如汽车导航系统)中,驾驶者的驾驶专注度降低到驾驶者不会专注于驾驶的状态时,通过使用对驾驶者的驾驶专注度有高度提高效果的偏好来生成对话内容,并且执行对话以便进行对驾驶者的驾驶专注度的有效提高。
此外,将开始对话之前驾驶者的驾驶专注度与完成对话之后驾驶者的驾驶专注度进行比较以确定对话内容的提高效果,并且将结果以提高效果的形式与偏好一起存储。结果,当驾驶者的驾驶专注度的提高效果从熟悉水平等降低时,该偏好的提高效果相对于其他偏好的提高效果降低,因此不使用该偏好并且使用具有更高提高效果的偏好。因此,能够实现驾驶者的驾驶专注度的连续提高。
[第二实例]
将参考图10、11描述第二实例。图10是根据第二实例的车内终端的框图。第二实例的车内终端具有添加到图6中示出的第一实例的配置实例中的对话请求接收单元910。结果,车内终端10不仅像在第一实例中那样通过检测专注度的降低来执行对话,而且根据车内终端10的服务功能所作的请求实现对话的执行。例如,对话是导航单元120请求的用于向驾驶者通知交通堵塞信息的对话、用于提示驾驶者在长时间驾驶中休息一下的对话、以及用于向驾驶者通知车辆已到达目的地的对话。
图11是描述能够通过车内终端的服务功能进行对话请求接收的车内终端的操作的流程图。用于对话请求接收单元910的确认处理的步骤S1004被添加到第一实例中的图9的处理流程实例中。当在步骤S808中没有检测到降低至驾驶者不会专注于驾驶的状态时,在步骤S1004中对话控制单元510检查对话请求接收单元910以检查用于执行对话的请求是否从车内终端10发出。当用于对话的请求没有从车内终端10发出时,操作返回到步骤S804以继续监视专注度。当用于对话的请求从车内终端10发出时,通过步骤S812的处理执行对话,并且之后,确定对话之后专注度的提高效果,并将提高效果在偏好数据库140的对话中使用的偏好的对话效果中进行累积。
由对话请求接收单元910接收的来自车内终端10的对话请求中的对话内容的指定可以是:仅指定与车内终端10的操作状态相对应的对话类别(图7的对话类别602和图7的对话类别700中存储的内容)的情况,以及除了对话类别之外还用对话内容标识符702的数值具体指定对话内容的情况。
在仅将对话类别指定给由对话请求接收单元910接收的对话请求的情况下,对话控制单元510在步骤S820中通过使用所指定的对话类别检查偏好数据库140、并从存储有该对话类别的记录中读出对话效果608是最大数值的记录中的偏好A604和偏好B606的记录内容,来决定将要在对话中使用的偏好关键词。随后,对话控制单元510在步骤S824中用所指定的对话类别搜索对话内容数据库540,并且从搜索出的记录中选择适合车内终端10的操作状态的对话内容基本字符信息704。
在将对话类别和对话内容标识符702指定给由对话请求接收单元910接收的对话请求的情况下,对话控制单元510在步骤S820中通过使用所指定的对话类别检查偏好数据库140、并从存储有该对话类别的记录中读出对话效果608是最大数值的记录中的偏好A604和偏好B606的记录内容,来决定将要在对话中使用的偏好关键词。随后,对话控制单元510在步骤S824中通过利用对话内容标识符702搜索对话内容数据库540,来选择与由车内终端10指定的对话内容标识符702的数值相一致的记录的对话内容基本字符信息704。
[第三实例]
将参考图12至17描述第三实例。第三实例具有第一实例中的配备在车内终端10中的对话单元500的功能,其被分割成车内终端10和经由通信网络30连接的服务器。
图12是根据第三实例的总体系统的框图。图2的对话单元500在图12中被分割成车内终端10中的终端侧对话单元1100、和对话服务器40中的服务器侧对话单元1130。此外,偏好数据库140配备在对话服务器40中。
终端侧对话单元1100经由通信控制单元112和通信装置114连接到通信网络30,并与对话服务器40通信。服务器侧对话单元1130经由服务器侧通信控制单元1120和服务器侧通信装置1100连接到通信网络30,并与车内终端10通信。
终端侧对话单元1100执行在对话中使用的用于车内终端10的信息采集、来自驾驶者的语音信息的输入、以及对话内容向驾驶者的输出。服务器侧对话单元1130基于来自车内终端10的信息,执行语音识别、对话内容的决定、对话内容的合成、以及语音合成。此外,偏好数据库140配备在对话服务器40中。
服务器侧通信装置1100是用于通过连接到通信网络30来建立与另一服务器或终端的通信的装置。服务器侧通信控制单元1120具有执行通信协议(例如TCP/IP)的处理,并从另一服务器或终端接收信息或从工作于服务器上的应用软件获取信息,根据另一服务器或终端所指定的通信协议处理信息,并发送该信息的功能。
图13是终端侧对话单元1100的框图。终端侧对话单元1100包括对话效果保存单元520、开始对话前专注度522、完成对话后专注度524、驾驶者识别单元530、终端协作单元532、对话请求接收单元910、终端信息保存单元1210、输入语音信息转换单元1220、输出语音信息转换单元1230、以及通信接口1240。
对话效果保存单元520、开始对话前专注度522、完成对话后专注度524、驾驶者识别单元530、终端协作单元532、以及对话请求接收单元910具有与利用图6和图10描述的那些单元相同的功能。
终端信息保存单元1210连接到对话效果保存单元520、驾驶者识别单元530、终端协作单元532、对话请求接收单元910和通信接口1240,以从对话效果保存单元520、驾驶者识别单元530、终端协作单元532和对话请求接收单元910获取在对话中使用的关于车内终端10的信息,并经由通信网络1240将该信息发送给对话服务器40。
输入语音信息转换单元1220将来自麦克风186的语音输入转换成语音信息,并经由通信接口1240将该语音信息发送给对话服务器40。由于从麦克风186获取的原始语音信息一般具有大量信息从而在经由通信网络30发送该原始语音信息时延长通信时间并向通信带宽施压,因此输入语音的转换在这里包括通过应用语音压缩技术删除信息量。
输出语音信息转换单元1230接收从对话服务器40输出的对话内容的语音合成结果,并向扬声器188输出语音合成结果。如上所述,由于未压缩的语音信息在经由通信网络30发送时具有大量信息,因此从对话服务器40输出的对话内容的语音合成结果也在通过应用语音压缩技术减小信息量的状态下发送。输出语音信息转换单元1230扩展压缩的语音合成结果,并将其转换成可以向扬声器188输出的形式。
通信接口1240是用于终端信息保存单元1210、输入语音信息转换单元1220和输出语音信息转换单元1230的输入输出接口以经由通信控制单元112与对话服务器40通信。
图14是服务器侧对话单元1130的框图。服务器侧对话单元1130包括语音识别单元310、对话意图解释单元320、语音合成单元350、对话内容数据库540、服务器侧对话控制单元1300、服务器侧输入语音信息转换单元1310、服务器侧输出语音信息转换单元1320、服务器侧终端信息保存单元1330、以及服务器侧通信接口1340,并且与偏好数据库140和服务器侧通信控制单元1120连接。偏好数据库140具有与利用图7描述的偏好数据库140相同的功能。语音识别单元310、对话意图解释单元320和语音合成单元350具有与利用图4描述的那些单元相同的功能。对话内容数据库具有与利用图6描述的对话内容数据库相同的功能。
服务器侧输入语音信息转换单元1310经由服务器侧通信接口1340获取从终端侧对话单元1100的输入语音信息转换单元1220输出的通过语音压缩技术压缩的驾驶者语音信息,扩展压缩的语音信息,并向语音识别单元310发送该信息。
服务器侧输出语音信息转换单元1320通过语音压缩技术压缩由语音合成单元350生成的对话内容语音信息,并且经由服务器侧通信接口1340向终端侧对话单元1100的输出语音信息转换单元1230发送该信息。
服务器侧终端信息保存单元1330具有经由服务器侧通信接口1340与终端侧对话单元1100的终端信息保存单元1210通信的功能,以便获取关于车内终端10的对话的信息、请求对话效果保存单元520获取专注度、并通过使用终端协作单元532操作车内终端10。
服务器侧对话控制单元1300与偏好数据库140、对话意图解释单元320、语音合成单元350、对话内容数据库540和服务器侧终端信息保存单元1330连接。当服务器侧终端信息保存单元1330检测到驾驶者的专注度降低到驾驶者不会专注于驾驶的状态时,服务器侧对话控制单元1300从偏好数据库140中选择对驾驶者专注度有高度提高效果的偏好,生成对话内容,并且执行带有该对话内容的对话。
此外,服务器侧对话控制单元1300通过服务器侧终端信息保存单元1330将开始对话前专注度与完成对话后专注度进行比较,来确定由于对话而产生的对专注度的提高效果,并且在偏好数据库140中将该提高效果存储为在对话中使用的偏好的属性信息。
服务器侧通信接口1340是用于服务器侧输入语音信息转换单元1310、服务器侧输出语音信息转换单元1320和服务器侧终端信息保存单元1330的输入输出接口,以经由服务器侧通信控制单元1120与车内终端10通信。
图15是描述终端侧对话单元1100的操作的流程图。终端侧对话单元1100首先从驾驶者识别单元530获取驾驶者标识符,识别正在驾驶车辆20的个体驾驶者,并且在终端信息保存单元1210中存储该驾驶者标识符(步骤S1404)。
然后,对话效果保存单元520定期地观察由专注度测量单元200计算的专注度(步骤S804),并检查专注度是否已降低到驾驶者不会专注于驾驶的水平(步骤S808)。当专注度已降低到驾驶者不会专注于驾驶的水平时,对话效果保存单元520将该专注度存储在开始对话前专注度522中(步骤S812)。
当专注度没有降低到驾驶者不会专注于驾驶的水平时,对话效果保存单元520检查对话请求接收单元910。当从车内终端10发出对话请求时,对话效果保存单元520从专注度测量单元200获取专注度,并将该专注度存储在开始对话前专注度522中(步骤S812)。当对话请求没有从车内终端10发出时,操作返回到步骤S804从而继续监视专注度。
当步骤S812已完成时,对话效果保存单元520向服务器侧对话单元1130发送存储在终端信息保存单元1210中的终端侧对话相关信息,以请求服务器侧对话单元1130开始对话(步骤S1410)。此刻,当在步骤S808中检测到专注度的降低时,在终端信息保存单元1210中保存的终端侧对话相关信息是从驾驶者标识符和终端协作单元532获取的车内终端10的操作状态,并且当在步骤S1004中确定对话请求从车内终端10发出时,终端侧对话相关信息是添加到来自车内终端10的对话请求中的驾驶者标识符、对话类别和对话内容标识符,以及从终端协作单元532获取的车内终端10的操作状态。
此后,等待由服务器侧对话单元1130进行的对话处理的完成(步骤S1420)。
当由服务器侧对话单元1130进行的对话处理已完成、并且从服务器侧对话单元1130接收到用于计算对专注度的提高效果的请求(步骤S1430)时,对话效果保存单元520从专注度测量单元200获取专注度,并将该专注度存储在完成对话后专注度524中,从完成对话后专注度中减去开始对话前专注度522中所存储的专注度(步骤S848),并向服务器侧对话单元1130发送所计算的专注度差值(步骤S1440)。然后,等待服务器侧对话单元1130中对专注度提高效果的确定的完成(步骤S1450)。当服务器侧对话单元1130中对专注度提高效果的确定已完成、并且终端侧对话单元接收到对话完成通知时,操作返回到监视专注度的状态(步骤S1460)。
图16是描述图15的步骤S1420中所述的服务器侧对话单元1130中的对话处理实例的流程图。当服务器侧终端信息保存单元1330从终端侧对话单元1100接收到终端侧对话相关信息时,服务器侧终端信息保存单元1330向服务器侧对话控制单元1300通知其已接收到终端侧对话相关信息(步骤S1504)。
响应于终端侧对话相关信息被接收到的通知,服务器侧对话控制单元1300开始对话(步骤S1508)。服务器侧对话控制单元1300分析终端侧对话相关信息,并通过驾驶者标识符识别驾驶者(步骤S1512),识别车内终端10的操作状态(步骤S1516),并且决定适合该操作状态的对话类别(步骤S818)。
随后,服务器侧对话控制单元1300检查偏好数据库140,并且通过从步骤S818中决定的对话类别当中的在对话效果608中具有最大数值的记录的偏好A604和偏好B606中读出记录内容来决定将要在对话中使用的偏好关键词(步骤S820)。
随后,服务器侧对话控制单元1300搜索对话内容数据库540的对话类别700是步骤S818中决定的对话类别的记录,并且从所述记录中选择适合车内终端10的操作状态的对话内容基本字符信息704(步骤S824)。通过将偏好关键词插入到所选择的对话内容基本字符信息中,来生成对话内容字符信息(步骤S828)。
然后,服务器侧对话控制单元1300向语音合成单元350发送对话内容字符信息。语音合成单元350通过服务器侧输出语音信息转换单元压缩语音合成结果,并将其经由服务器侧通信接口1340发送给终端侧对话单元1100以开始对话(步骤S1540)。
当添加到来自车内终端10的对话请求中的对话类别被添加到步骤S1504中接收的终端侧对话相关信息中时,在步骤S818中使用由车内终端10指定的对话类别。此外,当添加到来自车内终端10的对话请求中的对话内容标识符被添加到步骤S1504中接收的终端侧对话相关信息中时,在步骤S824的对话内容决定中使用作为车内终端10所指定的对话内容标识符的数值的记录的对话内容基本字符信息。
为了检查对话内容的目标是否通过与驾驶者的信息交换而得到实现,服务器侧对话控制单元1300检查带有步骤S828中生成的对话内容字符信息的所安排的语音对话是否已完成(步骤S836)。当语音对话尚未完成时,驾驶者可能正在通过用手指操作输入接口182来执行对话中所安排的操作、而不是做出语音响应,因此服务器侧对话控制单元1300通过经由服务器侧终端信息保存单元1330检查终端协作单元532,来检查带有步骤S828中生成的对话内容字符信息的所安排的操作是否已完成(步骤S1550)。当在步骤S1550中未检查到操作完成时,继续进行步骤S836和S1550中的检查处理,直到逝去特定一段时间为止(步骤S844)。
当确认对话或所安排的操作已完成时,或者在特定一段时间之后还未确认对话或所安排的操作已完成时,服务器侧对话控制单元1300向终端侧对话单元1100请求测量对专注度的提高效果。
图17是描述图15的步骤S1450中所述的服务器侧对话单元1130中的专注度提高效果的确定处理实例的流程图。当服务器侧对话单元1130的服务器侧对话控制单元1300通过终端侧对话单元1100获取对专注度的提高效果(步骤S1610)时,其确定由于对话而产生的专注度提高效果(步骤S852)。
随后,服务器侧对话控制单元1300在偏好数据库140中累积步骤S852中确定的由于对话而产生的对累积专注度的提高效果(步骤S856)。当服务器侧对话控制单元1300已完成步骤S856中的处理时,其通过向终端侧对话单元1100发送对话完成通知来结束专注度提高效果的确定处理(步骤S1620)。
如上所述,当在车内终端和对话系统(例如汽车导航系统)中,当驾驶者的驾驶专注度降低到驾驶者不会专注于驾驶的状态时,通过使用对驾驶者的驾驶专注度有高度提高效果的偏好来生成对话内容,并执行对话以便进行对驾驶者的驾驶专注度的有效提高,其中对话系统在终端侧对在对话中使用的车内终端的信息进行采集、输入来自驾驶者的语音信息、并向驾驶者输出对话内容,并且在服务器侧基于来自车内终端的信息执行语音识别、对话内容的决定、对话内容的合成以及语音合成。
此外,将开始对话之前驾驶者的驾驶专注度与对话完成之后驾驶者的驾驶专注度进行比较,以确定对话内容的提高效果,并将结果以提高效果的形式与偏好一起存储。结果,当驾驶者的驾驶专注度的提高效果从熟悉水平等降低时,该偏好的提高效果相对于其他偏好的提高效果降低,因此不使用该偏好、并使用具有更高提高效果的偏好。因此,能够实现驾驶者的驾驶专注度的连续提高。
本发明的上述实施例和实例仅是用于描述本发明的实例,并且并非旨在将本发明的范围限制于这些实施例或实例。本领域技术人员可以在其他各种方面中实施本发明而不脱离本发明的精神。
Claims (13)
1.一种配置成与驾驶车辆的驾驶者进行对话的对话装置,包括:
配置成保存偏好数据库的存储单元,在所述偏好数据库中,对话候选项和对话效果彼此相关联,所述对话候选项是与驾驶者的对话内容的候选项,并且所述对话效果表示由于利用所述对话候选项进行对话而使驾驶者的驾驶专注度得到提高的程度;
专注度测量单元,其被配置成测量驾驶者的驾驶专注度;以及
对话单元,其被配置成在由所述专注度测量单元测量的专注度下降至预定阈值以下时,基于所述偏好数据库中的所述对话效果选择对话候选项,随后利用所选择的对话候选项执行对话,基于执行对话前和执行对话后的专注度来计算所述对话的对话效果,并且更新所述偏好数据库的对话效果。
2.如权利要求1所述的对话装置,还包括配置成向驾驶者提供各种服务功能的服务功能单元,其中
所述偏好数据库对于多个对话候选项记录对话类别和对话效果,并且
所述对话单元根据所述服务功能单元的操作状态来选择对话类别,并且基于所述对话效果选择来自所述对话类别的对话候选项。
3.如权利要求1所述的对话装置,其中所述对话单元通过排除在预定数量的最近对话中使用的对话候选项来选择对话候选项。
4.如权利要求1所述的对话装置,还包括对话候选项添加单元,所述对话候选项添加单元被配置成向所述偏好数据库添加基于驾驶者的使用行为而被选择的、但是未被登记在所述偏好数据库中的对话候选项。
5.如权利要求4所述的对话装置,还包括对话候选项删除单元,所述对话候选项删除单元被配置成从所述偏好数据库中删除在所述偏好数据库中所登记的对话候选项当中的具有预定值以下的对话效果的对话候选项。
6.如权利要求1所述的对话装置,还包括配置成向驾驶者提供各种服务功能的服务功能单元,其中
所述对话单元被配置成控制用于提高所述专注度的对话和由所述服务功能单元提供的服务功能所进行的对话,并且调整所述两种对话使得所述两种对话不被同时执行。
7.一种配置成与驾驶车辆的驾驶者进行对话的对话系统,包括:
位于车辆侧的专注度测量单元,其被配置成测量驾驶者的驾驶专注度;
配置成保存偏好数据库的存储单元,在所述偏好数据库中,对话候选项和对话效果彼此相关联,所述对话候选项是与驾驶者的对话内容的候选项,并且所述对话效果表示由于利用所述对话候选项进行对话而使驾驶者的驾驶专注度得到提高的程度;以及
对话单元,其被配置成在由配备在所述车辆侧的所述专注度测量单元测量的专注度下降至预定阈值以下时,基于所述偏好数据库中的所述对话效果选择对话候选项,随后利用所选择的对话候选项执行对话,基于执行对话前和执行对话后的专注度来计算所述对话的对话效果,并且更新所述偏好数据库的对话效果,
所述存储单元和所述对话单元位于服务器侧,所述服务器通过网络与所述车辆连接。
8.如权利要求7所述的对话系统,还包括配置成向驾驶者提供各种服务功能的服务功能单元,其中
所述偏好数据库对于多个对话候选项记录对话类别和对话效果,并且
所述对话单元根据所述服务功能单元的操作状态来选择对话类别,并且基于所述对话效果选择来自所述对话类别的对话候选项。
9.如权利要求7所述的对话系统,其中所述对话单元通过排除在预定数量的最近对话中使用的对话候选项来选择对话候选项。
10.如权利要求7所述的对话系统,还包括对话候选项添加单元,所述对话候选项添加单元被配置成向所述偏好数据库添加基于驾驶者的使用行为而被选择的、但是未被登记在所述偏好数据库中的对话候选项。
11.如权利要求10所述的对话系统,还包括对话候选项删除单元,所述对话候选项删除单元被配置成从所述偏好数据库中删除在所述偏好数据库中所登记的对话候选项当中的具有预定值以下的对话效果的对话候选项。
12.如权利要求7所述的对话系统,还包括配置成向驾驶者提供各种服务功能的服务功能单元,其中
所述对话单元被配置成控制用于提高所述专注度的对话和由所述服务功能单元提供的服务功能所进行的对话,并且调整所述两种对话使得所述两种对话不被同时执行。
13.一种在配置成与驾驶车辆的驾驶者进行对话的对话装置中执行的对话控制方法,包括:
保存偏好数据库,在所述偏好数据库中,对话候选项和对话效果彼此相关联,所述对话候选项是与驾驶者的对话内容的候选项,并且所述对话效果表示由于利用所述对话候选项进行对话而使驾驶者的驾驶专注度得到提高的程度;
测量驾驶者的驾驶专注度;
在所述专注度下降至预定阈值以下时,基于所述偏好数据库中的所述对话效果选择对话候选项,随后利用所选择的对话候选项执行对话;以及
基于执行对话前和执行对话后的专注度来计算所述对话的对话效果,并且更新所述偏好数据库的对话效果。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012116493A JP2013242763A (ja) | 2012-05-22 | 2012-05-22 | 対話装置、対話システム、および対話制御方法 |
JP2012-116493 | 2012-05-22 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103425733A true CN103425733A (zh) | 2013-12-04 |
Family
ID=48428368
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2013101915639A Pending CN103425733A (zh) | 2012-05-22 | 2013-05-22 | 对话装置、对话系统和对话控制方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20130325478A1 (zh) |
EP (1) | EP2666693A2 (zh) |
JP (1) | JP2013242763A (zh) |
CN (1) | CN103425733A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106446769A (zh) * | 2015-08-11 | 2017-02-22 | 本田技研工业株式会社 | 用于基于标志的定位系统及方法 |
CN109716325A (zh) * | 2016-09-13 | 2019-05-03 | 微软技术许可有限责任公司 | 计算机化的自然语言查询意图分派 |
CN111427993A (zh) * | 2019-11-15 | 2020-07-17 | 西安海的电子科技有限公司 | 一种基于安卓系统的多对话实现方法 |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9291473B2 (en) * | 2012-03-07 | 2016-03-22 | Mitsubishi Electric Corporation | Navigation device |
US9328281B2 (en) | 2012-03-09 | 2016-05-03 | Halliburton Energy Services, Inc. | Foaming of set-delayed cement compositions comprising pumice and hydrated lime |
US9371712B2 (en) | 2012-03-09 | 2016-06-21 | Halliburton Energy Services, Inc. | Cement set activators for set-delayed cement compositions and associated methods |
DE102012215397A1 (de) * | 2012-08-30 | 2014-03-06 | Robert Bosch Gmbh | Interaktive Aufmerksamkeitssteigerung |
JP6037130B2 (ja) * | 2013-04-30 | 2016-11-30 | 株式会社デンソー | 運転状態改善装置 |
US9626966B2 (en) * | 2013-12-18 | 2017-04-18 | Harman International Industries, Incorporated | Voice recognition query response systems and methods for generating query responses using information from a vehicle |
US9547798B2 (en) * | 2014-05-20 | 2017-01-17 | State Farm Mutual Automobile Insurance Company | Gaze tracking for a vehicle operator |
US9390706B2 (en) | 2014-06-19 | 2016-07-12 | Mattersight Corporation | Personality-based intelligent personal assistant system and methods |
JP6358071B2 (ja) * | 2014-12-10 | 2018-07-18 | 株式会社デンソー | 車両用対話制御装置 |
US9878663B1 (en) | 2016-12-07 | 2018-01-30 | International Business Machines Corporation | Cognitive dialog system for driving safety |
WO2016157814A1 (ja) * | 2015-04-03 | 2016-10-06 | 株式会社デンソー | 起動提案装置及び起動提案方法 |
JP6447481B2 (ja) | 2015-04-03 | 2019-01-09 | 株式会社デンソー | 起動提案装置及び起動提案方法 |
US20170032250A1 (en) * | 2015-07-29 | 2017-02-02 | Ching-Ping Chang | Machine Status And User Behavior Analysis System |
JP6358212B2 (ja) * | 2015-09-17 | 2018-07-18 | トヨタ自動車株式会社 | 車両用覚醒制御システム |
JP6515764B2 (ja) | 2015-09-28 | 2019-05-22 | 株式会社デンソー | 対話装置及び対話方法 |
JP6516298B2 (ja) | 2016-05-06 | 2019-05-22 | トヨタ自動車株式会社 | 情報表示装置 |
US10832148B2 (en) | 2016-12-07 | 2020-11-10 | International Business Machines Corporation | Cognitive dialog system for driving safety |
JP6689215B2 (ja) | 2017-01-25 | 2020-04-28 | 株式会社日立製作所 | システム及び対話情報の出力方法 |
JP6722347B2 (ja) * | 2017-03-31 | 2020-07-15 | 本田技研工業株式会社 | 行動支援システム、行動支援装置、行動支援方法およびプログラム |
JP6860068B2 (ja) * | 2017-05-31 | 2021-04-14 | 富士通株式会社 | 運転支援装置、運転支援システムおよび運転支援方法 |
JP6962034B2 (ja) * | 2017-07-06 | 2021-11-05 | トヨタ自動車株式会社 | 情報提供装置および情報提供方法 |
JP2019124977A (ja) * | 2018-01-11 | 2019-07-25 | トヨタ自動車株式会社 | 車載音声出力装置、音声出力制御方法、及び音声出力制御プログラム |
JP6834997B2 (ja) * | 2018-01-25 | 2021-02-24 | 日本電気株式会社 | 運転状況監視装置、運転状況監視システム、運転状況監視方法、プログラム |
CN109525712A (zh) * | 2018-10-29 | 2019-03-26 | 维沃移动通信有限公司 | 一种信息处理方法、移动终端及车载设备 |
JP6906574B2 (ja) * | 2019-08-30 | 2021-07-21 | 株式会社Mobility Technologies | 車載装置及び車両管理システム |
US12162498B2 (en) * | 2021-08-27 | 2024-12-10 | Nissan North America, Inc. | Systems and methods for testing driver awareness within a vehicle and/or intervening during a possible crisis |
US12072919B2 (en) * | 2021-08-31 | 2024-08-27 | Paypal, Inc. | Sentence level dialogue summaries using unsupervised machine learning for keyword selection and scoring |
US20230192100A1 (en) * | 2021-12-22 | 2023-06-22 | Arriver Software Llc | Awareness checker for enhancing collaborative driving supervision |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5694116A (en) * | 1995-11-06 | 1997-12-02 | Honda Giken Kogyo Kabushiki Kaisha | Driver condition-monitoring apparatus for automotive vehicles |
CN101198915A (zh) * | 2005-06-14 | 2008-06-11 | 丰田自动车株式会社 | 对话系统 |
Family Cites Families (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5660176A (en) * | 1993-12-29 | 1997-08-26 | First Opinion Corporation | Computerized medical diagnostic and treatment advice system |
JP3153846B2 (ja) * | 1995-06-02 | 2001-04-09 | 三菱電機株式会社 | 話題提供装置 |
US6185534B1 (en) * | 1998-03-23 | 2001-02-06 | Microsoft Corporation | Modeling emotion and personality in a computer user interface |
US6236968B1 (en) * | 1998-05-14 | 2001-05-22 | International Business Machines Corporation | Sleep prevention dialog based car system |
JP2002114107A (ja) * | 2000-10-10 | 2002-04-16 | Nissan Motor Co Ltd | オーディオ装置及び音楽提供方法 |
US6964023B2 (en) * | 2001-02-05 | 2005-11-08 | International Business Machines Corporation | System and method for multi-modal focus detection, referential ambiguity resolution and mood classification using multi-modal input |
DE10217822C1 (de) * | 2002-04-17 | 2003-09-25 | Daimler Chrysler Ag | Verfahren und Vorrichtung zur Blickrichtungserkennung einer Person mittels wenigstens eines richtungsselektiven Mikrofons |
JP2004037721A (ja) * | 2002-07-02 | 2004-02-05 | Pioneer Electronic Corp | 音声応答システム、音声応答プログラム及びそのための記憶媒体 |
US7693720B2 (en) * | 2002-07-15 | 2010-04-06 | Voicebox Technologies, Inc. | Mobile systems and methods for responding to natural language speech utterance |
JP4085926B2 (ja) * | 2003-08-14 | 2008-05-14 | ソニー株式会社 | 情報処理端末及び通信システム |
US7266430B2 (en) * | 2003-12-22 | 2007-09-04 | International Business Machines Corporation | Medical applications in telematics |
US9224394B2 (en) * | 2009-03-24 | 2015-12-29 | Sirius Xm Connected Vehicle Services Inc | Service oriented speech recognition for in-vehicle automated interaction and in-vehicle user interfaces requiring minimal cognitive driver processing for same |
JP2006119965A (ja) * | 2004-10-22 | 2006-05-11 | Mitsubishi Fuso Truck & Bus Corp | 車載型警報システム |
JP4509042B2 (ja) * | 2006-02-13 | 2010-07-21 | 株式会社デンソー | 自動車用もてなし情報提供システム |
JP4631750B2 (ja) * | 2006-03-06 | 2011-02-16 | トヨタ自動車株式会社 | 画像処理システム |
WO2007113809A2 (en) * | 2006-03-30 | 2007-10-11 | Saban Asher S | Protecting children and passengers with respect to a vehicle |
JP4716371B2 (ja) * | 2006-05-19 | 2011-07-06 | 富士通株式会社 | 移動体用運転支援装置 |
DE102006051922A1 (de) * | 2006-11-03 | 2008-05-08 | Robert Bosch Gmbh | Fahrerinformations- und -dialogsystem |
JP4259587B2 (ja) | 2007-03-30 | 2009-04-30 | 株式会社デンソー | データベース装置、注意喚起装置及び運転支援装置 |
CN101669090A (zh) * | 2007-04-26 | 2010-03-10 | 福特全球技术公司 | 情绪提示系统和方法 |
JP2009048605A (ja) * | 2007-07-24 | 2009-03-05 | Nissan Motor Co Ltd | 居眠り運転防止装置 |
US8140335B2 (en) * | 2007-12-11 | 2012-03-20 | Voicebox Technologies, Inc. | System and method for providing a natural language voice user interface in an integrated voice navigation services environment |
US9665910B2 (en) * | 2008-02-20 | 2017-05-30 | Hartford Fire Insurance Company | System and method for providing customized safety feedback |
US8265252B2 (en) * | 2008-04-11 | 2012-09-11 | Palo Alto Research Center Incorporated | System and method for facilitating cognitive processing of simultaneous remote voice conversations |
JP4547721B2 (ja) * | 2008-05-21 | 2010-09-22 | 株式会社デンソー | 自動車用情報提供システム |
JP4609527B2 (ja) * | 2008-06-03 | 2011-01-12 | 株式会社デンソー | 自動車用情報提供システム |
JP2010061550A (ja) * | 2008-09-05 | 2010-03-18 | Nec Corp | 情報提供サービスシステム |
US8212659B2 (en) * | 2008-09-05 | 2012-07-03 | Mazda Motor Corporation | Driving assist device for vehicle |
JP2010149757A (ja) * | 2008-12-25 | 2010-07-08 | Toyota Motor Corp | 覚醒持続支援システム |
US8532989B2 (en) * | 2009-09-03 | 2013-09-10 | Honda Motor Co., Ltd. | Command recognition device, command recognition method, and command recognition robot |
US8559673B2 (en) * | 2010-01-22 | 2013-10-15 | Google Inc. | Traffic signal mapping and detection |
US20120136559A1 (en) * | 2010-11-29 | 2012-05-31 | Reagan Inventions, Llc | Device and system for identifying emergency vehicles and broadcasting the information |
DE102012111016A1 (de) * | 2012-11-15 | 2014-05-15 | Dr. Ing. H.C. F. Porsche Aktiengesellschaft | Verfahren zum Betrieb eines Reifendruckkontrollsystems eines Kraftfahrzeugs |
-
2012
- 2012-05-22 JP JP2012116493A patent/JP2013242763A/ja active Pending
-
2013
- 2013-05-14 EP EP13167660.3A patent/EP2666693A2/en not_active Withdrawn
- 2013-05-20 US US13/897,537 patent/US20130325478A1/en not_active Abandoned
- 2013-05-22 CN CN2013101915639A patent/CN103425733A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5694116A (en) * | 1995-11-06 | 1997-12-02 | Honda Giken Kogyo Kabushiki Kaisha | Driver condition-monitoring apparatus for automotive vehicles |
CN101198915A (zh) * | 2005-06-14 | 2008-06-11 | 丰田自动车株式会社 | 对话系统 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106446769A (zh) * | 2015-08-11 | 2017-02-22 | 本田技研工业株式会社 | 用于基于标志的定位系统及方法 |
CN106446769B (zh) * | 2015-08-11 | 2021-09-28 | 本田技研工业株式会社 | 用于基于标志的定位系统及方法 |
CN109716325A (zh) * | 2016-09-13 | 2019-05-03 | 微软技术许可有限责任公司 | 计算机化的自然语言查询意图分派 |
CN109716325B (zh) * | 2016-09-13 | 2023-09-12 | 微软技术许可有限责任公司 | 计算机化的自然语言查询意图分派 |
CN111427993A (zh) * | 2019-11-15 | 2020-07-17 | 西安海的电子科技有限公司 | 一种基于安卓系统的多对话实现方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2013242763A (ja) | 2013-12-05 |
EP2666693A2 (en) | 2013-11-27 |
US20130325478A1 (en) | 2013-12-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103425733A (zh) | 对话装置、对话系统和对话控制方法 | |
US10222227B2 (en) | Navigation systems and associated methods | |
US9667742B2 (en) | System and method of conversational assistance in an interactive information system | |
US20180370537A1 (en) | System providing remaining driving information of vehicle based on user behavior and method thereof | |
US20120303254A1 (en) | System and method for comparing vehicle economy based on driving levels | |
CN103999152A (zh) | 利用动态语法元素集的语音识别 | |
KR101551037B1 (ko) | 차량에서의 정보 제공을 위한 시스템 | |
US11328595B1 (en) | Parking recognition server for personal mobility device, system including the same, and method thereof | |
JP2011232270A (ja) | ナビゲーション装置およびそのヘルプ提示方法 | |
CN106331310A (zh) | 移动终端及其控制方法 | |
JP6619316B2 (ja) | 駐車位置探索方法、駐車位置探索装置、駐車位置探索プログラム及び移動体 | |
JP7351701B2 (ja) | 情報提供システム、情報提供装置及びコンピュータプログラム | |
JP2018169717A (ja) | 旅行時間推定装置及びコンピュータプログラム | |
US20200079376A1 (en) | Driving assistance device, vehicle driving assistance system, control method of driving assistance device, and non-transitory recording medium storing program | |
KR102029557B1 (ko) | 개인 맞춤형 교통 경로 제공 방법 및 장치 | |
US20220207447A1 (en) | Information providing device, information providing method, and storage medium | |
CN116312052A (zh) | 车辆变道提示方法、系统、设备及车辆 | |
US20110258228A1 (en) | Information output system, communication terminal, information output method and computer product | |
JP2022103553A (ja) | 情報提供装置、情報提供方法、およびプログラム | |
JP5632785B2 (ja) | 運転操作支援装置及び方法 | |
CN116168704B (zh) | 语音交互的引导方法、装置、设备、介质及车辆 | |
US20230392936A1 (en) | Method and apparatus for determining lingering communication indicators | |
US20240161152A1 (en) | Information processing apparatus, information processing method, and non-transitory computer readable storage | |
KR20220046997A (ko) | 언어 모델을 이용한 사용자 행동 예측 시스템 및 이의 운용 방법 | |
JP2018005652A (ja) | 広告評価装置、広告評価システム及びコンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20131204 |