CN101010664B - 移动终端设备 - Google Patents
移动终端设备 Download PDFInfo
- Publication number
- CN101010664B CN101010664B CN2005800288605A CN200580028860A CN101010664B CN 101010664 B CN101010664 B CN 101010664B CN 2005800288605 A CN2005800288605 A CN 2005800288605A CN 200580028860 A CN200580028860 A CN 200580028860A CN 101010664 B CN101010664 B CN 101010664B
- Authority
- CN
- China
- Prior art keywords
- unit
- control module
- text
- mobile terminal
- terminal device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 claims abstract description 79
- 230000006870 function Effects 0.000 claims abstract description 76
- 238000000034 method Methods 0.000 claims description 62
- 230000008859 change Effects 0.000 claims description 45
- 238000004891 communication Methods 0.000 claims description 44
- 230000008569 process Effects 0.000 claims description 38
- 238000004020 luminiscence type Methods 0.000 claims description 35
- 230000009471 action Effects 0.000 claims description 13
- 230000002093 peripheral effect Effects 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 28
- 239000000284 extract Substances 0.000 description 16
- 102100035954 Choline transporter-like protein 2 Human genes 0.000 description 11
- 101000948115 Homo sapiens Choline transporter-like protein 2 Proteins 0.000 description 11
- 238000007689 inspection Methods 0.000 description 10
- 238000003825 pressing Methods 0.000 description 10
- 238000000605 extraction Methods 0.000 description 9
- 239000002131 composite material Substances 0.000 description 8
- 102100031699 Choline transporter-like protein 1 Human genes 0.000 description 5
- 101000940912 Homo sapiens Choline transporter-like protein 1 Proteins 0.000 description 5
- 230000035807 sensation Effects 0.000 description 5
- 230000004044 response Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000003780 insertion Methods 0.000 description 3
- 230000037431 insertion Effects 0.000 description 3
- 238000002360 preparation method Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000004800 psychological effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 244000205754 Colocasia esculenta Species 0.000 description 1
- 235000006481 Colocasia esculenta Nutrition 0.000 description 1
- 241001269238 Data Species 0.000 description 1
- 240000004859 Gamochaeta purpurea Species 0.000 description 1
- 101000661807 Homo sapiens Suppressor of tumorigenicity 14 protein Proteins 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
Images
Landscapes
- Telephone Function (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
提供一种移动终端设备,能够根据状况来自动设定合适的字段间断位置,能够通过特定操作来实现跳过操作和回跳操作,能够高效地利用读出功能,并且能够改进用户使用的便利性。该移动终端设备具有:操作单元(19),用于命令读出功能;存储器(12),用于存储文本;文本到语音单元(20),用于在读出时将所述存储器(12)中存储的文本转换成语音数据;音频输出单元(21)用于输出所述语音数据;以及控制单元(26),用于处理当在所述音频输出单元(21)处输出所述语音数据时识别要读出的文本数据中的预定间断,并在所述操作单元(19)发出预定指令时执行控制,以便从指令输入时的文本的读出位置之前或之后的间断位置开始输出字,作为由音频输出单元读出的语音数据。
Description
技术领域
本发明涉及例如移动电话或用于无线通信的其他移动终端设备,更具体地讲,涉及一种具有以音频方式读出显示器中字段的功能的移动终端。
背景技术
近年来已提出了能够读出由按键操作设定的、与该按键操作相对应的功能名称等的、作为移动终端设备的移动电话(例如,见专利文献1)。
这种移动电话具有:多个按键操作单元;控制单元,用于根据按键操作单元的一个或多个按键操作,在电话中设置的多个功能中设定与按键操作相对应的功能;以及文本到语音单元,用于以音频方式输出与按键操作相关联地设定的功能名称。
这种移动电话响应按键操作,仅仅将快速拨号存储器的检索结果转换为向用户传输的音频信息。由音频提供的信息基本上是顺序输出的,而不会排列起来。因此,用户难以根据重要程度来挑选和删除字段以及获取音频信息。因此其缺点在于无法高效地利用所谓的读出功能。
作为具有上述音频输出功能的终端设备,已知一种信息输出设备,该信息输出设备在将新闻、广告和其他具有设定量意义的文本转换成用于再现和输出的音频时,防止操作者(用户)错误地识别信息。此外,已知一种文本读出设备,该文本读出设备被设计用来缩短从邮件读出设备读出的邮件中检查所需邮件的时间。
前一种信息输出设备是从预定的读取位置、将信息存储器中存储的信息读出成为再现和输出的音频的设备。当由回放按钮产生的指令确定信息读取开始位置时,读出控制单元移动到所确定的信息读取位置之前的第一间断位置,而当由快进按钮产生的指令确定信息读取开始位置时,读出控制单元将所确定的信息读取开始位置移动到该开始位置之后的第一间断位置,从而最终确定信息读取开始位置。
当后一种文本读出设备从电话存取数据处理系统,以读出邮件时,首先由文本到语音单元顺序地输出邮件的首部。用户将发送方、主题或两者都作为跳过条件登记在针对不必要邮件的跳过条件保持器中。此后,当读取首部时,跳过条件判断器判断该条件,从而不读取满足跳过条件的邮件。此外,当找到所需邮件时,响应于指令,由文本到语音单元输出邮件文本。
专利文献1:日本专利公开(A)No.11-252216
发明内容
本发明要解决的问题
上述信息输出设备基本上处理由句串组成的文本信息,但不处理伴随终端操作的菜单显示等。此外,在回放和前进操作之后,首先考虑到避免从不自然的位置开始再现而自动设定间断位置,从支持根据重要程度的挑选和删除的角度看来,不能认为这是充分的。例如,未将邮件的首部信息识别为首部信息,从而以相同的方式,将接收日期、发送方和主题作为“返回路径”、“到”等不需要读出的重要程度低的信息而进行处理。
上述文本读出设备主要集中在选择和再现所需邮件时的操作属性上,因此,只能使用“主题”和“发送方”作为跳过条件。此外,未改进读出邮件时的操作属性。
此外,在上述设备中存在的缺点是对于耳机/麦克风等外部连接的设备,未提供用于改进用户便利性的功能。
此外,作为具有音频输出功能的设备,已提出了当可疑人员侵入房间时向固定电话或移动电话发出音频警报、并且当按下设定为读出功能的按钮开关时能够当场传输声音的设备、逐渐提高音频警报从而获得心理效果的设备等。但是,这种移动电话响应于按键操作,仅仅将快速拨号存储器的检索结果转换为向用户传输的音频信息,而不考虑在音频读出之前产生音频警报。
上述专利文献1之外的前一种设备可以设定为通过按下按钮开关而进行读出或自动读出,但是当设定为自动时,所述设备不具有产生音频警报等的功能。因此,有可能无法听到开始读出时的前几个词。此外,用户无法在读出之前设定音频警报,从而对于用户自己,对是否有音频警报的判断变得较慢。此外,其缺点还包括即使不需要时也发出音频警报。
在移动电话中,已知技术是在接收到电子邮件时导通LED,以通知用户接收到电子邮件。
但是,在常规移动电话中,LED的发光图形简单,所以能够给予用户的信息是有限的。无法处理移动电话的多种功能。此外,在折叠式(翻盖式)移动电话的情况下,为了在得到通知之后实际地查看电子邮件的内容,用户必须打开机壳,并进一步执行预定的按键操作,因此,操作比较麻烦。特别是在使用音频读出作为指南时,对接收到的邮件的访问不可避免地变慢。
本发明的目的是提供一种移动终端设备,该移动终端设备能够根据状况来自动设定合适的字段间断位置,能够通过特定操作来实现跳过操作和回跳操作,能够高效地利用读出功能,并且能够改进用户使用的便利性。
本发明的另一目的是提供一种移动终端设备,该移动终端设备使用户能够在读出之前设定音频警报,而无需麻烦的操作,此外,该移动终端设备还能够只在需要时才产生音频警报。
本发明的另一目的是提供一种移动终端设备,该移动终端设备能够向用户通知多种信息,并能够通过简单操作对信息内容进行检查。
用于解决问题的装置
根据本发明,提供了一种具有音频读出功能的移动终端设备,所述移动终端设备包括:存储器单元,用于根据读出项存储文本;音频警报产生单元,用于产生音频警报;文本到语音单元,用于在读出时将所述存储器中存储的文本转换成语音数据;音频输出单元,用于输出所述语音数据或所述音频警报;以及控制单元,用于当在所述音频输出单元处输出所述语音数据时,处理在所述音频输出单元处输出所述音频警报、然后输出所述语音数据的第一控制例程,以及处理在所述音频输出单元处输出语音数据而不输出所述音频警报的第二控制例程。
优选的是,所述设备具有能够命令所述读出的操作单元,当所述操作单元命令进行读出时,所述控制单元开始所述第二控制例程中的读出。
优选的是,当发生状态改变时,所述控制单元根据所述状态改变,通过所述第一控制例程开始读出。
优选的是,所述设备设置有电池,所述状态改变是所述电池寿命的剩余水平的改变。
优选的是,所述设备具有通信单元,所述状态改变是所述通信单元中电波状态的改变。
优选的是,对于所述状态改变,向每个状态分配权重,所述控制单元根据所述权重,开始读出。
此外,优选的是,所述设备设置有可以与通信网络相连的通信单元、以及用于产生音频通知的音频通知产生单元,其中当处理由所述通信单元进行对来自所述通信网络的消息或呼叫的接收时,所述控制单元使所述音频输出单元输出所述音频通知,并执行所述第二控制例程中的读出。
优选的是,在所述第一控制例程中的读出时,所述控制单元使所述音频输出单元在经过了从所述音频警报的输出开始的预定时间之后输出所述语音数据。
优选的是,所述设备设置有操作单元,当在所述预定时间期间有来自所述操作单元的输入时,所述控制单元使所述音频输出单元停止输出所述语音数据。
优选的是,所述操作单元与预定处理相关联,当在所述预定时间期间发生来自所述操作单元的输入时,所述控制单元只使所述音频输出单元停止输出所述语音数据,而不执行所述预定处理。
优选的是,所述设备设置有操作单元,所述文本具有间断位置,当所述音频输出单元输出所述语音数据时,所述控制单元能够识别要读出的文本数据中的预定间断,如果所述操作单元发出预定指令,所述控制单元执行控制,从而在发生指令输入时从文本的读出位置之前或之后的间断位置开始读出文本。
优选的是,由所述操作单元命令的预定指令是向前播放或向后播放操作,所述控制单元执行控制,从而当所述预定指令是向前播放的指令时,在读出期间的指令输入时从文本的非输出方向上的最近间断位置开始读出,而当所述预定指令是向后播放的指令时,在指令输入时从输出方向上的最近间断位置开始读出。
优选的是,所述间断位置是给定标点符号的位置。
优选的是,所述设备设置有与通信网络相连、并用于发送或接收消息的通信单元,所述控制单元执行控制,以将用于指示消息的发送方或目的地的组分与用于指示消息主体的组分之间的位置作为读出所述消息时的所述间断位置。
优选的是,所述控制单元执行控制,以在读出所述消息时将每个组分与组分名称一起读出。
优选的是,所述存储器存储敬语文本和包括名称的地址消息的文本,所述控制单元执行控制,从而在读出所述消息时,将所述敬语连同从基于指示消息的发送方或目的地的组分的所述地址消息中检索的名称一起读出。
优选的是,所述设备设置有:外部连接设备,具有外部连接以向所述控制单元命令读出操作的外部操作单元;以及第二音频输出单元,其中所述控制单元执行控制,从而当连接了所述外部设备时在所述第二音频输出单元处输出所述语音数据。
优选的是,所述设备具有可以与通信网络相连的通信单元、以及用于产生音频通知的音频通知产生单元,其中所述控制单元执行控制,从而当所述通信单元接收到来自所述通信网络的呼叫接收请求时,产生所述音频通知,并使所述第二音频输出单元输出音频通知,以及当操作所述外部操作单元时,中止音频通知的输出,并使所述通信单元开始针对所述呼叫接收请求的响应处理。
优选的是,所述外部操作单元包括至少一个按键,所述控制单元具有作为所述预定指令的多个处理过程,在预定时间内对通过操作所述按键而产生的信号的输入次数进行计数,并根据计数来处理所述多个处理过程中的任何一个。
优选的是,用至少一个按键配置所述外部操作单元,所述控制单元具有作为所述预定指令的多个处理过程,对通过操作所述按键而产生的信号的持续时间进行计数,并根据持续时间来处理所述多个处理过程中的任何一个。
优选的是,所述预定指令是向前播放或向后播放操作,当在所述音频输出单元处以作为正常速度的第一速度读出文本期间从所述操作单元产生向前播放指令时,所述控制单元执行控制,从而以比第一速度更快的第二速度、从所述向前播放指令发生时的读取位置到所述向前播放指令发生时的位置之前的最近的间断位置,读出文本,然后所述控制单元执行控制,以从读出的所述间断位置开始使速度返回到第一速度。
优选的是,所述预定指令包括向后播放操作,当从所述操作单元产生向后播放指令时,所述控制单元执行控制,从而返回到在读出的向后播放指令的时间点处的读出位置之后的间断位置,如果在所述向后播放指令之后发生另一向后播放指令,所述控制单元执行控制,以返回到更加在前的读出间断位置。
优选的是,所述设备具有发光单元和能够命令读出的操作单元,其中所述控制单元执行控制,以在发生状态改变时向所述发光单元命令发光操作,并在使发光单元发光之后操作所述操作单元时,读出关于状态改变的信息。
优选的是,所述操作单元包括多个输入按键,设置多个所述发光单元并将其与所述操作单元的多个输入按键相关联,所述控制单元执行控制,以在发生状态改变时,根据状态改变的类型,向所述发光单元之一命令发光操作,并在操作与被命令来执行发光操作的发光单元相对应的所述输入按键时,命令关于状态改变的信息的读出。
优选的是,所述设备具有多个能够形成打开状态/闭合状态的相连的机壳,其中在所述机壳的闭合状态中,所述输入按键和所述发光单元设置在外露位置处。
优选的是,在机壳闭合的情况下,当所述机壳形成打开状态,同时所述发光单元发光时,所述控制单元执行控制,以读出与引起发光的状态改变有关的信息。
优选的是,所述发光单元具有多个发光类型,所述控制单元命令具有一个发光类型的发光操作,在所述多个发光类型中,该发光类型先前分配给状态改变的类型。
优选的是,所述文本包括多个项,所述控制单元能够执行控制,以读出针对每个项的所述文本,并使发光单元发射具有一种发光类型的光,在所述多个发光类型中,该发光类型先前分配给所述多个项的每一个。
优选的是,所述文本包括多个项,所述控制单元能够执行控制,以读出针对每一项的所述文本,并使发光单元发射具有一种发光类型的光,该发光类型预先分配给所述文本项组合中的每一个。
此外,根据本发明,提供了一种具有音频读出功能的移动终端设备中的读出控制方法,所述读出控制方法包括步骤:根据读出项来存储文本;产生音频警报;在读出时将所述文本转换成语音数据的文本到语音步骤;输出所述语音数据或所述音频警报的音频输出步骤;当在所述音频输出步骤中输出所述语音数据时,在输出所述音频警报之后输出语音数据的第一控制步骤;以及输出所述语音数据而不输出所述音频警报的第二控制步骤。
此外,根据本发明,提供了一种计算机程序,用于使移动终端设备的计算机执行在所述音频输出步骤中输出所述语音数据的文本到语音处理过程、在输出所述音频警报之后输出语音数据的第一控制处理过程、以及输出所述语音数据而不输出所述音频警报的第二控制处理过程,其中所述移动终端设备具有:存储器单元,用于根据读出项来存储文本;音频警报产生单元,用于产生音频警报;文本到语音单元,用于在读出时将所述存储器中存储的文本转换成语音数据;音频输出单元,用于输出所述语音数据或所述音频警报。
本发明的有益效果
根据本发明,可以根据状况自动设定合适的字段间断位置,可以通过特定操作实现跳过操作和回跳操作,并可以高效地利用读取功能。
此外,可以改进用户使用的便利性。
根据本发明,优点在于用户可以无需麻烦的操作而设定读出之前的音频警报,此外,可以只在需要时才产生音频警报。
根据本发明的移动终端设备,可以向用户通知多种信息,并可以通过简单操作检查信息内容,从而改进了操作友好性。
附图说明
图1是示出了第一实施例的移动电话的系统配置示例的方框图。
图2A到图2D是示出了第一实施例的移动电话的外观示例的示意图,其中图2A示出了正面的外观图,图2B示出了背面的外观图,图2C示出了正面的外观图,图2D示出了背面的外观图。
图3是示出了第一实施例中在识别三种操作类型时的信号示例的示意图。
图4是解释根据第一实施例的读出操作的基本操作的流程图。
图5是示出了根据第一实施例在读出操作时接收到的数据示例的示意图,并示出了接收到邮箱数据的情况示例。
图6示出了根据第一实施例,基于在读出操作时接收到的数据、由文本提取单元准备的表的示例的示意图。
图7是解释根据第一实施例在跳过操作时的操作的流程图。
图8是解释根据第一实施例的回跳操作的流程图。
图9是解释根据第一实施例,在耳机/麦克风等外部连接设备的连接端子与外部设备连接单元相连的情况下的控制操作的流程图。
图10是解释根据第一实施例,在耳机/麦克风等外部连接设备的连接端子与外部设备连接单元相连的情况下的控制操作的流程图。
图11是示出了第二实施例的移动电话的系统配置示例的方框图。
图12A到图12D是示出了第二实施例的移动电话的外观示例的示意图,其中图12A示出了正面的外观图,图12B示出了背面的外观图,图12C示出了正面的外观图,图12D示出了背面的外观图。
图13是示出了根据第二实施例的控制表的示例的示意图。
图14是示出了根据第二实施例的权重表的示例的示意图。
图15是解释根据第二实施例的读出操作的基本操作的流程图。
图16是示出了第二实施例中当用户行走时的音频读出功能的用户场景的示意图。
图17是示出了第二实施例中当用户在呼叫期间时的音频读出功能的用户场景的示意图。
图18是示出了第二实施例中当用户草拟邮件时的音频读出功能的用户场景的示意图。
图19是示出了第三实施例的移动电话的系统配置示例的方框图。
图20A到图20D是示出了第三实施例的移动电话的外观示例的图,其中图20A示出了正面的外观图,图20B示出了背面的外观图,图20C示出了正面的外观图,图20D示出了背面的外观图。
图21示出了根据第三实施例用于显示读出按键和发光单元的示例。
图22A和22B示出了第三实施例中根据事件类型的发光图形的示例。
图23示出了第三实施例中根据另一呼叫方的发光图形的示例。
图24是示出了第三实施例的发光处理的流程图。
标号说明
10-移动电话
100-主体机壳
101-按键输入侧主体机壳
102-显示侧主体机壳
11-通信处理单元
111-发射/接收天线
12-存储器
13-按键操作单元
14-转盘输入单元
15-子显示单元
16-主显示单元
17-音频处理单元
171-扬声器
172-麦克风
18-打开/闭合开关
19-读出按键操作单元
20-文本到语音单元
21-振铃扬声器
22到24-开关电路
25-外部设备连接端子
26-控制单元
30-耳机/麦克风
31-按键操作单元
32-扬声器
33-麦克风
40-发光单元
50-音频警报产生单元
具体实施方式
以下将参考附图解释本发明的实施例。
第一实施例
图1是示出了根据本发明的移动终端设备实施例的移动电话10的系统配置示例的方框图。图2A到图2D是示出了移动电话10的外观示例的示意图。
移动电话10是所谓的具有可移动机构的翻盖式移动电话。图2A示出了打开时的状态(打开状态)下的正视图,图2B示出了闭合时的状态(闭合状态)下的正视图,图2C示出了打开状态下的侧视图,图2D示出了闭合状态下的侧视图。
除了移动电话的通常功能,根据本实施例的移动终端设备10还具有音频读出功能,并可以与外部连接设备相连,该外部连接设备包括耳机/麦克风,具有能够外部连接并遥控命令读出操作的外部操作单元。移动终端设备10具有当与外部连接设备相连时将音频输出单元的输出切换到耳机/麦克风的功能。
配置移动电话10(包括连接了耳机/麦克风的情况和未连接耳机/麦克风的情况),以在定义了菜单显示、邮箱和浏览器等数据格式和一系列操作的情况下,定义随着信息对于用户的重要程度来自动设定间断位置的有效规则,以及使用户能够在音频读出期间通过充分利用跳过操作来高效的挑选和删除信息。
例如,在读出邮件文本时,根据本实施例的移动电话10用“接收日期”、“发送方”、“主题”和“文本”等电子邮件特有的信息,设定间断位置,同时在间断的首部插入这些字段标题,作为标准格式文本,从而能够在检查该序列中的字段名称时执行跳过操作。
此外,在根据本实施例的移动电话10中,通过将给定有诸如标点符号、感叹号和问号(具体为“、”、“.”、“-”、“/”、“!”和“?”)等JIS所定义的标记的位置设定为间断位置,可以自动将邮件文本内部间断,从而可以获得对读出内容的总体要点的掌握,同时缩短检查(识别)时间。
此外,通过检查读出语音以及在使用耳机/麦克风时可能经由耳机的遥控操作,可以通过简单操作实现例如当移动电话10留在手提包中时对其的操作、当用移动电话10听音乐时对新到达邮件内容的检查、在禁止在场的第三人看到屏幕内容的情况下对信息的检查等。
以下,将顺序地解释根据本实施例的移动电话10的不同部分的配置和功能、以及音频读出控制。
如图1所示,移动电话10具有包括发射/接收天线111和发射/接收电路112的通信处理单元11,存储器12,按键操作单元13,转盘输入单元14,子显示单元15,主显示单元16,包括扬声器171、麦克风172和音频处理电路173的音频处理单元17,打开/闭合开关18,读出按键输出单元19,文本到语音单元20,振铃扬声器21,开关电路22、23和24,外部设备连接单元25和控制单元(CPU)26。此外,在图1中,30指示作为外部连接设备的耳机/麦克风。
如图1所示,耳机/麦克风30具有用于遥控操作的按键操作单元31,扬声器32和麦克风33。
此外,如图2A所示,配置移动电话10的主体机壳100,从而通过未示出的可移动机构将包括按键输入侧主体机壳101的第一机壳与包括显示侧主体机壳102的第二机壳相连,并形成打开/闭合状态。
通信处理单元11执行经由基站的无线通信操作,例如,电话号码的呼叫操作和电子邮件的发射/接收操作。
通信处理单元11对在控制单元26处理的音频信息、电子邮件等进行调制,并经由发射/接收天线111将其发射至未示出的基站,来执行利用电波的无线通信。
发射/接收天线112对以无线方式从基站发射和在发射/接收天线111处接收到的诸如电子邮件、短消息和PPT呼叫等多种信息和其他音频信息进行解调,并将解调的信息输出至控制单元26。
PPT是“Push to Talk(按键通话)”的简称。目前,除了正常语音对话(全双工通信)之外,还在考虑使用半双工通信将相同的音频和图像数据一起从一个终端发送至多个终端。这称作“PPT”。对于这种PPT,当发送方进行呼叫时,与正常语音呼叫的方式相同,通知呼叫的接收。
在图2A到图2D中,发射/接收天线111置于按键输入侧主体机壳101或显示侧主体机壳102中,而不外露给外部单元。
存储器(存储单元)12由EEPROM之类的非易失性存储器配置,存储用于语音和邮件的发射/接收的控制程序、因特网浏览器、消息数据、登记有名称和电话号码的地址簿等。
存储器12存储音频读出数据库,音频读出数据库包括稍后所述的读出功能所需的文本串。该数据库是系统地排列的,使得从周围上下文看来,要读出的文本串作为句子。存储器12存储敬语文本和地址消息。
存储器12针对显示单元所显示的菜单的每个字段,存储“标准文本”、“简写文本”和“解释文本”。
按键操作单元13具有结束(语音结束)/电源按键、开始(呼叫)按键、与数字相对应的十个按键等。通过用户对这些按键的操作,将来自用户的输入信息输出至控制单元26。
转盘输入单元14是排列在显示器侧主体机壳102的侧面上的转盘式的输入单元,从而在用户手持如图2C所示的处于打开状态的移动电话10时,使用户容易用拇指进行操作。配置转盘输入单元14,以便可以沿上下两个方向进行操作。
通过相对于转盘输入单元14的操作,用户可以改变音频的输出音量、以及在子显示单元15和主显示单元16上显示的字体大小。
此外,从图2C和图2D可以清楚地看到,当比较闭合状态和打开状态的转盘输入单元14时,沿上下两个方向的操作方向实际上将颠倒,但是在本实施例中,稍后所述的控制单元26的控制使从用户看来的操作方向和相对于操作的操作模式(例如上述音量改变和显示字体大小的改变)总是相符,从而不会给用户造成奇怪的感觉。
子显示单元15具有诸如液晶显示器件(LCD)之类的显示器,由用户在如图2B所示的闭合状态时观看。
主显示单元16具有诸如液晶显示器件(LCD)之类的显示器,由用户在如图2A所示的打开状态时观看。
在闭合状态和打开状态中,子显示单元15和主显示单元16显示接收到的电子邮件的文本、以及存储器12中存储的多种文本数据。
音频处理单元17具有音频处理电路173。用于对话功能的音频输出的扬声器171与耳机/麦克风30的扬声器32经由开关22有选择地相连。用于音频输入的麦克风172与耳机/麦克风30的麦克风33经由开关23有选择性相连。
音频处理电路173对由麦克风172或耳机/麦克风30的麦克风33采集的音频进行预定处理,并将其提供给控制单元26。此外,音频处理电路173对控制单元26提供的音频信息进行预定处理,并将其从扬声器171或耳机/麦克风30的扬声器32中输出。
如图2A和图2B所示,扬声器171包括在接收扬声器171的两个位置处的音频输出单元和振铃扬声器21,并基本上输出通过振铃扬声器21的读出功能处理结果的音频。
打开/闭合开关18是用于检测移动电话10的打开/闭合状态的开关。
对于打开/闭合开关18的具体配置,可以应用多种技术。例如,如图2A所示,可以采用如下配置:在按键输入侧主体机壳101和显示侧主体机壳102的每一个中设置接触单元,使两个接触单元在闭合状态(图2B)时不导电,从而使设备断电。
例如,将设备配置成当移动电话10处于闭合状态时,打开/闭合开关18变成导通状态,而当移动电话10处于打开状态时,打开/闭合开关18变成断开状态,并通过控制单元26来检测打开/闭合开关的状态,从而判断移动电话10的打开/闭合状态。
如图2B所示,用排列在显示器侧主体机壳102中央的推动按钮(pushbutton)19a、以及用于通过该按钮的开关输入的输入电路来配置读出按键操作单元19。
本实施例中的移动电话10具有读出功能,并受到控制单元26的控制,从而在按下(操作)推动按钮19a时,在例如闭合状态中通过振铃扬声器21输出音频,以及在打开状态中通过语音接收扬声器171输出音频。
控制单元26根据打开/闭合开关18的输出,判断移动电话10的打开/闭合状态,然后向音频处理单元17通知用于读出的音频输出的目的地。
例如,在打开状态,控制单元26使扬声器171输出在文本到语音单元20处合成、并通过音频处理单元17产生的语音数据。
文本到语音单元20将读出并从存储器12中提取的文本数据转换成读出时在控制单元26处的语音数据。
开关电路22在其固定触点a处与音频处理电路173的输入/输出单元相连,在其操作触点b处与麦克风172相连,并在其操作触点c处与外部设备连接单元25的麦克风端子251相连。
当耳机/麦克风30的连接端子未连接到(未插入)外部设备连接单元25时,开关电路22在控制单元26的控制下将固定触点a与操作触点b相连,并使音频处理电路173输入由麦克风172拾取的信息。
当耳机/麦克风30的连接端子连接到(插入)外部设备连接单元25时,开关电路22在控制单元26的控制下将固定触点a与操作触点c相连,并使音频处理电路173输入由外部耳机/麦克风30的麦克风33拾取的信息。
开关电路23在其固定触点a处与音频处理电路173的输入/输出单元相连,在其操作触点b处与扬声器171相连,并在其操作触点c处与外部设备连接单元25的扬声器端子252相连。
当耳机/麦克风30的连接端子未连接到(未插入)外部设备连接单元25时,开关电路23在控制单元26的控制下将固定触点a与操作触点b相连,并使扬声器171输出音频。
当耳机/麦克风30的连接端子连接到(插入)外部设备连接单元25时,开关电路23在控制单元26的控制下将固定触点a与操作触点c相连,并使外部耳机/麦克风30的扬声器32输出音频。
开关电路24在其固定触点a处与文本到语音单元20的输出单元相连,在其操作触点b处与振铃扬声器21相连,并在其操作触点c处与外部设备连接单元25的扬声器端子252相连。
当耳机/麦克风30的连接端子未连接到(未插入)外部设备连接单元25时,开关电路24在控制单元26的控制下将固定触点a与操作触点b相连,并使振铃扬声器21输出合成音频。
当耳机/麦克风30的连接端子连接到(插入)外部设备连接单元25时,开关电路24在控制单元26的控制下将固定触点a与操作触点c相连,并使外部耳机/麦克风30的扬声器32输出合成音频。
外部设备连接单元25可以使耳机/麦克风30的连接端子与其可拆分地相连,外部设备连接单元25具有麦克风端子251、扬声器端子252和信号端子253。
麦克风端子251与开关电路22的操作触点c和耳机/麦克风30的麦克风33相连。扬声器端子252与开关电路23的操作触点c和耳机/麦克风30的扬声器32相连。信号端子与控制单元26和耳机/麦克风30的按键操作单元31相连。
在控制单元26中,耳机/麦克风30的连接端子与外部设备连接单元25相连。当识别出与按键操作单元31相连时,控制单元26执行控制,以将开关电路22、23和24的固定触点a的连接从操作触点b切换到操作触点c。
控制单元26主要由微计算机构成,执行对移动电话10的整体控制。例如,控制单元26对通信处理单元11中多种信息的无线发射/接收进行控制,对音频处理单元的音频信息进行处理,对到主显示单元16的信息显示进行控制,根据按键输入单元13的输入信息进行处理,并对向存储器12的存取进行控制。
当用户操作推动按钮19a时,控制单元26对所显示的文本执行读出功能。此时,不使用输出用于读出的语音数据的方法,而使用提取/产生文本串并读出文本的文本读出方法来作为读出功能。
例如,控制单元26包括如图1所示的文本提取单元261。例如,文本提取单元261根据文本提取规则,从存储器12中存储的菜单和邮箱、以及浏览器的数据库中提取文本,并将其提供给文本到语音单元20。
此时,控制单元26从第一个词开始顺序地扫描文本串,并将文本数据提供给文本到语音单元20,从而在预先参考存储器12的读出数据库和考虑周围上下文时,以句子为单位来合成音频。此外,例如,控制单元26执行控制,以句子为单位来合成音频。例如,根据这种读出功能,可以改变成男性语音、改变成女性语音和改变读出速度。
当通过文本到语音单元20,从振铃扬声器21(扬声器171)或耳机/麦克风30的扬声器32中输出语音数据时,控制单元26从要读出的文本中识别预定间断。当存在按键操作单元13或读出按键操作单元19的预定指令时,控制单元26执行控制,以从输入指令的时间点处的读出目标文本之前或之后的间断位置开始输出词,作为语音数据。
在这种情况下,由按键操作单元13或读出按键操作单元19针对控制单元26命令的预定指令是例如如图3所示的向前播放(跳过)或向后播放(回跳)操作。
当预定指令是快进(跳过)指令时,控制单元26执行控制,以从指令发生的时间点之前的最近间断位置开始输出数据,作为语音数据。
当预定指令是向后播放(回跳)指令时,控制单元26执行控制,以从指令发生的时间点之后的最近间断位置开始输出数据,作为语音数据。
如前所述,作为这些间断位置,将给定有诸如标点符号、感叹号和问号(具体为“、”、“.”、“-”、“/”、“!”和“?”)等JIS所定义的标记的位置设定为间断位置。由此,可以自动使邮件文本内部间断开,并可以获得对音频总体要点的掌握,同时缩短检查(识别)时间。
在例如通过通信单元11接收电子邮件的情况下,控制单元26还识别电子邮件的组分,并执行控制,以在读出电子邮件时将多个组分之间的位置看作间断位置。
此外,控制单元26执行控制,以在读出电子邮件时将文本首部中名称组分的文本插入到上述组分的间断位置之间。
存储器12存储敬语文本和地址信息。控制单元26能够针对指示接收到的电子邮件的发送方的组分,从存储器12的地址信息中检索发送方名称,并执行控制,以在读出指示电子邮件发送方的组分时,当通过包括扬声器21等的音频输出单元输出发送方名称时,输出敬语。
除了音频读出功能,移动电话10可以与包括耳机/麦克风30、具有外部与之相连的外部操作单元的外部连接设备相连,并能够命令针对遥控的读出操作。控制单元26执行遥控中断操作控制例程的处理,并控制开关电路22到24,以在连接了耳机/麦克风30时将音频输入/输出切换到耳机/麦克风30。
当从外部设备连接端子25移除耳机/麦克风30的连接端子时,控制单元26控制开关电路22到24,使其切换通过内置麦克风172、扬声器171和振铃扬声器21的音频输入/输出。
当连接了耳机/麦克风30,并能够通过通信处理单元11输出呼叫信息时,控制单元26使包括扬声器32的音频输出单元执行呼叫通知,并使耳机/麦克风30输出呼叫通知,当操作耳机/麦克风30的按键操作单元31时中止呼叫通知,并进一步执行控制,以使通信处理单元11启动与通信网络的通信连接处理。
用一个或多个按键配置耳机/麦克风30的按键操作单元31。
如稍后将具体解释的,在预定时间内,控制单元26对由按键配置耳机/麦克风30的按键操作单元31的按键操作产生的信号的次数进行计数,以判断预定指令。这里所指的预定指令是向前播放(跳过)或向后播放(回跳)操作。
例如,当如图3(a)所示对按键操作单元31的按键操作一次时,控制单元26判断指令是跳过,而当如图3(b)所示对按键操作单元31的按键操作两次时,控制单元26判断指令是回跳。此外,如图3(c)所示,当在预定时间期间存在通过按键操作单元31的信号输入时,控制单元26判断操作与当前读出功能无关,例如,是呼叫响应或保持取消。
当以包括第一速度的正常速度读出文本,并且按键操作单元19、12或31发出向后播放指令时,控制单元26执行控制,从而以比第一速度更快的第二速度,读出从向后播放指令发生的时间点到该时间点之前的最近间断位置的文本,并使速度返回到第一速度,以从间断位置开始读出文本。
当按键操作单元19、13或31发出第一次向后播放指令时,控制单元26执行控制,以读出第一次操作指令的时间点处的间断部分,并且当在第一次操作指令之后的预定时间之内再次发生向后播放指令时,将读出目标返回到前一个部分。
在子显示单元15或主显示单元16显示文本的状态下,控制单元控制显示单元,从而在沿移动电话10的向上方向转动转盘时,放大所显示文本的字体大小,而在沿移动电话10的向下方向转动转盘时,减小所显示文本的字体大小。
将词信息作为可缩放字体或具有不同大小的多个字体存储在存储器12中,因此,控制单元26从存储器12中提取词信息,并在各个显示单元上显示。
这里,假设通过将振铃扬声器21侧设定在图2B所示的状态中的下侧,在移动电话1中显示文本字体。
控制单元26根据来自转盘输入单元14的转盘输入执行处理,同时,根据移动电话1的打开/闭合状态来执行颠倒处理。
通常,因为对于沿上下方向的转盘操作,用户希望动作的增加针对沿向上方向的操作,而动作的减少针对沿向下方向的操作,所以颠倒处理是不管移动电话1的打开/闭合状态而实现用于所希望的动作的处理。
就是说,例如,在移动电话1的闭合状态(图2B)中,当移动电话1执行处理以根据沿转盘上/下方向的输出来放大/减小字体大小时,如果不执行其他处理,在移动电话10的打开状态(图2A),因为相比于闭合状态,转盘输入单元14的上下位置方向相对于用户是颠倒的,所以根据向上方向的输入减小字体大小,用户对该动作结果感觉奇怪。
因此,控制单元26根据打开/闭合开关18的输出,判断移动电话10的打开/闭合状态,并根据打开/闭合状态,执行相对于转盘输入单元14的动作颠倒处理。因此,当从用户看去时,不管移动电话10是在打开/闭合状态,对相对转盘输入单元14向上方向的操作,设备总是操作在放大字体大小的方向上,而对相对转盘输入单元14向下方向的操作,设备总是操作在减小字体大小的方向上,因此,没有奇怪的感觉,并且改进了操作属性。
接着,将参考图4到图10具体解释根据本实施例的移动电话10的音频读出控制。
首先,将参考图4到图6解释根据本实施例的读出操作的基本操作。
图4是解释根据本实施例的针对控制单元26的读出操作的基本操作的流程图。图5是示出了读出操作时接收到的数据的示例图,并示出了由邮箱接收到数据的情况示例。图6是示出了根据读出操作时接收到的数据、在文本提取单元261中准备的表的示例图。
控制单元26基本上通过改变到读出使能状态而操作。
首先,作为读出的预处理,控制单元26判断要读出的数据的源(ST1)。控制单元26判断该源是菜单、邮箱还是浏览器。在本示例中,假设数据是从邮箱接收的。应该指出,源不限于一个单元。允许使用菜单和邮箱等的组合。
接着,控制单元26接收如图5所示的数据(ST2),并准备如图6所示的表(ST3)。
假设,例如,接收到的数据是如图5所示的数据。
即,首部是如下文本:日期:2004/3/20,来自(发送方):KyoceraTaro,主题(Subject:标题):It’fine。图6的文本示例变成“It’finetoday,isn’t it?Will tomorrow be fine too?Let’s go out nexttime!”这样,文本包括标点符号“.”、问号“?”和感叹号“!”。
在表准备时,控制单元26根据基于数据源的规则,准备针对每个字段的文本数据。
具体地将,准备“2004年3月20日接收到”作为“字段号1”的文本数据。字段号1的文本数据是根据所接收数据的首部的“日期:2004/3/20”之类的数据而准备的。注意,词“接收到”加有下划线,以指示该词是针对每个字段的标准格式附加文本。
准备“Sender Kyocera Tarosan”作为“字段号2”的文本数据。字段号2的文本数据是根据所接收数据的首部的“来自:Kyocera Taro”之类的数据而准备的。应该指出,词“Sender”和“san”加有下划线,以指示该词是针对每个字段的标准格式附加文本。“san”是敬语(Mr.或Ms.,或Dr.、Sir等)。应该指出,当指示电子邮件的发送方的组分只包括地址信息时,CPU 26优选地省略上述敬语的添加操作,或在通过参考移动电话10的存储器12中存储的地址簿而提取匹配名称之后,执行添加敬语的操作。
准备“Sub.ject:It’fine,isn’t?”作为“字段号3”的文本数据。字段号3的文本数据是根据所接收数据的首部的“Subject:It’fine,isn’t?”之类的数据而准备的。应该注意,词“Subject”加有下划线,以指示该文本是针对每个字段的标准格式附加文本。
准备“Text:It’fine,isn’tit?”作为“字段号4”的文本数据。字段号4的文本数据是根据所接收数据的文本“It’fine,isn’tit?”之类的数据而准备的。即,将标点符号“.”识别为间断位置,并将该标点符号“.”的单元确定为字段的间断。词“文本”加有下划线,以指示该文本是针对每个字段的标准格式附加文本。
准备“Will tomorrow be fine too?”作为“字段号5”的文本数据。字段号5的文本数据是根据所接收数据的文本“Will tomorrowbe fine too?”之类的数据而准备的。即,将问号“?”识别为间断位置,并将该问号“?”的单元确定为字段的间断。
准备“Let’s go out next time!”作为“字段号6”的文本数据。字段号6的文本数据是根据所接收数据的文本“Let’s go out nexttime!”之类的数据而准备的。即,将感叹号“!”识别为间断位置,并将该感叹号“!”的单元确定为字段的间断。
作为句子结尾的标准格式附加文本来准备“邮件结尾”,以作为“字段号7”的文本数据。词“邮件结尾”加有下划线,以指示该文本是针对每个字段的标准格式附加文本。
在根据本实施例的移动电话10中,在存储器12中保持与每个字段相对应、要由读出功能音频输出的文本(称作解释文本),根据相对于推动按钮19a的操作,将与所选字段相对应的文本提供给文本到语音单元20,在此执行音频合成处理,并根据表,从例如振铃扬声器21中逐个字段地将文本作为音频输出。
当读出期间,当从按键操作单元13或19接收到跳过操作指令(向前播放指令)或回跳操作指令(向后播放指令)所引起的中断处理时,执行稍后所述的跳过操作(ST5a)或回跳操作(ST5b)。
接着,操作在读出所准备的表的最末字段(号7的“邮件结尾”)时(ST6)的时刻结束。
接着,将参考图7和图8解释控制单元26中的跳过操作或回跳操作。
图7是解释跳过操作时的操作的流程图。图8是解释回跳操作时的操作的流程图。
首先,将参考图7解释跳过操作时的操作。
在读出期间,当从按键操作单元13或19接收到跳过操作指令(向前播放指令)所引起的中断处理时(ST11),控制单元26判断要跳过过的字段是否是表的最末字段(ST12)。
当在步骤ST12判断该字段不是最末字段时,控制单元26执行向前进一个字段的处理,即,跳过过当前字段(ST13)。
接着,控制单元26判断跳过操作指令(向前播放指令)所引起的中断处理是否是在预定时间内从按键操作单元13或19接收到的(ST14)。
在步骤ST14,当在预定时间内没有跳过操作指令时,控制单元26结束处理。另一方面,当判断跳过操作指令是在预定时间内发出时,控制单元26返回到步骤ST12的处理,判断要跳过的字段是否是表的最末字段(ST12)。
当在步骤ST12判断字段是最末字段时,控制单元26结束处理,而当判断字段不是最末字段时,根据步骤ST13的处理向前进一个字段。即,控制单元26执行跳过过当前字段的处理,并移至步骤ST14的处理。
接着,将参考图8解释回跳操作时的操作。
在读出期间,当从按键操作单元13或19接收到回跳操作指令(快速向后播放指令)所引起的中断处理时(ST21),控制单元26重读相同字段(ST22),判断要回跳的字段是否是所准备的表的第一字段(ST23)。
当在步骤ST23判断字段不是第一字段时,控制单元26判断回跳操作指令(快速向后播放指令)所引起的中断处理是否是在预定时间内从按键操作单元13或19接收到的(ST24)。
在步骤ST24,当在预定时间内没有回跳操作指令时,控制单元26结束处理。另一方面,当判断回跳操作指令是在预定时间内发出时,控制单元26前进到步骤ST25的处理,判断要跳过的字段是否是所准备的表的第一字段。
当在步骤ST25判断该字段不是第一字段时,控制单元26执行向后返回一个字段的处理,即,回跳过当前字段(ST26),并移至步骤ST24的处理。
当在步骤ST25判断该字段不是第一字段时,控制单元26结束处理。
接着,将参考图9和图10的流程图解释当包括耳机/麦克风30的外部连接设备的连接端子与外部设备连接单元25相连时的控制操作。
如图9所示,控制单元26判断包括耳机/麦克风30的外部连接设备的连接端子是否与外部设备连接单元25相连(ST31)。
当在步骤ST31判断耳机/麦克风30的连接端子与外部设备连接单元25相连时,控制单元26执行遥控操作中断控制例程的处理(ST32)。
当在步骤ST31判断耳机/麦克风30的连接端子未与外部设备连接单元25相连时,控制单元26执行遥控操作中断控制例程的正常处理(ST33)。
如图10所示,在遥控操作中断控制例程的处理中,控制单元26判断是否有来自主体的按键操作单元的输入(ST41),当存在输入时,响应于该操作,执行中断处理(ST42)。
当在步骤ST41判断没有来自主体的按键操作单元的输入时,控制单元26判断遥控向后是否有从耳机/麦克风30的按键操作单元31中输入(开)的遥控信号(ST43)。
当在步骤ST43判断遥控信号为开时,控制单元26判断遥控信号是否在变为开之后的预定时间内变为关(ST44)。
当在步骤ST44判断遥控信号未变为关时,控制单元26判断,因为在预定时间期间有通过按键操作单元31的信号输入,所以操作与当前读出功能无关,例如,是呼叫响应还是保持取消等(ST45)。
当在步骤ST44判断遥控信号变为关时,控制单元26判断在预定时间期间是否通过按键操作单元31将遥控信号变为开(ST46)。
当在步骤ST46判断在预定时间内再次使遥控信号变为开时,控制单元26判断发出了回跳操作指令,并执行上述回跳操作中断处理(ST47)。
当在步骤ST46判断在预定时间内没有再次使遥控信号变为开时,控制单元26判断发出了跳过操作指令,并执行上述跳过操作中断处理(ST48)。
此外,当连接了耳机/麦克风30时,控制单元26使扬声器32在通过通信处理单元11输出呼叫信息时执行呼叫通知,并使耳机/麦克风30输出呼叫通知。
与此并行,当操作耳机/麦克风30的按键操作单元31时,控制单元26中止呼叫通知,并使通信单元11开启与通信网络的通信连接处理。
当连接了耳机/麦克风30时,控制单元26在接收到新到达的邮件时,准备新到达的邮件的表。
这里,将对连接了耳机/麦克风30时的新到达的邮件的表进行解释。基本上是参考图5和图6解释该表的准备过程,但是当连接了耳机/麦克风30时,可以通过略微改变这个操作过程来实现对于用户更加便利的读出功能。
通常,当邮件最新到达时,在待机屏幕上出现诸如“新到达的邮件”之类的显示。具体地讲,“新到达的邮件”的显示是当控制单元26最新检测到邮件的接收时,在子显示单元15上显示从存储器12中存储的菜单数据库中提取的文本。这里,当用户打开终端设备时,由于打开/闭合开关18的信号的改变,“新到达的邮件”的显示切换到主显示单元16上。
在这种状态下,当在按键操作单元13处执行打开新到达的邮件的操作时,读出按键操作单元19命令读出,并执行如参考图5和图6所述的表的准备。
相反,当连接了耳机/麦克风30时,在如参考图5和图6所述的表的准备时,首先将从菜单数据库中提取的文本“新到达的邮件”添加到字段号首部处的文本数据中,并将随后的字段号逐个向更低位置移动,以准备表。由此,在有新到达的邮件时的状态下,即使未操作按键操作单元13时,如果执行向前进(跳过)操作,也可以立即检查新到达的邮件的内容。
应该指出,仅在连接了耳机/麦克风30的状态下解释了包括菜单的表准备操作,但是本发明不限于此。
例如,当配置读出按键操作单元19,使其在移动终端设备(在本示例中是移动电话10)处在闭合的状态下外露时,在移动终端设备处在闭合的状态下操作读出按键操作单元19时,也可以如上所述地执行包括菜单的表准备操作。
因此,即使当移动终端设备没有打开时,也可以从振铃扬声器21等输出“新到达的邮件”之类的读出,从而能够执行一系列内容检查操作。
如上所述,根据本实施例,设备具有:用于命令读出操作的操作单元19;用于存储文本的存储器12;文本到语音单元20,用于在执行读出时将存储器12中存储的文本数据转换成语音数据;用于输出语音数据的音频输出单元21;以及控制单元26,当在音频输出单元21处输出语音数据时,从要输出的文本中识别预定间断,并执行控制,以在操作单元19发出预定指令时,从指令输入时间点处的读出目标文本之前或之后的间断位置处开始,将词作为语音数据从作为音频输出单元的扬声器中输出,从而可以获得以下效果。
在音频读出功能中,用户可以根据重要程度挑选并删除信息,所以可以高效地利用读出功能。
此外,可以使用邮箱、浏览器、菜单显示或其他这种管理信息显示的应用程序等作为文本信息源。从而可以采用诸如单条邮件之类的在屏幕显示器上显示时的意思为单位进行传输。
此外,可以根据先前确定的规则提供读出文本的字段。甚至可以自动处理电子邮件等无法事先预测内容的数据的情况。因此,可以减轻用户自己设定间断位置的工作。
现有耳机/麦克风接口可以用于读出音频的输出和遥控操作,因此,能够减少终端的成本和尺寸,并能够进行考虑到隐私的操作。
因为能够在几乎不查看屏幕的情况下进行诸如检查邮件之类的操作,所以不仅可以在能见度非常差的情况下使用,还可以在不允许第三方看到屏幕的情况下,关闭屏幕显示时使用。
此外,其优点在于,例如在耳机/麦克风用于回放音乐等音频读出之外的目的期间,接收到新邮件时,可以不打开所谓的翻盖式终端设备,而通过简单的手动操作来检查新到达的邮件。
此外,当检查邮件内容时,因为有隐私信息,即使在音频读出时会有缺点,音频也不会泄漏到周围,从而可以毫无问题地使用移动电话。
此外,根据本实施例的移动电话10,通过相对于转盘输入单元14的操作,可以放大/减小所显示文本的词。因此,改进了文本的可看性。同时,当放大/减小文本的词时,执行根据文本显示格式的处理,从而进一步改进了可看性和操作的用户友好性。
第二实施例
将参考图11到18解释本发明的移动终端设备的第二实施例。
本发明的第二实施例涉及一种移动终端设备,采用这种移动终端设备,用户不经过麻烦的操作即可设定读出之前的音频警报,此外,这种移动终端设备只在需要时才产生音频警报。
图11和图12A到图12D中所示的移动终端设备10A与图1和图2A到图2D中所示的移动终端设备10的不同之处在于,添加了音频警报产生单元50,删除了外部连接单元25。在第一实施例的移动终端设备10和第二实施例的移动终端设备10A之间,其余组件实质上相同。注意第一实施例的控制单元26与第二实施例的控制单元26A在处理内容方面不同,这将在下文中进行解释。
下面,将主要解释第二实施例的移动终端设备10A的特征(区别)。
除了移动电话的常用功能,根据本实施例的移动终端设备10A还具有音频读出功能,并配置成通过在移动电话10A接收到读出指令时,在读出之前发出音频警报,以将注意力吸引到用户(听者)方,并获得心理效果。
只有在音频读出功能设定为“自动”,并且需要向用户通知电波强度和电池寿命剩余水平等特别重要的状况时,移动电话10A才发出音频警报。
在根据本实施例的移动电话10A中,当在读出时接收到呼叫或接收到邮件时,不发出常用音频警报(即,在读出时间之前用作音频警报的常用振动、呼入呼叫歌曲或呼入呼叫曲调)。即,移动电话10A配置成只有在可以清楚地听到这种音频警报的情况下才发出这种音频警报。
应该指出,对移动电话进行了配置,通过使用户自己能够听到音频警报,来使用户能够立即判断自己的终端设备正在读出。
在根据本实施例的移动电话10A中,如稍后将具体解释的,有以下与“音频警报产生”的条件相关的两点。
第一点是音频警报是参考条件表而产生的。
第二点是通过预先不给定条件表之类的固定设置,而给定对事物(事件)加权的数值,使用户通过比较权重表的权重值和用户的设置来判断在什么范围内发出音频警报,以控制音频警报的发出或不发出,从而改进了针对用户的便利性。
下面,将依次解释不同部分的配置和功能、以及根据本实施例的移动电话10A的读出控制。
按键操作单元13的操作使得能够通过控制单元26A(开/关)来设定是否读出存储器12中存储的音频读出功能的控制表的字段。
按键操作单元13的操作使得能够通过控制单元26A来设定存储器12中存储的音频读出功能的权重表的字段的权重值。
音频处理单元17具有音频处理电路173,用于语音功能的音频输出的扬声器171和音频输入的麦克风172与音频处理电路173相连。
音频处理单元17对由麦克风172拾取的音频执行预定处理,并将其提供给控制单元26A。此外,音频处理单元17对由控制单元26A提供的音频信息执行预定处理,并使扬声器171输出该音频信息。
扬声器171包括两个音频输出单元(语音接收扬声器171a和振铃扬声器171b),并输出读出功能的处理结果的音频。
此外,音频处理单元17在读出时将控制器26A中的读出的和从存储器12中提取的文本数据转换成语音数据,合成包括语音接收扬声器171a或振铃扬声器171b的音频输出单元处的音频,并输出该音频。
在音频读出时,在由控制单元26A发出的第二控制例程信号CTL2的控制下,音频处理单元17在使音频输出单元输出由语音接收扬声器171a或振铃扬声器171b合成的语音数据时,使音频输出单元根据读出开始的原因输出音频警报,然后输出语音数据。
音频警报产生单元50接收来自控制单元26A的第一控制例程信号CTL1,产生例如音频警报“嘟嘟声”之类的音频警报,并将其通过控制单元26A或直接提供给音频合成处理单元17。
当用户操作推动按钮19a时,控制单元26A执行所显示的文本的读出功能。此时,不使用输出用于读出的语音数据的方法,而使用提取/产生文本串并读出文本的文本读出方法来作为读出功能。
当输出语音数据时,控制单元26A向音频处理单元17输出第二控制例程信号CTL2,以根据读出开始的原因,从控制信号CTL1产生音频警报,从作为音频输出单元的扬声器输出音频警报,然后输出语音数据。
换言之,当输出语音数据时,控制单元26A执行控制,从而在根据读出开始的原因,从第一控制例程信号CTL1产生音频警报之后,根据第二控制例程信号CTL2,将文本转换成语音数据。
在输出音频警报后再经过预定时间之后,控制单元26A使包括扬声器172的音频输出单元输出语音数据。
就是说,控制单元26A使音频警报产生单元50从第一控制例程信号CTL1产生音频警报,然后,在经过预定时间之后,使音频合成处理单元17从第二控制例程信号CTL2产生语音数据。
此外,当在预定时间内有来自按键操作单元13的输入时,控制单元26A不使包括扬声器172的音频输出单元输出语音数据。
按键操作单元13与预定处理相关联。当在预定时间内有来自按键操作单元13的输入时,控制单元26A只执行用于防止包括扬声器172的音频输出单元输出语音数据的控制,而不执行预定处理。
此外,控制单元26A判断读出开始的原因是根据读出按键操作单元19的读出指令、还是根据终端内部状态改变的自动读出。例如,该自动读出是基于电池寿命的剩余水平或电波状况的改变的。
在该自动读出时,控制单元26A参考存储器12中存储的音频读出功能的控制表。
图13是示出了根据本实施例的控制表的示例的图。
在图13的示例中,该表被划分为电池寿命的剩余水平、电波状况等,作为自动读出的类别。
移动电话10A从未示出的次级电池(下文中称作“电池”)接收供电。控制单元26A通过不断地监视电池电压值,获得对电池寿命的剩余水平的掌握。根据电池电压值是否等于或大于预定阈值来设定电池标志。该阈值设定在多个水平上。据此,按照从具有最低剩余水平的电池寿命开始的顺序,指定电池标志0、1、2和3。将其显示在显示单元15和16中。
在显示单元15和16上将电池状况显示为电池标志0、1、2或3,并确定是否要执行读出。
当电池标志是0和1时,控制单元26A控制音频警报的发出,并根据控制表来控制读出,从而读出“电池寿命的剩余水平低”等,以向用户通知电池寿命的剩余水平非常低。
根据控制表,当电池标志是2和3时,控制单元26A认为不需要向用户通知电池寿命的剩余水平,从而不执行读出控制。
此外,移动电话10A总是通过经由发射/接收电路112发射/接收无线信号来执行用于确保与相邻基站的通信的操作。这里,随着移动电话10A的移动和周边环境的改变,从移动电话10A看来,来自基站的电波的强度每个时刻都在改变。控制单元26A也设置有针对电波强度的多个阈值,并针对每个指定电波标记0到3。此外,当无法获得能够进行通信的电波下限强度时,指定电话是在服务区之外。这显示在显示单元15和16上。
在显示单元15和16上,将电波状况显示为在服务区之外、电波0、电波1、电波2或电波3,并确定是否要执行读出。
根据控制表的内容,当电波是在服务区之外、电波0和电波1时,控制单元26A执行针对音频警报产生的控制和针对读出的控制,以读出“电波状况在当前位置处较差”,以向用户通知电波状况非常差。
根据控制表,当电波是电波2或电波3时,控制单元26A认为不需要向用户通知电波状况,从而不执行读出控制。
此外,状态被划分为充电完成时、通话期间、电话状况恢复时、呼叫接收、邮件接收(在这种情况下,接收声音是音频警报)、未读邮件和记录消息。
根据控制表,在充电完成时、通话期间、电话状况恢复时、呼叫接收或邮件接收(在这种情况下,接收声音是音频警报)的情况下,控制单元26A执行针对音频警报产生的控制和针对读出的控制,以向用户通知这种情况。
根据控制表,在未读邮件和记录消息的情况下,控制单元26A不执行读出控制。
在静音模式、驱动模式和按键锁定模式期间,控制单元26A不执行音频读出控制。
在这种自动读出时,控制单元26A参考存储器12中存储的音频读出功能的权重表。
控制单元26A根据权重表的权重值判断是否执行自动读出。
图14示出了根据本实施例的权重表的示例的示意图。
在图14的示例中,自动读出的类别是电池寿命的剩余水平和电波状况。
例如,在显示单元15和16上将电池状况显示为电池标志0、1、2和3,并在改变权重值的同时确定是否要执行读出。
根据控制表,在权重值为4和3,并且电池标志为0和1的情况下,控制单元26A执行针对音频警报产生的控制和针对读出的控制,从而读出“电池寿命的剩余水平低”等,以向用户通知电池寿命的剩余水平非常低。
根据控制表,在权重值为2和1,并且电池标志为2和3的情况下,控制单元26A认为不需要向用户通知电池寿命的剩余水平,从而不执行读出控制。
在显示单元15和16上,将电波状况显示为在服务区之外、电波0、电波1、电波2或电波3,并在改变权重值的同时确定是否要执行读出。
根据控制表的内容,当权重值为5、4和2,电波是在服务区之外、电波0和电波1时,控制单元26A执行针对音频警报产生的控制和针对读出的控制,以读出“电波状况在当前位置处较差”,以向用户通知电波状况非常差。
根据控制表,当权重值为2或1,电波是电波2或电波3时,控制单元26A认为不需要向用户通知电波状况,从而不执行读出控制。
当通过通信处理单元11发生了从通信网络接收信息或呼叫的处理时,控制单元26A向音频处理单元17发出指令,以产生音频通知。
当读取开始的原因是针对接收信息或呼叫的处理发生时,控制单元26A使音频输出单元输出音频警报,并在包括扬声器172的音频输出单元处输出音频通知。
控制单元26A包括未示出的文本提取单元。例如,文本提取单元根据文本提取规则,从存储器12中存储的菜单、邮箱、浏览器或其他数据库中提取文本,并将其提供给音频合成处理单元17。
此时,控制单元26A从第一个词开始依次扫描文本串,并将文本数据提供给文本到语音单元20,从而在预先参考存储器12中的读出数据库和考虑周围上下文时,以句子为单位来合成音频。此外,例如,控制单元26A执行控制,以句子为单位来合成音频。例如,根据这种读出功能,可以改变成男性语音、改变成女性语音和改变读出速度。
在子显示单元15或主显示单元16显示文本的情况下,控制单元控制显示单元,从而在沿移动电话10A的向上方向转动转盘时,放大所显示文本的字体大小,而在沿移动电话10A的向下方向转动转盘时,减小所显示文本的字体大小。
将词信息作为可缩放字体或具有不同大小的多个字体存储在存储器12中,因此,控制单元26A从存储器12中提取词信息,并在各个显示单元上显示。
这里,假设通过将振铃扬声器21侧设定在图12B所示的状态中的下侧,在移动电话10A中显示文本字体。
控制单元26A根据来自转盘输入单元14的转盘输入来执行处理,同时,根据移动电话10A的打开/闭合状态,执行颠倒处理。
通常,因为对于沿上下方向的转盘操作,用户希望操作动作的增加在向上方向,而在向下方向减少操作动作,所以颠倒处理是实现用于所希望的动作的处理,而与移动电话10A的打开/闭合状态无关。
就是说,例如,在移动电话10A的闭合状态(图12B)中,当移动电话10A执行处理以根据沿转盘上/下方向的输出来放大/减小字体大小时,如果不执行其他处理,在移动电话10A的打开状态(图12A),因为与闭合状态相比,转盘输入单元14的上下位置方向相对于用户是颠倒的,所以根据向上方向的输入减小字体大小,用户对该动作结果感觉奇怪。
因此,控制单元26A根据打开/闭合开关18的输出,判断移动电话10A的打开/闭合状态,并根据打开/闭合状态,执行相对于转盘输入单元14的动作颠倒处理。因此,从用户看来,不管移动电话10A的打开/闭合状态,对于沿相对于转盘输入单元14向上方向的操作,设备总是操作在放大字体大小的方向上,而对于沿相对于转盘输入单元14向下方向的操作,设备总是操作在减小字体大小的方向上,因此,没有奇怪的感觉,并改进了操作属性。
接着,将参考图15到图18具体解释根据本实施例的移动电话10A的音频读出控制。
首先,将参考图15解释根据本实施例的控制单元26A中的读出操作的基本操作。
图15是解释根据本实施例的控制单元26A的读出操作的基本操作的流程图。
例程基本上由转换到读出启动状态而开始。
首先,当读出按键操作单元19的操作、或诸如电池寿命的剩余水平或电波状况的读出和通知之类的任何事件发生时(ST101),控制单元26A首先判断读出指令是否是基于读出按键操作单元19的操作的指令(ST102)。
当在步骤ST102判断读出指令是基于读出按键操作单元19的操作时,控制单元26A从存储器12中提取所需文本,并向音频合成处理单元17输出控制信号CTL2,然后,音频合成处理单元17通过音频合成来产生语音数据,并输出语音数据(ST103)。在这种情况下,因为是根据用户的意图进行的操作,所以不产生音频警报。
当在步骤ST102判断读出指令不是基于读出按键操作单元19的操作指令时,控制单元26A判断操作是根据自动读出的(ST104),并判断操作是否是针对正在进行的操作的读出,具体地讲,当对齐光标时的读出或数字输入的读出(ST105)。
当在步骤ST105判断读出是针对正在进行的操作而执行的时,因为该操作是根据用户意图的操作,所以控制单元26A不产生音频警报,并在步骤ST103开始音频读出。即,控制单元26A从存储器12中提取所需文本,并向音频合成处理单元17输出控制信号CTL2,然后,音频合成处理单元17通过音频合成来产生语音数据,并输出语音数据。
当在步骤ST105判断读出不是针对正在进行的操作而执行的时,控制单元26A判断是否接收到邮件或呼叫(ST106)。
当在步骤ST106判断已接收到邮件或呼叫时,因为用户听到邮件或呼叫接收声音,所以控制单元26A不产生音频警报,并在步骤ST103开始音频读出。即,控制单元26A从存储器12中提取所需文本,并向音频合成处理单元17输出控制信号CTL2,然后,音频合成处理单元17通过音频合成来产生语音数据,并输出语音数据。
当在步骤ST106判断未接收到邮件或呼叫时,控制单元26A判断用户是否在呼叫过程中(ST107)。
当在步骤ST107判断用户在呼叫过程中时,不需要音频警报,因此控制单元26A不产生音频警报,并在步骤ST103开始音频读出。即,控制单元26A从存储器12中提取所需文本,并向音频合成处理单元17输出控制信号CTL2,然后,音频合成处理单元17通过音频合成来产生语音数据,调整音量,并将语音数据连同呼叫的另一方的语音一起输出。
当在步骤ST107判断用户不在呼叫过程中时,控制单元26A参考包括条件表的控制表或权重表(ST108)。
控制单元26A判断条件表的读出字段是否是开“ON”(ST109)。
当在步骤ST109判断字段不是开(关)时,不需要音频警报,因此控制单元26A不产生音频警报,并在步骤ST103开始音频读出。即,控制单元26A从存储器12中提取所需文本,并向音频合成处理单元17输出控制信号CTL2,音频合成处理单元17通过音频合成来产生语音数据,并输出语音数据。
当在步骤ST109判断字段是开时,需要音频警报,因此控制单元26A从第一控制例程信号CTL1产生音频警报(ST110),然后执行控制,以根据第一控制例程信号CTL2将文本转换成语音数据。
具体地讲,在输出音频警报后再经过预定时间之后,在步骤ST103开始音频读出。即,控制单元26A从存储器12中提取所需文本,并向音频合成处理单元17输出控制信号CTL2,音频合成处理单元17通过音频合成来产生语音数据,并输出语音数据。
这样,通过在经过预定时间之后开始音频读出,即使在音频输出单元171处输出的音频警报是包括残留声音等、或者提供的声音源突然从音频警报产生单元50切换到音频合成处理单元17的合成声音、而未示出的音频放大器电路无法跟上放大率的改变时,也可以避免音频警报叠加在读出的音频上的问题。
此外,图16示出了用户行走时的音频读出功能的使用场景的示意图。图17示出了用户在呼叫过程中时的音频读出功能的使用场景的示意图。图18示出了用户在草拟邮件时的音频读出功能的使用场景的示意图。
例如,当用户四处行走,移动电话10A在其衣袋里时,如图16所示,当电池寿命将要耗尽时,在发出音频警报“嘟嘟声”之后执行“剩余电池寿命1”之类的音频读出。例如,听到该音频的用户有机会考虑在便利店里购买备用充电电池。
此外,如图17所示,当用户计划接收呼叫并正在等待呼叫,而电池寿命同样将要耗尽时,在发出音频警报“嘟嘟声”之后执行“剩余电池寿命1”之类的音频读出。听到该音频警报的用户预先采取针对预期呼叫的措施,例如通过连接器将充电器与充电端子相连,以便在谈话的同时对电话充电。
此外,当用户草拟电子邮件并命令发送电子邮件时,通常,控制单元命令该发送,与基站建立通信,呼叫预定邮件服务器等,并通过预定分组等发送电子邮件。因此,从用户命令发送时到完成发送,有大约几秒钟的时间滞后。如图18所示,在这种邮件发送时,用户经常在发送未完成时将移动电话10A放回衣袋,期待发送成功,例如,在电波状况良好的状态下准备电子邮件,然后命令发送并等待与邮件服务器的连接。此时,如果在将电话放入衣袋之后,电话状况变差,则产生音频警报“嘟嘟声”,然后执行音频读出“请在电波良好的地点重试”。听到该音频的用户能够采取稍后再发送电子邮件或改变地点的措施,从而可以尽量防止用户没有察觉到电子邮件发送失败的情况。
如上所述,根据本发明,该设备设置有存储器12,用于根据读出字段存储文本;音频警报产生单元50,用于产生音频警报;音频合成处理单元17,用于在读出时将存储器12中存储的文本转换成语音数据;音频输出单元171,用于输出语音数据或音频警报;以及控制单元26A,用于执行控制,以在音频输出单元171输出语音数据时,根据读出开始的原因,在音频输出单元处输出音频警报,然后输出语音数据,从而可以通过在读出之前发出警报和消除听见的阻碍,获得诸如吸引用户(收听者)侧的注意力的效果。
可以设定是自动执行读出,还是通过按下按钮执行读出。此外,即使在设定自动读出时,用户也可以在不需要音频警报时不发出音频警报。用户能够不经过麻烦的操作而设定读出之前的音频警报。此外,只有当需要音频警报时,才产生音频警报。
此外,根据本实施例的移动电话10A,通过针对转盘输入单元14的操作,可以放大/减小所显示文本的词。因此,改进了文本的可看性。同时,当放大/减小文本的词时,执行根据文本显示格式的处理,从而进一步改进了可看性和操作的用户友好性。
第三实施例
将参考图19和图20A到20D解释本发明的移动终端设备的第三实施例。
本发明第三实施例的移动终端设备10B能够向用户通知多种信息,并使信息内容的检查能够通过简单操作而进行。
图19和图20A到20D中所示的移动终端设备10B与图1和图2A到图2D中所示的移动终端设备10的不同之处在于:添加了发光单元40,删除了外部连接单元25。在第一实施例的移动终端设备10和第三实施例的移动终端设备10B之间,其余组件实质上相同。但是第一实施例的控制单元26与第三实施例的控制单元26B在处理内容方面的区别在下文中进行解释。
以下,将基本上解释第三实施例的移动终端设备10B的特征(区别)。
子显示单元15和主显示单元16都是本发明显示装置的实施例,而控制单元26B是本发明的控制装置的实施例。发光单元40是本发明发光装置的实施例。
存储器12存储管理信息,所述管理信息包括用于管理电池寿命剩余水平、电波状况和其他内部操作状态的信息、以及用于管理电子邮件接收和其他外部获取数据的信息。控制单元26B按需对这些管理信息进行更新。例如,当有诸如未回复的呼叫(用户未接的呼叫)或未读的电子邮件(该电子邮件的文本还未显示)等事件发生时,控制单元26B对管理信息的内容进行更新。
为了在发生改变时向用户适当地通知管理信息的改变,事先在存储器12中存储将管理信息的改变(管理信息的更新)与发光颜色和图形相关联的信息。因此,例如,对根据本实施例的移动电话10B进行配置,使发光单元40在新接收到电子邮件时以预定颜色和预定发光图形发光。
也可以编辑要存储在存储器12中的文本,以使文本与管理信息的改变相关联。例如,也可以编辑文本,以使文本与管理信息本身相关联而不与管理信息的改变相关联,或也与管理信息的改变相关联。
稍后所述的要通过读出功能进行通告(通知)的“读出字段(通知字段”包括“改变之后的管理信息”和“管理信息如何改变”。可以在存储器12中针对上述任何字段存储文本。
按钮19a是本发明输入按键的实施例。
根据本实施例的移动电话10B具有读出功能。当按下(操作)按钮19a时,在闭合状态下从振铃扬声器171b中输出音频,而在打开状态下从语音接收扬声器171a中输出音频。
稍后所述的控制单元26B根据打开/闭合开关18的输出,判断移动电话10B的打开/闭合状态,然后音频处理单元17通知用于读出的音频输出的目的地。
控制单元26B控制发光单元40,并在管理信息发生改变时使LED导通。此外,当用户在LED导通的状态下操作按钮19a时,执行与管理信息相关内容的读出功能(与本发明的读出装置相对应)。此时,不使用输出用于读出的语音数据的方法,而使用提取/产生文本串并读出文本的文本读出方法来作为读出功能。
例如,作为管理信息改变的示例,当用于管理移动电话10B的内部操作状态的信息“电池寿命剩余水平”改变时,控制单元26B从存储器12中提取表示电池寿命剩余水平的文本串(“电池寿命剩余水平低”等),并将其读出。
此外,作为管理信息改变的示例,当用于管理从外部获取的数据的信息中的电子邮件接收信息改变时,控制单元26B将电子邮件的每个字段的数据(“发送方”、“主题”、“文本”等)从存储器12中提取到控制单元26B的工作区,然后产生用于读出的文本串,并读出该文本串。例如,当事先指定只通知“发送方”时,产生并读出诸如“邮件来自Tamurasan”等文本串。
这样,当发生改变时,通过读出功能,控制单元26B基本上读出与管理信息改变相对应的文本。
如上述示例中所述,诸如电池寿命正在减少之类的文本必须与管理信息的“改变”相关联。例如,当“电池寿命减少”与电池寿命管理信息的电池寿命第二等级相关联时,即使当等级从第一等级改变到第二等级时,也读出电池寿命减少,从而发生矛盾。因此,有必要将文本“电池寿命减少”与从第三等级到第二等级的“管理信息的改变”相关联。
应该指出,仅仅将文本与管理信息本身相关联,而独立于将文本与管理信息的改变相关联配置,可以通知用户多种信息,并可以采用简单操作对信息内容进行检查。
例如,通过将“电池寿命是第二等级”与电池寿命的第二等级相关联,并且只在电池寿命的管理信息从第三等级改变到第二等级之后才读出已改变管理信息的文本,用户能够充分理解文本的意思。除此之外,还可以将“变成在服务区之外”表示为“在服务区之外”。
控制单元26B从第一个词开始顺序地扫描文本串,提供文本数据,并在预先参考存储器12的读出数据库和考虑周围上下文时,以句子为单位来合成音频。此外,例如,控制单元26执行控制,以句子为单位来合成音频。例如,根据这种读出功能,可以改变成男性语音、改变成女性语音和改变读出速度。
由控制单元26B产生的音频合成结果由音频处理单元17处理,并从语音接收扬声器171a或振铃扬声器171b中输出。
此时,控制单元26B控制音频处理单元17,从而在打开/闭合开关18处于开状态时(即,移动电话10B处于如图3所示的闭合状态的情况),从振铃扬声器171b中输出音频,而在打开/闭合开关18处于关状态时(即,移动电话10B处于打开状态的情况),从语音接收扬声器171a中输出音频。
发光单元40由多个LED和LED驱动电路配置而成,能够发射具有多种颜色的光。例如,通过用红色LED、蓝色LED和绿色LED配置发光单元40,可以根据颜色比例来发射较宽范围中的颜色。
LED驱动电路根据来自控制单元26B的控制信息对多个LED进行驱动。因此,发光单元40根据控制信号发射具有多种颜色和图形(闪烁/导通)的光。
应该指出,发光单元40是本发明的发光装置的实施例。
接下来,将解释读出按键输出单元19的按钮19a与发光单元40的LED之间的位置关系。
根据本实施例的移动电话10B通过使按钮19a本身或按钮19a的邻区发光,来将通过光发射的信息发送与操作按钮相关联。从这种观点看来,LED排列在按钮19a的邻区中。
图21A到图21C是沿图20B所示的横截面A-A的剖面图,示出了按钮19a与LED之间位置关系的多种示例。
应该指出,在图21A到图21C中,从LED发射的光的光路由箭头表示。此外,对于按钮的触点的配置,可以考虑多种实施例。这里并不旨在使用特定的配置示例。此外,示出了两个LED,但是这只是示例。不言而喻,可以自由地设定LED的数目。
在图21A到图21C的实施例中,按钮19a与板簧(SPR)相连。当按下(操作)按钮19a时,通过触点T1和T2的接触导电来向控制单元26B输入电信号。
在图21A中,按钮19a由透光型树脂等形成。LED直接排列在按钮19a下面。因此,当LED发光时,用户认为似乎是按钮19a本身发光。因此,用户识别与按钮19a相对应的信息的发出。
在图21B中,在显示侧主体机壳102与按钮19a之间设置有微小间隙。LED直接排列在间隙下面。因此,同样地,当LED发光时,用户认为似乎是按钮19a本身发光。因此,用户识别与按钮19a相对应的信息的发出。
在图21C中,在按钮19a的邻区中的显示侧主体机壳102的部分处设置透明玻璃102a。LED直接排列在透明玻璃102a下面。因此,当LED发光时,用户识别与按钮19a相对应的信息的发出。
此外,当有多个按钮19a,并且与之相关联的信息不同时,用户能够通过仅仅查看哪个按钮正在发光,确定正在发出哪种信息。这有助于用户判断是否需要采取快速动作。
接下来,将解释当诸如电子邮件接收等事件的发生引起管理信息改变时、发光颜色和发光图形的设置示例。
图22A和22B示出了与事件发生相关联的发光颜色和发光图形的设置示例,其中图22A示出了事件类型与发光颜色之间的关系,图22B示出了读出功能的读出范围与发光图形之间的关系。
例如,如图22A所示,当发生新电子邮件接收事件时,控制单元26B对存储器12中的管理信息进行更新,同时使发光单元40的LED发射“绿”色光。由此,通知用户电子邮件的接收。
此外,如图22B所示,当只通知用户未读的电子邮件的数目时,光按照发光图形只亮一次。此外,当通知用户未读的电子邮件的数目和发送方名称时,光按照发光图形亮两次。
应该指出,对设备进行配置,以使用户可以通过事先操作菜单屏幕来设定电子邮件中包括的信息的读出范围。
如上所述,通过将事件与对应于该事件的发光颜色和发光图形相关联,可以用视觉信息通知用户事件的类型。
当用户识别这种发光并按下推动按钮19a时,使用读出功能读出根据发光颜色和发光图形的信息。
例如,在图22A和图22B的示例中,当“绿”色只亮一次时,只与未读电子邮件数目有关的信息读出为“有两封未读邮件”。即,控制单元26B访问存储器12中的管理信息,提供未读电子邮件数目的数据,产生并读出文本串“有两封未读邮件”。
应该指出,参考图22A和图22B示出了与事件发生相关联的发光颜色和发光图形的示例,但是本发明不限于事件的发生。可以是任何信息,只要该信息是作为管理信息而受到管理的。
例如,图23A和图23B示出了根据电子邮件的发送方改变发光颜色的示例。这样,当根据发送方改变发光颜色时,用户可以容易地判断该信息是否是具有必须立即通过按下推动按钮19a而检查的信息。
接下来,将参考图24解释由控制单元26B执行的发光处理。
图24示出了发光处理示例的流程图。
对移动电话10B进行配置,以使用户可以选择读出功能的操作/不操作(开/关)和LED发光功能的操作/不操作(开/关)。当发生管理信息的改变时,控制单元26B通过判断这些信息来执行处理。
首先,当诸如电子邮件的接收等事件发生时(步骤ST210),控制单元26B判断读出功能的操作/不操作(开/关)。当结果是不操作读出功能时,控制单元26B执行常用处理(步骤ST212)。
“常用处理”是不使用LED和读出功能时向用户通知信息的处理。例如,当发生事件是电子邮件的接收时,该处理是在显示单元处显示用于指示电子邮件的接收的图标等的处理。
接着,控制单元26B判断是否发生了用户检查操作(步骤ST213)。这里,例如,“用户检查操作”表示用户在接收到电子邮件之后立即将机壳从闭合状态打开的操作。控制单元26B通过检测打开/闭合开关18的状态改变(从开状态到关状态),判断用户检查操作。
当用户在诸如电子邮件的接收等事件之后打开机壳时,用户已经收到了电子邮件的接收的通知,从而已经获知事件的发生。因此,不需要再次使用LED通知事件的发生,无需使LED发光,直接执行所需的后处理(步骤ST214)。在后处理中,在诸如电子邮件的接收之类的情况下,执行电子邮件文本的读出等。
接下来,控制单元26B判断LED发光功能的操作/不操作(开/关)(步骤ST215)。因此,当LED发光功能被设置为不操作状态时,控制单元26B执行上述常用处理,而不使LED的发光。
当LED发光功能设置为操作状态时,控制单元26B从存储器12中检索与事件发生相对应的发光颜色和发光图形,对其进行挑选和确定,以使LED发光(步骤ST215和ST217),然后驱动LED以所选发光颜色和发光图形发射光。
如上所述,根据本实施例的移动电话10B,针对管理信息的改变,使LED发射具有多种颜色和图形的光。同时,当在LED的发光期间按下按钮19a时,执行根据管理信息的改变的信息读出。
因此,用户能够通过视觉信息获知管理信息的改变。例如,可以通过发光颜色和图形获知新电子邮件的接收和未回复的呼叫。
此时,通过事先设置要读出的信息的级别,当受到管理信息改变的通知时,用户能够获知读出信息的级别,改进了操作友好性,用户能够在按下按钮19a之前从音频获知要输出的信息。
例如,当通过音频只输出接收到的电子邮件数目时,当通过音频输出邮件数目和发送方名称时等,通过根据信息级别改变发光图形,用户能够按下按钮19a,以再次确定发出哪种级别的信息。就是说,可以通过瞥一眼来确定当前设置设为读出到文本之前等事实,从而用户能够尽量防止在工作期间突然读出私人邮件文本。
本实施例的移动电话10B检测机壳处于闭合状态,并将音频输出的目的地设为振铃扬声器171b,因此,用户可以在机壳保持闭合状态的情况下检测电子邮件文本之前的读出音频。
根据本实施例的移动电话10B,在按钮19a的邻区中排列LED,从而通过LED的发光将用户应该按下的按钮19a加亮,因此,可以防止用户的错误操作,即使在暗处也可以可靠地执行操作。
对根据本实施例的移动电话10B进行配置,以在用户打开机壳而未按下按钮19a时开始读出要通知的信息,从而可以消除通过音频通知信息时的间隔。
此外,在根据本实施例的移动电话10B中,通过仅仅将文本与管理信息本身相关联,而独立于文本与管理信息的改变之间的关联,可以通知用户多种信息,并可以采用简单操作对信息内容进行检查。
其它实施例
本发明不限于上述第一到第三实施例。
此外,本发明可以适当地组合第一到第三实施例,例如在权利要求和/或“用于解决问题的装置”中所述的。
作为本发明移动终端设备的优选实施例,以移动电话为例,但本发明可以应用于具有与上述移动电话等效或相似的功能和/或配置的其他多种终端设备。
Claims (28)
1.一种具有与读出指示对应的音频读出功能的移动终端设备,所述移动终端设备包括:
存储单元,用于根据读出项存储文本;
音频警报产生单元,用于产生音频警报;
文本到语音单元,用于在读出时将所述存储单元中存储的文本转换成语音数据;
音频输出单元,用于输出所述语音数据或所述音频警报;
能够命令读出的操作单元;以及
控制单元,用于当在所述音频输出单元处输出所述语音数据时,处理在所述音频输出单元处输出所述音频警报、然后输出所述语音数据的第一控制例程,以及处理在所述音频输出单元处输出所述语音数据而不输出所述音频警报的第二控制例程;
当由所述操作单元命令读出时,所述控制单元在所述第二控制例程中开始所述读出,当本地设备的动作中发生关联性状态改变时,所述控制单元在所述第一控制例程中根据所述音频警报的输出和该状态改变开始读出。
2.根据权利要求1所述的移动终端设备,其中
所述移动终端设备具有电池,以及
所述状态改变是所述电池寿命的剩余水平的改变。
3.根据权利要求1所述的移动终端设备,其中
所述移动终端设备具有通信单元,以及
所述状态改变是所述通信单元中电波状态的改变。
4.根据权利要求1所述的移动终端设备,其中
随着所述状态改变,所述操作单元向每个状态分配权重,以及
所述控制单元根据所述权重开始读出。
5.根据权利要求1所述的移动终端设备,其中
所述移动终端设备具有:
可以与通信网络相连的通信单元,以及
用于产生音频通知的音频通知产生单元,
其中当所述通信单元对来自所述通信网络的消息或呼叫的接收进行处理时,所述控制单元使所述音频输出单元输出在音频通知产生单元中产生的所述音频通知,并执行所述第二控制例程中的读出。
6.根据权利要求1所述的移动终端设备,其中
在所述第一控制例程的读出时,所述控制单元在经过了从所述音频警报的输出起的预定时间之后,使所述音频输出单元输出所述语音数据。
7.根据权利要求6所述的移动终端设备,其中
当在所述预定时间期间有来自所述操作单元的输入时,所述控制单元使所述音频输出单元停止输出所述语音数据。
8.根据权利要求7所述的移动终端设备,其中
所述操作单元与预定处理相关联,以及
当在所述预定时间期间发生来自所述操作单元的输入时,所述控制单元只使所述音频输出单元停止输出所述语音数据,而不执行所述预定处理。
9.根据权利要求1所述的移动终端设备,其中
所述文本具有间断位置,以及
当所述音频输出单元输出所述语音数据时,所述控制单元能够识别要读出的文本数据中的预定间断,如果所述操作单元发出预定指令,所述控制单元执行控制,以便从发生指令输入时的文本的读出位置之前或之后的间断位置开始读出文本。
10.根据权利要求8所述的移动终端设备,其中
由所述操作单元命令的预定指令是向前播放或向后播放操作,以及
所述控制单元执行控制,以便当所述预定指令是向前播放的指令时,从读出期间的指令输入时的文本的非输出方向上的最近间断位置读出文本,而当所述预定指令是向后播放的指令时,从指令输入时的输出方向上的最近间断位置开始读出。
11.根据权利要求9所述的移动终端设备,其中
所述间断位置是给定标点符号的位置。
12.根据权利要求9所述的移动终端设备,其中
所述移动终端设备具有与通信网络相连、用于发送或接收消息的通信单元,以及
所述控制单元执行控制,以将用于指示消息的发送方或目的地的组分与用于指示消息主体的组分之间的位置作为所述消息读出时的所述间断位置。
13.根据权利要求12所述的移动终端设备,其中
所述控制单元执行控制,以在所述消息的读出时将组分名称连同每个组分一起读出。
14.根据权利要求13所述的移动终端设备,其中
所述存储单元存储敬语文本和包括名称的地址消息,以及
所述控制单元执行控制,从而在所述消息的读出时,将所述敬语连同从基于指示消息的发送方或目的地的组分的所述地址消息中检索的名称一起读出。
15.根据权利要求1所述的移动终端设备,还包括:
外部连接设备,具有外部连接的外部操作单元,以向所述控制单元命令读出操作;以及第二音频输出单元,其中
所述控制单元执行控制,以便当连接了所述外部连接设备时在所述第二音频输出单元处输出所述语音数据。
16.根据权利要求15所述的移动终端设备,还包括:
能够与通信网络相连的通信单元,以及
用于产生音频通知的音频通知产生单元,其中
所述控制单元执行控制,以便当所述通信单元接收到来自所述通信网络的呼叫接收请求时,产生所述音频通知,并使所述第二音频输出单元输出音频通知,以及当操作所述外部操作单元时,中止音频通知的输出,并使所述通信单元开始对所述呼叫接收请求进行响应处理。
17.根据权利要求15所述的移动终端设备,其中
所述外部操作单元包括至少一个按键,以及
所述控制单元具有作为预定指令的多个处理过程,在预定时间内对通过操作所述按键而产生的信号的输入次数进行计数,并根据计数来处理所述多个处理过程中的任何一个。
18.根据权利要求15所述的移动终端设备,其中
用至少一个按键配置所述外部操作单元,以及
所述控制单元具有作为预定指令的多个处理过程,对通过操作所述按键而产生的信号的持续时间进行计数,并根据持续时间来处理所述多个处理过程中的任何一个。
19.根据权利要求1所述的移动终端设备,其中
预定指令是向前播放或向后播放操作,以及
当在所述音频输出单元处以作为正常速度的第一速度读出文本期间从所述操作单元产生向前播放指令时,所述控制单元执行控制,从而以比第一速度更快的第二速度、从所述向前播放指令发生时的读取位置到所述向前播放指令发生时的位置之前的最近的间断位置,读出文本,然后所述控制单元执行控制,以从读出的所述间断位置处开始使速度返回到第一速度。
20.根据权利要求19所述的移动终端设备,其中
预定指令包括向后播放操作,以及
当从所述操作单元产生向后播放指令时,所述控制单元执行控制,以便返回到在读出的向后播放指令的时间点处的读出位置之后的间断位置,如果在所述向后播放指令之后发生另一向后播放指令,所述控制单元执行控制,以便返回到更加在前的读出间断位置。
21.根据权利要求1所述的移动终端设备,包括发光单元,其中
所述控制单元执行控制,以便在发生所述状态改变时向所述发光单元命令发光操作,并在使发光单元发光之后操作所述操作单元时,读出与状态改变相关的信息。
22.根据权利要求21所述的移动终端设备,其中
所述操作单元包括多个输入按键,
设置多个所述发光单元并将多个所述发光单元与所述操作单元的多个输入按键相关联,以及
所述控制单元执行控制,以在发生状态改变时,根据状态改变的类型,向所述发光单元之一命令发光操作,并在操作与被命令来执行发光操作的发光单元相对应的所述输入按键时,命令与状态改变相关的信息的读出。
23.根据权利要求22所述的移动终端设备,包括能够形成打开状态/闭合状态的多个相连的机壳,其中
在所述机壳的闭合状态中,所述输入按键和所述发光单元设置在外露的位置。
24.根据权利要求23所述的移动终端设备,其中
当所述发光单元在机壳闭合的情况下发光时,在所述机壳形成打开状态时,所述控制单元执行控制,以读出与引起发光的状态改变相关的信息。
25.根据权利要求21所述的移动终端设备,其中
所述发光单元具有多种发光类型,以及
所述控制单元命令在所述多种发光类型中,以预先已分配给状态改变的类型中的一种发光类型进行发光操作。
26.根据权利要求25所述的移动终端设备,其中
所述文本包括多个项,以及
所述控制单元能够执行控制,以读出针对每个项的所述文本,并使发光单元以在所述多种发光类型中,预先已分配给所述多个项中的每一个的一种发光类型发射光。
27.根据权利要求25所述的移动终端设备,其中
所述文本包括多个项,以及
所述控制单元能够执行控制,以读出针对每个项的所述文本,并使发光单元以预先已分配给文本项组合中的每一个的一种发光类型发射光。
28.一种具有与读出指示对应的音频读出功能的移动终端设备中的读出控制方法,所述读出控制方法包括:
根据读出项存储文本的步骤;
产生音频警报的音频警报产生步骤;
在读出时将所述存储步骤中存储的所述文本转换成语音数据的文本到语音步骤;
输出所述语音数据或所述音频警报的音频输出步骤;
在本地设备的动作中发生关联性状态改变的情况下,当在所述音频输出步骤中输出所述语音数据时、在输出所述音频警报之后输出语音数据的第一控制步骤;以及
在进行了命令读出的操作的情况下,输出所述语音数据而不输出所述音频警报的第二控制步骤。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP191961/2004 | 2004-06-29 | ||
JP2004192219A JP4990482B2 (ja) | 2004-06-29 | 2004-06-29 | 携帯端末装置 |
JP2004191961A JP4642391B2 (ja) | 2004-06-29 | 2004-06-29 | 携帯端末装置 |
JP192219/2004 | 2004-06-29 | ||
JP2004192290A JP4990483B2 (ja) | 2004-06-29 | 2004-06-29 | 携帯端末装置 |
JP192290/2004 | 2004-06-29 | ||
PCT/JP2005/012005 WO2006001488A1 (ja) | 2004-06-29 | 2005-06-29 | 携帯端末装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101010664A CN101010664A (zh) | 2007-08-01 |
CN101010664B true CN101010664B (zh) | 2011-06-08 |
Family
ID=35780876
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2005800288605A Expired - Fee Related CN101010664B (zh) | 2004-06-29 | 2005-06-29 | 移动终端设备 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP4990482B2 (zh) |
CN (1) | CN101010664B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107066084A (zh) * | 2016-01-05 | 2017-08-18 | 摩托罗拉移动有限责任公司 | 用于管理音频读出的方法和设备 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012175434A (ja) * | 2011-02-22 | 2012-09-10 | Japan Radio Co Ltd | 無線端末装置 |
US9390072B2 (en) | 2013-11-27 | 2016-07-12 | Xiaomi Inc. | Method and device for enlarging displayed font |
CN103645837B (zh) * | 2013-11-27 | 2016-08-31 | 小米科技有限责任公司 | 放大显示字体的方法和装置 |
CN104765714A (zh) * | 2014-01-08 | 2015-07-08 | 中国移动通信集团浙江有限公司 | 一种电子阅读与听书的切换方法及装置 |
CN106468891A (zh) * | 2015-08-19 | 2017-03-01 | 中兴通讯股份有限公司 | 主控语音终端、被控语音终端、语音互联控制方法及系统 |
CN111028474A (zh) * | 2019-12-28 | 2020-04-17 | 国网山西省电力公司检修分公司 | 一种变电站的作业管理系统及其无线数据传输系统及方法 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN2157641Y (zh) * | 1993-09-11 | 1994-02-23 | 王羽 | 自动语音报警电话 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07152532A (ja) * | 1993-11-29 | 1995-06-16 | Toshiba Corp | 文章読み上げ装置 |
JPH07199992A (ja) * | 1993-12-28 | 1995-08-04 | Nippon Telegr & Teleph Corp <Ntt> | 情報提供装置 |
JP3847838B2 (ja) * | 1996-05-13 | 2006-11-22 | キヤノン株式会社 | 情報処理方法及び装置 |
JP2002055925A (ja) * | 2000-08-07 | 2002-02-20 | Hitachi Ltd | 音声読み上げ装置および情報処理装置 |
JP2003114687A (ja) * | 2001-10-03 | 2003-04-18 | Sharp Corp | コンテンツ再生配信システム、コンテンツ再生/配信装置、コンテンツ再生/配信方法、コンテンツ再生/配信プログラム及びコンテンツ再生/配信プログラムを記録した記録媒体 |
JP2004029490A (ja) * | 2002-06-27 | 2004-01-29 | Nippon Seiki Co Ltd | 情報確認装置 |
JP2004072744A (ja) * | 2003-07-24 | 2004-03-04 | Hitachi Ltd | 映像記録再生装置 |
-
2004
- 2004-06-29 JP JP2004192219A patent/JP4990482B2/ja not_active Expired - Fee Related
-
2005
- 2005-06-29 CN CN2005800288605A patent/CN101010664B/zh not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN2157641Y (zh) * | 1993-09-11 | 1994-02-23 | 王羽 | 自动语音报警电话 |
Non-Patent Citations (6)
Title |
---|
JP平4-24714A 1992.01.28 |
JP特开2003-30113A 2003.01.31 |
JP特开平7-152532A 1995.06.16 |
JP特开平7-199992A 1995.08.04 |
JP特开平9-307658A 1997.11.28 |
同上. |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107066084A (zh) * | 2016-01-05 | 2017-08-18 | 摩托罗拉移动有限责任公司 | 用于管理音频读出的方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
JP2006014240A (ja) | 2006-01-12 |
CN101010664A (zh) | 2007-08-01 |
JP4990482B2 (ja) | 2012-08-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106024014B (zh) | 一种语音转换方法、装置及移动终端 | |
CN101971250B (zh) | 具有活动语音识别的移动电子设备 | |
US8855722B2 (en) | Integrated handheld computing and telephony device | |
US8392520B2 (en) | Mobile communication apparatus | |
US7949374B2 (en) | Personal communications systems | |
US20160049145A1 (en) | Mobile terminal device | |
CN101416475A (zh) | 用于管理移动终端事件的方法和装置 | |
CN104008749A (zh) | 用于移动设备的语音控制的方法和装置 | |
CN101557432A (zh) | 移动终端及其菜单控制方法 | |
CN105100445A (zh) | 信息提醒方法、装置及终端 | |
WO2014196790A1 (ko) | 휴대단말기의 음성 이모티콘 제어방법 | |
KR20140071831A (ko) | 이동 단말기 및 전화 수신 방법 | |
CN102316227B (zh) | 语音通话过程中数据处理方法 | |
CN102131157A (zh) | 信息交互系统及方法 | |
CN103581853A (zh) | 手机语音播报文字短信的方法和装置 | |
CN105550235A (zh) | 信息获取方法及装置 | |
CN101010664B (zh) | 移动终端设备 | |
CN101370053B (zh) | 移动终端及耳机控制移动终端进行操作的方法 | |
KR100617756B1 (ko) | 휴대단말기의 상태 정보 표시방법 | |
CN106911840A (zh) | 移动终端及其语音服务方法和装置 | |
CN104333641B (zh) | 通话方法及装置 | |
CN105281811A (zh) | 一种语音数据传输处理的方法和终端 | |
CN105474134B (zh) | 控制操作模式的方法及使用该方法的电子设备 | |
JP4118098B2 (ja) | 無線通信装置 | |
CN102415082A (zh) | 具有数据传输功能的便携终端以及便携终端的动作控制方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20110608 Termination date: 20180629 |