CN101015208A

CN101015208A - 通信终端及其通信方法

Info

Publication number: CN101015208A
Application number: CN 200580029872
Authority: CN
Inventors: 米本佳史
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 2004-09-09
Filing date: 2005-09-08
Publication date: 2007-08-08
Also published as: JP2006080850A

Abstract

一种通信终端，能够提供支援而使与通信对方的交流更加活跃，并且简化操作，即使对不习惯信息机器操作的上了年纪的人等，也能在容易地显示各种各样的图像信息的同时通过简单操作进行通话，从而能够促进温暖亲情的交流。该装置中，信息存储处理单元(102)进行有关信息存储的处理。通信对方信息获取单元(104)作为搜索关键从本方终端或者对方终端获取有关通信中的通信对方的信息。存储信息搜索单元(105)将由通信对方信息获取单元(104)提取的有关通信单元的信息作为搜索关键信息，搜索存储于信息存储单元(103)的信息来提取与通信对方关系深的信息。输出单元(107)利用显示装置显示图像信息，或者利用扬声器再现语音信息。

Description

通信终端及其通信方法

技术领域

本发明涉及比如使用可视电话来通信的通信终端及其通信方法。

背景技术

已经提出了一种共览型可视图像电话系统，作为使用可视电话进行通信时更能享受对话的装置(比如，专利文献1)。在上面所述的传统系统中，由于每个终端通常具有不同的信息，因此使用一种支援装置，用于在开始通话前，通过使存储于每个终端的数据库中的信息处于相同的状态状态、搜索在该状态下需要的数据库内的信息、并且在每个终端中显示搜索到的数据，来使对话顺利进行。

[专利文献1]日本专利申请特开平3-49385号公报

发明内容

发明需要解决的问题

但是，上面所述的传统的装置存在以下问题，即在开始通话前，必须将存储于每个终端的数据库中的信息置于相同状态，并且这种类型的预呼叫准备繁琐而不实用。

本发明的一个目的是提供一种通信终端，能够提供支援而使与通信对方的交流更加活跃，并且能够使即使对不习惯于操作信息设备的上了年纪的人等，也能通过简单操作在容易地显示各种各样的视频信息的同时进行通话，从而能够促进温暖亲情的交流。本发明的目的还在于提供一种用于所述通信终端的通信方法。

解决所述问题的手段

本发明的通信终端包括：关键信息获取单元，从通信对方获取关键信息；搜索单元，基于从所述通信对方所获取的关键信息，搜索存储于存储器中的存储信息，并且获取与所述关键信息相关联的信息；以及信息显示单元，显示作为由所述搜索单元进行的搜索的结果而得到的所述信息。

本发明的通信终端采取的结构包括：关键信息获取单元，从通信对方获取关键信息；搜索单元，基于从所述通信对方所获取的关键信息，搜索存储于存储器中的存储信息，并且获取与所述关键信息相关联的信息；以及信息提供单元，将作为由所述搜索单元进行的搜索的结果而得到的所述信息发送给所述通信对方。

本发明的通信方法包括：关键信息获取步骤，从通信对方获取关键信息；搜索步骤，基于从所述通信对方所获取的关键信息，搜索存储于存储器中的存储信息，并且获取与所述关键信息有关的信息；以及信息显示步骤，显示作为在所述搜索步骤中进行的搜索的结果而得到的所述信息。

本发明的通信方法包括：关键信息获取步骤，从通信对方获取关键信息；搜索步骤，基于从所述通信对方所获取的关键信息，搜索存储于存储器中的存储信息，并且获取与所述关键信息相关联的信息；以及信息提供步骤，将作为在所述搜索步骤中进行的搜索的结果而得到的所述信息发送给所述通信对方。

发明的有益效果

根据本发明，能够提供支援而使与通信对方的交流更加活跃，能够使即使对不习惯于操作信息设备的上了年纪的人等，也能通过简单操作在容易地显示各种各样的视频信息的同时进行通话，从而能够促进温暖亲情的交流。

附图说明

图1是表示本发明的实施例1的通信终端的结构的方框图；

图2是本发明的实施例1的通信系统的结构图；

图3是表示本发明的实施例1的通信对方信息的获取方法的顺序图；

图4是表示本发明的实施例1的接收的图像信息的存储方法的流程图；

图5是表示本发明的实施例1的对应于对通信对方信息的请求进行的方法的流程图；

图6是表示本发明的实施例1的根据通信对方信息来搜索存储信息的方法的流程图；

图7是表示本发明的实施例1的显示再现信息的例子的图；

图8是表示本发明的实施例1的通信终端的另一个结构的方框图；

图9是表示本发明的实施例1的显示输出信息的另一个例子的图；

图10是表示本发明的实施例1的显示输出信息的另一个例子的图；

图11是表示本发明的实施例3的根据声音识别来提取存储信息的流程图；

图12是表示本发明的实施例4的通信方法的顺序图；

图13是表示本发明的实施例4的通信终端的结构的方框图；

图14是表示本发明的实施例5的根据图像识别来存储存储信息的方法的流程图；以及

图15是表示本发明的实施例5的根据语音识别来搜索存储信息的方法的流程图。

具体实施例

下面将参照附图详细说明本发明的实施例。

(实施例1)

如图2所示，在按照本发明的一个实施例的通信系统中，多个通信终端(201～203)经由通信网220连接。

本发明的通信终端(201～203)比如为移动电话机。多个通信终端(201～203)经由基站(211～213)连接于通信网220。

本发明的通信终端100如图1所示，包括：通信单元101、信息存储处理单元102、信息存储单元103、通信对方信息获取单元104、存储信息搜索单元105、信息再现处理单元106以及输出单元107。

通信单元101在进行使用可视电话等的通信时，进行主叫/被叫的呼叫连接、图像信息、声音信息、文本信息等的数据的接收/发送。文本信息为任意的数据信息，还包括显示的数据或控制信息。

信息存储处理单元102进行可视电话的再现图像的存储处理、接收/发送邮件的存储处理、进行将用户信息存储于地址簿等的有关信息的存储的处理。

信息存储单元103存储经信息存储处理单元102存储处理的信息的存储信息。具体而言，信息存储单元103存储可视电话中再现的图像，并且还存储各种类型的信息，包括邮件或在互联网上获取的信息、经由网络接收的接收内容、朋友/熟人的包括地址、电话号码等的地址信息等的各种各样的信息。

任何类型的存储器，其具体例子包括电可擦除非易失性存储器(EEPROM)、可读写易失性存储器(SRAM或DRAM)、和磁存储器(硬盘)，都可以被用于信息存储部分103作为安装于通信终端201～203的每一个中的存储器。外部存储设备，例如卡式存储器、棒式存储器等，可被用于信息存储部分103。进一步，将通过无线网或有线网构成的网络的服务器的存储装置可被用作信息存储单元103。

通信对方信息获取单元104为本发明的关键信息获取单元，从本方终端或者对方终端作为检索关键信息获取与通信中的通信对方有关的信息。所获取的关键信息是个人信息，诸如唯一确定可视电话通话中的通信对方的信息、兴趣信息；或者位置信息、时间信息等的环境信息。

存储信息搜索单元105搜索存储于信息存储部分103中的信息，作为用于搜索由通信对方信息获取单元104获取的通信对方信息的关键信息(搜索信息)，并且提取与该通信对方密切相关的信息(被搜索信息)。

信息再现处理单元106使用输出部分107来再现由存储信息搜索单元105提取的与通信对方密切相关的被搜索信息。

输出单元107由扬声器或显示图像的显示器构成。比如，信息再现处理单元106通过使用输出单元107，将提取出的图像信息显示于显示器，或者将提取出的语音信息通过扬声器再现。

如图1所示，通信终端201～203中的每一个包括：通信单元101、信息存储处理单元102、信息存储单元103、通信对方信息获取单元104、存储信息搜索单元105、信息再现处理单元106以及输出单元107。

接下来，说明如图2所示的通信系统的通信方法。首先利用图3说明在可视电话通话中获取与通信对方有关信息的处理顺序。

在图3中示出了一个例子，其中通信终端201与通信终端202相互通信，通信终端201从通信终端202获取关于通信对方的个人信息，并且通信终端201将获取的个人信息作为关键信息，搜索并提取存储于通信终端201的信息存储单元103中的信息。

通信终端201对通信终端202进行利用可视电话的连接请求(步骤S301)。

通信终端202应答利用可视电话的连接请求，进行许可应答(步骤S302)。

在上面所述的连接处理之后，对可视电话通信进行数据传输设定。

在本发明的通信系统中，将第3代移动电话标准的3G-324M协议用于可视电话通信，该协议利用将多媒体信息进行复用的标准方式的ITU-T建议H.223的数据复用。

通信终端根据3G-324M协议，除了建立用于传输图像信息的视频信道以及用于传输声音信息的声音信道外，还建立能够传输任意类型的数据的数据传输信道。

接下来描述在终端设备之间的信息传输的例子，其中，利用上面所述的数据传输信道来传输与通信对方有关的个人信息。

通过建立3G-324M协议，使可视电话通信成为可能(步骤S303)。此时，双方的通信终端之间能够通过语音以及相互显示通信各方的图像来进行对话。

在通信终端201与通信终端202的通信(步骤S303)过程中，通信终端201存储从通信终端202接收的图像信息，由此通信终端201向通信终端202发出获取关于通信对方的个人信息的请求(步骤S304)。

通信终端202响应于来自通信终端201的获取个人信息的请求，提取作为对象的个人信息，并将该信息发送给通信终端201(步骤S305)。

接下来，利用图4说明在通信终端201将通信对方的图像信息和有关通信对方的个人信息(属性信息)相关联地存储的处理流程。图4示出这样的情况，通信终端201与通信终端202相互通信，通信终端201接收图像信息并且获取有关通信对方的通信终端202的信息(个人信息)，并且所接收的图像信息和属性信息被相互相关并存储，其中该属性信息是所获取的有关通信终端202的信息。

通信终端201在利用可视电话的通信过程中，显示通信对方的图像(步骤S401)。

当通信终端201检测出来自通信终端201的用户的键输入操作等的、存储通信对方的图像信息的命令(步骤S402)后，对通信对方的通信终端202进行个人信息的获取请求(图3的步骤S304)，从而接收来自通信终端202的通信对方的个人信息(步骤S403)。

通信终端201的信息存储处理单元102将接收的通信对方的图像信息，以及在步骤S403获取的、包括作为唯一地确定通信对方的信息的电话号码等的个人信息，相关联地作为存储信息存储于通信终端201的信息存储单元103(步骤S404)。通过将图像信息和个人信息(属性信息)相关联地存储，将个人信息作为关键信息，搜索存储于通信终端201的信息存储单元103的存储信息并提取，所以能够迅速地进行搜索。

接下来，参照图5说明通过接收来自通信终端201的个人信息请求的通信终端202进行处理的流程。

通信终端202在与通信终端201进行的可视电话通信中，进行通信对方的图像显示(步骤S501)。

经由数据传输信道，通信终端202从通信终端201接收有关通信对方的信息的个人信息的获取请求(步骤S502)。在此，所请求的个人信息为唯一地确定使用通信终端202的用户的个人信息。

通信终端202接收个人信息的获取请求后，根据该请求，参照存储于通信终端202的信息存储单元103的存储信息，提取使用通信终端202的用户的个人信息，即提取可视电话号码(步骤S503)，其后通信终端202经由数据传输信道将请求的个人信息发送给通信终端201(步骤S504)。

接下来，参照图6说明通信终端201的存储信息的搜索处理流程。

通信终端201建立与通信终端202的可视电话通信，开始进行通信过程(步骤S601)。

由此，使经由H.223复用中的视频信道显示接收通信对方的影像成为可能。另外，使利用语音信道(音频信道)进行对话成为可能。

通信终端201经由数据传输信道，对通信对方的通信终端202进行通信对方信息的个人信息的请求(步骤S602)，获取有关通信终端202的使用者(用户B)的个人信息(步骤S603)。

于是，通信终端201作为通信对方的个人信息，获取唯一地确定通信对方的识别信息。唯一地确定通信对方的识别信息为电话号码。

在步骤S603中，获取个人信息后，存储信息搜索单元105将电话号码作为搜索关键信息，自动地搜索存储于信息存储单元103的存储信息(步骤S604)。该信息是由通信对方信息获取单元104获取的唯一地确定通信对方的信息的通信对方的个人信息。

信息存储单元103预先存储个人的图像信息，而且与图像信息一并存储作为属性信息的与图像信息有关系的个人信息。因此，存储信息搜索单元105能够将唯一确定的通信对方的用户B的电话号码作为搜索关键信息，从存储于信息存储单元103中的存储信息提取有关用户B的信息(与关键信息相关联的信息)。

继而，当存储结束时，信息再现处理单元106通过输出单元107自动地显示提取出来的与通信对方相关联的信息(被搜索信息)(步骤S605)。

图7表示在通信终端201上显示的图像信息和通过搜索而提取的数据的例子。

在步骤S605的显示如图7所示，在屏幕的上方显示经由视频信道的进行通信的对方的影像701，在屏幕的下方显示作为通过基于有关通信对方的信息(搜索信息)搜索而提取的信息的、与通信对方相关联的图像信息(被搜索信息)702。

如上所述，根据本实施例1，因为通信终端201将从通信对方的通信终端202获取的个人信息作为关键信息，搜索通信终端201中的存储信息并显示，所以自动地显示通信对方感兴趣的信息，由此能够提供支援而使与通信对方的交流更加活跃，并且简化操作，即使对不习惯信息机器操作的上了年纪的人等，也能在简单地显示各种各样的视频信息的同时进行通话，从而能够促进温暖亲情的交流。也即，根据本实施例1，基于有关通信对方的关键信息，自动地搜索信息存储单元103中的存储信息，所以能够无需通过繁琐的操作而获取与通信对方有关系的信息。另外，根据本实施例1，将从通信对方接收的包括图像信息的接收信息和个人信息等的通信对方信息相关联地进行存储处理，所以能够参照通信对方信息搜索接收信息，即使搜索的信息量较多也能容易地提取所需求的信息。

另外，虽然在上述说明中，设获取的有关通信对方的信息为唯一地识别通信对方的个人信息，但是将兴趣信息等的其它信息包含于个人信息也是可以的。

而且，当除了唯一地识别通信对方的信息外还利用其它的个人信息(私人信息)时，在存储信息的搜索中，使对搜索的信息进一步加以限定成为可能。

作为个人信息，当不利用唯一地识别通信对方的信息，而利用兴趣信息等时，不限定于有关通信对方的信息而进行搜索也是可以的。比如，设置成将喜爱的艺术家信息作为搜索条件，搜索有关该艺术家的信息的结构也是可以的。

另外，作为通信对方的个人信息，存储包括生辰、性别、婚史、工作行业、现在住址、兴趣爱好等的信息，由此在搜索存储信息时，使利用该个人信息将搜索的信息加以限定成为可能。

另外，虽然在上述说明中，表示了利用电话号码作为个人信息来唯一地确定通信对方的例子，但是唯一地确定通信对方的识别信息，不一定是电话号码也可以，设置成根据预先约定好的规则而赋予的用户标识符号的结构也是可以的。另外，利用登录于地址信息等的用户名或邮件地址信息等也是可以的。

另外，虽然在上述说明中，以作为有关通信对方的信息，利用个人信息为例进行了说明，但是不限于个人信息，利用位置信息、时间信息等的环境信息也是可以的。比如，通信终端201设置成请求有关环境的信息来代替图3的通信对方信息请求步骤S304也是可以的。

有关环境的信息为作为通信对方的通信终端202所处的环境状况的信息，比如，纬度/经度信息等的与地点相关联的信息或与现在时间等的与时间相关联的信息。

当通信终端201请求比如有关地点的信息的位置信息时，通信终端202利用GPS功能(未示出)的位置检测功能来进行位置信息的获取。通信终端202经由数据传输信道，将获取的位置信息发送给通信终端201。

根据该方法，通信终端201在进行通信对方的图像信息的存储时，使将作为通信对方终端的通信终端202的位置信息作为属性信息一并存储下来成为可能。通信终端201在随后的搜索时，使基于位置信息提取相关联的信息成为可能。另外，有关位置检测功能，不限于GPS功能，只要是能够获取位置信息的方法其它的方法也是可以的。比如，可以通过蜂窝网获取位置信息。

另外，有关地点的信息，不限于纬度/经度信息，只要是有关地点的信息什么都可以。比如，邮政编码、地址信息、区域信息、陆标信息(landmarkinformation)等也是可以的。另外，基于得到的纬度/经度信息，将其变换成其它格式的有关地点的信息也是可以的。比如，基于得到的纬度/经度信息，变换成区域信息、路标信息也是可以的。有关变换成其它格式的有关地点的信息的处理，可以在请求与地点相关联的信息的一方进行，也可以在被请求的一方进行。另外，至于变换成何种格式的有关地点的信息为好，设置成在请求方指定而进行与地点相关联的信息的请求的结构也是可以的。在该情形，被请求所指定的格式的与地点相关联的信息的通信终端，变换成适当的有关地点的信息，并进行应答。另外，从通信对方获取的有关环境的信息，不只限于与地点相关联的信息，有关其它的环境的信息也是可以的。也即，作为有关环境的信息，获取通信对方的时间信息，并将该获取的时间信息与接收的图像信息相关联地存储也是可以的。此时，当通信对方与本方终端存在时差时，使反映对方环境的时间来存储信息成为可能。

另外，“使接收的包含图像信息的接收信息与个人信息等的通信对方信息相关联”在技术上意味着，包括某个个人信息(属性信息)和其图像信息有着一对一的关系的情形，以及某个个人信息(属性信息)和其图像信息有着一对多的关系的情形的双方，当提取某个个人信息(属性信息)时，意味着包括与提取的个人信息(属性信息)一对一对应的图像信息，或者与提取的个人信息(属性信息)一对多对应的图像信息。

在此，更加详细地叙述通信对方信息的获取处理(步骤S602以及步骤S603)。

在通信对方信息的获取处理中，作为获取的通信对方信息，能够获取通信对方的个人信息或环境信息等任意的信息，下面说明在请求获取侧(通信终端201)指定请求的信息的方法。

作为其中的一个方法，通信终端201进行预先决定下来的通信对方信息的获取请求，在此，作为一例，作为唯一地识别通信对方的信息而请求通信对方终端的电话号码。

另外，利用列表清单等来选择请求信息也是可以的。

在图8上述的通信终端800中设置关键信息选择单元808来选择请求信息。

比如，设置成通过从关键信息选择单元808提供的列表清单来选择是请求个人信息、是请求环境信息、还是两种信息都请求也是可以的。

另外，作为其它的方法，还有对显示于显示器的通信对方的影像，通过鼠标等的定点设备来指定对象(图像的一部分)，由此请求作为其对象的信息的方法。也就是，设置成通过鼠标来指定个人影像时，请求个人信息；通过鼠标来指定背景时，请求位置信息等的环境信息。

另外，虽然表示了通信终端201进行通信对方信息的请求，作为其应答接收通信对方信息的例子，但是设置成即使无需请求，通信终端202也通知通信对方信息的结构也是可以的。

另外，被呼叫方的通信终端利用有关通信对方的信息时，作为通信对方信息，利用在通信的连接处理时得到的呼叫方号码通知也是可以的。

另外，设置成呼叫方的通信终端，将呼叫电话号码作为关键信息，搜索存储于呼叫方的通信终端的信息存储单元103中的存储信息也是可以的。

进一步，设置成通信终端通过存储于信息存储单元103的唯一地识别通信对方的信息所相对应的用户信息，参照并利用有关通信对方的进一步的私人信息也是可以的。

通信对方的个人信息(私人信息)，包括生辰、性别、婚史、工作行业、现在住址、兴趣爱好等的信息，能够将这些作为搜索关键信息(搜索条件)加以利用。

因此，能够将兴趣爱好等的心理学(psychographic)信息以及年龄、家庭结构等的人口统计学(demographic)信息等作为搜索关键信息加以利用。

在实施例1中，表示了利用电话号码作为个人信息来唯一地确定通信对方的例子，但是唯一地确定通信对方的识别信息，不一定是电话号码也可以，利用根据预先约定好的规则而赋予的用户标识符号也是可以的。另外，利用登录于地址信息的用户名或邮件地址信息等也是可以的。

另外，虽然在实施例1中，以作为与通信对方信息(关键信息)，利用个人信息为例进行了说明，但是不限于个人信息，利用位置信息、时间信息等的环境信息也是可以的。

接下来，说明作为有关通信对方的信息，从通信对方终端获取位置信息的例子。

在图3的步骤S304的通信对方信息请求中，通信终端201请求通信终端202的位置信息。

被请求了位置信息的通信终端202通过GPS功能等的位置检测功能得到位置信息。在步骤S305的通信对方信息的发送过程中，通信终端202将位置信息发送给通信终端201。

于是，通信终端201得到作为通信对方的通信终端202的位置信息。

通信终端201将获取的通信对方的位置信息作为搜索关键信息，搜索通信终端201的存储信息，通过该搜索，通信终端201优先地提取有关通信对方的位置信息的存储信息，并提供给用户。

另外，通过唯一地识别通信对方的信息，进行存储信息的搜索，进一步通过作为环境信息的位置信息对搜索加以限制也是可以的。

另外，有关位置信息的获取，可以利用GPS功能，有关位置检测功能，不限于GPS功能，只要能够获取位置即可。比如，可以通过蜂窝网获取位置信息。

另外，有关位置信息，不限于纬度/经度信息，只要是有关位置的信息什么都可以。比如，邮政编码、地址信息、区域信息、路标信息等也是可以的。

另外，基于得到的纬度/经度信息，利用有关位置信息的数据库，将其变换成其它格式的位置信息也是可以的。比如，基于得到的纬度/经度信息，变换成区域信息、路标信息也是可以的。

有关变换成其它格式的位置信息的处理，可以在请求位置信息方进行，也可以在被请求位置信息方进行。

另外，至于变换成何种格式的位置信息为好，请求位置信息方指定而进行位置信息请求也是可以的。在该情形，被请求所指定的格式的位置信息的通信终端，变换成适当的位置信息，并进行应答。

另外，在存储信息的搜索中，作为搜索信息，不只限于有关通信对方的位置信息，也可以利用有关本方终端的位置信息，还可以组合利用双方的位置信息。利用双方的位置信息是指，将两个地点之间作为搜索信息利用，也就是优先地搜索有关两个地点之间的信息等，比如优先地搜索位于两个地点之间的有关店铺的信息。

进一步，组合位置信息获取时间信息等的其它的环境信息也是可以的，通过组合并使它们成为搜索关键信息，使获取更加适应于对方状况的信息成为可能。

另外，虽然在上述说明中表示了提取的信息(被搜索信息)为一个的情形，但是也有提取出来的信息为多个的情形。当有关系的信息为多个时，通过预先设定的方法提供给用户。

从搜索出的多个对象信息中，只显示一个信息时，作为一个方法，以摄像时间离得近的顺序来优先地选择。

另外，显示搜索出的多个对象信息时，可以以规定的时间间隔来依次转换显示，或者同时显示多个信息。比如，如图9、10所示来显示。

在图9、10中，参照标号901、1001为进行通信的对方图像，参照标号902、1002为搜索的结果被提取的多个图像。

另外，当提取出的存储信息为高质量的静止图像或者活动图像时，通过缩略图(thumbnail)等的显示负荷或显示区域小的方法，显示多个信息以供用户选择也是可以的。

另外，如果是活动图像，基于相关联的属性信息，显示最有关联性的画面(frame)或场面(scene)也是可以的。

另外，同时显示多个提取出的信息时，或者可供用户选择时，能够在时间轴上排列。

另外，在实施例1中，虽然使电话号码成为唯一地确定使用通信终端的用户的信息，但不限于电话号码，设置成另外赋予姓名或用户标识符号的结构也是可以的。此时，使对应拥有多个电话号码的用户成为可能。

另外，实施例1中，虽然经由基站以及通信网来构成系统，但是通信装置互相利用局域通信接口进行直接通信的形态也是可以的。

另外，实施例1中，虽然表示了作为通信对方只有一个用户的例子，但是将多个通信对方作为对象的多方呼叫(multi-call)等也是可以的。此时，使将作为多个用户共通的信息的、基于小组信息、兴趣信息、日程信息的共通活动预定等作为搜索关键信息加以利用成为可能。

(实施例2)

在实施例1，图6的步骤S604中，设置成得到确定通信对方的信息的结构，在实施例2说明通信终端201从通信终端201，作为存储信息的搜索关键信息(搜索条件)得到环境信息的例子。

具体而言，除了使个人信息作为唯一地确定通信对方的信息之外，还将表示环境信息的时间信息作为搜索的关键信息来使用。

将时间信息作为用来搜索的关键信息(搜索条件)时，比如通信时间为2月16日，则将过去的与2月16日有关系的信息优先地进行搜索。

通信终端201的信息存储单元103中存储将摄像的日期信息作为属性信息的图像信息。摄像的日期信息是指比如在可视电话通信中进行收录的日期或者通过摄像机摄像的日期。

另外，通信终端201的信息存储单元103存储地址信息和日程信息。

如实施例1说明的那样，通信终端201对通信终端202进行通过可视电话的连接请求，开始进行可视电话通信过程，显示通信对方的影像。

通信终端201的通信对方信息获取单元104获取唯一地确定通信对方的用户B的信息。

实施例2中，通过地址信息选择用户B进行可视电话连接。因此，通过地址信息得到唯一地确定通信对方的信息。也就是，利用通过地址信息得到的电话号码唯一地确定作为通信对方的用户B。

进一步，通信对方信息获取单元104将当前的时间信息(日期信息)作为关键信息，从时钟/日历功能(未示出)获取。

通信终端201的存储信息搜索单元105基于唯一地确定通信对方的信息的电话号码，提取与通信对方的用户B的有关系的信息，而且，存储信息搜索单元105从提取出的与用户B的有关系的信息中优先地选择有关当前的日期的信息。具体而言，如果为对应于当天的日期(2月16日)的信息，则将对应于该日期的信息优先地选择。

继而，通信终端201的信息再现处理单元106通过输出单元107显示提取的有关通信对方的用户B的信息。

搜索出的存储信息为有关当天的日期的重要信息，比如通信对方的生日。另外，在日程信息中，在当天的日期(2月16日)，作为过去的信息，如果存储有与通信对方一起活动等的信息，还能够显示存储有该信息。另外，在日程信息中如果存储着有关活动的地点的信息的话，通过进行根据通信对方的位置信息的搜索，还能够显示存储有该信息。另外，在存储的日程信息中，作为当天的预定，如果有与用户B的预定的话，显示该信息也是可以的。

另外，从通信对方获取时刻信息，将获取的时刻信息作为搜索关键信息也是可以的，这对具有时差的通信对方是有效的。比如，有关通信对方的通信终端的当前时刻为21:00，表示夜晚的时间带时，优先有关夜晚的数据，即优先地搜索有关通信对方的时间的信息。

如上所述，根据本实施例2，因为通信终端201将从通信对方的通信终端202获取的环境信息作为关键信息，搜索通信终端201中的存储信息并显示，所以自动地显示通信对方感兴趣的信息，由此能够提供支援而使与通信对方的交流更加活跃，并且简化操作，即使对不习惯信息机器操作的上了年纪的人等，也能在简单地显示各种各样的视频信息的同时进行通话，从而能够促进温暖亲情的交流。

另外，在实施例2中，虽然作为时间信息使用了日期信息，但是除此以外的有关时间的信息也是可以的，只要是时刻信息、日期信息、星期信息、月信息以及预先决定好的时间带信息等的有关时间的信息都可以。

另外，搜索出的信息(被搜索信息)为过去发送/接收的邮件信息也是可以的。此时，比如搜索由正在通信的人发送来的邮件信息等。

(实施例3)

实施例3中描述的为一种通信终端，通过识别接收的来自通信对方的信息，得到有关通信对方的信息，并将该识别信息作为搜索关键信息来利用。

实施例3中，参照图11说明根据通过语音识别而得来的识别信息，搜索存储信息并提供的通信方法。

通信终端201的信息存储单元103中一并存储着图像信息和与该图像信息有关系的个人的特征信息。另外，设在个人的特征信息中，包含有关声音的特征信息，并设置成对于通信终端201的关键信息的获取请求，通信终端202将关键信息发送给通信终端201的结构。

通信终端201对通信终端202进行通过电话电视的连接请求，当接收来自通信终端202的承诺应答时，通过利用H.223复用的3G-324M协议，进行可视电话通信(步骤S1101)。

利用视频信道，进行影像的接收/发送，通过输出单元107显示对方的影像(步骤S1102)。另外，经由音频信道进行对话。

通信终端201的通信对方信息获取单元104在利用音频信道的对话中，提取对方的语音信息(步骤S1103)，而且，通信对方信息获取单元104对提取出的对方的语音信息进行分析，通过参照存储于信息存储单元103的存储着语音特征的语音数据库，从而唯一地确定通信对方(步骤S1104)。

通信终端201的存储信息搜索单元105基于确定下来的通信对方信息，搜索存储于信息存储单元103的存储信息，提取有关通信对方的用户B的信息(步骤S1105)。

通信终端201的信息再现处理单元106通过输出单元107，显示提取出来的与用户B有关系的信息的图像信息(步骤S1106)。

不言而喻的是这些步骤连续地自动实施。

如上所述，根据本实施例3，因为通信终端201将从通信对方的通信终端202获取的语音信息作为关键信息，搜索通信终端201中的存储信息并显示，所以自动地显示通信对方感兴趣的信息，由此能够提供支援而使与通信对方的交流更加活跃，并且简化操作，即使对不习惯信息机器操作的上了年纪的人等，也能在简单地显示各种各样的图像信息的同时进行通话，从而能够促进温暖亲情的交流。

另外，设置控制进行语音识别的定时的用户接口也是可以的。比如，为了控制进行语音识别的定时，设置软件键/硬件键，当按下预先决定好了的键时，进行语音识别。

另外，对于控制进行语音识别的定时，在通信过程中，以预先决定好了的任意定时随时进行也是可以的。

当随时进行语音识别时，在通信对方的终端，即使对象用户(使用终端的用户)发生改变，使用户也无需进行操作而迅速地识别成为通信对方的用户成为可能。

另外，在利用语音识别时，不只限于唯一地识别通信对方，作为其它用途，为了得到用于搜索的关关键词而利用语音识别也是可以的。如此使用的话，基于通信对方对话的词汇，使搜索存储信息成为可能，能够容易地提取与对话有关系的信息。

通信终端通过存储支援语音识别的用语数据库，使提高语音识别的功能成为可能。

另外，语音识别不只限于通信对方，对本方终端的用户进行语音识别也是可以的。

另外，作为识别的声音信息，不只限于语音信息，环境声音也是可以的。比如，通过识别环境声音，能够得到通信对方位于什么样的地点、什么样的状况等的信息。比如，分类成在室内、在室外、使用车辆进行移动等情形，能够搜索对应于该情形的信息。另外，当通信对方位于特殊的地点时，比如通过识别出位于音乐会场内或位于能够听到有关铁道的声音的车站时，能够使进一步提取对应于通信对方的环境的信息成为可能。比如，位于能够听到瀑布的声音的地点时，使优先地提取有关瀑布的信息成为可能。另外，位于车站时，使优先地提取列车时刻表的信息成为可能。提取出的列车时刻表的信息能够发送给通信对方并显示。通过这样的结构，使容易地提取并提高给通信对方所需的信息成为可能。

另外，在上述说明虽然表示了通过语音信息来唯一地识别通信对方的例子，识别包含通信对方的感情的语音信息也是可以的。通过这样的处理，使提取对应于通信对方的感情的存储信息成为可能。

另外，在实施例3中，虽然说明了识别声音信息来获取有关通信对方的信息的例子，但是作为识别的信息，识别接收的来自通信对方的影像信息也是可以的。利用画像识别技术分析显示出来的通信对方的影像信息，由此提取个人的特征信息，并通过参照包含于用户信息中的个人的特征信息，使唯一地识别通信对方成为可能。

另外，在上述说明中，虽然表示了将通信对方的个人信息作为搜索关键信息来利用的例子，但是不只限于此，利用通信对方所摄像的风景信息等的信息也是可以的。比如，如果是建筑物的话，能够将建筑物的特征信息作为搜索信息来搜索相关联的信息。

另外，利用定点设备优先地对指定的图像信息进行图像识别也是可以的。通过这样的结构，使指定识别的对象而进行图像识别成为可能。比如，作为影像同时显示了多个人或同时显示了人和建筑物时，通过定点设备进行指定，使作为搜索关键信息的指定成为可能。

另外，如果将附随于影像的对象的属性信息一并接收的话，使该属性信息作为搜索信息来利用成为可能。属性信息是指，比如作为说明信息的附随于图像信息的人名或建筑物名称。进一步，使与通过定点设备指定的对象有关系的属性信息作为搜索来信息利用成为可能。

另外，促使用于限定检索的辅助指定也是可以的。比如，进行指定而优先地限定有关位置的信息，或者优先地限定有关数据的信息等。

(实施例4)

参照图12、图13来说明实施例4。实施例4为在通信终端201将利用通信对方信息提取的信息与通信终端202共有并显示的通信方法，关于该通信方法利用图12来说明。

在实施例4中，有关可视电话通信，与实施例1同样利用3G-324M协议进行通信。

通信终端201对通信终端202进行可视电话连接请求(步骤S1201)。

通信终端202进行连接许可应答(步骤S1202)。

进行用来进行可视电话的对话建立，开始可视电话过程(步骤S1203)。

如在实施例1中说明的那样，通信终端201获取唯一地确定通信对方的用户B的信息，基于该唯一地确定用户B的信息，将有关用户B的信息从通信终端201的信息存储单元103中提取出来。继而，通信终端201经由数据传输信道对通信终端202发送对所提取的图像的再现能力信息的确认请求(步骤S1204)。

在此，以作为再现能力信息，利用包含于静止图像的再现能力的分辨率信息的情况为例，说明以下的步骤。

通信终端202提取被确认请求的再现能力相关联的信息，将再现能力信息发送给通信终端201(步骤S1205)。

通信终端201参照获取的有关通信终端202的再现能力信息，对被搜索信息的静止图像根据需要进行变换处理，使其成为通信终端202能够再现的格式，并经由数据传输信道发送给通信终端202(步骤S1206)。

此时，在通信终端201以及通信终端202都显示被搜索信息的静止图像。

图13是表示实施例4的图像终端1300的结构的方框图。另外，在图13中，对于与图1具有相同结构的部分赋予相同的附图标记，并省略该说明。通信终端1300包括用于在步骤S1206实施的图像变换处理的图像变换单元1308。

在此说明变换成通过通信终端202能够再现的格式的处理。

具体而言，设当通信终端201提取出以CIF(Common Interface Format，通用中间格式)格式存储的图像数据时，对于通信对方的通信终端202的图像再现能力所进行的确认结果为通信终端202具有QCIF(1/4通用中间格式，Quarter CIF)格式为止的再现能力。此时，通信终端201所存储的CIF格式不能在通信终端202再现，通信终端201将该图像数据变换成通信终端202能够再现的QCIF格式的数据，并发送给通信对方终端202(步骤S1206)。

另外，此时在通信终端201，与通信对方同样地以QCIF格式的图像进行显示，但是也可以以原来的存储格式的CIF格式的图像数据进行显示。

如上所述，根据本实施例4，因为通信终端201将从通信对方的通信终端202获取的通信对方信息作为关键信息，搜索通信终端201中的存储信息并显示，并且在通信终端201和通信终端202共有信息，所以能够提供支援而使与通信对方的交流更加活跃，并且简化操作，即使对不习惯信息机器操作的上了年纪的人等，也能在简单地显示各种各样的图像信息的同时进行通话，从而能够促进温暖亲情的交流。

另外，在上述说明中，表示了作为静止图像的再现能力信息利用分辨率的例子，也可以不利用分辨率，只要是显示色彩等有关再现能力的信息什么都可以。

另外，在上述说明中，作为再现能力信息，虽然表示了关于静止图像的再现能力信息的例子，但是关于活动图像的信息也是可以的。

另外，再现能力信息不只限于关于图像的再现能力信息，有关声音再现能力信息、或者有关XML(Extensible Markup Language，可扩展标记语言)等的结构数据的再现能力信息也是可以的。

另外，在上述说明中，虽然说明了对应通信对方的再现能力信息而变换存储信息的例子，但是对应终端之间的通信状态来变换也是可以的。比如，当难以足够的取得用于数据传输的传输容量时，缩小数据大小而进行变换并发送。比如，对视频数据作为JPEG的静止图像进行数据压缩来发送也是可以的。

另外，在存储信息的搜索处理中，将通信对方的再现能力信息作为搜索条件来利用而进行搜索也是可以的。

(实施例5)

实施例5利用图14、15说明一种通信方法，该通信方法为在如图1所示的通信终端中，通过对接收的来自通信对方的图像信息或语音信息进行识别处理而获取有关通信对方的信息，并将该识别信息与接收的图像信息或语音信息相关联地存储的通信方法。

即，在图14中说明下面的例子，通信终端201和通信终端202进行通信，通信终端201在存储来自通信终端202的包含图像信息或语音信息的信息时，通过对接收的来自通信对方的图像信息或语音信息进行识别处理而获取有关通信对方的特征，并将获取的与通信对方相关联的信息与接收的图像信息或语音信息相关联地存储。

首先，在步骤S1401中，通信终端201与实施例1相同，在通过可视电话的通话过程中显示通信对方的图像。

接下来，通信终端201在步骤S1402中，进行用于记录从通信对方接收的图像信息或语音信息的记录命令的检测。

记录命令的检测是指，比如，通过软件键或硬件键的按下等的、来自用户的命令记录的键操作的检测。

在步骤S1402中，当检测出接收的图像信息或者语音信息的存储命令时，通信终端201在步骤S1403中，进行从通信对方接收的图像信息或者语音信息的识别处理来获取有关通信对方的信息。

接下来，通信终端201在步骤S1404中，将从通信对方接收的图像信息或者语音信息和有关通信对方的通信对方信息(属性信息)相关联地存储于信息存储单元103，该通信对方信息是根据通过步骤S1403的识别处理获取的特征信息的通信对方信息。

通信终端201的信息存储单元103中一并存储着图像信息和与该图像信息有关系的人的特征信息。另外，设在个人的特征信息中包含关于声音的特征信息。

接下来，说明关于在步骤S1403的识别处理的，识别接收的影像而得到有关通信对方的个人的信息的例子。

通信终端201将识别多个用户的识别信息和分别与该识别信息对应的个人的特征信息相关联地存储于信息存储单元103。比如，与用户信息的地址名册的电话号码相关联地存储每个用户的面部图像的特征信息或声音的特征。

经通信终端201的影像的识别处理为，比较特征信息而进行唯一地确定通信对方的个人的识别处理，该比较的对象为：对经由视频信道接收的影像信息进行分析而得到的个人的特征信息，以及包含于存储于信息存储单元103的用户信息的各个用户的特征信息。

如上所述，根据本实施例5，通过对从通信对方接收的图像信息或语音信息进行识别处理而获取有关通信对方的特征，并将获取的有关通信对方的特征与接收的图像信息或语音信息相关联地存储，所以能够参照与通信对方相关联的信息来搜索接收信息，即使搜索的信息量较多也能容易地提取所需求的信息。

另外，本实施例5中，虽然表示了作为图像识别将有关个人的信息通过图像识别来提取的例子，但是不只限于此，提取与风景相关联的信息也是可以的。比如，在对从通信对方的通信终端接收的图像信息进行图像识别时，提取作为风景的特征的信息，比如与建筑物相关联的信息，与接收图像信息组合，存储该特征信息。此时，在搜索存储信息时，利用存储的特征信息，使搜索存储的信息成为可能。比如，通过比较而使提供被判断为具有更深关系的信息成为可能，该比较的对象为：对来自通信对方的影像信息的风景信息进行图像识别而得到的特征信息，以及存储于信息存储单元的与风景有关系的特征信息。另外，将建筑物的特征信息作为搜索条件，能够搜索具有关系更深的特征信息的存储信息。

另外，通信终端100通过定点设备来指定显示出来的对方影像屏幕的位置，优先地对指定的部分的图像信息进行图像识别也是可以的。

通过这样的结构，使指定识别的对象而进行图像识别成为可能。比如，作为影像同时显示了多个人或同时显示了人和建筑物时，通过定点设备进行指定，使指定优先的识别对象成为可能，在存储接收的图像信息时，使指定一并存储的特征信息成为可能。

另外，从通信对方获取属性信息并且一同存储也是可以的，该属性信息为与对应于通过定点设备指定的对方影像的位置的影像对象有关系的属性信息。通过这样的结构，能够将与通过定点设备指定的对象有关系的属性信息作为搜索条件，用于存储信息的搜索。

接下来，参照图15说明通过识别通信对方的声音来获取通信对方的信息，基于获取的关键信息来搜索存储的信息的例子。

通信终端201此时也将识别多个用户的识别信息和有关分别与该识别信息对应的个人图形的特征信息有关系地存储于信息存储单元103。比如，与用户信息的地址名册的电话号码相关联地存储每个用户的声音的特征。

经通信终端201的语音的识别处理为，比较特征信息而进行唯一地确定通信对方的个人的识别处理，该比较的对象为：从经由声音信道接收的声音信息中，分离语音信息，并对该分离出的语音信息进行分析而得到的个人的声音的特征信息，以及包含于存储于信息存储单元103的用户信息的各个用户的声音的特征信息。

具体的顺序如以下所示。

首先，通信终端201对通信终端202进行通过可视电话的连接请求，当接收来自通信终端202的承诺应答时，通过利用H.223复用的3G-324M协议，进行可视电话通信(步骤S1501)。

利用视频信道，进行影像的接收/发送，通过输出单元107显示对方的影像(步骤S1502)。另外，经由声音信道进行对话。

通信终端201的通信对方信息获取单元104在利用声音信道的对话中，提取对方的语音信息(步骤S1503)，而且，通信对方信息获取单元104对提取出的对方的语音信息进行分析，通过参照存储于信息存储单元103的保存着语音特征的语音数据库，从而唯一地确定通信对方(步骤S1504)。

通信终端201的存储信息搜索单元105基于确定下来的通信对方信息，搜索存储于信息存储单元103的存储信息，提取有关通信对方的用户B的信息(步骤S1505)。

通信终端201的信息再现处理单元106通过输出单元107，显示提取出来的与用户B有关系的信息的图像信息(步骤S1506)。

不言而喻的是这些步骤连续地自动实施。

另外，设置控制进行语音识别的定时的用户接口也是可以的。比如，为了控制进行语音识别的定时，设置软件键/硬件键，当按下预先决定好了的键时，进行语音识别。另外，对于控制进行语音识别的定时，在通信过程中，以预先决定好了的任意定时随时进行也是可以的。

当随时进行语音识别时，在通信对方的终端，即使对象用户(使用终端的用户)发生改变，用户也无需进行操作，使迅速地再次识别成为通信对方的用户成为可能。

另外，通信终端通过存储支援语音识别的用语数据库，使提高语音识别的功能成为可能。

另外，语音识别不只限于从通信对方接收的语音，对本方终端的用户进行语音识别也是可以的。

另外，作为识别的声音信息，不只限于语音信息，环境声音也是可以的。比如，通过识别环境声音，得到通信对方位于什么样的地点、什么样的状况等的信息。比如，分类成在室内、在室外、使用车辆进行移动等情形，能够将该信息作为特征信息一并存储。另外，能够识别通信对方位于特殊的地点，比如位于音乐会场内或位于能够听到有关铁道的声音的车站。通过这样构成，在以后进行的搜索时，使容易地提取同样的状况的信息成为可能。

本说明书根据2004年9月9日申请的特愿2004-262217号以及2004年9月16日申请的特愿2004-270409号。其内容都包含于此。

工业实用性

本发明特别适用于移动电话，移动信息终端(PDA：Personal DigitalAssistant，个人数字助理)，笔记本型个人电脑，通过无线LAN或有线LAN构筑的网络上的个人电脑等的通信终端和该通信终端的通信方法。

Claims

1.一种通信终端，包括：

关键信息获取单元，从通信对方获取关键信息；

搜索单元，基于从所述通信对方获取的所述关键信息，搜索存储于存储器中的存储信息，并且获取与所述关键信息相关联的信息；以及

信息显示单元，显示作为由所述搜索单元进行的搜索的结果而得到的所述信息。

2.如权利要求1所述的通信终端，其中，所述信息显示单元通过缩略图格式来显示所述信息。

3.如权利要求1所述的通信终端，其中，所述关键信息获取单元从在与所述通信对方进行通信的过程中接收的信息中，提取声音信息或者图像信息，从提取的声音信息或者图像信息中获取所述关键信息。

4.如权利要求1所述的通信终端，其中还包括信息存储处理单元，将所述存储信息存储于所述存储器，所述存储信息表示经由网络接收的内容或者邮件信息。

5.如权利要求1所述的通信终端，其中还包括关键信息选择单元，选择所述关键信息并且向所述通信对方发出请求，其中所述关键信息获取单元获取由所述关键信息选择单元请求的所述关键信息。

6.如权利要求1所述的通信终端，还包括：

通信对方信息获取单元，从所述通信对方获取与包含图像信息的接收信息相关联的通信对方信息；以及

信息存储处理单元，对于从所述通信对方接收的所述包含图像信息的接收信息和由所述通信对方信息获取单元获取的所述通信对方信息进行相关操作，并且将相关后的信息存储于所述存储器。

7.如权利要求6所述的通信终端，其中，当检测到用于存储所述包含图像信息的接收信息的命令时，所述通信对方信息获取部分获取所述通信对方信息。

8.如权利要求6所述的通信终端，其中，所述通信对方信息获取单元识别由定点设备指定的区域的图像。

9.一种通信终端，包括：

关键信息获取单元，从通信对方获取关键信息；

信息提供单元，将作为由所述搜索单元的搜索的结果而得到的所述信息发送给所述通信对方。

10.如权利要求9所述的通信终端，还包括：

变换单元，根据所述通信对方的再现信息的能力或者与所述通信对方进行通信的状况，将作为由所述搜索单元的搜索的结果而得到的所述信息变换为预定的格式，

其中，所述信息提供单元将由所述变换单元变换的所述信息发送给所述通信对方。

11.一种通信方法，包括：

关键信息获取步骤，从通信对方获取关键信息；

搜索步骤，基于从所述通信对方获取的所述关键信息，搜索存储于存储器中的存储信息，并且获取与所述关键信息相关联的信息；以及

信息显示步骤，显示作为在所述搜索步骤中的搜索的结果而得到的所述信息。

12.如权利要求11所述的通信方法，其中，所述信息显示步骤通过缩略图格式来显示所述信息。

13.如权利要求11所述的通信方法，其中，所述关键信息获取步骤从在与所述通信对方进行通信的过程中接收的信息中，提取声音信息或者图像信息，并且从提取的声音信息或者图像信息中获取所述关键信息。

14.如权利要求11所述的通信方法，包括信息存储处理步骤，将所述存储信息存储于所述存储器，所述存储信息表示经由网络接收的内容或者邮件信息。

15.如权利要求1所述的通信方法，还包括关键信息选择步骤，选择所述关键信息并且向所述通信对方发出请求，其中所述关键信息获取步骤获取由所述关键信息选择步骤请求的所述关键信息。

16.如权利要求11所述的通信方法，还包括：

通信对方信息获取步骤，从通信对方获取与包含图像信息的接收信息相关联的通信对方信息；以及

信息存储处理步骤，对于从所述通信对方接收的所述包含图像信息的接收信息和由所述通信对方信息获取步骤获取的所述通信对方信息进行相关操作，并且将相关后的信息存储于所述存储器。

17.如权利要求11所述的通信方法，其中，当检测到用于存储所述包含图像信息的接收信息的命令时，所述通信对方信息获取步骤获取所述通信对方信息。

18.如权利要求11所述的通信方法，其中，所述通信对方信息获取步骤识别由定点设备指定的区域的图像。

19.一种通信方法，包括：

关键信息获取步骤，从通信对方获取关键信息；

信息提供步骤，将作为所述搜索步骤的搜索的结果而得到的所述信息发送给所述通信对方。

20.如权利要求19所述的通信方法，其中还包括变换步骤，根据所述通信对方的信息再现的能力、或者与所述通信对方进行通信的状况，将作为在所述搜索步骤中的搜索的结果而得到的所述信息变换为预定的格式，其中，所述信息提供步骤将由所述变换步骤变换的所述信息发送给所述通信对方。