JP4378250B2 - テレビ電話機及びプログラム - Google Patents

Description

本発明は、テレビ電話機及びプログラムに関する。特に、本発明は、音声及び画像を送受信するテレビ電話機及びプログラムに関する。

近年、ＩＭＴ−２０００等の各種の高速無線規格による通信性能の飛躍的な向上や、エラー耐性に優れ圧縮効率が高いＭＰＥＧ−４の採用により、無線通信で動画像を転送することが可能となった。そのうえ、携帯電話機用として、実装面積及び消費電力が小さく携帯電話機に必要な機能をすべて搭載したＬＳＩが開発され、携帯電話機のコンパクトさを維持したまま、カメラ及び液晶画面を備えることにより通話相手の顔をリアルタイムで見ながら通話することができるテレビ電話機能が携帯電話機で実現されている（例えば、非特許文献１参照。）。
インターネット＜ＵＲＬ：http://foma.nttdocomo.co.jp/＞

従来の固定電話は、常に所定の場所に固定されて使用されるため、テレビ電話機能を利用する場合であっても、通話相手に見られてもよい場所に予め設置しておくことで、通話相手に見られたくないものが背景に写り込む心配がなかった。しかしながら、携帯電話機は、時及び場所を問わず通話ができるというメリットがある反面、テレビ電話機能を利用した場合には、通話相手に見られたくないものが背景に写り込む心配がある。例えば、散らかっている部屋にいるときに電話がかってきたときや、旅行先で遊んでいるときに顧客から電話がかってきたときには、自分の姿を通話相手に見せたくないことがある。このように、携帯電話機でテレビ電話機能を利用する場合には、自分の周囲の状況を常に気にしながら通話しなければならないという課題がある。

そこで本発明は、上記の課題を解決することができるテレビ電話機及びプログラムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。

即ち、本発明の第１の形態によると、音声及び画像を送受信するテレビ電話機であって、テレビ電話機を用いて通話すべき通話者を撮像する撮像部と、テレビ電話機が着信した場合に、撮像部により撮像された通話者の画像を通話を開始する前に表示する表示部と、通話が行われている状態において、撮像部が撮像する画像を、通話者の音声とともに、通話の相手のテレビ電話機へ送信する送信部とを備える。

また、表示部が通話者の画像を表示している状態において、撮像部に撮像された画像を送信せずに音声の通話のみを行うか、画像を送信しつつ通話を行うかを選択する選択部を更に備えてもよい。テレビ電話機は、携帯電話機であってもよい。

また、テレビ電話機は、表示部を内側にして折り畳み可能であり、折り畳まれた状態にあるテレビ電話機が着信した場合、テレビ電話機が折り畳まれた状態から開かれるのに応じて、表示部は、撮像部により撮像された通話者の画像を表示してもよい。

また、着信の相手が、画像を伴わない音声を送受信する音声電話機、又はテレビ電話機のいずれであるかを識別する着信相手識別部を更に備え、着信の相手がテレビ電話であると着信相手識別部が識別した場合に、表示部は、通話が行われていない状態において、撮像部により撮像された通話者の画像を表示してもよい。

また、着信の相手を識別する着信相手識別部を更に備え、送信部は、着信相手が予め登録された相手であることを条件に、撮像部が撮像する画像を通話の相手のテレビ電話機へ送信してもよい。

テレビ電話の着信時の時刻を確認する時計部を更に備え、送信部は、着信時の時刻が予め登録された時間帯であることを条件に、撮像部が撮像する画像を通話の相手のテレビ電話機へ送信してもよい。

テレビ電話機の現在位置を測定する位置測定部を更に備え、送信部は、着信時の現在位置が予め登録されたエリア内であることを条件に、撮像部が撮像する画像を通話の相手のテレビ電話機へ送信してもよい。

撮像部が撮像する画像を認識する画像認識部を更に備え、送信部は、撮像部が撮像する画像に予め登録された画像が含まれると画像認識部によって認識されたことを条件に、撮像部が撮像する画像を通話の相手のテレビ電話機へ送信してもよい。

また、テレビ電話機は、撮像部により撮像された画像から、通話者の画像を抽出する画像抽出部と、通話者の画像と合成すべき背景の画像を格納する背景格納部と、画像抽出部により抽出された通話者の画像と、背景格納部に格納されている背景の画像とを合成した合成画像を生成する画像合成部とを更に備え、表示部は、通話を開始する前に合成画像を表示し、送信部は、通話が行われている状態において相手のテレビ電話機に合成画像を送信してもよい。

着信の相手を識別する着信相手識別部を更に備え、画像合成部は、着信相手が予め登録された相手である場合に、合成画像を生成してもよい。

テレビ電話の着信時の時刻を確認する時計部を更に備え、画像合成部は、着信時の時刻が予め登録された時間帯である場合に、合成画像を生成してもよい。

テレビ電話機の現在位置を測定する位置測定部を更に備え、画像合成部は、着信時の現在位置が予め登録されたエリア内である場合に、合成画像を生成してもよい。

撮像部が撮像する画像を認識する画像認識部を更に備え、画像合成部は、撮像部が撮像する画像に予め登録された画像が含まれると画像認識部によって認識された場合に、合成画像を生成してもよい。

本発明の第２の形態によると、音声及び画像を送受信するテレビ電話機を機能させるプログラムは、電話機を、テレビ電話機を用いて通話すべき通話者を撮像する撮像部と、テレビ電話を着信した場合に、撮像部により撮像された通話者の画像を通話を開始する前に表示する表示部と、通話が行われている状態において、撮像部が撮像する画像を、通話者の音声とともに、通話の相手のテレビ電話機へ送信する送信部として機能させる。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、本発明の一実施形態の係る携帯電話機１００の使用状況の一例を示す。携帯電話機１００は、音声及び画像を送受信するテレビ電話機の一例である。また、ユーザ１０２は、携帯電話機１００を用いて通話すべき通話者である。

携帯電話機１００は、他の携帯電話１０４からの着信があった場合、ユーザ１０２を撮像して、通話開始以前に、ユーザ１０２の画像を、携帯電話機１００のディスプレイに表示する。そのため、ユーザ１０２は、ディスプレイに写された自分の姿を確認したうえで、携帯電話１０４からの着信に応答すべきか否かを判断することができる。例えば、ユーザ１０２の寝起きに、携帯電話１０４から着信があった場合、ユーザ１０２は、自分の姿を、携帯電話１０４のユーザ１０６に見せたくないと考える場合がある。この場合、ユーザ１０２は、着信に応答しないことにより、自分の姿がユーザ１０６に見られるのを防ぐことができる。

ここで、例えば自分の姿が相手にどう写るか不安な場合には、ユーザ１０２は、自分の画像を送らずに、音声のみにより通話を開始することも考えられる。しかし、この場合、例えば画像を送らない理由をユーザ１０６に問われる等の不都合が生じる場合もある。

しかし、本例によれば、自分の姿を確認したうえで通話を開始するか否かを判断できるため、安心してテレビ電話の通話を開始することができる。そのため、本例によれば、テレビ電話の通話を、適切に行うことができる。

尚、本例において、携帯電話機１００は、ディスプレイを内側にして折り畳み可能である。折り畳まれた状態にある携帯電話機１００が着信した場合、携帯電話機１００が折り畳まれた状態から開かれるのに応じて、ディスプレイは、ユーザ１０２の画像を表示する。そのため、例えばユーザ１０２が携帯電話機１００から離れた場所にいる場合、携帯電話機１００は、ユーザ１０２の画像を表示するのを省略することができる。また、これにより、携帯電話機１００の電力消費を低減することができる。

図２は、携帯電話機１００の機能構成の第１実施例を示す。本例において、携帯電話機１００は、操作受付部２１２、送受信部２０６、着信相手識別部２０４、撮像部２０２、及び表示部２０８を備える。操作受付部２１２は、例えば携帯電話機１００のキーボードの対するユーザ１０２によるボタン操作等により、ユーザ１０２の指示を受付ける。例えば、操作受付部２１２は、ユーザ１０２による所定のボタン操作により、通話を開始するためのオンフック動作の指示を受付ける。また、本例において、操作受付部２１２は、ユーザ１０２による、折り畳まれた状態にある携帯電話機１００を開く操作を検知する。

送受信部２０６は、他の携帯電話１０４との間で、例えば基地局を介して、信号を送受信する。そして、例えば、携帯電話機１００がテレビ電話として携帯電話１０４と通話を行う場合、通話が開始された後に、送受信部２０６は、音声信号及び画像信号を送受信する。この場合、送受信部２０６は、例えば携帯電話機１００のマイクから受け取った音声信号を、相手の携帯電話１０４に送信する。また、送受信部２０６は、携帯電話１０４から受け取る音声信号に応じて、携帯電話機１００のスピーカを駆動する。

また、送受信部２０６は、撮像部２０２により撮像されたユーザ１０２の画像に基づく画像信号を、携帯電話１０４に送信する。送受信部２０６は、携帯電話１０４から受信した画像信号に基づく画像を、表示部２０８に供給する。画像を伴わない音声を送受信する音声電話機として携帯電話機１００が通話を行う場合、送受信部２０６は、音声信号を送受信する。

着信相手識別部２０４は、着信の相手が音声電話機又はテレビ電話機のいずれであるかを、例えば携帯電話網を提供するキャリアによって規定された通信プロトコルに基づいて、識別する。

撮像部２０２は、例えば携帯電話機１００に組み込まれたカメラモジュールであり、ユーザ１０２を撮像する。撮像部２０２は、携帯電話機１００を用いて通話すべき通話者を撮像してよい。携帯電話機１００が着信した後、通話が開始される以前において、撮像部２０２は、撮像したユーザ１０２の画像を、表示部２０８に供給する。また、通話が開始された後、撮像部２０２は、撮像したユーザ１０２の画像を、送受信部２０６に供給する。撮像部２０２は、ユーザ１０２の画像として、ユーザ１０２を写した動画像を生成してよい。

表示部２０８は、携帯電話機１００のディスプレイである。携帯電話機１００が着信した後、通話が開始される以前において、表示部２０８は、撮像部２０２により撮像されたユーザ１０２の画像を、例えば着信表示とともに、表示する。表示部２０８は、通話が行われていない状態において、ユーザ１０２の画像を表示してよい。また、通話が開始された後において、表示部２０８は、携帯電話１０４から受け取る画像信号に基づく画像を表示する。この場合、表示部２０８は、携帯電話１０４のユーザ１０６の画像を表示してよい。そのため、本例によれば、テレビ電話の通話を、適切に行うことができる。

尚、着信後、通話開始以前において、表示部２０８は、着信の相手がテレビ電話であると着信相手識別部２０４が識別した場合に、ユーザ１０２の画像を表示してよい。これにより、必要のない場合にユーザ１０２の画像を表示するのを省略し、携帯電話機１００の電力消費を低減することができる。

また、本例において、操作受付部２１２は、テレビ電話機又は音声電話機のいずれとして携帯電話１０４と通話するかを、例えばユーザの指示に応じて、選択する。例えば、表示部２０８がユーザ１０２の画像を表示している状態において、操作受付部２１２は、撮像部２０２に撮像された画像を送信せずに音声の通話のみを行うか、当該画像を送信しつつ通話を行うかを選択する。操作受付部２１２は、選択部の一例である。

図３は、図２に示す携帯電話機１００の動作例を示すフローチャートである。着信があるまでの間、携帯電話機１００は待機している（Ｓ１０２ Ｎｏ）。そして、携帯電話機１００に着信があった場合（Ｓ１０２ Ｙｅｓ）、着信相手識別部２０４は、着信の相手がテレビ電話機であるか否かを識別する（Ｓ１０４）。そして、相手がテレビ電話機である場合（Ｓ１０４ Ｙｅｓ）、携帯電話機１００が折り畳まれておらず、表示部２０８がユーザ１０２から見える状態にあれば（Ｓ１０６ Ｙｅｓ）、表示部２０８は、撮像部２０２により撮像されたユーザ１０２の画像を表示する（Ｓ１０８）。そして、操作受付部２１２がユーザ１０２から通話を開始する指示を受付けると（Ｓ１１０ Ｙｅｓ）、携帯電話機１００は、テレビ電話機として、着信相手との通話を開始する。この場合、送受信部２０６は、通話が開始された後において、撮像部２０２が撮像する画像を、ユーザ１０２の音声とともに、通話の相手のテレビ電話機である携帯電話１０４へ送信する。送受信部２０６は、携帯電話１０４との間で通話が行われている状態において、撮像部２０２が撮像する画像を、携帯電話１０４に画像を送信してよい。

ここで、Ｓ１０４において、着信の相手がテレビ電話機ではないと識別された場合（Ｓ１０４ Ｎｏ）、操作受付部２１２が受付ける通話開始の指示に応じて（Ｓ１１４ Ｙｅｓ）、携帯電話機１００は、画像を送受信しない音声電話機として、着信相手との通話を開始する。

尚、着信した後において、携帯電話機１００が折り畳まれている場合には（Ｓ１０６ Ｎｏ）、携帯電話機１００が開かれるまでの間、表示部２０８は、ユーザ１０２の画像を表示しない。また、Ｓ１１０、及びＳ１１４において、通話開始の指示を操作受付部２１２が受付けない場合、携帯電話機１００は、通話を開始しない。この場合、例えばこの着信の呼び出しが終了するのを待って、携帯電話機１００は、Ｓ１０２に戻って、次の着信を待つ。また、Ｓ１１２、及びＳ１１６における通話の終了した後、携帯電話機１００は、Ｓ１０２に戻って、次の着信を待つ。本例によれば、テレビ電話の通話を、適切に行うことができる。

図４は、携帯電話機１００の機能構成の第２実施例を示す。本例の携帯電話機１００は、撮像部２０２により撮像される画像の背景を、例えばユーザ１０２の指示に応じて置換して、他の携帯電話１０４に送信する。携帯電話機１００は、図２を用いて説明した携帯電話機１００の構成に加え、画像抽出部２２０、画像合成部２２４、及び背景格納部２２６を更に備える。尚、以下に説明する点を除き、図４において、図２と同じ符号を付した構成は、図２における構成と同一又は同様の機能を有するため説明を省略する。

本例において、操作受付部２１２は、撮像部２０２により撮像された画像の背景を置換するか否かを示す指示を、ユーザ１０２から受け取る。画像抽出部２２０は、例えば被写体のエッジに基づいて特定の被写体を抽出する周知の技術により、撮像部２０２により撮像された画像から、ユーザ１０２の画像を抽出する。画像抽出部２２０は、背景を置換する指示を操作受付部２１２が受付けている場合に、ユーザ１０２の画像を抽出してよい。画像抽出部２２０は、撮像部２０２により撮像される動画の各フレームから、ユーザ１０２の画像を抽出してよい。

背景格納部２２６は、ユーザ１０２の画像と合成すべき背景の画像を格納する。背景格納部２２６は、例えばユーザの指示により選択されるべき複数の背景の画像を格納してよい。画像合成部２２４は、画像抽出部２２０により抽出されたユーザ１０２の画像と、背景格納部２２６に格納されている背景の画像とを合成した合成画像を生成する。画像合成部２２４は、背景を置換する指示を操作受付部２１２が受付けている場合に、合成画像を生成してよい。画像合成部２２４は、背景格納部２２６に格納されている画像から、一の背景の画像を選択して、ユーザ１０２の画像と合成してよい。画像合成部２２４は、撮像部２０２により順次撮像される動画のそれぞれのフレームに対して、合成画像を生成してよい。

表示部２０８は、着信後、通話が開始される以前において、操作受付部２１２が受け取るユーザ１０２の指示に応じて、撮像部２０２により撮像されたそのままの画像、又は画像合成部２２４により合成された合成画像のいずれかを表示する。例えば、背景を置換する指示を操作受付部２１２が受付けている場合、通話が開始される以前において、表示部２０８は、合成画像を表示する。表示部２０８は、通話が行われていない状態において、合成画像を表示してよい。

また、送受信部２０６は、通話が開始された後、操作受付部２１２が受け取るユーザ１０２の指示に応じて、撮像部２０２により撮像されたそのままの画像、又は画像合成部２２４により合成された合成画像のいずれかを、相手の携帯電話１０４に送信する。例えば、背景を置換する指示を操作受付部２１２が受付けている場合、通話が開始された後において、送受信部２０６は、携帯電話１０４へ、合成画像を送信する。送受信部２０６は、携帯電話１０４との間で通話が行われている状態において、合成画像を送信してよい。本例によれば、背景を置換した画像を送受信する場合においても、相手の携帯電話１０４に写る自分の姿を事前に確認することができる。

図５は、図４に示した携帯電話機１００の動作例を示す図である。本例において、撮像部２０２は、携帯電話機１００の着信に応じて、画像３００を撮像する。そして、背景を置換する指示を操作受付部２１２が受付けている場合、画像抽出部２２０は、画像３００から、ユーザ１０２の画像３０２を抽出する。そして、画像合成部２２４は、画像３０２を、背景格納部２２６に格納されている画像３０４と合成して、合成画像３０６を生成する。本例によれば、撮像部２０２に撮像された背景を適切に置換することができる。

図６は、携帯電話機１００の機能構成の第３実施例を示す。本実施例の携帯電話機１００は、テレビ電話の着信時に、撮像部２０２が撮像する画像、通話相手、時間帯、及び場所のうち少なくともいずれかが所定の条件を満たした場合、ユーザのリアルタイム画像の送信を制限する。本実施例の携帯電話機１００は、図４に示した第２実施例に加えて、画像認識部２３０、位置測定部２４０、及び時計部２５０を備える。以下、前述の実施例と同様の構成には同一の符号を付して説明を省略する。

本実施例の着信相手識別部２０４は、着信の相手を識別する。着信相手識別部２０４は、着信時に送受信部２０６から通知される相手の電話番号で着信相手を識別する。送受信部２０６は、着信相手を識別する情報を着信相手識別部２０４から取得する。そして着信相手が予め登録された相手であることを条件に、撮像部２０２が撮像する画像を通話の相手のテレビ電話機へ送信する。これにより、ユーザのリアルタイム画像を相手の電話に送るか否かを着信相手に応じて予め設定できる。

時計部２５０は、テレビ電話の着信時の時刻を確認する。送受信部２０６は、テレビ電話の着信時に現在時刻を時計部２５０から取得する。そして着信時刻が予め登録された時間帯であることを条件に、撮像部２０２が撮像する画像を通話の相手のテレビ電話機へ送信する。これにより、ユーザのリアルタイム画像を相手の電話に送るか否かを着信時間に応じて予め設定できる。

また、位置測定部２４０は、携帯電話機１００の現在位置を測定する。送受信部２０６は、テレビ電話の着信時に現在位置を位置測定部２４０から取得する。そして着信時の現在位置が予め登録されたエリア内であることを条件に、撮像部２０２が撮像する画像を通話の相手のテレビ電話機へ送信する。これにより、ユーザのリアルタイム画像を相手の電話に送るか否かを着信時の位置に応じて予め設定できる。

また、画像認識部２３０は、撮像部２０２が撮像する画像を認識し、予め登録された画像が含まれるか否かを判断する。送受信部２０６は、撮像部２０２が撮像する画像に予め登録された画像が含まれると画像認識部２３０によって判断されたことを条件に、撮像部２０２が撮像する画像を通話の相手のテレビ電話機へ送信する。これにより、撮像部２０２が撮像するユーザのリアルタイム画像を相手の電話に送るか否かを、予め設定する画像の条件に応じて携帯電話機１００が自律的に判断することができる。

また、本実施例の携帯電話機１００は、テレビ電話の着信時に、着信時刻、現在位置、着信相手、または着信時の身だしなみのいずれが事前に設定された条件を満たした場合に、図５で生成した背景画像を生成することもできる。ユーザは、前述の動作と以下に説明する動作のいずれを携帯電話機１００に実行させるかを予め選択する。

画像合成部２２４は、テレビ電話の着信時に着信相手を識別する情報を着信相手識別部２０４から取得する。そして、着信相手が予め登録された相手である場合に、前述の合成画像を生成する。合成画像の生成方法は図５を用いて説明した方法と同様なので説明を省略する。また、画像合成部２２４は、テレビ電話の着信時に現在時刻を時計部２５０から取得する。そして、着信時の時刻が予め登録された時間帯である場合に、合成画像を生成する。また、画像合成部２２４は、テレビ電話の着信時に現在位置を位置測定部２４０から取得する。そして、着信時の現在位置が予め登録されたエリア内である場合に、合成画像を生成する。また、画像合成部２２４は、テレビ電話の着信時に、撮像部２０２が撮像する画像に予め登録された画像が含まれるか否かを画像認識部２３０に問い合わせる。そして、予め登録された画像が撮像部２０２が撮像する画像に含まれるとの返答を画像認識部２３０から取得した場合に、合成画像を生成する。

図７は、本実施例の携帯電話機１００の動作例を示す。まず撮像部２０２は、携帯電話機１００の着信（Ｓ２００）に応じて、ユーザ１０２を撮像する。次に画像合成部２２４は、テレビ電話の着信時に現在時刻を時計部２５０から取得する。そして着信時の時刻が予め登録された制限時間帯であるか否かを判断する（Ｓ２０２）。着信時刻が制限時間帯でない場合（Ｓ２０２ Ｎｏ）、画像合成部２２４は現在位置を位置測定部２４０から取得する。そして現在位置が予め登録された制限エリア内であるか否かを判断する（Ｓ２０４）。現在位置が制限エリア内でない場合（Ｓ２０４ Ｎｏ）、画像合成部２２４は着信相手を識別する情報を着信相手識別部２０４から取得する。そして着信相手が予め登録された制限相手であるか否かを判断する（Ｓ２０６）。着信相手が制限相手でない場合（Ｓ２０６ Ｎｏ）、画像合成部２２４は、予め登録された制限身だしなみ画像が撮像部２０２の画像に含まれるか否かを画像認識部２３０に問い合わせる（Ｓ２０８）。

制限身だしなみ画像とは、相手の端末に送信することが不適切な格好の画像である。例えば、パジャマの色柄や肌の露出面積の割合が多い画像など、ユーザが相手の端末に送信したくない画像の特徴を制限身だしなみ画像の条件として予め背景格納部２２６に登録しておく。画像合成部２２４は、ユーザが口紅を付けていない場合に合成画像を生成してもよい。例えば、撮像部２０２に写るユーザの唇の色が、口紅をしていない場合の標準的な唇の色の範囲に含まれる場合、画像認識部２３０はユーザが口紅をしていないと判断する。あるいは、ユーザは、口紅をしていない場合の自分の唇の色を画像認識部２３０に登録してもよい。この場合、画像認識部２３０は、撮像部２０２に写るユーザの唇の色が、予め登録した唇の色と一致する場合にユーザが口紅をしていないと判断する。

画像合成部２２４は、ユーザがネクタイを着用してない場合に合成画像を生成してもよい。例えば、画像認識部２３０は、撮像部２０２に写るユーザの画像において首の下にシャツの襟を認識し、認識した襟の下にネクタイの結び目が存在するかを認識する。画像認識部２３０は、ネクタイの結び目として略逆三角形のパターンを探してもよい。

撮像部２０２の画像に制限身だしなみ画像が含まれない場合（Ｓ２０８ Ｎｏ）、操作受付部２１２は、テレビ電話の通話を開始するか否かの選択を受け付ける（Ｓ２１８）。操作受付部２１２がテレビ電話の通話を開始する旨の選択を受け付けると（Ｓ２１８ Ｙｅｓ）、送受信部２０６は、撮像部２０２で撮影するリアルタイム画像及びユーザの音声データを相手の端末に送信してテレビ電話を開始する（Ｓ２２０）。一方、ステップ２１８においてテレビ電話の通話を開始しない旨の選択を受け付けると（Ｓ２１８ Ｎｏ）、操作受付部２１２は、音声通話を開始するか否かの選択を受け付ける（Ｓ２２２）。操作受付部２１２が音声通話を開始する旨の選択を受け付けると（Ｓ２２２ Ｙｅｓ）、送受信部２０６は音声通話を開始する（Ｓ２２４）。一方、操作受付部２１２が音声通話を開始しない旨の選択を受け付けると（Ｓ２２２ Ｎｏ）、本フローは終了する。

画像合成部２２４は、着信時刻が制限時間帯である場合（Ｓ２０２ Ｙｅｓ）、現在位置が制限エリア内である場合（Ｓ２０４ Ｙｅｓ）、着信相手が制限相手である場合（Ｓ２０６ Ｙｅｓ）、又は撮像部２０２の画像に制限身だしなみ画像が含まれる場合（Ｓ２０８ Ｙｅｓ）、背景画像を差し替えるか否かをユーザに問い合わせる（Ｓ２１０）。背景画像を差し替えない旨の選択が入力された場合（Ｓ２１０ Ｎｏ）、前述のステップ２１８に進む。背景画像を差し替える旨の選択が入力された場合（Ｓ２１０ Ｙｅｓ）、画像合成部２２４は、図５で説明したように合成画像を生成する（Ｓ２１２）。この場合、ユーザの画像に合成する背景の画像は、着信相手、現在位置、現在時刻、及び撮像部２０２が撮像するユーザの身だしなみのいずれかに応じて画像合成部２２４が選択してもよい。

表示部２０８は、画像合成部２２４が生成した合成画像を表示し、当該合成画像を相手の携帯電話に送信するか否かをユーザに問い合わせる（Ｓ２１４）。合成画像を相手の携帯電話に送信しないとの選択を受け付けた場合（Ｓ２１４ Ｎｏ）、前述のステップ２２２に進む。一方、合成画像を相手の携帯電話に送信するとの選択を受け付けた場合（Ｓ２１４ Ｙｅｓ）、送受信部２０６は当該合成画像と音声データを相手の携帯電話に送信して通話を開始する（Ｓ２１６）。ステップ２２０で開始されたＴＶ電話、ステップ２２４で開始された音声通話、及びステップ２１６で開始された合成画像による通話に続けて、操作受付部２１２は、通話を終了するか否かの入力を受け付ける（Ｓ２２６）。通話を終了する選択が入力された場合（Ｓ２２６ Ｙｅｓ）、送受信部２０６は通話を終了する（Ｓ２２８）。以上で本フローを終了する。

以上のフローによれば、携帯電話機１００は、テレビ電話を着信した場合に、着信時刻、現在位置、着信相手、または着信時の身だしなみのいずれが事前に設定された条件を満たした場合に、背景画像を差し替えるか否かを自律的にユーザに問い合わせる。従ってユーザは背景画像を差し替えたい場合に、面倒な入力を行うことなく即座に合成画像を生成させることができる。そして当該合成画像を相手の端末に送信しながら即座に通話を開始することができる。

図８は、本実施形態に係る携帯電話機１００のハードウェア構成の一例を示す。携帯電話機１００は、ホストコントローラ１０８２により相互に接続されるＣＰＵ１０００、ＲＡＭ１０２０、グラフィックコントローラ１０７５、及び表示部２０８の一例である表示装置１０８０を有するＣＰＵ周辺部と、入出力コントローラ１０８４によりホストコントローラ１０８２に接続される通信インターフェイス１０３０及びＲＯＭ１０１０を有する入出力部とを備える。なお、通信インターフェイス１０３０は、送受信部２０６の一例であり、表示装置１０８０は、表示部２０８の一例である。

ホストコントローラ１０８２は、高い転送レートでＲＡＭ１０２０をアクセスするＣＰＵ１０００及びグラフィックコントローラ１０７５をＲＡＭ１０２０と接続する。ＣＰＵ１０００は、ＲＯＭ１０１０及びＲＡＭ１０２０に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィックコントローラ１０７５は、ＣＰＵ１０００等がＲＡＭ１０２０内に設けたフレームバッファ上に生成する画像データを取得し、表示装置１０８０上に表示させる。これに代えて、グラフィックコントローラ１０７５は、ＣＰＵ１０００等が生成する画像データを格納するフレームバッファを、内部に含んでもよい。

入出力コントローラ１０８４は、比較的高速な入出力装置である通信インターフェイス１０３０をホストコントローラ１０８２と接続する。通信インターフェイス１０３０は、ネットワークを介して他の装置と通信する。また、入出力コントローラ１０８４には、ＲＯＭ１０１０が接続される。ＲＯＭ１０１０は、携帯電話機１００の起動時にＣＰＵ１０００が実行するブートプログラム、携帯電話機１００のハードウェアに依存するプログラム等を格納する。

携帯電話機１００に提供されるプログラムは、ネットワークを介して携帯電話機１００にインストールされ、携帯電話機１００において実行される。携帯電話機１００にインストールされて実行されるプログラムは、携帯電話機１００を、撮像部２０２、着信相手識別部２０４、送受信部２０６、表示部２０８、操作受付部２１２、画像抽出部２２０、画像合成部２２４、背景格納部２２６、画像認識部２３０、位置測定部２４０、及び時計部２５０として機能させる。

上記のプログラムは、専用通信ネットワークやインターネットに接続されたサーバシステムに設けたハードディスク又はＲＡＭ等の記憶装置から、ネットワークを介して携帯電話機１００に提供されてもよく、また、フレキシブルディスク、ＣＤ−ＲＯＭ、ＤＶＤやＰＤ等の光学記録媒体、ＭＤ等の光磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等の外部の記憶媒体に格納されてもよい。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

携帯電話機１００の使用状況の一例を示す図である。 携帯電話機１００の機能構成の第１実施例を示すブロック図である。 図２に示す携帯電話機１００の動作例を示すフローチャートである。 携帯電話機１００の機能構成の第２実施例を示すブロック図である。 図４に示す携帯電話機１００の動作例を示すフローチャートである。 携帯電話機１００の機能構成の第３実施例を示すブロック図である。 図６に示す携帯電話機１００の動作例を示すフローチャートである。 携帯電話機１００のハードウェア構成の一例を示す図である。

符号の説明

１００・・・携帯電話機、１０２・・・ユーザ、１０４・・・携帯電話、１０６・・・ユーザ、２０２・・・撮像部、２０４・・・着信相手識別部、２０６・・・送受信部、２０８・・・表示部、２１２・・・操作受付部、２２０・・・画像抽出部、２２４・・・画像合成部、２２６・・・背景格納部、３００・・・画像、３０２・・・画像、３０４・・・画像、３０６・・・合成画像、２３０・・・画像認識部、２４０・・・位置測定部、２５０・・・時計部

Claims (13)

1. 音声及び画像を送受信するテレビ電話機であって、
   前記テレビ電話機を用いて通話すべき通話者を撮像する撮像部と、
   前記撮像部により撮像された画像から、前記通話者の画像を抽出する画像抽出部と、
   前記撮像部が撮像する画像を認識する画像認識部と、
   前記通話者の画像と合成すべき背景の画像を格納する背景格納部と、
   前記テレビ電話の現在位置を測定する位置測定部と、
   前記テレビ電話機の着信時の現在位置が予め登録されたエリア内であるか、前記撮像部が撮像する画像に予め登録された画像が含まれると前記画像認識部によって認識された場合に、前記画像抽出部により抽出された前記通話者の画像と、前記背景格納部に格納されている前記背景の画像とを合成した合成画像を生成する画像合成部と、
   前記テレビ電話機が着信した場合に、前記現在位置が前記予め登録されたエリア内であるか、前記撮像部が撮像する画像に前記予め登録された画像が含まれると前記画像認識部によって認識された場合に、通話を開始する前に前記合成画像を表示する表示部と、
   前記通話が行われている状態において、前記現在位置が前記予め登録されたエリア内であるか、前記撮像部が撮像する画像に前記予め登録された画像が含まれると前記画像認識部によって認識された場合に、前記合成画像を、前記通話者の音声とともに、通話の相手のテレビ電話機へ送信する送信部と
   を備え、
   前記表示部は、前記現在位置が前記予め登録されたエリア内でなく、前記撮像部が撮像する画像に前記予め登録された画像が含まれないと前記画像認識部によって認識された場合に、通話を開始する前に、前記撮像部が撮像する画像を表示し、
   前記送信部は、前記現在位置が前記予め登録されたエリア内でなく、前記撮像部が撮像する画像に前記予め登録された画像が含まれないと前記画像認識部によって認識された場合に、前記通話が行われている状態において、前記撮像部が撮像する画像を通話の相手のテレビ電話機へ送信する、
   テレビ電話機。
2. 前記テレビ電話の着信時の時刻を確認する時計部を更に備え、
   前記画像合成部は更に、着信時の時刻が予め登録された時間帯である場合に、前記合成画像を生成する、請求項１に記載のテレビ電話機。
3. 前記送信部は、着信時の時刻が前記予め登録された時間帯でない場合に、前記通話が行われている状態において、前記撮像部が撮像する画像を通話の相手のテレビ電話機へ送信する、請求項２に記載のテレビ電話機。
4. 着信の相手を識別する着信相手識別部を更に備え、
   前記画像合成部は更に、前記着信の相手が予め登録された相手である場合に、前記合成画像を生成する、請求項１から３のいずれかに記載のテレビ電話機。
5. 前記送信部は、着信相手が前記予め登録された相手でない場合に、前記通話が行われている状態において、前記撮像部が撮像する画像を通話の相手のテレビ電話機へ送信する、請求項４に記載のテレビ電話機。
6. 前記表示部が前記合成画像を表示している状態において、前記合成画像を送信せずに音声の通話を行うか、前記合成画像を送信しつつ前記通話を行うかを選択する指示を前記通話者から受け付ける操作受付部を更に備える、請求項１から５のいずれかに記載のテレビ電話機。
7. 前記撮像部が撮像する画像の背景を差し替えるか否かを選択する指示を前記通話者から受け付ける操作受付部を更に備え、
   前記画像合成部は、前記撮像部が撮像する画像の背景を差し替える旨の指示を前記操作受付部が受け付けた場合に、前記合成画像を生成する、請求項１から５のいずれかに記載のテレビ電話機。
8. 前記テレビ電話機は、携帯電話機である、請求項１から７のいずれかに記載のテレビ電話機。
9. 音声及び画像を送受信するテレビ電話機用のプログラムであって、コンピュータを、
   前記テレビ電話機を用いて通話すべき通話者を撮像する撮像部、
   前記撮像部により撮像された画像から、前記通話者の画像を抽出する画像抽出部、
   前記撮像部が撮像する画像を認識する画像認識部、
   前記通話者の画像と合成すべき背景の画像を格納する背景格納部、
   前記テレビ電話の現在位置を測定する位置測定部、
   前記テレビ電話機の着信時の現在位置が予め登録されたエリア内であるか、前記撮像部が撮像する画像に予め登録された画像が含まれると前記画像認識部によって認識された場合に、前記画像抽出部により抽出された前記通話者の画像と、前記背景格納部に格納されている前記背景の画像とを合成した合成画像を生成する画像合成部、
   前記テレビ電話機が着信した場合に、前記現在位置が前記予め登録されたエリア内であるか、前記撮像部が撮像する画像に前記予め登録された画像が含まれると前記画像認識部によって認識された場合に、通話を開始する前に前記合成画像を表示する表示部、
   前記通話が行われている状態において、前記現在位置が前記予め登録されたエリア内であるか、前記撮像部が撮像する画像に前記予め登録された画像が含まれると前記画像認識部によって認識された場合に、前記合成画像を、前記通話者の音声とともに、通話の相手のテレビ電話機へ送信する送信部
   として機能させ、
   前記表示部は、前記現在位置が前記予め登録されたエリア内でなく、前記撮像部が撮像する画像に前記予め登録された画像が含まれないと前記画像認識部によって認識された場合に、通話を開始する前に、前記撮像部が撮像する画像を表示し、
   前記送信部は、前記現在位置が前記予め登録されたエリア内でなく、前記撮像部が撮像する画像に前記予め登録された画像が含まれないと前記画像認識部によって認識された場合に、前記撮像部が撮像する画像を、通話の相手のテレビ電話機へ送信する、
   プログラム。
10. 前記コンピュータを、前記テレビ電話の着信時の時刻を確認する時計部として更に機能させ、
    前記画像合成部は更に、着信時の時刻が予め登録された時間帯である場合に、前記合成画像を生成する、請求項９に記載のプログラム。
11. 前記コンピュータを、着信の相手を識別する着信相手識別部として更に機能させ、
    前記画像合成部は更に、前記着信の相手が予め登録された相手である場合に、前記合成画像を生成する、請求項９または１０に記載のプログラム。
12. 前記コンピュータを、前記表示部が前記合成画像を表示している状態において、前記合成画像を送信せずに音声の通話を行うか、前記合成画像を送信しつつ前記通話を行うかを選択する指示を前記通話者から受け付ける操作受付部として更に機能させる、請求項９から１１のいずれかに記載のプログラム。
13. 前記コンピュータを、前記撮像部が撮像する画像の背景を差し替えるか否かを選択する指示を前記通話者から受け付ける操作受付部として更に機能させ、
    前記画像合成部は、前記撮像部が撮像する画像の背景を差し替える旨の指示を前記操作受付部が受け付けた場合に、前記合成画像を生成する、請求項９から１１のいずれかに記載のプログラム。

Images