JP2004005492A - データ通信装置、データ通信システム、動画付き文書表示方法および動画付き文書表示プログラム - Google Patents

Abstract

【課題】送信メール作成時、あるいは受信メール確認時であっても、一画面上で、メール本文および動画像の内容を確認可能とする。
【解決手段】携帯電話１ａは、動画付きメールの作成時、メール本文とともに、該メール本文に添付される動画を再生可能に、同一画面上に設けられたそれぞれの表示領域に表示し、動画付き文書の作成終了後、ネットワークを介して送信する。受信側の携帯電話１ｂは、前記携帯電話１ａから送信されてくる動画付きメールを、前記ネットワークを介して受信すると、メール本文とともに、該メール本文に関連付けられている動画を再生可能に、同一画面上に設けられたそれぞれの表示領域に表示する。
【選択図】　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、電子メールシステム等に適用されるデータ通信装置、データ通信システム、動画付き文書表示方法および動画付き文書表示プログラムに関する。
【０００２】
【従来の技術】
従来より、各種ファイルを添付して電子メールをやりとりするシステムが存在し、近年では、携帯電話等の無線通信端末に撮像機能を備えさせ、撮像された画像（もしくは画像が格納されているＵＲＬ）をメールに添付して相手先の無線通信端末に送信し、受信した相手先の無線通信端末でメール本文と画像とを表示させるサービスが知られている（例えば、特許文献１参照）。
【０００３】
【特許文献１】
特開２００２−３５９６９５号公報　第５頁　図２、図４
【０００４】
【発明が解決しようとする課題】
しかしながら、上述した画像を添付したメールの作成方法では、例えば動画像をメール送信する場合においては、その動画の内容を確認しながら簡単にメールの作成・編集するようなことは非常に困難であった。
【０００５】
そこで本発明は、送信メール作成時、あるいは受信メール確認時であっても、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるデータ通信装置、データ通信システム、動画付き文書表示方法および動画付き文書表示プログラムを提供することを目的とする。
【０００６】
【課題を解決するための手段】
上記目的達成のため、請求項１記載の発明によるデータ通信装置は、データ通信される文書と動画とを関連付けて記憶する記憶手段と、少なくともデータ通信される文書を表示する文書表示領域とデータ通信される動画を表示する動画表示領域とを備える表示手段と、前記記憶手段に記憶された文書を読み出して前記表示手段の文書表示領域に表示させる制御手段と、この制御手段によって読み出された文書に関連付けられた動画が前記記憶手段に記憶されていたときは、この動画を読み出すとともに前記表示手段の動画表示領域に再生表示させる表示制御手段とを具備することを特徴とする。
【０００７】
また、好ましい態様として、例えば請求項３記載のように、請求項１または２記載のデータ通信装置において、撮像手段を更に具備し、前記記憶手段は、この撮像手段によって撮像された動画を記憶するようにしてもよい。
【０００８】
また、好ましい態様として、例えば請求項４記載のように、請求項１または２記載のデータ通信装置において、放送受信手段を更に具備し、前記記憶手段は、この放送受信手段によって受信された映像を動画として記憶するようにしてもよい。
【０００９】
また、好ましい態様として、例えば請求項５記載のように、請求項１に記載のデータ通信装置において、前記文書と前記文書に関連付けられた動画とを無線信号にて外部にデータ送信する送信手段を更に具備するようにしてもよい。
【００１０】
また、好ましい態様として、例えば請求項６記載のように、請求項１に記載のデータ通信装置において、前記文書と前記文書に関連付けられた動画とを、他の装置から無線信号により受信する受信手段を更に具備し、前記表示制御手段は、前記受信手段により受信された文書が前記文書表示領域に表示されるとき、この文書に関連付けられた動画を前記動画表示領域に再生表示させるようにしてもよい。
【００１１】
また、好ましい態様として、例えば請求項７記載のように、請求項１に記載のデータ通信装置において、前記動画表示領域は少なくとも２種類の表示サイズを備え、前記表示制御手段により再生表示される動画を停止させる停止手段と、この停止手段により停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御手段とを更に具備するようにしてもよい。
【００１２】
また、上記目的達成のため、請求項８記載の発明によるデータ通信システムは、文書を表示する表示領域と動画を表示させる表示領域とを同一画面内に備える表示手段と、動画を記憶する動画記憶手段と、文書を作成する作成手段と、この作成手段により作成中の文書を前記文書表示領域に表示させるとともに、この文書に関連付けられて前記動画記憶手段に動画が記憶されているときは、この動画を読み出して前記動画表示領域に再生表示させる第１の表示制御手段と、前記作成手段により作成された文書とこの文書に関連付けられた動画とを、無線送信する送信手段とを具備するデータ送信装置と、前記表示手段と前記データ送信装置より送信された文書と動画とを受信する受信手段と、この受信手段により受信された文書と動画とを関連付けて記憶する記憶手段と、この記憶手段に記憶された文書を読み出して前記表示手段の文書表示領域に表示させる制御手段と、この制御手段によって読み出された文書に関連付けられた動画が前記記憶手段に記憶されていたときは、この動画を読み出すとともに前記表示手段の動画表示領域に再生表示させる第２の表示制御手段とを具備するデータ受信装置とで構成されることを特徴とする。
【００１３】
また、好ましい態様として、例えば請求項９記載のように、請求項８に記載のデータ通信システムにおいて、前記データ通信装置は撮像手段を更に具備し、前記動画記憶手段は、この撮像手段によって撮像された動画を記憶するようにしてもよい。
【００１４】
また、好ましい態様として、例えば請求項１０記載のように、請求項８に記載のデータ通信システムにおいて、前記データ通信装置は放送受信手段を更に具備し、前記動画記憶手段は、この放送受信手段によって受信された映像を動画として記憶するようにしてもよい。
【００１５】
また、好ましい態様として、例えば請求項１１記載のように、請求項８に記載のデータ通信システムにおいて、前記データ送信装置と前記データ受信装置の少なくとも一方の動画表示領域は少なくとも２種類の表示サイズを備え、再生表示される動画を停止させる停止手段と、この停止手段により停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御手段とを更に具備するようにしてもよい。
【００１６】
また、上記目的達成のため、請求項１２記載の発明による動画付き文書表示方法は、少なくとも文書を表示する文書表示領域と動画を表示する動画表示領域とを同一画面に備え、前記文書と前記動画とを無線信号にてデータ通信する通信機器において実行される動画付き文書表示方法であって、メモリに記憶された文書を読み出して前記文書表示領域に表示させる文書表示ステップと、この文書作成ステップにて読み出された文書に関連付けられた動画が前記メモリに記憶されていたときは、この動画を読み出すとともに前記動画表示領域に再生表示させる再生表示ステップとからなることを特徴とする。
【００１７】
また、好ましい態様として、例えば請求項１３記載のように、請求項１２の動画付き文書表示方法において、前記文書を作成する作成ステップを更に含み、前記再生表示ステップは、この作成ステップにて作成中の文書を前記文書表示領域に表示させるとともに、この文書に動画が関連付けられて記憶されているときは、この動画を読み出すとともに前記動画表示領域に再生表示させるようにしてもよい。
【００１８】
また、好ましい態様として、例えば請求項１４記載のように、請求項１１または１２記載の動画付き文書表示方法において、前記通信機器は撮像部を更に具備するとともに、この撮像部にて撮像される動画を、前記メモリに記憶させる記憶制御ステップを更に含むようにしてもよい。
【００１９】
また、好ましい態様として、例えば請求項１５記載のように、請求項１１または１２記載の動画付き文書表示方法において、前記通信機器は放送受信部を更に具備するとともに、この放送受信部にて受信された映像を動画として前記メモリに記憶させる記憶制御ステップを更に含むようにしてもよい。
【００２０】
また、好ましい態様として、例えば請求項１６記載のように、請求項１１記載の動画付き文書表示方法において、前記動画表示領域は少なくとも２種類の表示サイズを備え、前記再生表示ステップにて再生表示される動画を停止させる停止ステップと、この停止ステップにて停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御ステップとを更に含むようにしてもよい。
【００２１】
また上記目的達成のため、請求項１７記載の発明による動画付き文書表示プログラムは、少なくとも文書を表示する文書表示領域と動画を表示する動画表示領域とを同一画面に備え、前記文書と前記動画とを無線信号にてデータ通信するコンピュータに実行させる動画付き文書表示プログラムであって、メモリに記憶された文書を読み出して前記文書表示領域に表示させる文書表示ステップと、
この文書作成ステップにて読み出された文書に関連付けられた動画が前記メモリに記憶されていたときは、この動画を読み出すとともに前記動画表示領域に再生表示させる再生表示ステップとを前記コンピュータに実行させることを特徴とする。
【００２２】
また、好ましい態様として、例えば請求項１８記載のように、請求項１７記載の動画付き文書表示プログラムにおいて、前記文書を作成する作成ステップを更に実行させ、前記再生表示ステップは、前記コンピュータに対し、この作成ステップにて作成中の文書を前記文書表示領域に表示させるとともに、この文書に動画が関連付けられて記憶されているときは、この動画を読み出すとともに前記動画表示領域に再生表示させるようにしてもよい。
【００２３】
また、好ましい態様として、例えば請求項１９記載のように、請求項１７または１８記載の動画付き文書表示プログラムにおいて、前記コンピュータは撮像部を更に具備するとともに、この撮像部にて撮像される動画を、前記メモリに記憶させる記憶制御ステップを更に実行させるようにしてもよい。
【００２４】
また、好ましい態様として、例えば請求項２０記載のように、請求項１７または１８記載の動画付き文書表示プログラムにおいて、前記コンピュータは放送受信部を更に具備するとともに、この放送受信部にて受信した映像を動画として前記メモリに記憶させる記憶制御ステップを更に実行させるようにしてもよい。
【００２５】
また、好ましい態様として、例えば請求項２１記載のように、請求項１７に記載の動画付き文書表示プログラムにおいて、前記動画表示領域は少なくとも２種類の表示サイズを備え、前記再生表示ステップにて再生表示される動画を停止させる停止ステップと、この停止ステップにて停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御ステップとを更に実行させるようにしてもよい。
【００２６】
【発明の実施の形態】
第１の実施の形態
以下、第１の実施の形態として、撮像機能を備えた携帯電話に本発明を適用した場合を図面を参照して説明する。
【００２７】
Ａ−１．実施の形態の構成
図１は、本発明の第１の実施の形態によるメール送受信システムの構成を示すブロック図である。図において、携帯電話（無線通信端末／データ通信装置）１ａ，１ｂは、撮像機能と画像メモリとを備え、画像メモリに格納された動画をシステム（特に、後述するメールサーバ３３、６３）に送信する機能および動画付きメールを受信する機能を備えている。該携帯電話１ａ，１ｂは、動画付きメールを作成する際、メール本文と該メール本文に添付する動画を一画面で確認できるように表示するとともに、動画付きメールを受信した際においても、メール本文の表示と動画再生とを一画面で行なえるようになっている。
【００２８】
無線基地局２，２は、携帯電話１ａ、１ｂのユーザが加入する通信サービス事業者（インターネットプロバイダを含む）３に無線接続される。
【００２９】
通信サービス事業者（インターネットプロバイダを含む）３は、主なサービスとして提供している携帯電話サービスに必要とする交換機３４の他、後述のＷＷＷ５に接続するためのシステム（Ｗｅｂサーバ３２、ルータ３５）、メールシステム（メールサーバ３３）を備えている。無線基地局２をＡＰ（アクセス・ポイント）として、携帯電話１ａ、１ｂをＷＷＷ５に接続させるための機能も備えている。
【００３０】
公衆回線網４は、アナログ、デジタル電話回線網である。ＷＷＷ５は、所謂インターネットである。
【００３１】
インターネットサービスプロバイダ（以下ＩＳＰと称す）６は、交換機を除いて、通信サービス事業者３と同じ構成であり、ＷＷＷ５に接続するためのシステム（便宜的にＷｅｂサーバ６２、ルータ６５）、メールシステム（メールサーバ６３）を備えている。パーソナルコンピュータ７は、公衆回線４、ＩＳＰ６を介してＷＷＷ５に接続したり、メールの送受信を行なう機能を備えている。
【００３２】
なお、第１の実施の形態の特徴として、携帯電話１ａ，１ｂ同士では、動画付きメールを、メール本文と動画とを一画面で表示するが（詳細は後述）、携帯電話１ａ，１ｂからパーソナルコンピュータ７へ動画付きメールを送信した場合、パーソナルコンピュータ７では、動画は、添付ファイルとして扱われる。すなわち、第１の実施の形態による「動画付きメールソフトプログラム」は、一般に知られるメールソフトと互換性を持っている。
【００３３】
次に、図２（ａ），（ｂ）は、携帯電話１ａ，１ｂの外観図（開状態：正面図および背面図）である。本第１の実施の形態における携帯電話１ａ、１ｂは、蓋部と本体部からなる二つ折り構造である。アンテナ１１は、蓋部の背面に設けられており、伸縮自在となっている。スピーカ１２は、蓋部の前面側に設けられており、音声出力を行なう。表示部（メイン表示部）１３は、１２０ドット（幅）×１６０ドット（高さ）のカラー液晶デバイスで構成されている。該表示部１３には、写真付きメールの写真（写真）と本文とを同時に表示可能なＱＶＧＡクラスの解像度を備えている。
【００３４】
キー操作部１４は、本体部の前面に設けられており、各種機能キー（メールキー１４１、アドレスキー１４２、ファンクションキー１４３）、テンキー１４４、シャッターキー１４５などからなる。メールキー１４１は、メール機能を起動し、メールメニューを表示するためのものである。アドレスキー１４２は、送信先のメールアドレスを選択する際に用いるアドレス帳を開くためのものである。ファンクションキー１４３は、動画付きメールの作成時、あるいは動画付きメールの確認時、動画の再生や一時停止などを指示するためのものである。テンキー１４４は、電話番号や文字の入力の際に使用する。シャッターキー１４５は、撮像モード時において、所定秒（約２秒）の押圧維持検出で、動画撮影を開始する。
【００３５】
マイク１５は、本体部の下部に設けられており、音声入力を行なう。撮影され取り込まれたデータは、動画撮影が終了するまで、もしくは、所定容量（最大１００Ｋバイト）を超えるまで、撮像データバッファ領域１９５に蓄積される。そして、所定容量までデータが蓄積されたか、もしくは上記押圧維持が解除されたことを検知して圧縮ファイル化され、画像メモリ２３に格納される。
【００３６】
サブ表示部１６は、蓋部の背面に設けられている。背面キー１７は、透明、または半透明部材で構成され、着信の際、発光するＬＥＤ１７１を内蔵している。撮像レンズ１８は、蓋部２の背面、上記サブ表示部１６の下部に設けられている。報知スピーカ１９は、着信などを報知するものであり、蓋部を本体部に閉じた状態でも報知音が聞こえるように、本体部の裏面に配置されている。
【００３７】
次に、図３は、携帯電話１ａ，１ｂの構成を示すブロック図である。無線送受信部２０は、無線によりアンテナ１１を介して音声やデータ（メールデータ）を送受し変調／復調する。無線信号処理部２１は、無線送受信部２０で受信した音声やデータ（メールデータ）を復調し、あるいは無線送受信部２０へ送信するための音声やデータを変調するなどの無線通信に必要な処理をする。制御部２２は、各種動作および全体の動作を制御する。
【００３８】
画像メモリ２３は、撮像部（撮像レンズ１８、撮像モジュール１８１、ＤＳＰ１８２）で撮像され、画像処理プログラム領域２４１３に格納されたプログラムにより圧縮符号化された画像ファイルや、ＷＷＷ５を介してダウンロードした画像ファイルを格納するためのメモリである。ＲＯＭ２４は、書換可能なＦｌａｓｈ　ＲＯＭで構成され、本発明の特徴となる、後述の各種プログラムを格納する。
【００３９】
ドライバ２５は、表示部１３の表示領域に相当するバッファを備え、表示部１３を駆動させる。ドライバ２６は、サブ表示部１６を駆動させる。加入者情報記憶部２７は、本携帯電話１を呼び出すための電話番号や、操作者（加入者）のＩＤ等、プロフィールデータを格納する。ＲＯＭ２８は、制御部１８を制御する各種プログラムなどを格納する。ＲＡＭ２９は、無線通信端末として必要な各種データを記憶し、かつ制御部２５が動作する上で必要なデータを格納するとともに、メールデータも格納記憶する。特に、本第１の実施の形態では、ＲＡＭ２９には、撮影モードにおいて、撮影中の動画を一度バッファリグするための記憶領域がある。
【００４０】
音声信号処理部２００は、マイク１５から入力された音声信号を符号化処理したり、無線信号処理部２１から出力された信号に基づいて復号化してスピーカ１２を駆動させ、音声を出力する。撮像モジュール１８１は、ＣＣＤ、若しくはＣＭＯＳで構成され、カラー画像を取り込む。ＤＳＰ１８２は、撮像モジュール１８１にて取り込まれた画像を符号化処理する。報知デバイス１９２は、報音スピーカ１９、バイブレータ１９１、ＬＥＤ１７１を駆動させるためのドライバである。
【００４１】
次に、図４は、携帯電話１ａ，１ｂのＲＯＭ２４のメモリエリアの構成を示す概念図である。該ＲＯＭ２４は、第１の実施の形態の特徴であるソフトウェアプログラムを格納する。ＲＯＭ２４は、メールソフトウェアプログラム領域２４１、画像処理プログラム領域２４１３およびその他のプログラム領域２４１４からなる。
【００４２】
メールソフトウェアプログラム領域２４１は、既知のメールソフトウェアプログラムを格納する領域２４１１と、動画付きメールソフトウェアプログラムを格納する領域２４１２とに分かれている。なお、動画付きメールソフトウェアプログラムは、ＩＳＰ６を介してＷＷＷ５からダウンロードするようにしてもよい。
【００４３】
画像処理プログラム領域２４１３は、撮像部（撮像レンズ１８、撮像モジュール１８１、ＤＳＰ１８２）で撮像・デジタル符号化されてＲＡＭ２９にバッファリングされた動画データを、ＭＰＥＧ−４に準拠する符号化圧縮処理で圧縮ファイル化するための画像処理プログラムを格納する。また、該画像処理プログラムは、外部より受信、もしくは自機においてファイル化された動画像を、再生時は９６×８０ピクセル、停止（一時停止）時は１２８×９６ピクセル（Ｓｕｂ−ＱＣＩＦサイズ）で表示サイズを変更して表示する。
【００４４】
このようにしたのは、通信サービス事業者によって、個人でメールに添付できる動画ファイルに制限が課せられているケースを想定しているためであり、この場合、添付されている画像を再生する場合は、９６×８０ピクセルで再生表示される。一方、通信サービス事業者（ポータルサイト）からの動画配信の場合や、メール添付された動画ファイルの再生表示に際し、一時停止を検出した場合の静止画表示の場合は、１２８×９６ピクセルに規定される。これは、メールに添付された場合（作成中、受信メール確認中を含む）でも、少なくとも静止画の場合には、拡大表示させて見易くするためである。
尚、第１の実施の形態では、メールに添付される動画ファイルと、動画配信による動画ファイルとで、再生するサイズを異ならせるようにしたが、これに限定されることなく、様々な実施態様で再生表示するサイズを異ならせても良い。
【００４５】
その他のプログラム領域２４１４は、上記以外のアプリケーションプログラムなどを格納する。
【００４６】
次に、図５（ａ）は、携帯電話１ａ，１ｂのＲＡＭ２９のメモリエリアの構成を示す概念図である。ＲＡＭ２９は、アドレス帳データ格納領域２９１、メールデータ格納領域２９２、添付ファイル格納領域２９３およびその他のワークメモリ２９４、撮像データバッファ領域２９５からなる。アドレス帳データ格納領域２９１は、氏名、電話番号、メールアドレス等を一組のレコードとして複数格納する。メールデータ格納領域２９２は、メールソフトウェアを使用して作成されたメールデータや、受信したメールデータを格納する。添付ファイル格納領域２９３は、メールにファイルが添付されている場合、このファイルを格納する。その他・ワークメモリ２９４は、その他のワークメモリとして各種データを格納する。撮像データバッファ領域２９５は、撮影中の動画を一度バッファリングするための記憶領域である。画像データ管理テーブル２９６は図５（ｂ）に図示されるような内容で構成されており、画像メモリ２３内に格納される画像ファイルの格納アドレス、ファイル名、静止画や動画等のファイル属性、記録日時、及び、作成者情報やその他当該ファイルのプロパティデータを一組のレコードとして複数組格納する。
【００４７】
Ａ−２．実施の形態の動作
次に、上述した第１の実施の形態の動作について説明する。
【００４８】
（１）撮影モード
まず、第１の実施の形態による撮像モード時の動作について説明する。ここで、図６および図７は、第１の実施の形態による撮像モード時の動作を説明するためのフローチャートである。ユーザにより撮影モードが選択されると、まず、撮影モジュール１８１、ＤＳＰ１８２を起動する（ステップＳ１０）。次に、画像処理プログラムをロードし（ステップＳ１２）、表示部１３にスルー画像を表示する（ステップＳ１４）。次に、シャッターキー１４５が押圧されたか否かを判断する（ステップＳ１６）。そして、シャッターキー１４５が押下されない場合には、ステップＳ１４へ戻り、スルー画像の表示を継続する。
【００４９】
一方、シャッターキー１４５が押下されると、所定秒（２秒）の間、押圧が維持されたか否かを判断する（ステップＳ１８）。シャッターキー１４５が所定秒の間、押圧されつづけた場合には、撮像されたデータを順次取り込み、撮像データバッファ領域２９５に順次蓄積していく（ステップＳ２０）。ここで、図８は、撮影モードにおいて被写体を撮像する様子を示す模式図である。図示の例では、オブジェクトを矢印の方向に移動しながら撮影している。該撮像データの取り込み過程においては、所定容量（例えば１００Ｋバイト）のデータを蓄積したか否かを判断し（ステップＳ２２）、さらに、シャッターキー１４５の押圧が解除されたか否かを判断する（ステップＳ２４）。そして、所定容量に達しておらず、かつシャッターキー１４５の押圧も解除されていない場合には、ステップＳ２２へ戻り、撮像されたデータの撮像データバッファ領域２９５への蓄積を継続する。
【００５０】
一方、所定容量に達するか、あるいはシャッターキー１４５の押圧が解除された場合には、撮像データバッファ領域２９５へ蓄積した撮像データを圧縮ファイル化する（ステップＳ２６）。そして、圧縮ファイル化された動画ファイルを、タイムスタンプに基づいてファイル名を付加して画像メモリ２３に格納し（ステップＳ３２）、その後、ステップＳ１４へ戻り、前述した処理を継続する。
【００５１】
また、ステップＳ１８において、シャッターキー１４５が所定秒の間、押圧されなかった場合、すなわちシャッターキー１４５が一瞬だけ（２秒以下）押下された場合には、撮像されたデータを取り込み（ステップＳ２８）、圧縮ファイル化する（ステップＳ３０）。そして、圧縮ファイル化された静止画ファイルを、タイムスタンプに基づいてファイル名を付加して画像メモリ２３に格納し（ステップＳ３２）、その後、ステップＳ１４へ戻り、前述した処理を継続する。
【００５２】
このように、撮影モードにおいては、所定時間内にシャッターキー１４５の押圧操作／解除を検出した場合には、その時点で撮像モジュールに取り込まれたイメージを静止画として圧縮ファイル化する一方、所定時間以上に渡ってシャッターキー１４５の押圧を検出した場合には、押圧開始点から取り込まれたイメージを順次撮像データバッファ領域２９５に蓄積し（動画）、所定容量（１００Ｋバイト）を超えるか、シャッターキー１４５の押圧解除を検出すると、動画撮影を停止する。
【００５３】
（２）メール作成
次に、第１の実施の形態によるメール作成時の動作について説明する。ここで、図９ないし図１２は、第１の実施の形態による携帯電話のメール作成時の動作を説明するためのフローチャートである。ユーザによりメール作成モードが選択されると、メールメニューを表示する（ステップＳ４０）。次に、メールメニューから新規作成が選択されたか否かを判断する（ステップＳ４２）。ここで、新規作成が選択されなかった場合には、受信ボックスが選択されたか否かを判断し（ステップＳ４４）、受信ボックスが選択されなければ、その他の処理へ進む（ステップＳ４６）。なお、受信ボックスが選択された場合、すなわち受信メールを表示するための処理について後述する。
【００５４】
一方、メールメニューから新規作成が選択されると、作成メニューを表示する（ステップＳ４８）。次に、メールメニューから動画付きメールが選択された否かを判断する（ステップＳ５０）。そして、動画付きメールが選択されなかった場合には、通常のメール処理へ進む（ステップＳ５２）。
【００５５】
一方、メールメニューから動画付きメールが選択された場合には、動画付きメールプログラムおよび画像処理プログラムをロードし（ステップＳ５４）、作成画面を表示する（ステップＳ５６）。
【００５６】
次に、作成画面において、「画像選択」、「メール作成・編集」または「保存・終了」のいずれの項目が選択されたか否かを判断する（ステップＳ５８）。ここで、「画像選択」が選択された場合には、まず、動画ファイルを検索する（ステップＳ６０）。そして、動画ファイルがあったか否かを判断し（ステップＳ６２）、動画ファイルがなければ、エラーを表示し（ステップＳ６４）、図９に示すステップＳ５６の作成画面の表示へ戻る。
【００５７】
一方、動画ファイルがあった場合には、動画ファイル（撮像開始時の静止画像）をアルバム表示する（ステップＳ６６）。次に、アルバム表示からいずれかの動画ファイルが選択されたか否かを判断する（ステップＳ６８）。そして、選択されない場合には、ステップＳ６６に戻り、アルバム表示を継続する。
【００５８】
一方、いずれかの動画ファイルが選択されると、選択された動画フィルについて、Ｓｕｂ−ＱＣＩＦサイズ（１２８×９６ピクセル）にリサイズし（ステップＳ７０）、静止画像表示する（ステップＳ７２）。その後、ステップＳ５６の作成画面の表示へ戻る。
【００５９】
また、作成画面において、「メール作成・編集」が選択された場合には、まず、各項目・編集・表示を行なう画面を表示する（ステップＳ８０）。ここで、図１３は、「メール作成・編集」が選択されたときの表示画面を示す模式図である。図において、Ｓｕｂｊｅｃｔ領域１３１には、メールのタイトルが表示される。Ｆｒｏｍ領域１３２には、メール送信者の名前が表示される。日付表示領域１３３は、添付された動画ファイルの作成日時が表示される。なお、所定のキー操作により、受信日時、現在時刻等に切り替え可能としてもよい。
【００６０】
表示領域１３４は、１２８×９６ピクセル（Ｓｕｂ−ＱＣＩＦサイズ）で、ストリーミングコンテンツ（動画）または静止画（９６×８０ピクセル表示の動画ファイルを一時停止させた場合の静止画表示を含む）を表示する領域である。また、表示領域１３５は、９６×８０ピクセルで動画を再生表示する領域である。再生時間ゲージ１３６は、動画ファイル再生時に現在表示されている画像がどの時点のものであるかを示すためのものである。メール本文表示領域１３７は、メール本文が表示される領域であり、長文などで該領域に収まらない場合には、文章をスクロールして表示させるためのスクロールバーが右端に表示されるようになっている。
【００６１】
ファンクションキー１３８は、「保存・終了」を指示するためのキーである。また、ファンクションキー１３９は、「作成・編集」を指示するためのキーである。また、ファンクションキー１４０は、「画像選択」を指示するためのキーである。上記ファンクションキー１３８，１３９，１４０は、各々、図２に示す外観図におけるメールキー１４１、センターキー１４５、ファンクションキー１４３に対応している。また、ファンクションキー１４３は、動画の再生／一時停止を制御するためにも用いられる。
【００６２】
次に、図１４は、上記表示画面の一例を示す模式図である。Ｓｕｂｊｅｃｔ領域１３１には、メールのタイトル「どれがいい？」が表示されている。Ｆｒｏｍ領域１３２には、メール送信者の名前「○○」が表示されている。日付表示領域１３３は、添付された動画ファイルの作成日時「２００２／０４／０３　１４：００　ＰＭ」が表示されている。表示領域１３４には、選択された動画（静止画）が、１２８×９６ピクセル（Ｓｕｂ−ＱＣＩＦサイズ）で表示されている。メール本文表示領域１３７は、作成中のメール本文が表示されている。また、表示画面の最下行には、動画の「再生」を指示するためのファンクションキー１４６（ファンクションキー１４３に対応）が表示されている。
【００６３】
次に、動作の説明に戻ると、図１４に示す表示画面において、ファンクションキー１４６が操作されたか否かを判断し（ステップＳ８２）、さらに「決定」が検出されたか否かを判断する（ステップＳ８４）。そして、「再生」を指示するファンクションキー１４６の操作も「決定」もされなかった場合には、ステップＳ８０へ戻り、図１４に示す「各項目・編集・表示」の画面表示を継続する。
【００６４】
一方、「再生」を指示するファンクションキー１４６（ファンクションキー１４３に対応）が操作されると、動画像が選択されているか否かを判断する（ステップＳ８６）。そして、動画像が選択されている場合には、９６×８０ピクセルにリサイズし（ステップＳ８８）、該動画像を繰り返し再生する（ステップＳ９０）。すなわち、図１４に示す動画を、９６×８０ピクセルにリサイズし、動画再生を開始する。
【００６５】
ここで、図１５（ａ）〜（ｃ）は、上記撮影モードにて図８に示されるような撮像方向で撮像されたオブジェクトの動画ファイルを、メール作成モードにて再生表示する場合の、表示画面の一例を示す模式図である。表示領域１３５には、図１５（ａ）〜（ｃ）に示す順で、９６×８０ピクセルで動画ファイルが再生表示されている。また、再生中の表示画面の最下行には、「一時停止」を指示するためのファンクションキー１４７（ファンクションキー１４３に対応）が表示されている。
【００６６】
該再生中に、「一時停止」を指示するファンクションキー１４７（ファンクションキー１４３に対応）が押下されたか否かを判断し（ステップＳ９２）、ファンクションキー１４７が押下されるまで、ステップＳ９０の動画像の繰り返し再生を継続する。
【００６７】
一方、動画像の再生中に、ファンクションキー１４７（ファンクションキー１４３に対応）が押下されると、一時停止する（ステップＳ９４）。一時停止中は、図１６に示すように、その時点での静止画像を、Ｓｕｂ−ＱＣＩＦサイズ（１２８×９６ピクセル）にリサイズして表示を維持する。なお、図１６に示す例は、前述した図１５（ｃ）に示す表示状態で一時停止した場合の表示例である。その後、ステップＳ８０へ戻り、前述した処理を繰り返す。このように、第１の実施の形態では、メール本文の作成・編集中であっても、容易に動画を再生／一時停止させることができ、しかも一画面でメール本文と動画とを確認することができる。
【００６８】
また、ステップＳ８０で、各項目・編集・表示画面が表示されているとき、動画像が選択されていない状態で、ファンクションキーが操作された場合には、「動画が選択されていません」というメッセージを表示する（ステップＳ９６）。次に、所定時間経過したか否かを判断し（ステップＳ９８）、所定時間経過していなければ、ステップＳ９６へ戻り、メッセージの表示を維持する。
【００６９】
一方、メッセージの表示が所定時間経過した場合には、メッセージを消去する（ステップＳ１００）。その後、ステップＳ８０へ戻り、前述した処理を繰り返す。
【００７０】
そして、ステップＳ８０で、各項目・編集・表示画面が表示されているとき、「決定」の操作が検出されると、図９に示すステップＳ５６の作成画面の表示へ戻り、前述した処理を繰り返す。
【００７１】
また、作成画面において、「保存・終了」が選択された場合には、まず、未記入項目があるか、あるいは動画ファイルが選択されていないかを判断する（ステップＳ１１０）。そして、未記入項目があるか、あるいは動画ファイルが選択されていない場合には、ユーザに対する確認表示を行ない（ステップＳ１１２）、「ＯＫ」が選択されたか否かを判断する（ステップＳ１１４）。そして、「ＯＫ」が選択されない場合、すなわち未記入項目があるか、動画ファイルが選択されていない場合には、図９に示すステップＳ５６へ戻り、作成画面の表示へ進む。以降、ユーザは、未記入項目への入力、あるいは動画ファイルを選択するなどしてメールを完成させることになる。
【００７２】
一方、ユーザへの確認表示において、「ＯＫ」が選択された場合には、未記入項目があってもよい、あるいは動画ファイルが選択されていなくてもよい、ということであるので、当該メールを送信ボックスに格納し（ステップＳ１１６）、ステップＳ４０のメールメニューの表示へ戻り、前述した処理を繰り返す。また、未記入項目がないか、あるいは動画が選択されている場合には、当該メールを送信ボックスに格納し（ステップＳ１１６）、ステップＳ４０のメールメニューの表示へ戻り、前述した処理を繰り返す。送信ボックスに格納された動画付きメールは、所定のタイミングで送信される。
【００７３】
（３）受信メール確認
次に、第１の実施の形態による受信メール確認時の動作について説明する。ここで、第１の実施の形態では、携帯電話１ａにて上記の如く作成された動画付きメールを、携帯電話１ｂにて着信する場合について述べるが、動画付きメールの着信処理に関しては、既知のメールの着信処理と変わるところがないので省略する。
【００７４】
図１７は、メールの受信メール確認時の動作を説明するためのフローチャートである。なお、当該受信メール確認処理は、前述したメール作成時のフローチャートのステップＳ４４において、受信ボックスが選択された場合に実行される。
【００７５】
受信ボックスが選択されると、まず、受信ボックスに格納されている受信メールのリストを表示する（ステップＳ１２０）。次に、動画付きメールが選択されたか否かを判断し（ステップＳ１２２）、通常のメールが選択された場合には、通常のメール処理へ進む（ステップＳ１２４）。
【００７６】
一方、動画付きメールが選択されると、動画付きメールプログラムおよび画像処理プログラムをロードし（ステップＳ１２６）、メール本文表示とこのメール本文とともに受信され、添付ファイル格納領域２９３に格納された動画ファイルを読み出して、動画再生（９６×８０ピクセル）を行なう（ステップＳ１２８）。ここで、図１８（ａ）〜（ｃ）および図１９（ａ）、（ｂ）は、受信した動画付きメールの動画を再生中の表示画面の一例を示す模式図である。表示領域１３５には、図１８（ａ）、（ｂ）、（ｃ）、図１９（ａ）、（ｂ）という順で、動画が再生表示される。また、再生中の表示画面の最下行には、動画の「一時停止」を指示するためのファンクションキー１４７（ファンクションキー１４３に対応）が表示されている。
【００７７】
受信メールの表示中においては、キャンセルが検出されたか否かを判断し（ステップＳ１３０）、キャンセルが検出されると、ステップＳ１２０の受信リスト表示へ戻り、前述した処理を繰り返す。一方、キャンセルが検出されなければ、動画再生を一時停止するためのファンクションキー１４７（ファンクションキー１４３に相当）が操作されたか否かを判断する（ステップＳ１３２）。そして、一時停止のためのファンクションキー１４７が操作されなければ、ステップＳ１２８へ戻り、メール本文の表示と動画再生とを継続する。
【００７８】
一方、一時停止するためのファンクションキー１４７（ファンクションキー１４３に相当）が操作さると、その時点で再生中の動画について、図２０に示すように、１２８×９６ピクセル（Ｓｕｂ−ＱＣＩＦサイズ）にリサイズした静止画を表示する（ステップＳ１３４）。次に、再生するためのファンクションキー１４６（ファンクションキー１４３に相当）が操作されたか否かを判断し（ステップＳ１３６）、再生が指示されなければ、ステップＳ１３４へ戻り、一時停止状態を継続する。一方、再生するためのファンクションキー１４６が操作されると、その時点での静止画像を、９６×８０ピクセルにリサイズし（ステップＳ１３８）、ステップＳ１２８のメール本文表示と動画再生へ戻り、前述した処理を繰り返す。
尚、第１の実施の形態においては、カメラ（撮像機能）付き携帯電話について詳細を述べたが、これに限定されること無く、メール（メッセージ）作成機能と動画撮影機能とを備える携帯型電子機器（モバイルＰＣ、ＰＤＡ）であれば適用可能である。
【００７９】
第２の実施の形態
上記第１の実施の形態においては、本発明を撮像機能を備えた携帯電話に適用した場合について詳述したが、第２の実施の形態では、デジタル放送システムにより配信される映像を受信することが出来る携帯電話に本発明を適用した場合について述べる。
尚、システム構成、携帯電話の外観、携帯電話の主構成について、前述した第１の実施の形態と同様の部分は説明を省略する。
【００８０】
Ｂ−１．実施の形態の構成
図２１は、本発明の第２の実施の形態によるメール送受信システムの構成を示すブロック図である。図において、上記第１の実施の形態と異なる点は、デジタル放送システム（放送局１０１、映像データベース１０２、放送アンテナ１０３、デジタル放送受像機１０４）からの放送受信機能を携帯電話１００が備えていることにある。携帯電話（無線通信端末／データ通信装置）１００は、デジタル放送受信機能を備えたものであり、詳細には図２２に示されるようなＯＦＤＭ（Ｏｒｔｈｏｇｏｎａｌ　Ｆｒｅｑｕｅｎｃｙ　Ｄｉｖｉｓｉｏｎ　Ｍｕｌｔｉｐｌｅｘｉｎｇ：直交周波数分割多重）方式により変調された一放送局あたり５．５７ＭＨｚの帯域（１セグメントあたり４２９ＫＨｚ）で１３セグメントに分割された搬送波のうち中央部のｂにあたる１セグメントを受信する。このセグメントはＱＰＳＫ（Ｑｕａｄｒａｔｕｒｅ　Ｐｈａｓｅ　Ｓｈｉｆｔ　ｋｅｙｉｎｇ）変調方式でＭＰＥＧ−４方式で符号化された映像が設定されている。
尚、図２２において、ａにあたるセグメントはデジタル放送受像機１０４で受信できるよう、６４ＱＡＭ（Ｑｕａｄｒａｔｕｒｅ　Ａｍｐｌｉｔｕｄｅ　Ｍｏｄｕｌａｔｉｏｎ）変調方式でＭＰＥＧ−２方式で符号化された映像が設定されている。
放送局１０１は、映像データベース１０２に蓄積されたデジタル映像、若しくは、不図示のネットワークにより得られたデジタル映像を上記ＯＦＤＭ方式で変調して、放送アンテナ１０３より配信する。
【００８１】
図２３は、携帯電話１００の外観図（開状態：正面図）である。第２の実施の形態における携帯電話１００は、第１の実施の形態の携帯電話１ａ、１ｂと概ね同じものであるが、撮像機能（撮像レンズ１８、撮像モジュール１８１、ＤＳＰ１８２）に代えて、デジタル放送受信機能を備えている。図中においては、デジタル放送受信用のアンテナ２１０を内蔵しており、シャッターキー１４５に代えて、ユーザがデジタル放送を視聴中、所望の映像を記録する際に操作するキャプチャーキー１５０を備え、チャンネルを代える際は、十字キー１５１の左側、若しくは右側を操作して行なう。
【００８２】
図２４は、携帯電話１００の構成を示すブロック図である。上述のように、撮像機能に代えてデジタル放送受信機能を備えているため、撮像レンズ１８、撮像モジュール１８１、ＤＳＰ１８２に代えてアンテナ２１０、チューナ２１１、Ａ／Ｄコンバータ２１２、復調処理部２１３、信号処理部２１４からなるデジタル放送受信用の各回路を備える。ユーザが携帯電話１００を操作してデジタル放送を視聴する場合、所定のキー操作によりＴＶ視聴モードに移行させると、上記デジタル放送受信用の各回路に電源が供給され、チューナ２１１がＲＦ信号を受信してＩＦ信号に周波数変換する。Ａ／Ｄコンバータ２１２は、このＩＦ信号をサンプリングおよび量子化して復調処理部２１３に出力する。
【００８３】
復調処理部２１３はＡ／Ｄコンバータ２１２より出力された、デジタルＩＦ信号を直交復調してその結果得られるベースバンドＯＦＤＭ信号から、ユーザの十字キー１５１の操作を検出することにより選択された受信チャンネルに対応するサブキャリアに含まれるデータを抽出して、信号処理部２１４に出力する。信号処理部２１４は、復調処理部２１３より出力されたデータ、詳細には図２２に図示される１３個のセグメントからなるデータから、ＱＰＳＫ方式で変調されたセグメントｂのデータを抽出し、この変調方式に対応した復号方式で復号し、ＭＰＥＧ−４方式で符号化された映像データを順次ドライバ２５のバッファに送り出す。
【００８４】
画像メモリ２３は、ＴＶ視聴モードにおいて、キャプチャーされた映像（動画像）に基づく動画ファイルや、ＷＷＷ５を介してダウンロードした画像ファイルを格納するためのメモリである。ＲＯＭ２４は、書換可能なＦｌａｓｈ　ＲＯＭで構成され、本発明の特徴となる、後述の各種プログラムを格納する。
【００８５】
ＲＡＭ２９には、図２５に図示するようにＴＶ視聴モードにおいてキャプチャーした映像を一度バッファリグするためのキャプチャーデータバッファ領域２９７を備える。
【００８６】
尚、第２の実施の形態においては、図５（ｂ）に示される画像データ管理テーブル２９６で格納される画像データに上記ＴＶ視聴モードにおいてキャプチャーされた映像データに基づく動画ファイルが含まれる。映像データが格納される場合、プロパティデータの項目には、映像データと共に送信される放送情報データ（チャンネル番号、放送局名、番組名）が格納される。
【００８７】
Ｂ−２．実施の形態の動作
次に、上述した第２の実施の形態の動作について説明する。
【００８８】
図２６は、第２の実施の形態によるＴＶ視聴モード時の動作を説明するためのフローチャートである。ユーザによりＴＶ視聴モードが選択されると、まず、デジタル放送受信用の各回路に電源が供給され、上述した処理により放送局１０１より配信される映像データを受信して、表示部１３に表示させる（視聴状態：ステップＳ１２０）。ここで図２７はステップＳ１２０の視聴状態における表示部１３の表示画面を示す模式図である。図において、映像表示領域１５２には、放送局１０１、放送アンテナ１０３より配信されてくる映像が表示される。放送情報データ表示領域１５３には、映像データとともに配信されてくるチャンネル番号、番組名、放送局名が表示され、図２７においては、チャンネル番号は”０ｃｈ”、番組名は”モバイルニュース”、放送局名（配信元）は”〇×ＢＣＮ”となっている。尚、矢印アイコン１５４は選局指示のマークである。１５５は、録画スタンバイ指示のマークである。
【００８９】
この表示状態においてユーザによるファンクションキー１４３の操作の検出の有無を判別し（ステップＳ１２１）、検出した場合、制御部２２が内蔵するタイマーを起動させて、所定時間の計時を開始し（ステップＳ１２２）、録画スタンバイ状態に遷移して（ステップＳ１２３）、計時が開始された時点の映像を第１フレームとして、ドライバ２５に供給される映像データをキャプチャーデータバッファ領域２９７に順次をコピーして書き込む処理を開始する（ステップＳ１２４）。ここで図２８はステップＳ１２４のスタンバイ状態における表示部１３の表示画面を示す模式図である。図において、映像表示領域１５２、放送情報データ表示領域１５３の内容は上記の視聴状態のものと同じだが、矢印アイコン１５４に代えて、バッファリング状態を示すゲージ１５７が表示される。このゲージは、ファンクションキー１４３の操作を検出した時点で表示されるものであり、現在配信されている映像データがキャプチャーデータバッファ領域２９７にどの程度記録されているかが１５７ａのバーの長さで示される。このバー１５７ａがゲージ１５７において、右端まで達するとタイムアップをなる。尚、１５６は、録画指示のマークである。
【００９０】
ステップＳ１２３のスタンバイ状態において、ユーザの録画指示マーク１５６に相当するキャプチャーキー１５０の操作を検出すると（ステップＳ１４５）、キャプチャーキー１５０が操作された時点での映像データを第１のフレームとして画像メモリ２３へ映像データの転送を開始する（ステップＳ１２６）。尚、この映像データの転送の際は、放送情報データの一部、第２の実施の形態おいては放送局名を、表示映像の端に表示するように記録して転送する。
【００９１】
そして、この映像データの画像メモリ２３への転送過程においては、所定容量（例えば１００Ｋバイト）の映像データを蓄積したか否かを判断する（ステップＳ１２７）。また、映像データが所定容量まで蓄積される過程においては、キャプチャーキー１５０の押圧が解除されたか否かを判断する（ステップＳ１２８）。そして、所定容量に達しておらず、かつキャプチャーキー１５０の押圧も解除されていない場合には、ステップＳ１２６へ戻り、映像データのキャプチャーデータバッファ領域２９７への蓄積を継続する。
【００９２】
一方、所定容量に達するか、あるいはキャプチャーキー１５０の押圧が解除された場合には、解除された時点での映像データを最終フレームとして画像メモリ２３に記憶させて動画ファイル化するとともに、現在配信されている放送情報データを取得して、動画ファイルと対応付けて格納し、キャプチャーデータバッファ領域２９７をクリアする（ステップＳ１２９）。そしてその後、ＴＶ視聴モードにおける視聴状態（ステップＳ１２０）にリターンする。
【００９３】
また、ステップＳ１３０において、スタンバイ状態のまま、タイマーがタイムアップすると、スタンバイ状態を解除して、視聴状態に復帰する（ステップＳ１３１）。
【００９４】
このように、ＴＶ視聴モードにおいて、映像データをキャプチャーするためのスタンバイモードへの移行、続いて所定時間以上に渡るキャプチャーキー１５０の押圧を検出した場合には、押圧開始点から転送された映像データを順次画像メモリ２３に蓄積し、所定容量（１００Ｋバイト）を超えるか、キャプチャーキー１５０の押圧解除を検出すると、この処理を停止する。
【００９５】
尚、このように配信された映像から得られた動画ファイルを添付してメール作成する場合、作成画面は図２９のようになる。図２９において、Ｓｕｂｊｅｃｔ領域１３１には、デフォルトの表示状態として、画像メモリ２３のこの動画ファイルと対応付けて格納されたプロパティデータ（本表示例では、チャンネル番号、番組名）が表示されている。Ｆｒｏｍ領域１３２には、メール送信者の名前「○○」が表示されている。日付表示領域１３３は、添付された動画ファイルの作成日時「２００２／０４／０３　１４：００　ＰＭ」が表示されている。表示領域１３４には、選択された動画が、１２８×９６ピクセル（Ｓｕｂ−ＱＣＩＦサイズ）で表示されており、その右下端には、放送情報データ１３４１として放送局名「〇×ＢＣＮ」が合成されている。メール本文表示領域１３７は、メール本文が表示される。また、表示画面の最下行には、動画の「再生」を指示するためのファンクションキー１４６（ファンクションキー１４３に対応）が表示されている。
【００９６】
このように第２の実施の形態においては、デジタル放送による配信映像が受信可能な携帯電話において、放送視聴時には、放送情報データ（チャンネル番号、放送局名、番組名）が映像表示画面とは別の位置に表示されるので、小さい表示領域でも鮮明に配信映像を表示させることができ、かつ、視聴しながら簡単な操作で録画することができる。一方、この配信映像を録画することにより得られた動画ファイルを添付して当該携帯電話より送信する場合は、添付すべき動画（配信映像）に放送情報データが合成されるので、この動画ファイルが放送されていたものか、またその場合でもどの放送局（配信元）のどの番組のものかを動画付きメールの受信側でも確認することができる。
尚、第２の実施の形態においては、デジタル放送受信可能な携帯電話について詳細を述べたが、これに限定されること無く、メール（メッセージ）作成機能とデジタル放送受信機能とを備える携帯型電子機器（ポータプルＴＶ、ＰＤＡ）であれば適用可能である。
【００９７】
【発明の効果】
請求項１記載の発明によれば、データ通信される文書と動画とを関連付けて記憶手段に記憶し、表示手段により、少なくともデータ通信される文書を文書表示領域に表示し、データ通信される動画を動画表示領域に表示し、制御手段により、前記記憶手段に記憶された文書を読み出して前記文書表示領域に表示させ、前記文書に関連付けられた動画が前記記憶手段に記憶されていたときは、表示制御手段により、この動画を読み出すとともに前記動画表示領域に再生表示させるようにしたので、送信メール作成時、あるいは受信メール確認時であっても、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる。
【００９８】
また、請求項２記載の発明によれば、前記表示制御手段により、前記作成手段により作成中の文書を前記文書表示領域に表示させるとともに、この文書に動画が関連付けられて記憶されているときは、この動画を読み出すとともに前記表示手段の動画表示領域に再生表示させるようにしたので、送信メール作成時であっても一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる。
【００９９】
また、請求項３記載の発明によれば、撮像手段によって撮像された動画を前記記憶手段に記憶するようにしたので、メール作成時、メールに添付する動画を簡単に得ることができるという利点が得られる。
【０１００】
また、請求項４記載の発明によれば、放送受信手段によって受信された映像を動画として前記記憶手段に記憶するようにしたので、メール作成時、メールに添付する動画を簡単に得ることができるという利点が得られる。
【０１０１】
また、請求項５記載の発明によれば、送信手段により、前記文書と前記文書に関連付けられた動画とを無線信号にて外部にデータ送信するようにしたので、送信メール作成時、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる。
【０１０２】
また、請求項６記載の発明によれば、前記表示制御手段により、受信手段により他の装置から無線信号により受信された文書が前記文書表示領域に表示されるとき、この文書に関連付けられた動画を前記動画表示領域に再生表示させるようにしたので、受信メール確認時、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる。
【０１０３】
また、請求項７記載の発明によれば、前記動画表示領域は少なくとも２種類の表示サイズを備え、停止手段により、前記表示制御手段により再生表示される動画を停止させ、再生制御手段により、停止手段により停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示するようにしたので、送信メール作成時、あるいは受信メール確認時であっても、一画面上で、動画および静止画の双方を見易くすることができるという利点が得られる。
【０１０４】
また、請求項８記載の発明によれば、データ送信装置において、表示手段に文書を表示する表示領域と動画を表示させる表示領域とを同一画面内に設け、第１の表示制御手段により、作成手段により作成中の文書を前記文書表示領域に表示させるとともに、この文書に関連付けられて動画記憶手段に動画が記憶されているときは、この動画を読み出して前記動画表示領域に再生表示させ、送信手段により前記作成手段により作成された文書とこの文書に関連付けられた動画とを、無線送信する一方、データ受信装置において、受信手段により、前記データ送信装置より送信された文書と動画とを受信し、該文書と動画とを関連付けて記憶手段に記憶し、制御手段により、この記憶手段に記憶された文書を読み出して前記文書表示領域に表示させ、第２の表示制御手段により、制御手段によって読み出された文書に関連付けられた動画が前記記憶手段に記憶されていたときは、この動画を読み出して前記動画表示領域に再生表示させるようにしたので、送信メール作成時、あるいは受信メール確認時であっても、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる。
【０１０５】
また、請求項９記載の発明によれば、撮像手段を更に具備し、前記動画記憶手段により、この撮像手段によって撮像された動画を記憶するようにしたので、送信メール作成時、メールに添付する動画を簡単に得ることができるという利点が得られる。
【０１０６】
また、請求項１０記載の発明によれば、放送受信手段を更に具備し、前記動画記憶手段により、この放送受信手段によって受信された映像を動画として記憶するようにしたので、送信メール作成時、メールに添付する動画を簡単に得ることができるという利点が得られる。
【０１０７】
また、請求項１１記載の発明によれば、前記データ送信装置と前記データ受信装置の少なくとも一方の動画表示領域に、少なくとも２種類の表示サイズを設け、停止手段により、再生表示される動画を停止させ、再生制御手段により、この停止手段により停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示するようにしたので、送信メール作成時、あるいは受信メール確認時であっても、一画面上で、動画および静止画の双方を見易くすることができるという利点が得られる。
【０１０８】
また、請求項１２記載の発明によれば、文書表示ステップにより、メモリに記憶された文書を読み出して前記文書表示領域に表示させ、この文書作成ステップにて読み出された文書に関連付けられた動画が前記メモリに記憶されていたときは、再生表示ステップにより、上記動画を読み出すとともに前記文書表示領域と同一画面上の動画表示領域に再生表示させるようにしたので、送信メール作成時、あるいは受信メール確認時であっても、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる。
【０１０９】
また、請求項１３記載の発明によれば、前記再生表示ステップにおいて、前記文書を作成する作成ステップにて作成中の文書を前記文書表示領域に表示させるとともに、この文書に動画が関連付けられて記憶されているときは、この動画を読み出すとともに前記動画表示領域に再生表示させるようにしたので、送信メール作成時、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる。
【０１１０】
また、請求項１４記載の発明によれば、記憶制御ステップにより、前記通信機器に具備された撮像部にて撮像される動画を、前記メモリに記憶させるようにしたので、送信メール作成時、メールに添付する動画を簡単に得ることができるという利点が得られる。
【０１１１】
また、請求項１５記載の発明によれば、記憶制御ステップにより、前記通信機器に具備された放送受信部にて受信される映像を、前記メモリに動画像として記憶させるようにしたので、送信メール作成時、メールに添付する動画を簡単に得ることができるという利点が得られる。
【０１１２】
また、請求項１６記載の発明によれば、前記動画表示領域に少なくとも２種類の表示サイズを設け、停止ステップにより、前記再生表示ステップにて再生表示される動画を停止させと、この停止ステップにて停止の指示を検出すると、再生制御ステップにより、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示するようにしたので、送信メール作成時、あるいは受信メール確認時であっても、一画面上で、動画および静止画の双方を見易くすることができるという利点が得られる。
【０１１３】
また、請求項１７記載の発明によれば、メモリに記憶された文書を読み出して前記文書表示領域に表示させる文書表示ステップと、この文書作成ステップにて読み出された文書に関連付けられた動画が前記メモリに記憶されていたときは、この動画を読み出すとともに前記文書表示領域と同一画面上の動画表示領域に再生表示させる再生表示ステップとを前記コンピュータに実行させるようにしたので、送信メール作成時、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる。
【０１１４】
また、請求項１８記載の発明によれば、前記文書を作成する作成ステップを更に実行させ、前記再生表示ステップにおいて、前記コンピュータに対し、この作成ステップにて作成中の文書を前記文書表示領域に表示させるとともに、この文書に動画が関連付けられて記憶されているときは、この動画を読み出すとともに前記動画表示領域に再生表示させるようにしたので、送信メール作成時であっても、一画面上で、メール本文およびメールに添付される動画像の内容を確認することができるという利点が得られる
【０１１５】
また、請求項１９記載の発明によれば、前記コンピュータに具備された撮像部にて撮像される動画を、前記メモリに記憶させる記憶制御ステップを更に実行させるようにしたので、送信メール作成時、メールに添付する動画を簡単に得ることができるという利点が得られる。
【０１１６】
また、請求項２０記載の発明によれば、前記コンピュータに具備された放送受信部にて受信した映像を動画として前記メモリに記憶させる記憶制御ステップを更に実行させるようにしたので、送信メール作成時、メールに添付する動画を簡単に得ることができるという利点が得られる。
【０１１７】
また、請求項２１記載の発明によれば、前記動画表示領域は少なくとも２種類の表示サイズを設け、前記再生表示ステップにて再生表示される動画を停止させる停止ステップと、この停止ステップにて停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御ステップとを更に実行させるようにしたので、送信メール作成時、あるいは受信メール確認時であっても、一画面上で、動画および静止画の双方を見易くすることができるという利点が得られる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態によるメール送受信システムの構成を示すブロック図である。
【図２】携帯電話１ａ，１ｂの外観図（開状態：正面図および背面図）である。
【図３】携帯電話１ａ，１ｂの構成を示すブロック図である。
【図４】携帯電話１ａ，１ｂのＲＯＭ２４のメモリエリアの構成を示す概念図である。
【図５】携帯電話１ａ，１ｂのＲＡＭ２９のメモリエリアの構成を示す概念図である。
【図６】第１の実施の形態による撮像モード時の動作を説明するためのフローチャートである。
【図７】第１の実施の形態による撮像モード時の動作を説明するためのフローチャートである。
【図８】撮影モードにおいて被写体を撮像する様子を示す模式図である。
【図９】第１の実施の形態による携帯電話のメール作成時の動作を説明するためのフローチャートである。
【図１０】第１の実施の形態による携帯電話のメール作成時の動作を説明するためのフローチャートである。
【図１１】第１の実施の形態による携帯電話のメール作成時の動作を説明するためのフローチャートである。
【図１２】第１の実施の形態による携帯電話のメール作成時の動作を説明するためのフローチャートである。
【図１３】「メール作成・編集」が選択されたときの表示画面を示す模式図である。
【図１４】「メール作成・編集」が選択されたときの表示画面の一例を示す模式図である。
【図１５】動画を再生中の表示画面の一例を示す模式図である。
【図１６】再生中の動画を一時停止したときの表示画面を示す模式図である。
【図１７】第１の実施の形態による携帯電話の受信メール確認時の動作を説明するためのフローチャートである。
【図１８】受信した動画付きメールの動画を再生中の表示画面の一例を示す模式図である。
【図１９】受信した動画付きメールの動画を再生中の表示画面の一例を示す模式図である。
【図２０】受信した動画付きメールの動画を一時停止中の表示画面の一例を示す模式図である。
【図２１】本発明の第２の実施の形態によるメール送受信システムの構成を示すブロック図である。
【図２２】一放送局あたり割り当てられる搬送波のセグメントの構成を示す図である。
【図２３】携帯電話１００の外観図（開状態：正面図）である。
【図２４】携帯電話１００の構成を示すブロック図である。
【図２５】携帯電話１００のＲＡＭ２９のメモリエリアの構成を示す概念図である。
【図２６】第２の実施の形態によるＴＶ視聴モード時の動作を説明するためのフローチャートである。
【図２７】ＴＶ視聴状態の表示画面を示す模式図である。
【図２８】スタンバイ状態の表示画面を示す模式図である。
【図２９】「メール作成・編集」が選択されたときの表示画面を示す模式図である。
【符号の説明】
１ａ，１ｂ，１００　携帯電話（送信側データ通信装置、受信側データ通信装置）
２　無線基地局
３　通信サービス事業者
４　公衆回線網
５　ＷＷＷ
６　インターネットプロバイダ
７　パーソナルコンピュータ
１１　アンテナ
１２　スピーカ
１３　表示部（表示手段）
１４　キー入力部（停止手段、
１５　マイク
１６　サブ表示部
１７　背面キー
１８　撮像レンズ（撮影手段）
１９　報知スピーカ
２０　無線送受信部（送信手段、受信手段）
２１　無線信号処理部
２２　制御部（制御手段、表示制御手段、作成手段、再生制御手段）
２３　画像メモリ
２４　Ｆｌａｓｈ　ＲＯＭ
２５，２６　ドライバ
２７　加入者情報記憶部
２８　システムＲＯＭ
２９　ＲＡＭ（動画記憶手段、記憶手段）
３２　Ｗｅｂサーバ
３３　メールサーバ
３４　交換機
３５　ルータ６２　Ｗｅｂサーバ
６３　メールサーバ
６５　ルータ
１０１　放送局
１０２　映像データベース
１０３　放送アンテナ
１０４　デジタル放送受像機
１３１　Ｓｕｂｊｅｃｔ領域
１３２　Ｆｒｏｍ領域
１３３　日付表示領域
１３４　表示領域
１３５　表示領域
１３６　再生時間ゲージ
１３７　メール本文表示領域
１３８　ファンクションキー
１３９　ファンクションキー
１４０　ファンクションキー
１４１　メールキー
１４２　アドレスキー
１４３　ファンクションキー
１４４　テンキー
１４５　シャッターキー
１５０　キャプチャーキー
１５１　十字キー
１７１　ＬＥＤ
１８１　撮像モジュール（撮影手段）
１８２　ＤＳＰ
１９２　ドライバ
２００　音声信号処理部
２１０　アンテナ（放送受信手段）
２１１　チューナ（放送受信手段）
２１２　Ａ／Ｄコンバータ（放送受信手段）
２１３　復調処理部（放送受信手段）
２１４　信号処理部（放送受信手段）

Claims (21)

1. データ通信される文書と動画とを関連付けて記憶する記憶手段と、
   少なくともデータ通信される文書を表示する文書表示領域とデータ通信される動画を表示する動画表示領域とを備える表示手段と、
   前記記憶手段に記憶された文書を読み出して前記表示手段の文書表示領域に表示させる制御手段と、
   この制御手段によって読み出された文書に関連付けられた動画が前記記憶手段に記憶されていたときは、この動画を読み出すとともに前記表示手段の動画表示領域に再生表示させる表示制御手段と
   を具備することを特徴とするデータ通信装置。
2. 前記文書を作成する作成手段を更に具備し、
   前記表示制御手段は、前記作成手段により作成中の文書を前記文書表示領域に表示させるとともに、この文書に動画が関連付けられて記憶されているときは、この動画を読み出すとともに前記表示手段の動画表示領域に再生表示させることを特徴とする請求項１記載のデータ通信装置。
3. 撮像手段を更に具備し、
   前記記憶手段は、この撮像手段によって撮像された動画を記憶することを特徴とする請求項１または２に記載のデータ通信装置。
4. 放送受信手段を更に具備し、
   前記記憶手段は、この放送受信手段によって受信された映像を動画として記憶することを特徴とする請求項１または２に記載のデータ通信装置。
5. 前記文書と前記文書に関連付けられた動画とを無線信号にて外部にデータ送信する送信手段を更に具備することを特徴とする請求項１乃至４の何れかに記載のデータ通信装置。
6. 前記文書と前記文書に関連付けられた動画とを、他の装置から無線信号により受信する受信手段を更に具備し、
   前記表示制御手段は、前記受信手段により受信された文書が前記文書表示領域に表示されるとき、この文書に関連付けられた動画を前記動画表示領域に再生表示させることを特徴とする請求項１に記載のデータ通信装置。
7. 前記動画表示領域は少なくとも２種類の表示サイズを備え、
   前記表示制御手段により再生表示される動画を停止させる停止手段と、
   この停止手段により停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御手段と
   を更に具備することを特徴とする請求項１に記載のデータ通信装置。
8. 文書を表示する表示領域と動画を表示させる表示領域とを同一画面内に備える表示手段と、
   動画を記憶する動画記憶手段と
   文書を作成する作成手段と、
   この作成手段により作成中の文書を前記文書表示領域に表示させるとともに、この文書に関連付けられて前記動画記憶手段に動画が記憶されているときは、この動画を読み出して前記動画表示領域に再生表示させる第１の表示制御手段と、
   前記作成手段により作成された文書とこの文書に関連付けられた動画とを、無線送信する送信手段と
   を具備するデータ送信装置と、
   前記表示手段と
   前記データ送信装置より送信された文書と動画とを受信する受信手段と、
   この受信手段により受信された文書と動画とを関連付けて記憶する記憶手段と、
   この記憶手段に記憶された文書を読み出して前記表示手段の文書表示領域に表示させる制御手段と、
   この制御手段によって読み出された文書に関連付けられた動画が前記記憶手段に記憶されていたときは、この動画を読み出すとともに前記表示手段の動画表示領域に再生表示させる第２の表示制御手段と
   を具備するデータ受信装置と
   で構成されることを特徴とするデータ通信システム。
9. 前記データ通信装置は撮像手段を更に具備し、
   前記動画記憶手段は、この撮像手段によって撮像された動画を記憶することを特徴とする請求項８に記載のデータ通信システム。
10. 前記データ通信装置は放送受信手段を更に具備し、
    前記動画記憶手段は、この放送受信手段によって受信された映像を動画として記憶することを特徴とする請求項８に記載のデータ通信システム。
11. 前記データ送信装置と前記データ受信装置の少なくとも一方の動画表示領域は少なくとも２種類の表示サイズを備え、
    再生表示される動画を停止させる停止手段と、
    この停止手段により停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御手段と
    を更に具備することを特徴とする請求項８に記載のデータ通信システム。
12. 少なくとも文書を表示する文書表示領域と動画を表示する動画表示領域とを同一画面に備え、前記文書と前記動画とを無線信号にてデータ通信する通信機器において実行される動画付き文書表示方法であって、
    メモリに記憶された文書を読み出して前記文書表示領域に表示させる文書表示ステップと、
    この文書作成ステップにて読み出された文書に関連付けられた動画が前記メモリに記憶されていたときは、この動画を読み出すとともに前記動画表示領域に再生表示させる再生表示ステップと
    からなることを特徴とする動画付き文書表示方法。
13. 前記文書を作成する作成ステップを更に含み、
    前記再生表示ステップは、この作成ステップにて作成中の文書を前記文書表示領域に表示させるとともに、この文書に動画が関連付けられて記憶されているときは、この動画を読み出すとともに前記動画表示領域に再生表示させることを特徴とする請求項１２記載の動画付き文書表示方法。
14. 前記通信機器は撮像部を更に具備するとともに、
    この撮像部にて撮像される動画を、前記メモリに記憶させる記憶制御ステップを更に含むことを特徴とする請求項１１または１２に記載の動画付き文書表示方法。
15. 前記通信機器は放送受信部を更に具備するとともに、
    この放送受信部にて受信された映像を動画として前記メモリに記憶させる記憶制御ステップを更に含むことを特徴とする請求項１１または１２に記載の動画付き文書表示方法。
16. 前記動画表示領域は少なくとも２種類の表示サイズを備え、
    前記再生表示ステップにて再生表示される動画を停止させる停止ステップと、
    この停止ステップにて停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御ステップと
    を更に含むことを特徴とする請求項１１に記載の動画付き文書表示方法。
17. 少なくとも文書を表示する文書表示領域と動画を表示する動画表示領域とを同一画面に備え、前記文書と前記動画とを無線信号にてデータ通信するコンピュータに実行させる動画付き文書表示プログラムであって、
    メモリに記憶された文書を読み出して前記文書表示領域に表示させる文書表示ステップと、
    この文書作成ステップにて読み出された文書に関連付けられた動画が前記メモリに記憶されていたときは、この動画を読み出すとともに前記動画表示領域に再生表示させる再生表示ステップと
    を前記コンピュータに実行させることを特徴とする文書表示プログラム。
18. 前記文書を作成する作成ステップを更に実行させ、
    前記再生表示ステップは、前記コンピュータに対し、この作成ステップにて作成中の文書を前記文書表示領域に表示させるとともに、この文書に動画が関連付けられて記憶されているときは、この動画を読み出すとともに前記動画表示領域に再生表示させることを特徴とする請求項１７記載の動画付き文書表示プログラム。
19. 前記コンピュータは撮像部を更に具備するとともに、
    この撮像部にて撮像される動画を、前記メモリに記憶させる記憶制御ステップを更に実行させることを特徴とする請求項１７または１８に記載の動画付き文書表示プログラム。
20. 前記コンピュータは放送受信部を更に具備するとともに、
    この放送受信部にて受信した映像を動画として前記メモリに記憶させる記憶制御ステップを更に実行させることを特徴とする請求項１７または１８に記載の動画付き文書表示プログラム。
21. 前記動画表示領域は少なくとも２種類の表示サイズを備え、
    前記再生表示ステップにて再生表示される動画を停止させる停止ステップと、この停止ステップにて停止の指示を検出すると、前記再生表示されている表示サイズより大きい表示サイズで停止中の動画を表示する再生制御ステップと
    を更に実行させることを特徴とする請求項１７に記載の動画付き文書表示プログラム。

Images