JP6143529B2 - 表示制御装置、表示制御方法、及びプログラム - Google Patents

Description

本発明は、表示制御装置、表示制御方法、及びプログラムに関し、特に表示画面の所定の領域を外部の表示装置に転送して提示させる技術に関する。

従来、ＰＣ等の情報処理装置の表示画面を画像として取得（キャプチャ）し、ネットワークを介して液晶プロジェクタ等の画像提示装置に伝送し、ユーザに対して画像提示を行う技術がある（特許文献１）。また特許文献２には、表示画面に含まれる特定ウィンドウに対応する画像のみをキャプチャにより取得し、画像提示装置に伝送する技術が開示されている。

特開２００６−１０６１５８号公報 特開２００４−２５９１６３号公報

しかしながら、特許文献２のように特定ウィンドウに対応する画像のみを取得して画像提示装置に伝送する場合、表示画面内で該特定ウィンドウの上に例えば他のウィンドウが重なっている際には、特定ウィンドウに対応する画像を好適に伝送することができない。即ち、特定ウィンドウに対応する画像には、他のウィンドウに対応する画像が含まれることになり、特定ウィンドウの領域の一部の情報が失われた画像しかキャプチャすることができない。

本発明は、上述の問題点に鑑みてなされたものであり、表示画面内の一部のオブジェクトに係る画像を好適にキャプチャして伝送する表示制御装置、表示制御方法、及びプログラムを提供することを目的とする。

前述の目的を達成するために、本発明の表示制御装置は、以下の構成を備えることを特徴とする。具体的には表示制御装置は、表示手段に表示されているオブジェクトをキャプチャするキャプチャ手段と、キャプチャ手段によりキャプチャされたオブジェクトを画像出力装置に送信する送信手段と、表示手段への表示対象であるオブジェクトのうち、画像出力装置に送信する送信オブジェクトを特定する特定手段と、送信オブジェクトが画像出力装置による出力対象であるかを判断する判断手段と、判断手段が、送信オブジェクトが画像出力装置による出力対象であると判断した場合、送信オブジェクトを表示手段に表示された他のオブジェクトよりも優先して表示するよう制御する制御手段とを有し、キャプチャ手段は、制御手段による制御の後に送信オブジェクトをキャプチャすることを特徴とする。

このような構成により本発明によれば、表示画面内の一部のオブジェクトに係る画像を好適にキャプチャして伝送することが可能となる。

本発明の実施形態に係る画像提示システムのシステム構成を示した図 本発明の実施形態に係るＰＣ１００及び液晶プロジェクタ２００の機能構成を示したブロック図 本発明の実施形態に係るＰＣ１００で実行される投影画像送信処理を例示したフローチャート 本発明の実施形態に係るＰＣ１００において実行される、投影用アプリケーションに係るＧＵＩウィンドウを例示した図 本発明の実施形態に係るＰＣ１００で実行されるキャプチャ処理を例示したフローチャート 本発明の実施形態に係るキャプチャ処理における表示制御を説明するための図

［実施形態］
以下、本発明の例示的な実施形態について、図面を参照して詳細に説明する。なお、以下に説明する一実施形態は、画像提示装置が画像送信装置から送信された画像を提示する画像提示システムについて、画像送信装置の一例としてのＰＣと、画像提示装置の一例としての液晶プロジェクタとに、本発明を適用した例を説明する。しかし、本発明は、画像提示装置が画像送信装置から送信された画像を提示する構成であれば、任意の機器に適用可能である。

《画像提示システムの構成》
図１は、本発明の実施形態に係る画像提示システムの構成を示した図である。

図示されるように、本実施形態ではＰＣ１００において生成された画像データが、通信ネットワーク１５０を介して液晶プロジェクタ２００に伝送される。そして液晶プロジェクタ２００は、該画像データを不図示の投影面に投影することで、ユーザに画像を提示する。通信ネットワーク１５０は、ＩＥＥＥ８０２．３で規定されるイーサーネット（登録商標）ケーブルを用いた優先ネットワークや、ＩＥＥＥ８０２．１１系で規定されるワイヤレスネットワーク等であってよい。しかしながら、通信ネットワーク１５０における通信ネットワークはこれに限られるものではなく、その他のデジタル通信接続方式をとるものであればよい。

〈ＰＣ１００及び液晶プロジェクタ２００の機能構成〉
図２は、本発明の実施形態に係るＰＣ１００及び液晶プロジェクタ２００の機能構成を示すブロック図である。なお、本実施形態では各構成がいずれの装置の装置であることを明確にするため、ＰＣ１００が有するブロックについては、「ＰＣ」の接頭文字を付すものとする。

ＰＣ−ＣＰＵ１０８は、ＰＣ１００が有する各ブロックの動作を制御する。具体的にはＰＣ−ＣＰＵ１０８は、ＰＣ−ＲＯＭ１０４あるいはＰＣ−ＨＤＤ１０５に格納された各ブロックの動作プログラムやアプリケーションプログラムを読み出し、ＰＣ−ＲＡＭ１０３に展開して実行することにより各ブロックの動作を制御する。

ＰＣ−ＲＯＭ１０４は、例えば書き換え可能な不揮発性メモリである。ＰＣ−ＲＯＭ１０４は、ＰＣ１００が有する各ブロックの動作プログラムに加え、各ブロックの動作に必要なパラメータ等を記憶する。またＰＣ−ＨＤＤ１０５は、ＰＣ−ＨＤＤ１０５に着脱可能に接続された記憶装置である。ＰＣ−ＨＤＤ１０５は、各ブロックの動作プログラムやアプリケーションプログラムに加え、ＰＣ１００の全体動作を制御するＯＳ（オペレーティングシステム）等を記憶する。またＰＣ−ＲＡＭ１０３は、揮発性メモリである。ＰＣ−ＲＡＭ１０３は、各プログラムの展開領域としてだけでなく、各ブロックの動作により出力された中間データ等を記憶する。本実施形態ではＰＣ−ＲＡＭ１０３は、液晶プロジェクタ２００に対して送信する画像データを一時的に格納する格納領域としても用いられる。

ＰＣ表示部１０１は、例えばＬＣＤ等のＰＣ１００に接続された表示装置である。ＰＣ表示部１０１は、ＰＣ１００と一体となって構成される要素であってもよいし、ＰＣ１００に着脱可能に接続される外部装置であってもよい。ＰＣ表示部１０１の表示領域に表示される画像の表示制御は、ＰＣ表示制御部１０２により行われる。またＰＣ表示部１０１の表示領域に表示する表示画像の生成は、ＰＣ−ＧＰＵ１０７により行われる。具体的にはＰＣ−ＧＰＵ１０７は、例えばＰＣ−ＨＤＤ１０５に記憶されるＧＵＩデータを読み出して内蔵のＧＰＵメモリに展開した後、画面形成に係る情報に従ってＰＣ−ＶＲＡＭ１０６に表示画像を描画する。なお、画像形成に係る情報とは、例えば表示領域における各ウィンドウの位置及びサイズの情報や、ウィンドウ間の上下関係など、表示領域に含まれるオブジェクトの描画に必要な情報である。本実施形態では画面形成に係る情報は、ＯＳの機能を用いて取得可能な情報として説明するが、ＯＳの機能を利用しなくとも別の管理方法により生成可能であることは容易に想像されよう。

ＰＣ操作部１０９は、例えばマウスやキーボード等のＰＣ１００が有するユーザインタフェースである。ＰＣ操作部１０９は、ユーザによりなされた操作入力を検出すると、対応する制御信号をＰＣ−ＣＰＵ１０８に送信する。

ＰＣ通信部１１０は、ＰＣ１００が有する通信インタフェースである。本実施形態ではＰＣ１００はＰＣ通信部１１０及び通信ネットワーク１５０を介して液晶プロジェクタ２００と通信接続可能である。ＰＣ通信部１１０は、液晶プロジェクタ２００に対して送信する画像データを、不図示の符号化部により符号化して送信する。

ＣＰＵ２０７は、液晶プロジェクタ２００が有する各ブロックの動作を制御する。具体的にはＣＰＵ２０７は、ＲＯＭ２０３に格納された各ブロックの動作プログラムを読み出し、ＲＡＭ２０２に展開して実行することにより各ブロックの動作を制御する。

ＲＯＭ２０３は、例えば書き換え可能な不揮発性メモリである。ＲＯＭ２０３は、液晶プロジェクタ２００が有する各ブロックの動作プログラムに加え、各ブロックの動作に必要なパラメータ等を記憶する。またＲＡＭ２０２は、揮発性メモリである。ＲＡＭ２０２は、各プログラムの展開領域としてだけでなく、各ブロックの動作により出力された中間データ等を記憶する。

通信部２０１は、液晶プロジェクタ２００が有する通信インタフェースである。本実施形態では液晶プロジェクタ２００は、通信部２０１及び通信ネットワーク１５０を介して液晶プロジェクタ２００と通信接続可能である。通信部２０１は、通信接続している装置からの入力信号を投影するモードが液晶プロジェクタ２００に設定されている場合に、ＰＣ１００から送信された画像データを受信する。一方、映像入力部２１２は、液晶プロジェクタ２００が有する画像入力インタフェースである。本実施形態では映像入力部２１２は、映像入力部２１２に接続している入力装置からのＨＤＭＩ（登録商標）、ＤＶＩ、ＶＧＡといったベースバンドの映像入力を受け付ける。これらの映像入力は、映像入力部２１２に接続している装置からの入力信号を投影するモードが液晶プロジェクタ２００に設定されている場合に入力を受け付けるように設定されてよい。なお、いずれのインタフェースからの入力信号を投影するかのモード選択は、入力検出部２１１により管理される。入力検出部２１１は、ユーザによる手動入力や各インタフェースの信号入力状況を監視し、いずれのモードが選択されているかを管理すればよい。また本実施形態の液晶プロジェクタ２００は、通信接続している装置からの入力信号を投影するモードが設定されていることを示す情報を、通信部２０１を介してＰＣ１００に伝送するものとする。

デコーダ２０４は、通信部２０１により受信された画像データに対して復号処理を行う。デコーダ２０４により復号された画像データは、ＶＲＡＭ２０５に展開される。また画像処理部２０８は、ＶＲＡＭ２０５に展開された画像データに対して、投影用の画像処理を適用する。このようにして生成された投影用の画像データは、投影制御部２０９により投影部２１０を用いて投影面に投影される。

操作部２０６は、例えば電源ボタンやメニューボタン、あるいは液晶プロジェクタ２００の動作に係る入力ボタンを備えるリモートコントローラから送信された赤外線信号を受信する信号受信部等の、液晶プロジェクタ２００が有するユーザインタフェースである。操作部２０６は、ユーザによりなされた操作入力を検出すると、対応する制御信号をＣＰＵ２０７に出力する。

なお、本実施形態ではハードウェアとしてＰＣ１００及び液晶プロジェクタ２００が備える各ブロックにおいて処理が実現されるものとして説明するが、本発明の実施はこれに限らず、各ブロックの処理は該各ブロックと同様の処理を行うプログラムで実現されてもよい。

《投影画像送信処理》
このような構成をもつ本実施形態のＰＣ１００で実行される投影画像送信処理について、図３のフローチャートを用いて具体的な処理を説明する。該フローチャートに対応する処理は、ＰＣ−ＣＰＵ１０８が、例えばＰＣ−ＨＤＤ１０５に記憶されている対応する処理プログラムを読み出し、ＰＣ−ＲＡＭ１０３に展開して実行することにより実現することができる。なお、本投影画像送信処理は、例えばＰＣ１００において通信ネットワーク１５０を介して投影用の画像データを送信する投影用アプリケーションが起動された際に開始されるものとして説明する。

Ｓ３０１で、ＰＣ表示制御部１０２はＰＣ−ＣＰＵ１０８の制御の下、投影用アプリケーションに係るＧＵＩウィンドウをＰＣ表示部１０１に表示する。本実施形態の投影用アプリケーションは、ＰＣ表示部１０１の表示領域に表示されるウィンドウのうち、選択されたウィンドウ（対象オブジェクト）の領域に対応する画像を表示画像から抽出して投影用の画像データとして送信することができる。該アプリケーションに係るＧＵＩウィンドウは、例えば図４に示されるようであってよい。

図４に示されるように、ＧＵＩウィンドウ４００には投影対象のウィンドウ（対象ウィンドウ）を選択するための選択領域４０１が設けられている。ユーザは、投影対象としたいウィンドウを、ＰＣ表示部１０１の表示領域上で選択領域４０１にドラッグアンドドロップすることで、ウィンドウを対象ウィンドウとすることができる。また対象ウィンドウが決定した後は、ユーザは送信／停止切り替えボタン４０２を操作することで対象ウィンドウの領域に係る画像の送信及び送信の停止を制御することができる。またＧＵＩウィンドウ４００には、後述するように表示領域内において対象ウィンドウの上に他のウィンドウが重なることなく対象ウィンドウを表示することができない場合に、対象ウィンドウの縮小を許可するか否かを切り替える縮小許可ボタン４０３を含む。さらにＧＵＩウィンドウ４００は、対象ウィンドウの領域に対応する画像を送信する際に、対象ウィンドウをＰＣ表示部１０１の表示領域内に全画面表示するか否かを切り替える全画面ボタン４０４を含む。

Ｓ３０２で、ＰＣ−ＣＰＵ１０８は、対象ウィンドウの選択がなされているか否かを判断する。ＰＣ−ＣＰＵ１０８は、対象ウィンドウの選択がなされていると判断した場合は処理をＳ３０３に移し、なされていないと判断した場合は本ステップの処理を繰り返す。

Ｓ３０３で、ＰＣ−ＣＰＵ１０８は、対象ウィンドウに対応する領域の画像を送信する設定がなされているか否かを判断する。具体的にはＰＣ−ＣＰＵ１０８は、ＧＵＩウィンドウ４００において送信／停止切り替えボタン４０２が送信状態に設定されているか否かを判断する。ＰＣ−ＣＰＵ１０８は、対象ウィンドウに対応する領域の画像を送信する設定がなされていると判断した場合は処理をＳ３０４に移し、なされていないと判断した場合は本ステップの処理を繰り返す。

Ｓ３０４で、ＰＣ−ＣＰＵ１０８は、対象ウィンドウの描画内容が更新されたか否かを判断する。本実施形態ではＰＣ−ＣＰＵ１０８は、例えばユーザの操作や該ウィンドウの自動更新のタイミングをＯＳの機能を用いて検出すると、対象ウィンドウの描画内容が更新されたことを示す情報をＰＣ−ＲＡＭ１０３に格納する。該情報は例えば論理型の情報であってよく、本ステップではＰＣ−ＣＰＵ１０８は該情報を参照することで対象ウィンドウの描画内容が更新されたことを認識する。即ち、ＰＣ−ＣＰＵ１０８は、送信用にキャプチャしていない対象ウィンドウに対応する領域の画像が存在することを認識することができる。なお、対象ウィンドウが決定後に初めて送信／停止切り替えボタン４０２が送信状態に設定された場合には、強制的に描画内容が更新されたことを示す情報が設定（論理型の場合ｔｒｕｅが設定）される。また、本実施形態ではＯＳの機能を用いて対象ウィンドウの描画内容が更新されたことを検出するものとして説明するが、例えば前回液晶プロジェクタ２００に送信した画像と、現在の対象ウィンドウの描画内容が異なる場合にも更新されたものとみなしてもよい。ＰＣ−ＣＰＵ１０８は、対象ウィンドウの描画内容が更新されたと判断した場合は処理をＳ３０５に移し、更新されていないと判断した場合は処理をＳ３０６に移す。

Ｓ３０５で、ＰＣ−ＣＰＵ１０８は、描画内容が更新された対象ウィンドウをキャプチャするキャプチャ処理を実行する。

〈キャプチャ処理〉
ここで、本実施形態のＰＣ１００で実行されるキャプチャ処理について、図５のフローチャートを用いて詳細を説明する。

Ｓ５０１で、ＰＣ−ＣＰＵ１０８は、接続先である液晶プロジェクタ２００が、ＰＣ１００から送信される画像を投影する状態にあるか否かを判断する。具体的には、ＰＣ−ＣＰＵ１０８は画像送信タスクにおいて、通信部１１０を介して液晶プロジェクタ２００に映像入力情報の取得要求を送信する。液晶プロジェクタ２００では当該要求を受信すると、入力検出部２１１は、その時点での投影用の入力が、映像入力部２１２への入力、あるいは、通信部２０１により受信される入力に設定されているかを判断する。そして該判断結果が応答としてＰＣ１００に送信される。ＰＣ−ＣＰＵ１０８は、受信した応答に基づき、接続先である液晶プロジェクタ２００の投影状態を判別する。ＰＣ−ＣＰＵ１０８は、接続先である液晶プロジェクタ２００の投影状態が、ＰＣ１００から送信される画像を投影する状態である場合は処理をＳ５０２に移し、ＰＣ１００から送信される画像を投影する状態ではない場合は処理をＳ５０３に移す。

Ｓ５０２で、ＰＣ−ＣＰＵ１０８は、対象ウィンドウに対応する領域の画像をキャプチャ可能であるかを判断する。具体的にはＰＣ−ＣＰＵ１０８は、ＯＳの機能により以下の情報を取得することで、対象ウィンドウに対応する領域の画像が完全に取得可能であるか否かを判断する。
・対象ウィンドウの表示位置及びサイズ
・対象ウィンドウに対応する領域内に表示領域が含まれ、かつ対象ウィンドウよりも上に表示される（対象ウィンドウに重なって表示される）ウィンドウの情報
・対象ウィンドウが最小化されているか否かの情報

ここで、対象ウィンドウに重なって表示されるウィンドウが存在することにより、対象ウィンドウの一部の領域がＰＣ表示部１０１の表示画像として描画されない状態を、対象ウィンドウに対応する領域の画像が完全に取得できない状態とする。例えば図６（ａ）に示されるように表示領域６００内に対象ウィンドウ６０１のみが配置されている場合には、ＰＣ−ＣＰＵ１０８は対象ウィンドウに対応する領域の画像を完全に取得可能である。しかしながら、例えば図６（ｂ）に示されるように対象ウィンドウ６０１の上に他のウィンドウ６０２が重なって配置されている状態である場合は、ＰＣ−ＣＰＵ１０８は重なりが生じている部分について対象ウィンドウ６０１に対応する領域の画像を取得できない。また対象ウィンドウが最小化されている状態では、ＰＣ表示部１０１の表示領域にウィンドウの内容が描画されないため、この場合も対象ウィンドウに対応する領域の画像は完全に取得できない状態となる。本ステップではＰＣ−ＣＰＵ１０８は、表示領域において対象ウィンドウに重なって表示されるウィンドウが存在するか否かを上記の情報により判断する。ＰＣ−ＣＰＵ１０８は、対象ウィンドウに対応する領域の画像をキャプチャ可能であると判断した場合は処理をＳ５０３に移し、不可能であると判断した場合は処理をＳ５０４に移す。

Ｓ５０３で、ＰＣ−ＣＰＵ１０８は、対象ウィンドウに対応する領域の画像を生成し、本キャプチャ処理を完了する。具体的にはＰＣ−ＣＰＵ１０８は、ＰＣ−ＶＲＡＭ１０６に展開されている表示画像から、対象ウィンドウの表示位置及びサイズの情報に従って、対応する領域の画像を抽出し、ＰＣ−ＲＡＭ１０３に送信用の画像データとして格納する。このとき、ＰＣ−ＣＰＵ１０８は未送信の画像データが存在することを示す情報もＰＣ−ＲＡＭ１０３に格納する。

一方、Ｓ５０２において対象ウィンドウに対応する領域の画像をキャプチャ不可能であると判断した場合、ＰＣ−ＣＰＵ１０８はＳ５０４で、対象ウィンドウの表示状態が最小化表示状態であるか否かを判断する。対象ウィンドウの表示状態が最小化表示状態であるか否かの情報は、例えばＯＳの機能を用いてＰＣ−ＣＰＵ１０８が取得可能であるものとする。ＰＣ−ＣＰＵ１０８は、対象ウィンドウの表示状態が最小化表示状態であると判断した場合は処理をＳ５０５に移し、最小化表示状態ではないと判断した場合は処理をＳ５０７に移す。

Ｓ５０５で、ＰＣ−ＣＰＵ１０８は、対象ウィンドウの表示状態を最小化表示状態から通常状態（最小化される前に表示されていた状態）に戻す。例えば、最小化される前に表示されていた状態が図６（ｂ）のようであった場合、本ステップの処理により対象ウィンドウ６０１は、図６（ｃ）のように他のウィンドウ６０２と重なりを有する状態に復元される。

Ｓ５０６で、ＰＣ−ＣＰＵ１０８は、表示領域において対象ウィンドウに他のウィンドウが重なっている状態であるか否かを判断する。本ステップの処理は、投影画像送信処理におけるＳ５０２の処理と同様である。ＰＣ−ＣＰＵ１０８は、表示領域において対象ウィンドウに他のウィンドウが重なっている状態であると判断した場合は処理をＳ５０７に移し、重なっていない状態であると判断した場合は処理をＳ５０３に移す。

Ｓ５０７で、ＰＣ−ＣＰＵ１０８は、ＰＣ表示部１０１の表示領域内において他のウィンドウの下になることなく対象ウィンドウを配置可能であるかを判定するための判定処理を実行する。本実施形態ではＰＣ−ＣＰＵ１０８は、対象ウィンドウのみを表示領域内で移動させて、他のウィンドウに重ならない状態で表示できるか否かを判定処理により判断するものとする。これは、他のウィンドウをユーザが操作している可能性があり、該ウィンドウを移動することがユーザの操作に支障をきたす可能性があるからである。即ち、対象ウィンドウに他のウィンドウが重ならないような表示状態とするために双方のウィンドウの配置を移動した場合、他のウィンドウを操作していたユーザはウィンドウが移動したために操作に失敗してしまう可能性があるからである。しかしながら、本発明の実施はこれに限られるものではない。例えば、表示領域内のウィンドウのうち、対象ウィンドウよりも上下関係が上にあるウィンドウと対象ウィンドウとを移動して、表示領域において他のウィンドウの下になることなく対象ウィンドウを配置可能か判定してもよい。

Ｓ５０８で、ＰＣ−ＣＰＵ１０８は、Ｓ５０７における判定処理の結果を参照し、表示領域において他のウィンドウの下になることなく対象ウィンドウを配置可能であるか否かを判断する。ＰＣ−ＣＰＵ１０８は、他のウィンドウの下になることなく対象ウィンドウを配置可能である場合は処理をＳ５０９に移し、対象ウィンドウを該当する配置位置に移動した後、処理をＳ５０３に移してキャプチャを行う。例えば、図６（ｂ）のように対象ウィンドウ６０１と他のウィンドウ６０２とが重なった表示状態である場合、Ｓ５０９では図６（ｄ）のように対象ウィンドウ６０１の配置位置が変更される。なお、表示状態の変更は、ＰＣ−ＣＰＵ１０８の命令によって画面形成に係る情報が更新され、該情報に応じてＰＣ−ＧＰＵ１０７が対応する画面を描画することにより行われる。以下の説明において表示状態の変更が生じた場合も同様に処理がなされるが、簡単のため詳細な動作の説明は省略するものとする。

一方、ＰＣ−ＣＰＵ１０８は、他のウィンドウの下になることなく対象ウィンドウを配置不可能である場合は処理をＳ５１０に移す。つまり、例えば図６（ｅ）のように対象ウィンドウ６０１と他のウィンドウ６０２とが重なった表示状態である場合、重ならない位置に対象ウィンドウ６０１を移動したとすると、図６（ｆ）のように対象ウィンドウ６０１の一部の領域が表示領域６００の外に出てしまう。このような場合にＰＣ−ＣＰＵ１０８は処理をＳ５１０に移す。

Ｓ５１０で、ＰＣ−ＣＰＵ１０８は、対象ウィンドウに重なっている他のウィンドウに対して、所定の期間、ユーザの操作入力がなされていないかどうかを判断する。具体的にはＰＣ−ＣＰＵ１０８は、ＯＳの機能を用いて該他のウィンドウに対してなされている例えばマウス入力等の入力状態の情報を取得し、参照することで判断を行う。ＰＣ−ＣＰＵ１０８は、他のウィンドウに対して所定の期間、ユーザの操作入力がなされていないと判断した場合は処理をＳ５１１に移し、入力がなされていると判断した場合は処理をＳ５１２に移す。

Ｓ５１１で、ＰＣ−ＣＰＵ１０８は、所定の期間、ユーザの操作入力がなされていないと判断した他のウィンドウと、対象ウィンドウとを、表示領域における上下関係を反転させる。例えば、各ウィンドウの上下関係がレイヤにより管理される場合、ＰＣ−ＣＰＵ１０８は２つのウィンドウが管理されるレイヤを入れ替え、処理をＳ５０３に移してキャプチャを行う。例えば、対象ウィンドウ６０１と他のウィンドウ６０２とが図６（ｅ）のように重なっている場合、本ステップにおいてＰＣ−ＣＰＵ１０８は、図６（ｇ）のように２つのウィンドウの上下関係を入れ替える。

なお、本実施形態ではＳ５１０の処理がなされた時点で、他のウィンドウに所定の期間操作入力がなされていない場合にＳ５１１でのキャプチャを行うものとして説明するが、本発明の実施はこれに限られるものではない。例えばＳ５１０において操作入力がなされていない期間が所定の期間に達するまで処理を待機し、Ｓ５１１の処理を行ってもよい。

一方、Ｓ５１０において他のウィンドウに対してユーザの操作入力がなされていると判断した場合、ＰＣ−ＣＰＵ１０８はＳ５１２で、ＧＵＩウィンドウ４００の縮小許可ボタン４０３が対象ウィンドウの縮小を許可する設定になされているか否かを判断する。ＰＣ−ＣＰＵ１０８は、対象ウィンドウの縮小を許可する設定がなされている場合は処理をＳ５１３に移し、なされていない場合は本キャプチャ処理を完了する。

Ｓ５１３で、ＰＣ−ＣＰＵ１０８は、対象ウィンドウのサイズを他のウィンドウに重なることなく、表示領域に表示可能な大きさに変更し、処理をＳ５０３に移してキャプチャを行う。例えば、対象ウィンドウ６０１と他のウィンドウ６０２とが図６（ｅ）のように重なっている場合、本ステップにおいてＰＣ−ＣＰＵ１０８は、図６（ｈ）のように対象ウィンドウ６０１の大きさを表示領域６００内に収まるサイズに縮小する。

このように、本キャプチャ処理を実行することで、画面内容が更新された対象ウィンドウを、可能な限りキャプチャすることができる。

このようにキャプチャ処理が完了した後、ＰＣ−ＣＰＵ１０８はＳ３０６で、液晶プロジェクタ２００がＰＣ１００から送信される画像を投影する状態にあるか否かを判断する。ＰＣ−ＣＰＵ１０８は、液晶プロジェクタ２００においてＰＣ１００から送信された画像データを投影するモードが設定されていると判断した場合は処理をＳ３０７に移し、設定されていないと判断した場合は処理をＳ３０３に戻す。

Ｓ３０７で、ＰＣ−ＣＰＵ１０８は、ＰＣ−ＲＡＭ１０３に未送信の対象ウィンドウに対応する領域の画像が存在する場合、該画像を液晶プロジェクタ２００に送信し、処理をＳ３０３に戻す。上述したキャプチャ処理では、対象ウィンドウの表示態様を変更してもキャプチャが不可能な場合がある。しかしながら、上述のキャプチャ処理は液晶プロジェクタ２００においてＰＣ１００から送信された画像データを投影するモードが設定されていない場合も実行される。このため、キャプチャ不可能であった場合であっても、本ステップでは直前にキャプチャされた画像が存在する場合は、少なくとも該画像を液晶プロジェクタ２００に送信することができる。なお、送信に際してＰＣ−ＣＰＵ１０８は、送信画像について符号化処理等の所定の処理を行ってもよい。

このようにすることで、本実施形態のＰＣ１００は、ＰＣ表示部１０１における対象ウィンドウの表示態様を好適に制御し、対象ウィンドウに対応する領域の画像を液晶プロジェクタ２００に送信することができる。

なお、本実施形態のキャプチャ処理において表示態様の変更を行ってキャプチャを行うものとして説明したが、液晶プロジェクタ２００においてＰＣ１００から送信された画像を投影するモードが解除された場合、変更前の表示態様に戻すようにしてもよい。また、対象ウィンドウに対応する領域の画像を送信する設定がなされている場合には、ＰＣ−ＣＰＵ１０８は該ウィンドウ上に他のウィンドウが表示されないよう、ウィンドウの上下関係を制御してもよい。

また、本実施形態ではウィンドウの表示態様の変更方法としてウィンドウの移動及び上下関係の変更の両方を用いたが、必ずしもこの例には限定されない。例えばウィンドウの移動と上下関係の変更のいずれか一方のみを用いてもよいし、例えば表示対象ではないウィンドウを最小化してもよい。

以上説明したように、本実施形態の画像提示システムは、表示画面内の一部のオブジェクトに係る画像を好適にキャプチャして伝送することができる。具体的には画像提示システムの画像送信装置は、画像提示装置に対応する画像を送信する対象オブジェクトが選択された場合に、選択された対象オブジェクトの表示領域における表示状態を、対象オブジェクト以外の他のオブジェクトが重ならない状態に制御する。そして画像送信装置は、他のオブジェクトが重ならない表示状態となった対象オブジェクトに対応する領域の画像を、表示領域に表示する表示画像から生成して画像提示装置に送信する。画像提示装置は、送信された対象オブジェクトに対応する領域の画像を受信し、該画像を提示する。

［その他の実施形態］
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

Claims (14)

1. 表示手段に表示されているオブジェクトをキャプチャするキャプチャ手段と、
   前記キャプチャ手段によりキャプチャされたオブジェクトを画像出力装置に送信する送信手段と、
   表示手段への表示対象であるオブジェクトのうち、前記画像出力装置に送信する送信オブジェクトを特定する特定手段と、
   前記送信オブジェクトが前記画像出力装置による出力対象であるかを判断する判断手段と、
   前記判断手段が、前記送信オブジェクトが前記画像出力装置による出力対象であると判断した場合、前記送信オブジェクトを前記表示手段に表示された他のオブジェクトよりも優先して表示するよう制御する制御手段とを有し、
   前記キャプチャ手段は、前記制御手段による制御の後に前記送信オブジェクトをキャプチャすることを特徴とする表示制御装置。
2. 前記制御手段は、前記表示手段への表示対象であるオブジェクトのレイアウトを変更することにより、前記送信オブジェクトを前記他のオブジェクトよりも優先して表示するよう制御することを特徴とする請求項１に記載の表示制御装置。
3. 前記レイアウトの変更を許可するか否かを設定する設定手段をさらに有することを特徴とする請求項２に記載の表示制御装置。
4. 前記判断手段により前記送信オブジェクトが前記画像出力装置による出力対象でないと判断した場合、前記制御手段は変更したレイアウトを元に戻すことを特徴とする請求項２または３に記載の表示制御装置。
5. 前記制御手段は、前記表示手段において前記送信オブジェクトの上に前記他のオブジェクトが重なっている場合に、前記送信オブジェクトと前記他のオブジェクトとが重ならないように、少なくとも１つのオブジェクトを移動することを特徴とする請求項１乃至４のいずれか１項に記載の表示制御装置。
6. 前記制御手段は、前記他のオブジェクトよりも前記送信オブジェクトが上位となるようレイヤーを制御することを特徴とする請求項１乃至５のいずれか１項に記載の表示制御装置。
7. 前記制御手段は、前記他のオブジェクトへの操作入力が所定の期間なされていない場合、前記他のオブジェクトよりも前記送信オブジェクトが上位となるようレイヤーを制御することを特徴とする請求項１乃至６のいずれか１項に記載の表示制御装置。
8. 前記制御手段は、前記他のオブジェクトが重ならず、かつ前記表示手段の表示領域内に送信オブジェクトのすべての領域が含まれるように少なくとも１つのオブジェクトの大きさを変更するよう制御することを特徴とする請求項１乃至７のいずれか１項に記載の表示制御装置。
9. 前記送信オブジェクトの描画内容が更新された際に前記送信オブジェクトに対応する領域の画像を保持する保持手段をさらに有し、
   前記送信手段は、前記送信オブジェクトを前記表示手段に表示された他のオブジェクトよりも優先して表示することができないと判断された場合、前記保持手段に保持された画像を送信することを特徴とする請求項１乃至８のいずれか１項に記載の表示制御装置。
10. 前記判断手段は、前記画像出力装置から所定の要求を受信した場合に、前記送信オブジェクトが前記画像出力装置による出力対象であると判断することを特徴とする請求項１乃至９のいずれか１項に記載の表示制御装置。
11. 前記オブジェクトはウィンドウであることを特徴とする請求項１乃至１０のいずれか１項に記載の表示制御装置。
12. 前記画像出力装置はプロジェクタであることを特徴とする請求項１乃至１１のいずれか１項に記載の表示制御装置。
13. 表示手段に表示されているオブジェクトをキャプチャするキャプチャ工程と、
    前記キャプチャ工程においてキャプチャされたオブジェクトを画像出力装置に送信する送信工程と、
    表示手段への表示対象であるオブジェクトのうち、前記画像出力装置に送信する送信オブジェクトを特定する特定工程と、
    前記送信オブジェクトが前記画像出力装置による出力対象であるかを判断する判断工程と、
    前記判断工程において、前記送信オブジェクトが前記画像出力装置による出力対象であると判断された場合、前記送信オブジェクトを前記表示手段に表示された他のオブジェクトよりも優先して表示するよう制御する制御工程とを有し、
    前記制御工程における制御の後に、前記送信オブジェクトが前記キャプチャ工程においてキャプチャされることを特徴とする表示制御方法。
14. コンピュータを、請求項１乃至１２のいずれか１項に記載の表示制御装置の各手段として機能させるためのプログラム。

Images