JP3771973B2

JP3771973B2 - 立体映像表示装置

Info

Publication number: JP3771973B2
Application number: JP25484096A
Authority: JP
Inventors: 誠一郎田端; 良昭橋本
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 1996-09-26
Filing date: 1996-09-26
Publication date: 2006-05-10
Anticipated expiration: 2016-09-26
Also published as: JPH10108221A; US5936663A

Description

【０００１】
【発明の属する技術分野】
本発明は、両眼視差を有する左眼用映像および右眼用映像によって、観察者に立体映像を呈示できる立体映像表示装置に関する。
【０００２】
【従来の技術】
視覚表示装置や視覚表示システムにおいて、映像を立体視できるように表示する立体映像表示装置が種々提案されている。
図１６は、従来のこの種の立体映像表示装置の一適用例である頭部装着型表示装置（ＨＭＤ：ＨｅａｄＭｏｕｎｔｅｄＤｉｓｐｌａｙ）１００の使用状態を示す外観斜視図である。このＨＭＤ１０Ｏは、二眼式立体ディスプレイの一種であり、観察者Ｍの左右眼球の前に、それぞれ表示素子と拡大光学系からなる左右一対の表示部１０１が位置する如く、その両端を支持フレーム１０２にて支持された状態で頭部に装着されるものとなっている。支持フレーム１０２の他端間を連結している連結フレーム１０３の中央部位すなわち頭部頂上に位置する箇所には、頭の動きを検出するためのヘッドモーションセンサ１０４が取り付けられている。
【０００３】
前記支持フレーム１０２には、支持部材１０５を介して、外部接続器１０６と耳元に音響を出力するためのスピーカ１０７とが取付けられている。外部接続器１０６は接続ケ−ブル１１０を介して携帯形の情報処理装置１２０と接続されている。惰報処理装置１２０には操作釦１２１が備えられており、この操作釦１２１を観察者Ｍが種々操作することにより、所要の映像観察を行なえるものとなっている。
【０００４】
かくして情報処理装置１２０の操作釦１２１の操作により、表示部１０１の左眼用映像が観察者Ｍの左眼に呈示され、右眼用映像が観察者Ｍの右眼にそれぞれ呈示されることにより、観察者Ｍは立体映像を観察することができる。この時、その立体映像はヘッドモーションセンサ１０４にて検知された頭部の動きに対応したものとなり、しかも音響を伴ったものとなるので、自然な感覚で観察可能である。
【０００５】
ところで、上記ＨＭＤ１００のような立体映像表示装置では、立体映像表示装置による立体映像の観察状態が、立体撮像カメラでの撮像状況と大きく異なる場合には、観察者Ｍが融像（映像融合）しにくいものとなり、いわゆる二重像になって見えたり、著しく違和感のある立体映像として見えたりする。その具体的状況例を以下に示す。
【０００６】
図１７の（ａ）に示すように、平行配置された２台の立体撮像カメラ１３１，１３２でそれぞれ撮像した映像１３３，１３４を、立体映像ディスプレイ１３５で観察する場合、観察者Ｍの左右眼球を大きく内側に傾けない限り融像ができなくなる状態が起こり得る。
【０００７】
図１７の（ｂ）に示すように、光軸を内側に傾けて配置された２台の立体撮像カメラ１３１，１３２でそれぞれ撮像した映像１３３，１３４を、光学系を平行配置したＨＭＤ１３６で観察すると、左右の眼球ＩＬ，ＩＲで見る左右映像は無限遠に融像される。このような場合には、著しい違和感を感じることになる。
【０００８】
このような問題を解決する手段として、例えば特開平７−１６７６３３号公報に示されているように、立体映像の視差を制御する手段が提案されている。上記公報に示された手段は、左右画面の両眼視差または三次元位置を計算し、その計算結果を用いて映像の奥行き位置を三次元立体映像表示部の表面もしくは指定された距離において再現するように視差制御するものである。なお上記公報には、視線検出器を備えることにより、観察者が現在見ようとしている映像の奥行き位置を、三次元立体映像表示部の表面もしくは指定された距離に再現するように視差制御する例も示されている。
【０００９】
ここで視差とは、左右映像間において、それぞれ対応するポジションにおける像の位置ずれ量を指す。したがって視差を計算するに際しては、例えば左映像のうちの特定像に注目したとき、その特定像に対応する像を右映像の中から探し出し、その探し出した対応する特定像の位置を求め、しかるのち左右映像間の位置ずれ量を求める必要がある。
【００１０】
【発明が解決しようとする課題】
上記従来の視差制御手段を備えた装置には次のような問題がある。すなわち上記従来の装置では、左右映像の中から対応する特定像を探し出すという処理を行なう必要があるため、左右映像の一画面分のデータをすべて一旦メモリ内に取り込んでからでないと当該処理を実行できない。このため記憶容量の大きなメモリが必要になるという問題がある。また次々に流れてくる映像信号に対してリアルタイムで処理できないという問題もある。さらに遠近が入り交じった映像を見て観察者Ｍの視線がふらつくことがあるが、このような場合には、制御する視差量が大きく変動することになり、立体映像を安定して観察できないことになる。
【００１１】
本発明の目的は、観察者にとって融像しやすい立体映像を、視差計算等を格別に行なわずに容易かつ的確に呈示することのできる立体映像表示装置を提供することにある。
【００１２】
【課題を解決するための手段】
前記課題を解決し目的を達成するために、本発明は以下に示す如く構成されている。
（１）本発明の体映像表示装置は、
左眼用映像を表示する左眼用映像表示手段と、右眼用映像を表示する右眼用映像表示手段と、前記左（右）眼用映像表示手段の表示面中に、左（右）眼用特定エリアの位置を指定する左（右）眼用特定エリア位置指定手段と、前記右（左）眼用映像表示手段の表示面中に、前記左（右）眼用特定エリアの位置に対して、（ｘＲ，ｙＲ）＝（ｘＬ，ｙＬ）またはｘＲ＝ｘＬ−｛２ｄ／（Ａ・ｔａｎθ）｝、ｙＲ＝ｙＬただし、ｄ：左右レンズ間の距離の１／２（右眼は正，左眼は負の値となる）、θ：レンズの半画角、Ａ：眼球から虚像面までの距離（視距離）、を満足するように、右（左）眼用特定エリアの位置を指定する右（左）眼用特定エリア位置指定手段と、前記左眼用特定エリアに存在する映像を映像評価パラメータで数値化する左眼用映像評価パラメータ演算手段と、前記右眼用特定エリアに存在する映像を映像評価パラメータで数値化する右眼用映像評価パラメータ演算手段と、前記数値化された左眼用映像評価パラメータ値と前記数値化された右眼用映像評価パラメータ値とを比較し、前記左眼用特定エリアの左眼用映像と前記右眼用特定エリアの右眼用映像との類似度を演算する類似度演算手段と、前記類似度演算手段によって演算された類似度に基づいて、前記左右映像のうち少なくとも一方を左右方向でシフトさせる映像加工手段と、を有することを特徴としている。
（２）本発明の立体映像表示装置は、上記（１）に記載した立体映像表示装置であって、かつ左（右）眼用特定エリア位置指定手段は、観察者の注視領域を検出する注視領域検出手段（視線検出器）を備えてなることを特徴としている。
（３）本発明の立体映像表示装置は、上記（１）に記載した立体映像表示装置であって、かつ、一定時間内の観察者の注視点の軌跡を検出し、前記軌跡を囲む領域を左（右）眼用特定エリアとすることを特徴としている。
（４）本発明の立体映像表示装置は、
左眼用映像と右眼用映像とによって構成される立体映像フレームを表わす映像信号がこの立体映像フレームの時系列に従うようにして順次入力され得るようになされた立体映像表示装置であって、
前記左眼用映像を表示する左眼用映像表示手段と、前記右眼用映像を表示する右眼用映像表示手段と、前記左（右）眼用映像表示手段の表示面中に、左（右）眼用特定エリアの位置を指定する左（右）眼用特定エリア位置指定手段と、前記右（左）眼用映像表示手段の表示面中に、前記左（右）眼用特定エリアの位置に対して、（ｘＲ，ｙＲ）＝（ｘＬ，ｙＬ）またはｘＲ＝ｘＬ−｛２ｄ／（Ａ・ｔａｎθ）｝、ｙＲ＝ｙＬ、ただし、ｄ：左右レンズ間の距離の１／２（右眼は正，左眼は負の値となる）、θ：レンズの半画角、Ａ：眼球から虚像面までの距離（視距離）を満足するように、右（左）眼用特定エリアの位置を指定する右（左）眼用特定エリア位置指定手段と、前記左眼用特定エリアに存在する映像を映像評価パラメータで数値化する左眼用映像評価パラメータ演算手段と、前記右眼用特定エリアに存在する映像を映像評価パラメータで数値化する右眼用映像評価パラメータ演算手段と、前記数値化された左眼用映像評価パラメータ値と前記数値化された右眼用映像評価パラメータ値とを比較し、前記左眼用特定エリアの左眼用映像と前記右眼用特定エリアの右眼用映像との類似度を演算する類似度演算手段と、順次の前記立体映像フレームのうちの一の立体映像フレームに係る前記類似度と前記一の立体映像フレームの前の立体映像フレームに係る前記類似度とを比較し、その比較結果から前記左眼用映像および右眼用映像のうち少なくとも一方を左右方向でシフトさせる映像加工手段と、を有することを特徴としている。
（５）本発明の立体映像表示装置は、前記（４）に記載の立体映像表示装置であって、かつ、左（右）眼用特定エリア位置指定手段は、観察者Ｍの注視領域を検出する注視領域検出手段（視線検出器）を備えてなることを特徴としている。
（６）本発明の立体映像表示装置は、前記（４）に記載の立体映像表示装置であって、かつ、一定時間内の観察者の注視点の軌跡を検出し、前記軌跡を囲む領域を左（右）眼用特定エリアとすることを特徴としている。
（７）本発明の立体映像表示装置は、前記（４）に記載の立体映像表示装置であって、順次入力される映像信号によって表される順次の時系列的な立体映像フレームをフレームＡn-2 ，フレームＡn-1 ，フレームＡn とし、この順次の時系列におけるフレームＡn について前記加工を施すに際し、前記右（左）眼用特定エリア位置指定手段は、前記フレームＡn-2 に係る前記類似度をＳn-2 とし前記フレームＡn-1 に係る前記類似度をＳn-1 としたときの両者の類似度Ｓn-2 およびＳn-1 を比較してこの比較結果に依拠するものとして、前記右（左）眼用特定エリアの位置をさらに類似度が高くなると予想される位置に移動させ、当該位置を前記フレームＡn に係る前記右（左）眼用特定エリアの位置として指定するようになされ、前記映像加工手段は、前記フレームＡn-1 に係る類似度Ｓn-1 と前記フレームＡn に係る前記類似度であるＳn とを比較してこの比較結果に依拠して前記フレームＡn について前記加工を施すようになされていることを特徴としている。
【００１３】
【発明の実施の形態】
（第１実施形態）
図１は本発明の第１実施形態に係る立体映像表示装置の基本的機能を示すブロック図である。今、図示しない立体撮像カメラあるいは立体映像再生機等から左映像と右映像とを供給され、左眼用映像表示手段の構成要素である左映像信号受信部１１Ｌと、右眼用映像表示手段の構成要素である右映像信号受信部１１Ｒとは、それぞれ映像信号を受信する。その映像を今、左眼用映像１２Ｌ，右眼用映像１２Ｒとする。
【００１４】
左眼用特定エリア位置指定手段１３Ｌは、前記左映像信号１２Ｌの点線で囲んだ一部領域、すなわち左眼用特定エリア１４Ｌを指定する。また右眼用特定エリア位置指定手段１３Ｒは、前記右映像信号１２Ｒの点線で囲んだ一部領域、すなわち前記右眼用特定エリア１４Ｒに対して予め定めている対応付けに基づいて、右眼用特定エリア１４Ｒを指定する。なお上記特定エリア１４Ｌおよび１４Ｒの位置は、観察者Ｍが画面を注視する場所である。なお、その特定エリア位置を指定する方法等については、後述する他の実施形態中において詳しく説明することにする。
【００１５】
左眼用映像評価パラメータ演算手段１５Ｌは、前記左眼用特定エリア１４Ｌに存在する映像１２Ｌを左映像評価パラメータで数値化する。同様に右眼用映像評価パラメータ演算手段１５Ｒは、前記右眼用特定エリア１４Ｒに存在する映像１２Ｒを右映像評価パラメータで数値化する。なお映像評価パラメータとしては、例えば各エリア内に存在する映像の平均輝度、輝度の分散値、平均空間周波数、平均色度、色度の分散値等が挙げられる。
【００１６】
類似度演算手段１６は、前記左眼用映像評価パラメータ演算手段１５Ｌで得られた左眼用映像評価パラメータ値と、前記右眼用映像評価パラメータ演算手段１５Ｒで得られた右眼用映像評価パラメータ値とを比較し、その差に基づいて前記左眼用特定エリア１４Ｌ内の左眼用映像１２Ｌと前記右眼用特定エリア１４Ｒ内の右眼用映像１２Ｒとの類似度を演算する。
【００１７】
映像加工手段１７は、前記類似度演算手段１６にて演算された類似度に基づいて前記左右映像１２Ｌ，１２Ｒを加工する。この映像の加工とは、映像全体の水平方向シフトや映像の変形修正等を含み、前記特定エリア１４Ｌ，１４Ｒ内の映像の類似度が高くなるように修正する加工のことである。本実施形態では、例えば、右眼用映像１２Ｒ全体を図中左方向へシフトするものとする。シフトした結果が１２２Ｌ，１２２Ｒとなる。なお１２２Ｒの右端には映像シフトの結果、シフト量と同じ分だけ黒色表示がなされている。
【００１８】
図２は、立体映像ディスプレイ１８の概略構成を示す図である。図２に示すように、前記加工された後の左眼用映像１２２Ｌおよび右眼用映像１２２Ｒは、立体映像ディスプレイ１８（左眼用映像表示手段１８Ｌ、右眼用映像表示手段１８Ｒを含む）によって表示される。
【００１９】
以上の動作を映像フレーム毎に繰り返すことにより、映像１２２Ｌのうち左眼用特定エリア１４Ｌ内を注視している観察者Ｍの左眼ＩＬと、映像１２２Ｒのうち右眼用特定エリア１４Ｒ内を注視している観察者Ｍの右眼ＩＲとに対し、極めて類似した映像が呈示されることになり、容易かつ的確に融像し得る映像が提供される。なおＶは虚像面を示しており、１９Ｌ，１９Ｒは左右接眼光学系を示している。
【００２０】
上述した第１実施形態によれば、従来のように対応する映像を探すという処理が行なわれないため、映像記憶容量が少なくて済む。また次々に流れてくる映像信号に対してリアルタイムで処理できるという利点もある。
【００２１】
（第２実施形態）
図３は第２実施形態に係る立体映像表示装置の具体的構成を示すブロック図である。立体撮像カメラや立体映像再生機など含む立体映像供給部２０から出力される左映像信号ＤＬ１および右映像信号ＤＲ１は、それぞれ左映像信号受信部２１Ｌおよび右映像信号受信部２１Ｒへ供給されてＡ／Ｄ変換される。デジタル信号に変換された左映像信号ＤＬ２および右映像信号ＤＲ２はそれぞれを二つに分岐される。
【００２２】
分岐された左映像信号ＤＬ２は、一方において左特定エリア映像抽出部２２Ｌに出力され、他方において左映像加工部２７Ｌに出力される。同様に分岐された右映像信号ＤＳＲは一方において右特定エリア映像抽出部２２Ｒに出力され、他方において右映像加工部２７Ｒに出力される。
【００２３】
一方、観察者Ｍの眼球ＩＬ，ＩＲの近傍に配置された視線検出器２３（検出用光源２３ａとセンサ２３ｂとから成る）は、観察者Ｍが注視している画面内の小領域を測定する為に、観察者Ｍの左右眼球ＩＬ，ＩＲの回転角を検出するものである。この視線検出器２３は観察者Ｍの両眼球ＩＬ，ＩＲのうち、いずれか一方の眼球の視線を検出すればよい。図３の例では左眼球ＩＬの近傍に対応設置している。この視線検出器２３で検出された信号すなわち視線方向角信号ＳＧは左特定エリア位置指定部２４Ｌに入力される。
【００２４】
左特定エリア位置指定部２４Ｌでは、まず視線方向角信号ＳＧに基づいて映像表示面における注視座標（ｘＬ，ｙＬ）を求める。この座標は視線方向角に表示面までの距離を掛け合わせることで求められる。左特定エリア位置指定部２４Ｌからの座標信号は、右特定エリア位置指定部２４Ｒに送られる。右特定エリア位置指定部２４Ｒでは、左特定エリア位置指定部２４Ｌからの信号に基づいて右特定エリア位置を求める。左特定エリア位置に対する右特定エリア位置の関係は、使用するディスプレイによって異なる。
【００２５】
図４は、ディスプレイとして液晶シャッター眼鏡や偏光眼鏡を装着してＣＲＴ画面を見るようにした立体ＴＶを使用する場合を示す。図４の（ａ）に示すように、左右画面３１Ｌ，３１Ｒにおけるそれぞれの特定エリア３４Ｌ，３４Ｒの位置関係は一致しているのが望ましい。これは図４の（ｂ）に示すように、上記タイプの立体ＴＶ３０においては、一つの表示面３１の特定エリア３４に左右の映像を一緒に表示するので、図４の（ａ）の如く左右の特定エリア３４Ｌ，３４Ｒが一致している方が二つの映像を表示面上に融像させ易く、観察者Ｍが見やすいためである。従ってこの場合の左右の特定エリア位置は、次式の関係を有するものとなる。
【００２６】
（ｘＲ，ｙＲ）＝（ｘＬ，ｙＬ） …（１）
図５の（ａ）に示すように、ＨＭＤのような二画面式立体ＴＶの場合には、左右の特定エリア４４Ｌ，４４Ｒの関係はＨＭＤの光学系の特性に合わせて水平方向にずれていることが望ましい。これは次の理由による。
【００２７】
図５の（ｂ）に示すように、ＨＭＤの場合には左右の両眼ＩＬ，ＩＲに対してそれぞれ左右表示面４１Ｌ，４１Ｒが存在しており、観察者Ｍはこの左右表示面４１Ｌ，４１Ｒの虚像面４５上における虚像を見ることになるため、虚像面４５上において左右の特定エリア位置が一致している方が見易いからである。右特定エリア４４Ｒの中心座標位置（ｘＲ，ｙＲ）は次式を満たすことが望ましい。
【００２８】
ｘＲ＝ｘＬ−｛２ｄ／（Ａ・ｔａｎθ）｝
ｙＲ＝ｙＬ …（２）
ただし、ｄ：左右レンズ間の距離の１／２（右眼は正，左眼は負の値となる）
θ：レンズの半画角
Ａ：眼球から虚像面までの距離（視距離）
座標は、左右表示面６１Ｌ，６１Ｒの各左端を「−１」、各右端を「１」として表すように規格化されている。導出方法は、特願平８−２８８５６号などに示されている通りである。その概要を図６、図７を用いて以下に説明する。
【００２９】
実際に表示図上に表示する立体画像の条件を求める。立体映像観察時の視差と輻輳距離Ｌとの関係を求める。図６のように融像したときの輻輳距離Ｌ，水平位置Ｈ上に球が存在するように見えるときの左表示面上の球の水平位置Ｘ1 と右表示面上の球の水平位置Ｘ2 とは、それぞれ式（３）及び式（４）で表される。
【００３０】
Ｘ1 ＝｛ｄ＋（−Ｈ）｝／（Ｌ・ｔａｎθ） …（３）
Ｘ2 ＝｛−ｄ＋（−Ｈ）｝／（Ｌ・ｔａｎθ） …（４）
上記の水平位置Ｘ1 ，Ｘ2 は、図７のように表示領域の水平中心値を０とし、表示領域の水平長さを２として規格化している。
【００３１】
式（３）は図６における点Ａ，Ｂ，Ｃによって作られる三角形と、左表示面での原点０と点Ｘ1 と点Ｃとによって作られる三角形とが相似であることから導くことができる。
【００３２】
式（４）も上記と同様に点Ｄ，Ｂ，Ｅによって作られる三角形と、右表示面での原点０と点Ｘ2 と点Ｅとによって作られる三角形とが相似であることから導くことができる。
【００３３】
上式（３）および式（４）は書き換えると次式の通りになる。
｜Ｘ1 −Ｘ2 ｜＝２ｄ／（Ｌ・ｔａｎθ） …（５）
本実施形態では、上式（５）の左辺｜Ｘ1 −Ｘ2 ｜を視差と呼ぶことにする。上式（５）は水平位置Ｈに限らず、視差が決定すると融像時の輻輳距離Ｌも決まることを表している。
【００３４】
通常は、右特定エリア４４Ｒの位置は左特定エリア４４Ｌの位置に比べて、左側にずれる。ｄ＝３２．５mm、θ＝３０度、Ｌ＝１０００mm、のときのずれ量は画面の水平長さに対して５．６％となる。
【００３５】
図４について上述したような立体ＴＶの場合でも、図５について上述した二画面式立体ＴＶの場合でも、左特定エリア４４Ｌの位置が決定されれば、右特定エリア４４Ｒの位置は一義的に決定される。
【００３６】
図３に説明を戻す。前記左特定エリア映像抽出部２２Ｌは左特定エリア位置指定部２４Ｌからの座標信号（ｘＬ，ｙＬ）を受け取る。同様に右特定エリア映像抽出部２２Ｒは右特定エリア位置指定部２４Ｒからの座標信号（ｘＲ，ｙＲ）を受け取る。そして上記左右特定エリア映像抽出部２２Ｌ、２２Ｒは、それぞれの座標を中心としたある領域の映像信号を抽出する。この領域が本実施形態における特定エリアに相当する。特定エリアの面積は次式を満たすことが望ましい。
（特定エリア面積）÷（表示面積）＜（３０度÷ＨＭＤの接眼光学系の画角）² …（６）
上記式（６）は、人が瞬時に検出受容できる有効視野が約３０度であることに基づいて求められた（「生理光学１６」畑田豊彦著、Opluse E、No.74 、P121-130、（1986））。
【００３７】
上式に従えば、例えば接眼光学系の画角が６０度であれば、特定エリアの面積は表示画面の４分の１以下であれば良いことになる。
左右特定エリア映像抽出部２２Ｌ、２２Ｒによってそれぞれ抽出された左右の特定エリア映像信号ＥＬ，ＥＲは、左右の映像評価パラメータ演算部２５Ｌ，２５Ｒに各々送られる。
【００３８】
映像評価パラメータ演算部２５Ｌ，２５Ｒでは、予め指定している映像評価パラメータ（例えば、エリア内に存在する映像の平均輝度、輝度の分散値、平均空間周波数、平均色度、色度の分散値など）で映像が評価される。映像評価パラメータの種類数は、多ければ多いほど高い精度で後述の類似度を求めることができる。ただしここでは、映像の平均輝度ｍ、輝度の分散値ｗの２種類の映像評価パラメータを求めるものとする。左映像評価パラメータ演算部２５Ｌで求めた左映像評価パラメータ値ｆＬ＝（ｍＬ，ｗＬ）、および右映像評価パラメータ演算部２５Ｒで求めた右映像評価パラメータ値ｆＲ＝（ｍＲ，ｗＲ）は、類似度演算部２６へ送られる。
【００３９】
類似度演算部２６では、左右の映像評価パラメータ値ｆＬ＝（ｍＬ，ｗＬ）とｆＲ＝（ｍＲ，ｗＲ）とを比較し、左右の特定エリア内の映像の類似度に関連したＳ値を求める。このＳ値の計算法としては、下記の式（７）を使うことができる。
【００４０】
Ｓ＝ｆＲ・ｆＬ／｜ｆＲ｜｜ｆＬ｜ …（７）
ただしｆＲ・ｆＬ＝ｍＲｍＬ＋ｗＲｗＬ
｜ｆＲ｜＝（ｍＲ² ＋ｗＲ² ）^1/2
｜ｆＬ｜＝（ｍＬ² ＋ｗＬ² ）^1/2
である。０≦Ｓ≦１となる。類似度が高ければ高いほどＳ値は高くなる。このＳ値を示す類似度信号は左右の映像加工部２７Ｌ，２７Ｒに与えられる。
【００４１】
左右映像加工部２７Ｌ，２７Ｒは、その類似度信号に基づいて、左右映像を加工する。ここで加工とは、映像の水平方向へのシフトや変形（収縮・伸長）等を含むものである。Ｓ値が高ければ加工量は小さく、Ｓ値が低ければ加工量は大きくなる。水平方向へのシフトは、左右映像信号受信部２１Ｌ，２１Ｒからの左右映像信号ＤＬ２、ＤＲ２の全体を水平方向へシフトする。水平方向への具体的シフト手段としては可変遅延回路等が用いられる。左右映像の一方のみをシフトしても良いし両方ともシフトしても良い。両方ともシフトするときは相対的に反対方向にシフトするのが望ましい。なおこの時、視線検出器２３の注視座標を左映像のシフト分だけずらす必要がある。
【００４２】
上記の如く加工された左右映像は、左右映像加工部２７Ｌ，２７Ｒ内のＤ／Ａ変換手段によってアナログ信号に戻されたのち、左右映像表示部２８Ｌ，２８Ｒに出力される。左右映像表示部２８Ｌ，２８Ｒでは供給されたアナログ信号に基づいた表示が行なわれる。
【００４３】
上記した一連の動作が各映像フレーム毎に繰り返して行なわれる。これにより融像が容易で違和感の少ない良好な立体映像が表示される。
（変形例）
第１実施形態および第２実施形態には、以下のような変形例が含まれている。
【００４４】
(1) 映像の加工方向を知る為に、特定エリアとは別に加工方向判別エリアを設けても良い。例えば水平方向シフトによる加工を行なうとき、図８に示すように右特定エリア５４Ｒの両わきに加工方向判別エリア５６Ｒ，５７Ｒを設けるようにする。そして上記各加工方向判別エリア５６Ｒ内の映像と左特定エリア５４内の映像とについて式（７）と同様の類似度を求め、上記各加工方向判別エリア５７Ｒ内の映像と左特定エリア５４Ｌ内の映像とについて式（７）と同様の類似度を求める。これらの類似度も前記した類似度と同時に左右映像加工部２７Ｌ，２７Ｒに出力する。この左右映像加工部２７Ｌ，２７Ｒでは二つの加工方向判別エリア５６Ｒ，５７Ｒの類似度を比較して加工方向を決定する。図８の場合には、加工方向判別エリア５７Ｒの方が加工方向判別エリア５６Ｒよりも類似度のＳ値が高い。よって右映像は右方向にずれていることが分かるので、シフト方向は左にする。加工方向判別エリア５６Ｒ，５７Ｒは加工方向だけを知るものであるので、映像評価パラメータの演算精度は低くて良い。よってエリア面積は特定エリア５４Ｌ，５４Ｒよりも小さくすることができる。
【００４５】
結果として、観察者Ｍの左右両眼がそれぞれ注視する領域の映像の類似性を高めることができ、観察者Ｍにとって融像しやすい立体映像を呈示することができる。
【００４６】
(2) 特定エリアの決定法として、観察者Ｍの注視点を中心とした領域を特定エリアとする方法について述べたが、これに限られるものではない。例えば図９に示すように、映像領域全体を予め複数のブロック６１ａ，６１ｂ…６１ｎに分割しておき、注視点座標６２を含むブロックを選択し、選択された当該ブロックを左特定エリア６４Ｌとする方法でもよい。右特定エリア６４Ｒについては前述した式（１）、式（２）を満たすように定めておく。左特定エリア６４Ｌのブロックが選択されたら自動的に対応する右ブロックを選ぶ。
【００４７】
この方法においては、予め抽出する領域が決まっているので，処理時間が著しく短くなる利点がある。しかも視線検出の分解能が粗くてもよいという利点がある。
【００４８】
(3) 特定エリアの他の決定法として、一定時間内における注視点の軌跡を検出し、その範囲を特定エリアとすることもできる。人間の眼球運動の中には跳躍運動（ＳａｃｃａｄｉｃＭｏｖｅｍｅｎｔ）と呼ばれるものがある。これは、人間が映像特徴を抽出する際に起こる運動だと言われている（「生理光学１６」畑田豊彦著、Opluse E、No.74 、P121-130、（1986））。
【００４９】
図１０は表示面７１上にある対象物の映像７２を表示したとき、所定時間内での視線の跳躍運動軌跡７３を示す図である。この軌跡７３はいわば観察者Ｍが今見たいと思っている映像領域を表している。そこで、この生理現象に基づく跳躍運動軌跡７３を囲むように左特定エリア７４Ｌを決定する。
【００５０】
この方法を採用した場合、図３に示した左特定エリア位置指定部２４Ｌは、図１１に示すブロック図のように構成される。即ち、視線検出器２３からの視線方向角信号ＳＧが入力すると、これは注視座標変換部８１により注視座標（ｘＬ，ｙＬ）に変換される。この点は前述の場合と同じである。そして変換された座標信号はメモリ８２に記憶される。この動作は一定時間、例えば５００ｍｓくらいの時間だけ繰り返される。そして上記の如く一定時間だけ累積記憶された全座標Σ（ｘＬ，ｙＬ）がメモリ８２から読み出され、左特定エリア計算部８３に入力する。左特定エリア計算部８３は、上記読み出された全座標Σ（ｘＬ，ｙＬ）を囲む領域、すなわち前記左特定エリア７４Ｌを求める。この求められた左特定エリア７４Ｌの信号は、右特定エリア位置指定部２４Ｒと左特定エリア映像抽出部２２Ｌへ送られる。右特定エリア位置指定部２４Ｒでは、前述した式（１）および式（２）を満たすように右特定エリア７４Ｒ（不図示）を決定する。
【００５１】
この方法においては、特定エリア７４Ｌ，７４Ｒの面積や形は予め定められておらず、映像の内容に応じて、観察者Ｍがまさに見たいと思っている領域を特定エリアとすることができる。したがって前述した方法と比べ、さらに融像し易い立体映像を呈示できる。またメモリ８２に一定時間に亘って累積記憶された全座標Σ（ｘＬ，ｙＬ）に基づいた処理が行なわれることから、視線方向の急激な変化等により立体映像の加工量が急激に変化して立体映像がふらつくといった事態を回避することができる。このため動作の安定性が確保される。
【００５２】
(4) 左特定エリアを指定する方法として、必ずしも視線検出器２３を用いる必要はない。例えば、マウスやジョイスティック等を観察者Ｍが操作することにより、立体映像と同時に表示されているポインタを動かすような装置の場合には、このポインタの位置を視線検出器２３の注視点の代わりに用いても良い。この場合には、視線検出器２３等が不要になるので、装置の構成が簡略化され、小型かつ安価に製作できるという利点がある。
【００５３】
(5) 特定エリアは必ずしも動かす必要はない。すなわちＨＭＤにヘッドモーションセンサ１０４を取り付け、観察者Ｍの頭の動きに合わせて映像を変化させるようにしたバーチャルリアリティ装置の場合には、観察者Ｍの注視方向は略頭部の向きと一致しているので、特定エリアの位置を表示面中央に固定しても良い。この場合には、特定エリアを可変指定する電気回路が不要になるので、この点で装置の構成が簡略化され小型かつ安価に製作可能となる。
【００５４】
（第３実施形態）
図１２および図１３は本発明の第３実施形態に係る立体映像表示装置の具体的動作を示すフロー図（両図は丸で囲んだ数字で示す対応箇所にて互いに接続されている）である。なお本実施形態の構成ブロック図は、図３に示す第２実施形態の構成ブロック図と同じとなるため省略する。この第３実施形態は、一方の特定エリア位置を決定する際に、前回と前々回の類似度の値に基づいて特定エリアの位置をフィードバックして決定すると共に、前回と今回の類似度の値に基づいて加工方向（水平シフト方向）をフィードバックして決定するようにした点に特徴を有する。以下、図１２および図１３に示すフロー図を参照しながらその特徴点につき説明する。
【００５５】
「ステップ１」（ＳＴ１）
左右特定エリアの初期位置指定が行なわれる。例えば、左特定エリアは表示面中央に設定され、右特定エリア位置は式（１），式（２）を満たす位置に設定される。そして入力されてくる映像に対し、類似度初期値の計算が行なわれる。その計算結果である類似度初期値について、予め設定されている加工量だけ初期加工が行なわれる。例えば表示面長さの１％量が右方向にシフトされる。これら特定エリアの指定と類似度計算と映像シフトとが次の映像フレームについても行なわれる。ただし２回目の映像フレームに対しては、右特定エリアの位置については１％だけ左方向に動かし、映像シフトについては１％だけ右方向にシフトさせる。このように特定エリア位置の１回の動かし量は予め設定されている。その量をここではΔＡとする。また１回の映像シフト量も予め定められている。その量をここではΔＢとする。
【００５６】
「ステップ２」（ＳＴ２）
第２実施形態と同様に視線検出が行なわれ、左特定エリア位置指定部２４Ｌで左特定エリア位置が決定される。
【００５７】
「ステップ３」（ＳＴ３）
左特定エリア位置指定部２４Ｌからの左特定エリア位置信号を受けて、右特定エリア位置指定部２４Ｒでは右特定エリア位置が決定される。その決定の方法は次の通りである。前々回の類似度Ｓn-2 と前回の類似度Ｓn-1 とを比較し、更に類似度が高くなると予想される位置に特定エリア位置を動かす。
【００５８】
例えば、図１４に示すような場合、Ｓn-2 とＳn-1 とを比較してＳn-1 のほうが高ければ、さらに特定エリア位置を左方向にΔＡシフトさせる。もしＳn-2 とＳn-1 を比較してＳn-2 の方が高ければ、前々回の特定エリア位置から右方向にΔＡシフトさせる。
【００５９】
「ステップ４」（ＳＴ４）
第２実施形態と同様に、左右映像評価パラメータ演算部２５Ｌ，２５Ｒにおいてそれぞれの映像評価パラメータが計算される。
【００６０】
「ステップ５」（ＳＴ５）
第２実施形態と同様に、類似度演算部２６において左右それぞれの映像評価パラメータから類似度Ｓn が計算される。この計算結果は左右映像加工部２７Ｌ，２７Ｒに送られる。
【００６１】
「ステップ６」（ＳＴ６）
左右映像加工部２７Ｌ，２７Ｒにおいて前回の類似度Ｓn-1 より、今回の類似度Ｓn の方が高いか否かが判定される。
【００６２】
「ステップ７」（ＳＴ７）
今回の類似度Ｓn の方が前回の類似度Ｓn-1 よりも高い場合は、図１５のように、前回のシフト方向と同じ方向でさらにΔＢだけ画像全体がシフトされる。反対に前回の類似度Ｓn-1 の方が今回の類似度Ｓn よりも高い場合は、前回のシフト量が保持される。
【００６３】
「ステップ８」（ＳＴ８）
シフトによる加工を終了した左右映像を表示する。
上記した「ステップ２」〜「ステップ８」を、映像フレーム毎に繰り返す。これらのステップは、１／６０秒もしくは１／３０秒で一巡させるのが望ましい。このようにすることで、変化の速い動画像に対しても、映像フレーム間ではさほど大きな変化がないので十分追従できる。
【００６４】
本実施形態によれば、類似度の値を加工量へ変換する方法が不明であっても、フィードバック制御によって類似度が高くなるような立体映像の加工を行なえるという利点がある。
【００６５】
（実施形態のまとめ）
上述した実施形態に示された立体映像表示装置の構成および作用効果をまとめると次の通りである。
［１］実施形態に示された立体映像表示装置は、
左眼用映像１２Ｌを表示する左眼用映像表示手段１８Ｌと、
右眼用映像１２Ｒを表示する右眼用映像表示手段１８Ｒと、
前記左（右）眼用映像表示手段１８Ｌ（１８Ｒ）の表示面中に、左（右）眼用特定エリア１４Ｌ（１４Ｒ）の位置を指定する左（右）眼用特定エリア位置指定手段１３Ｌ（１３Ｒ）と、
前記右（左）眼用映像表示手段１８Ｒ（１８Ｌ）の表示面中に、前記左（右）眼用特定エリア１４Ｌ（１４Ｒ）の位置に対して予め定めている対応付けに基づいて、右（左）眼用特定エリア１４Ｒ（１４Ｌ）の位置を指定する右（左）眼用特定エリア位置指定手段１３Ｒ（１３Ｌ）と、
前記左眼用特定エリア１４Ｌに存在する映像１２Ｌを映像評価パラメータで数値化する左眼用映像評価パラメータ演算手段１５Ｌと、
前記右眼用特定エリア１４Ｒに存在する映像１２Ｒを映像評価パラメータで数値化する右眼用映像評価パラメータ演算手段１５Ｒと、
前記数値化された左眼用映像評価パラメータ値と前記数値化された右眼用映像評価パラメータ値とを比較し、前記左眼用特定エリア１４Ｌの左眼用映像１２Ｌと前記右眼用特定エリア１４Ｒの右眼用映像１２Ｒとの類似度Ｓを演算する類似度演算手段１６と、
前記類似度演算手段１６によって演算された類似度Ｓに基づいて、前記左右映像１２Ｌ，１２Ｒのうち少なくとも一方の映像を加工する映像加工手段１７と、
を有することを特徴としている。
【００６６】
上記立体映像表示装置においては、左右両眼ＩＬ，ＩＲが注眼する領域の左右映像１２Ｌ，１２Ｒが類似性の高い映像に加工され、その結果、立体映像の観察時における二重像や違和感が排除されることになる。すなわち、映像中の左右の特定エリア１４Ｌ，１４Ｒが指定され、その左右の特定エリア１４Ｌ，１４Ｒ中に存在している映像１２Ｌ，１２Ｒの類似性が、映像評価パラメータを用いて正確に調べられる。その調べた類似性の結果に基づいて、初めに指定した左右の特定エリア１４Ｌ，１４Ｒ内の映像が、設定された類似度の眼標値を越えるように加工修正される。その結果、２重像や違和感を引き起こす左右映像間のずれが補正される。またこの立体映像表示装置においては、従来のように対応する映像を探すという処理は行なわれず、特定エリアの映像のみを用いて処理されるので、映像記憶容量も少なくて済み、かつ次々に流れてくる映像信号に対してリアルタイムで処理できるという利点がある。
［２］実施形態に示された立体映像表示装置は、上記［１］に記載した立体映像表示装置であって、かつ左（右）眼用特定エリア位置指定手段は、観察者の注視領域を検出する注視領域検出手段（視線検出器２３）を備えてなることを特徴としている。
【００６７】
上記立体映像表示装置においては、前記［１］と同様の作用効果を奏する上、観察者Ｍの注視領域が検出され、その注視領域が特定エリアとされるので、観察者Ｍがどこを見ようとも、その観察者Ｍの注視領域が高い類似度となる如く映像加工が施され、自然で良好な立体映像を呈示可能である。
［３］実施形態に示された立体映像表示装置は、上記［１］に記載した立体映像表示装置であって、かつ、一定時間内の観察者Ｍの注視点の軌跡７３を検出し、前記軌跡７３を囲む領域を左（右）眼用特定エリア７４Ｌ（７４Ｒ）とすることを特徴としている。
【００６８】
上記立体映像表示装置においては、前記［１］と同様の作用効果を奏する上、この方法では、特定エリア７４Ｌ（７４Ｒ）の面積や形は予め定まっておらず、映像の内容に応じて観察者Ｍがまさに見たいと思っている領域を特定エリア７４Ｌ（７４Ｒ）とすることができる。よって、さらに融像し易い立体映像を呈示できる。
【００６９】
なおメモリ８２に一定時間に亘って累積記憶された全座標Σ（ｘＬ，ｙＬ）に基づいた処理を行なうようにした場合には、視線方向の急激な変化等により立体映像の加工量が急激に変化して立体映像がふらつくといった事態を回避でき、動作の安定性が確保されるものとなる。
［４］実施形態に示された立体映像表示装置は、
左眼用映像１２Ｌと右眼用映像１２Ｒとによって構成される立体映像フレームを表わす映像信号がこの立体映像フレームの時系列に従うようにして順次入力され得るようになされた立体映像表示装置であって、
前記左眼用映像１２Ｌを表示する左眼用映像表示手段１８Ｌと、
前記右眼用映像１２Ｒを表示する右眼用映像表示手段１８Ｒと、
前記左（右）眼用映像表示手段１８Ｌ（１８Ｒ）の表示面中に、左（右）眼用特定エリア１４Ｌ（１４Ｒ）の位置を指定する左（右）眼用特定エリア位置指定手段１３Ｌ（１３Ｒ）と、
前記右（左）眼用映像表示手段１８Ｒ（１８Ｌ）の表示面中に、前記左（右）眼用特定エリア１４Ｌ（１４Ｒ）の位置に対して予め定めている対応付けに基づいて、右（左）眼用特定エリア１４Ｒ（１４Ｌ）の位置を指定する右（左）眼用特定エリア位置指定手段１３Ｒ（１３Ｌ）と、
前記左眼用特定エリア１４Ｌに存在する映像１２Ｌを映像評価パラメータで数値化する左眼用映像評価パラメータ演算手段１５Ｌと、
前記右眼用特定エリア１４Ｒに存在する映像１２Ｒを映像評価パラメータで数値化する右眼用映像評価パラメータ演算手段１５Ｒと、
前記数値化された左眼用映像評価パラメータ値と前記数値化された右眼用映像評価パラメータ値とを比較し、前記左眼用特定エリア１４Ｌの左眼用映像１２Ｌと前記右眼用特定エリア１４Ｒの右眼用映像１２Ｒとの類似度Ｓを演算する類似度演算手段１６と、
順次の前記立体映像フレームのうちの一の立体映像フレームに係る前記類似度Ｓn と前記一の立体映像フレームの前の立体映像フレームに係る前記類似度Ｓn-1 とを比較し、その比較結果から前記左眼用映像１２Ｌおよび右眼用映像１２Ｒのうち少なくとも一方の映像を加工する映像加工手段１７と、
を有することを特徴としている。
【００７０】
上記立体映像表示装置においては、映像を加工する際に、前回の類似度Ｓn-1 と今回の類似度Ｓn とを比較して加工方向を決定する。この方法では、類似度Ｓの値から加工量へ変換する変換方法が不明であっても、フィードバック制御によって類似度Ｓが高くなるよう立体映像を加工できるという利点がある。
［５］実施形態に示された立体映像表示装置は、前記［４］に記載の立体映像表示装置であって、かつ、左（右）眼用特定エリア位置指定手段１３Ｌ（１３Ｒ）は、観察者Ｍの注視領域を検出する注視領域検出手段（視線検出器２３）を備えてなることを特徴としている。
【００７１】
上記立体映像表示装置においては、前記［４］と同様の作用効果を奏する上、観察者Ｍの注視領域が検出され、その注視領域が特定エリアとされるので、観察者Ｍがどこを見ようとも、その観察者Ｍの注視領域が高い類似度となる如く映像加工が施され、自然で良好な立体映像を呈示可能である。
［６］実施形態に示された立体映像表示装置は、前記［４］に記載の立体映像表示装置であって、かつ、一定時間内の観察者Ｍの注視点の軌跡７３を検出し、前記軌跡７３を囲む領域を左（右）眼用特定エリア７４Ｌ（７４Ｒ）とすることを特徴としている。
【００７２】
上記立体映像表示装置においては、前記［４］と同様の作用効果を奏する上、特定エリア７４Ｌ（７４Ｒ）の面積や形は予め定まっておらず、映像の内容に応じて観察者Ｍがまさに見たいと思っている領域を特定エリア７４Ｌ（７４Ｒ）とすることができる。よって、さらに融像し易い立体映像を呈示できる。また一定時間に亘って累積記憶された全座標Σ（ｘＬ，ｙＬ）に基づいた処理が行なわれるため、視線方向の急激な変化等により立体映像の加工量が急激に変化して立体映像がふらつくといった事態を回避でき、動作の安定性が確保される。
［７］実施形態に示された立体映像表示装置は、前記［４］に記載の立体映像表示装置であって、かつ、順次入力される映像信号によって表される順次の時系列的な立体映像フレームをフレームＡn-2 ，フレームＡn-1 ，フレームＡn とし、この順次の時系列におけるフレームＡn について前記加工を施すに際し、前記右（左）眼用特定エリア位置指定手段は、前記フレームＡn-2 に係る前記類似度をＳn-2 とし前記フレームＡn-1 に係る前記類似度をＳn-1 としたときの両者の類似度Ｓn-2 およびＳn-1 を比較してこの比較結果に依拠するものとして予め定めている前記対応付けに基づいて前記フレームＡn に係る前記右（左）眼用特定エリアの位置を指定するようになされ、前記映像加工手段は、前記フレームＡn-1 に係る類似度Ｓn-1 と前記フレームＡn に係る前記類似度であるＳn とを比較してこの比較結果に依拠して前記フレームＡn について前記加工を施すようになされていることを特徴としている。
【００７３】
上記立体映像表示装置においては、フレームＡn-2 の類似度Ｓn-2 からフレームＡn-1 の類似度Ｓn-1 への時間的推移を認識し、この認識に基づいてフレームＡn の類似度Ｓn が高くなるように調節動作を行ない得るため、各映像フレームに対してより適切な加工を行なうことができる。
【００７４】
【発明の効果】
本発明によれば、下記のような作用効果を奏する立体映像表示装置を提供することができる。
(a) 映像中の左右特定エリアに存在している映像が、所要の類似度を有する如く加工修正されて表示されるため、視差計算等を格別に行なわずに、二重像や違和感のある立体映像を排除できる。
【００７５】
(b) 従来のように対応する映像を探すという処理を行なう必要がないため、処理に要するメモリの容量が少なくて済み、かつ次々に流れてくる映像信号につきリアルタイムで処理できる。
(c) 左右特定エリアが観察者の注視ポイントに応じて決定されるため、効率のよい処理を的確に行なえる。
【図面の簡単な説明】
【図１】本発明の第１実施形態に係る立体映像表示装置における基本的機能を示すブロック図。
【図２】本発明の第１実施形態に係る立体映像表示装置における立体映像ディスプレイの概略構成を示す図。
【図３】本発明の第２実施形態に係る立体映像表示装置における具体的構成を示すブロック図。
【図４】本発明の第２実施形態に係る立体映像表示装置の作用を説明するための図。
【図５】本発明の第２実施形態に係る立体映像表示装置の作用を説明するための図。
【図６】本発明の第２実施形態に係る立体映像表示装置の作用を説明するための図。
【図７】本発明の第２実施形態に係る立体映像表示装置の作用を説明するための図。
【図８】本発明の第２実施形態に係る立体映像表示装置の変形例を示す図。
【図９】本発明の第２実施形態に係る立体映像表示装置の変形例を示す図。
【図１０】本発明の第２実施形態に係る立体映像表示装置の変形例を示す図。
【図１１】本発明の第２実施形態に係る立体映像表示装置の変形例を示す図。
【図１２】本発明の第３実施形態に係る立体映像表示装置の具体的動作（その一部）を示すフロー図。
【図１３】本発明の第３実施形態に係る立体映像表示装置の具体的動作（残りの一部）を示すフロー図。
【図１４】本発明の第３実施形態に係る立体映像表示装置の作用を説明するための図。
【図１５】本発明の第３実施形態に係る立体映像表示装置の作用を説明するための図。
【図１６】従来の立体映像表示装置の一適用例である頭部装着型表示装置（ＨＭＤ）の使用状態を示す外観斜視図。
【図１７】従来の立体映像表示装置の問題点を示す概略図。
【符号の説明】
１２Ｌ…左眼用映像
１２Ｒ…右眼用映像
１３Ｌ…左眼用特定エリア位置指定手段
１３Ｒ…右眼用特定エリア位置指定手段
１４Ｌ…左眼用特定エリア
１４Ｒ…右眼用特定エリア
１５Ｌ…左眼用映像評価パラメータ演算手段
１５Ｒ…右眼用映像評価パラメータ演算手段
１６……類似度演算手段
１７……映像加工手段
１８Ｌ…左眼用映像表示手段
１８Ｒ…右眼用映像表示手段

Claims

左眼用映像を表示する左眼用映像表示手段と、
右眼用映像を表示する右眼用映像表示手段と、
前記左（右）眼用映像表示手段の表示面中に、左（右）眼用特定エリアの位置を指定する左（右）眼用特定エリア位置指定手段と、
前記右（左）眼用映像表示手段の表示面中に、前記左（右）眼用特定エリアの位置に対して、
（ｘＲ，ｙＲ）＝（ｘＬ，ｙＬ）
または
ｘＲ＝ｘＬ−｛２ｄ／（Ａ・ｔａｎθ）｝
ｙＲ＝ｙＬ
ただし、ｄ：左右レンズ間の距離の１／２（右眼は正，左眼は負の値となる）
θ：レンズの半画角
Ａ：眼球から虚像面までの距離（視距離）
を満足するように、右（左）眼用特定エリアの位置を指定する右（左）眼用特定エリア位置指定手段と、
前記左眼用特定エリアに存在する映像を映像評価パラメータで数値化する左眼用映像評価パラメータ演算手段と、
前記右眼用特定エリアに存在する映像を映像評価パラメータで数値化する右眼用映像評価パラメータ演算手段と、
前記数値化された左眼用映像評価パラメータ値と前記数値化された右眼用映像評価パラメータ値とを比較し、前記左眼用特定エリアの左眼用映像と前記右眼用特定エリアの右眼用映像との類似度を演算する類似度演算手段と、
前記類似度演算手段によって演算された類似度に基づいて、前記左右映像のうち少なくとも一方を左右方向でシフトさせる映像加工手段と、
を有することを特徴とする立体映像表示装置。
左（右）眼用特定エリア位置指定手段は、観察者の注視領域を検出する注視領域検出手段を備えてなることを特徴とする請求項１に記載の立体映像表示装置。
一定時間内の観察者の注視点の軌跡を検出し、前記軌跡を囲む領域を左（右）眼用特定エリアとすることを特徴とする請求項１に記載の立体映像表示装置。
左眼用映像と右眼用映像とによって構成される立体映像フレームを表わす映像信号がこの立体映像フレームの時系列に従うようにして順次入力され得るようになされた立体映像表示装置であって、
前記左眼用映像を表示する左眼用映像表示手段と、
前記右眼用映像を表示する右眼用映像表示手段と、
前記左（右）眼用映像表示手段の表示面中に、左（右）眼用特定エリアの位置を指定する左（右）眼用特定エリア位置指定手段と、
前記右（左）眼用映像表示手段の表示面中に、前記左（右）眼用特定エリアの位置に対して、
（ｘＲ，ｙＲ）＝（ｘＬ，ｙＬ）
または
ｘＲ＝ｘＬ−｛２ｄ／（Ａ・ｔａｎθ）｝
ｙＲ＝ｙＬ
ただし、ｄ：左右レンズ間の距離の１／２（右眼は正，左眼は負の値となる）
θ：レンズの半画角
Ａ：眼球から虚像面までの距離（視距離）
を満足するように、右（左）眼用特定エリアの位置を指定する右（左）眼用特定エリア位置指定手段と、
前記左眼用特定エリアに存在する映像を映像評価パラメータで数値化する左眼用映像評価パラメータ演算手段と、
前記右眼用特定エリアに存在する映像を映像評価パラメータで数値化する右眼用映像評価パラメータ演算手段と、
前記数値化された左眼用映像評価パラメータ値と前記数値化された右眼用映像評価パラメータ値とを比較し、前記左眼用特定エリアの左眼用映像と前記右眼用特定エリアの右眼用映像との類似度を演算する類似度演算手段と、
順次の前記立体映像フレームのうちの一の立体映像フレームに係る前記類似度と前記一の立体映像フレームの前の立体映像フレームに係る前記類似度とを比較し、その比較結果から前記左眼用映像および右眼用映像のうち少なくとも一方を左右方向でシフトさせる映像加工手段と、
を有することを特徴とする立体映像表示装置。
左（右）眼用特定エリア位置指定手段は、観察者の注視領域を検出する注視領域検出手段を備えてなることを特徴とする請求項４に記載の立体映像表示装置。
一定時間内の観察者の注視点の軌跡を検出し、前記軌跡を囲む領域を左（右）眼用特定エリアとすることを特徴とする請求項４に記載の立体映像表示装置。
順次入力される映像信号によって表される順次の時系列的な立体映像フレームをフレームＡn-2 ，フレームＡn-1 ，フレームＡn とし、この順次の時系列におけるフレームＡn について前記加工を施すに際し、
前記右（左）眼用特定エリア位置指定手段は、前記フレームＡn-2 に係る前記類似度をＳn-2 とし前記フレームＡn-1 に係る前記類似度をＳn-1 としたときの両者の類似度Ｓn-2 およびＳn-1 を比較してこの比較結果に依拠するものとして、前記右（左）眼用特定エリアの位置をさらに類似度が高くなると予想される位置に移動させ、当該位置を前記フレームＡn に係る前記右（左）眼用特定エリアの位置として指定するようになされ、
前記映像加工手段は、前記フレームＡn-1 に係る類似度Ｓn-1 と前記フレームＡn に係る前記類似度であるＳn とを比較してこの比較結果に依拠して前記フレームＡn について前記加工を施すようになされていることを特徴とする請求項４に記載の立体映像表示装置。