[go: up one dir, main page]

JP2003280785A - 画像表示処理装置、および画像表示処理方法、並びにコンピュータ・プログラム - Google Patents

画像表示処理装置、および画像表示処理方法、並びにコンピュータ・プログラム

Info

Publication number
JP2003280785A
JP2003280785A JP2002086767A JP2002086767A JP2003280785A JP 2003280785 A JP2003280785 A JP 2003280785A JP 2002086767 A JP2002086767 A JP 2002086767A JP 2002086767 A JP2002086767 A JP 2002086767A JP 2003280785 A JP2003280785 A JP 2003280785A
Authority
JP
Japan
Prior art keywords
controller
scroll
image display
display processing
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Abandoned
Application number
JP2002086767A
Other languages
English (en)
Inventor
Tetsukazu Kai
哲一 開
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2002086767A priority Critical patent/JP2003280785A/ja
Priority to US10/386,574 priority patent/US20030210255A1/en
Publication of JP2003280785A publication Critical patent/JP2003280785A/ja
Abandoned legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/34—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators for rolling or scrolling
    • G09G5/346—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators for rolling or scrolling for systems having a bit-mapped display memory

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Instructional Devices (AREA)
  • Processing Or Creating Images (AREA)
  • Position Input By Displaying (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

(57)【要約】 【課題】 容易なコントローラ操作によるディスプレイ
表示画像のスクロールを実現する画像表示処理装置およ
び方法を提供する。 【解決手段】 ディスプレイに表示された画像のスクロ
ールを実現するために、コントローラの位置や姿勢情報
をセンサにより取得し、取得情報に基づいてスクロール
を実行する。例えば、コントローラの傾きの遷移状態を
検出し、検出遷移情報に基づいてスクロールを行なう構
成としたので、あたかもコントローラの歩行状態を反映
したスクロール処理が可能となる。また、コントローラ
の位置を検出し、検出位置情報に基づいてスクロールを
実行する構成としたので、複雑な操作を行なうことのな
い容易なスクロール処理が可能となる。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、画像表示処理装
置、および画像表示処理方法、並びにコンピュータ・プ
ログラムに関する。さらに詳細には、ＬＣＤ等のディス
プレイに表示された画像をコントローラの動きに応じて
スクロール処理を実行する画像表示処理装置、および画
像表示処理方法、並びにコンピュータ・プログラムに関
する。
【０００２】
【従来の技術】ＰＣあるいはゲーム装置等のディスプレ
イに表示させた画像をスクロール、すなわち表示画像の
移動更新処理を実行するためには、キーボード、あるい
はコントローラに備えらた所定のスクロールスイッチ、
あるいはマウス等の操作によるのが一般的である。
【０００３】これらのスクロール処理は、所定の処理手
順に沿って実行すればよいものであり、ＰＣ等の装置に
熟知しているユーザにとっては、何ら問題なく処理する
ことが可能であるが、ＰＣ、あるいはゲーム機等の操作
に不慣れなユーザ、例えば幼児等の年少者にとっては、
決して分かりやすい操作ではない。
【０００４】例えば幼児等の年少者を対象としたディス
プレイ表示システムとして図１に示す構成がある。図１
のシステムは、位置と姿勢を計測できるセンサが具備さ
れたコントローラ１０１を操作して画面１０２に表示さ
れている情報の処理を行なうシステムである。
【０００５】図１のようなコントローラを用いたシステ
ムでは、センサとしてのコントローラ１０１の座標系と
画面の座標系、ひいては画面に表示されている地図や３
次元仮想空間などのモデルの座標系までを一致させ、コ
ントローラ１０１を操作して画面に表示されているオブ
ジェクトへ直接的にインタラクションすることで表示画
面１０２に対する各種の操作を実現する場合が多い。
【０００６】例えば図２（ａ）に示すように、画面１０
２上に表示されたボタン１０３上にコントローラ１０１
を移動させるとボタンが押されるといった直接的なイン
タラクションが適用される。なお、汎用的なマウスのよ
うにマウスカーソルを介してではなく、コントローラそ
のもので画面上に表示されているオブジェクトに働きか
けることを「直接的なインタラクション」と呼ぶ。
【０００７】また図２（ｂ）に示すように、物理的なコ
ントローラ１０１の影１０４を画面１０２上に仮想的に
表示するのもセンサ座標系と画面座標系およびモデル座
標系を一致させることで可能になり、これも直接的なイ
ンタラクションの一種である。
【０００８】地図や３次元仮想空間を画面に一度に表示
しきれないとき、画面外の情報にアクセスするにはそれ
らをスクロールさせる必要がある。上記のようなシステ
ムにおいて、スクロール処理を実行する方法としては、
例えば、上下左右の矢印を配したボタンなどを画面の任
意の位置に配置し、コントローラでそのボタンを押すこ
とによってそれぞれ対応した方向へスクロールする方法
が考えられる。
【０００９】この構成は従来からよく利用されている構
成の一つではあるが、ボタンという間接的なオブジェク
トを介しており、ボタンを押すという煩わしい手順を踏
む必要がある。また、画面にボタンというオブジェクト
を配置することにより、表示画像の領域をボタンによっ
て狭めてしまい、また画面が煩雑になるという欠点もあ
る。また、画面端部にスクロールバーを配置した表示を
行ない、それをコントローラで操作することによってス
クロールさせる方法も考えられるが、上記と同様、画面
領域の占有、画面煩雑化等の問題がある。
【００１０】スクロール用に例えばジョイスティックや
トラックボール、ボタン、ジョグダイアルなどの物理的
なデバイスを、ディスプレイ本体やコントローラなどに
追加する構成とする方法も考えられるが、コストアップ
にもつながり、スクロールを利用しない場面では冗長と
なる。
【００１１】
【発明が解決しようとする課題】本発明は、上記問題点
に鑑みてなされたものであり、簡単なコントローラの操
作により、ＰＣ、あるいはゲーム機等の画面スクロール
処理を実行可能とした画像表示処理装置、および画像表
示処理方法、並びにコンピュータ・プログラムを提供す
ることを目的とする。
【００１２】具体的には、ユーザ、例えば子供の手に把
握可能なコントローラの姿勢、動き等を検出し、検出し
た姿勢や動き情報に基づいて、ＰＣ、あるいはゲーム機
等の画面スクロール処理を実行可能とした画像表示処理
装置、および画像表示処理方法、並びにコンピュータ・
プログラムを提供することを目的とする。
【００１３】
【課題を解決するための手段】本発明の第１の側面は、
ディスプレイに表示された画像データのスクロール処理
を実行する画像表示処理装置であり、ユーザによる操作
可能なコントローラであり、３次元空間における位置お
よび姿勢情報の少なくともいずれかの情報をセンサを介
して提供するコントローラ手段と、前記コントローラの
３次元空間における位置および姿勢情報の少なくともい
ずれかの情報に基づいて、ディスプレイに表示された画
像データのスクロール処理態様を決定するスクロール情
報生成手段と、前記スクロール情報生成手段の決定に従
ってディスプレイの表示画像のスクロール処理としての
画像更新処理を実行する画像表示制御手段と、を有する
ことを特徴とする画像表示処理装置にある。
【００１４】さらに、本発明の画像表示処理装置の一実
施態様において、前記スクロール情報生成手段は、前記
コントローラの右傾状態、左傾状態、および無傾状態の
３状態の判別処理を実行し、該３状態の状態遷移の有無
に基づいてスクロール処理の実行の有無を決定する構成
であることを特徴とする。
【００１５】さらに、本発明の画像表示処理装置の一実
施態様において、前記スクロール情報生成手段は、前記
コントローラの右傾状態、左傾状態、および無傾状態の
３状態の判別処理を実行し、右傾状態および左傾状態間
の状態遷移の有無に基づいてスクロール処理の実行の有
無を決定する構成であることを特徴とする。
【００１６】さらに、本発明の画像表示処理装置の一実
施態様において、前記画像表示処理装置は、さらに、前
記コントローラの位置および姿勢情報をディスプレイ面
を基準とした画面座標系に対応した情報に変換する変換
手段を有し、前記スクロール情報生成手段は、前記変換
手段により変換された画面座標系に対応した前記コント
ローラの姿勢情報に基づいて、ディスプレイに表示され
た画像データのスクロール処理態様を決定する構成であ
ることを特徴とする。
【００１７】さらに、本発明の画像表示処理装置の一実
施態様において、前記スクロール情報生成手段は、前記
コントローラの向きに応じて、スクロール方向を決定す
る処理を実行する構成であることを特徴とする。
【００１８】さらに、本発明の画像表示処理装置の一実
施態様において、前記スクロール情報生成手段は、前記
コントローラの傾きの方向に応じて、スクロール方向を
決定する処理を実行する構成であることを特徴とする。
【００１９】さらに、本発明の画像表示処理装置の一実
施態様において、前記スクロール情報生成手段は、前記
コントローラが予め定められた作用領域にあるか否かの
コントローラ位置判別処理を実行し、前記コントローラ
が予め定められた作用領域内である場合にスクロール処
理の実行を決定する構成であることを特徴とする。
【００２０】さらに、本発明の画像表示処理装置の一実
施態様において、前記作用領域は、ディスプレイ平面か
ら垂直方向に一定距離以上離間した領域として設定され
た構成であることを特徴とする。
【００２１】さらに、本発明の画像表示処理装置の一実
施態様において、前記作用領域は、ディスプレイ平面か
ら該平面に並行方向に一定距離以上離間した領域として
設定された構成であることを特徴とする。
【００２２】さらに、本発明の画像表示処理装置の一実
施態様において、前記作用領域は、ディスプレイ中心点
から一定距離以上離間した領域として設定された構成で
あることを特徴とする。
【００２３】さらに、本発明の画像表示処理装置の一実
施態様において、前記作用領域は、ディスプレイから一
定距離以内の領域として設定された構成であることを特
徴とする。
【００２４】さらに、本発明の画像表示処理装置の一実
施態様において、前記作用領域は、ディスプレイに表示
された画像データに対応付けられた３次元空間領域とし
て設定された構成であることを特徴とする。
【００２５】さらに、本発明の画像表示処理装置の一実
施態様において、前記スクロール情報生成手段は、前記
コントローラの作用領域内の位置情報に基づいて、スク
ロール速度またはスクロール距離を決定する構成である
ことを特徴とする。
【００２６】さらに、本発明の画像表示処理装置の一実
施態様において、前記コントローラは、３次元空間にお
ける位置および姿勢情報を、画像撮像装置、または磁気
センサ、または超音波センサのいずれを用いた構成によ
り提供する構成であることを特徴とする。
【００２７】さらに、本発明の第２の側面は、ディスプ
レイに表示された画像データのスクロール処理を実行す
る画像表示処理方法であり、ユーザの操作するコントロ
ーラの３次元空間における位置および姿勢情報の少なく
ともいずれかの情報をセンサを介して提供するステップ
と、前記コントローラの３次元空間における位置および
姿勢情報の少なくともいずれかの情報に基づいて、ディ
スプレイに表示された画像データのスクロール処理態様
を決定するスクロール情報生成ステップと、前記スクロ
ール情報生成ステップにおける決定に従ってディスプレ
イに表示された画像データのスクロール処理としての画
像更新処理を実行する画像表示制御ステップと、を有す
ることを特徴とする画像表示処理方法にある。
【００２８】さらに、本発明の画像表示処理方法の一実
施態様において、前記スクロール情報生成ステップは、
前記コントローラの右傾状態、左傾状態、および無傾状
態の３状態の判別処理を実行し、該３状態の状態遷移の
有無に基づいてスクロール処理の実行の有無を決定する
ステップを含むことを特徴とする。
【００２９】さらに、本発明の画像表示処理方法の一実
施態様において、前記スクロール情報生成ステップは、
前記コントローラの右傾状態、左傾状態、および無傾状
態の３状態の判別処理を実行し、右傾状態および左傾状
態間の状態遷移の有無に基づいてスクロール処理の実行
の有無を決定するステップを含むことを特徴とする。
【００３０】さらに、本発明の画像表示処理方法の一実
施態様において、前記画像表示処理方法は、さらに、前
記コントローラの位置および姿勢情報をディスプレイ面
を基準とした画面座標系に対応した情報に変換する変換
ステップを有し、前記スクロール情報生成ステップは、
前記変換ステップにおいて変換された画面座標系に対応
した前記コントローラの姿勢情報に基づいて、ディスプ
レイに表示された画像データのスクロール処理態様を決
定することを特徴とする。
【００３１】さらに、本発明の画像表示処理方法の一実
施態様において、前記スクロール情報生成ステップは、
前記コントローラの向きに応じて、スクロール方向を決
定する処理を実行するステップを含むことを特徴とす
る。
【００３２】さらに、本発明の画像表示処理方法の一実
施態様において、前記スクロール情報生成ステップは、
前記コントローラの傾きの方向に応じて、スクロール方
向を決定する処理を実行するステップを含むことを特徴
とする。
【００３３】さらに、本発明の画像表示処理方法の一実
施態様において、前記スクロール情報生成ステップは、
前記コントローラが予め定められた作用領域にあるか否
かのコントローラ位置判別処理を実行し、前記コントロ
ーラが予め定められた作用領域内である場合にスクロー
ル処理の実行を決定することを特徴とする。
【００３４】さらに、本発明の画像表示処理方法の一実
施態様において、前記作用領域は、ディスプレイ平面か
ら垂直方向に一定距離以上離間した領域として設定する
ことを特徴とする。
【００３５】さらに、本発明の画像表示処理方法の一実
施態様において、前記作用領域は、ディスプレイ平面か
ら該平面に並行方向に一定距離以上離間した領域として
設定することを特徴とする。
【００３６】さらに、本発明の画像表示処理方法の一実
施態様において、前記作用領域は、ディスプレイ中心点
から一定距離以上離間した領域として設定することを特
徴とする。
【００３７】さらに、本発明の画像表示処理方法の一実
施態様において、前記作用領域は、ディスプレイから一
定距離以内の領域として設定することを特徴とする。
【００３８】さらに、本発明の画像表示処理方法の一実
施態様において、前記作用領域は、ディスプレイに表示
された画像データに対応付けられた３次元空間領域とし
て設定することを特徴とする。
【００３９】さらに、本発明の画像表示処理方法の一実
施態様において、前記スクロール情報生成ステップは、
前記コントローラの作用領域内の位置情報に基づいて、
スクロール速度またはスクロール距離を決定するステッ
プを含むことを特徴とする。
【００４０】さらに、本発明の画像表示処理方法の一実
施態様において、前記コントローラは、３次元空間にお
ける位置および姿勢情報を、画像撮像装置、または磁気
センサ、または超音波センサのいずれを用いた構成によ
り提供することを特徴とする。
【００４１】さらに、本発明の第３の側面は、ディスプ
レイに表示された画像データのスクロール処理をコンピ
ュータ・システム上で実行せしめるコンピュータ・プロ
グラムであって、ユーザの操作するコントローラの３次
元空間における位置および姿勢情報の少なくともいずれ
かの情報をセンサを介して提供するステップと、前記コ
ントローラの３次元空間における位置および姿勢情報の
少なくともいずれかの情報に基づいて、ディスプレイに
表示された画像データのスクロール処理態様を決定する
スクロール情報生成ステップと、前記スクロール情報生
成ステップにおける決定に従ってディスプレイに表示さ
れた画像データのスクロール処理としての画像更新処理
を実行する画像表示制御ステップと、を有することを特
徴とするコンピュータ・プログラムにある。
【００４２】
【作用】本発明は、ディスプレイに表示された画像のス
クロールを実現する画像表示処理装置および方法であ
り、ボタンやスクロールバーなどのＧＵＩコンポーネン
トを画面に配置する必要や、ジョイスティックやトラッ
クボールなどのデバイスを本体やコントローラ自体に追
加する必要がなく、コントローラの位置や姿勢情報に基
づいて、容易にスクロールが実行され、ＰＣ、ゲーム機
の操作について熟知していないユーザにとって、操作の
簡単な画面スクロール構成が実現される。
【００４３】また、本発明の構成では、ディスプレイに
表示された画像のスクロール実行において、コントロー
ラの傾きの遷移状態を検出し、検出遷移情報に基づいて
スクロールを行なう構成としたので、あたかもコントロ
ーラの歩行状態を反映したスクロール処理が可能とな
る。
【００４４】また、本発明の構成によれば、ディスプレ
イに表示された画像のスクロール実行において、コント
ローラの位置を検出し、検出位置情報に基づいてスクロ
ールを実行する構成としたので、複雑な操作を行なうこ
とのない容易なスクロール処理が可能となる。
【００４５】さらに、本発明の構成によれば、コントロ
ーラの動き、または位置に応じて、スクロール方向ある
いはスクロール距離や速度を決定する構成としたので、
直感的かつ簡単で楽しい画面のスクロールが可能にな
る。
【００４６】なお、本発明のコンピュータ・プログラム
は、例えば、様々なプログラム・コードを実行可能な汎
用コンピュータ・システムに対して、コンピュータ可読
な形式で提供する記憶媒体、通信媒体、例えば、ＣＤや
ＦＤ、ＭＯなどの記憶媒体、あるいは、ネットワークな
どの通信媒体によって提供可能なコンピュータ・プログ
ラムである。このようなプログラムをコンピュータ可読
な形式で提供することにより、コンピュータ・システム
上でプログラムに応じた処理が実現される。
【００４７】本発明のさらに他の目的、特徴や利点は、
後述する本発明の実施例や添付する図面に基づくより詳
細な説明によって明らかになるであろう。なお、本明細
書においてシステムとは、複数の装置の論理的集合構成
であり、各構成の装置が同一筐体内にあるものには限ら
ない。
【００４８】
【発明の実施の形態】図３に、本発明の画像表示処理装
置構成例を示す。図３に示す画像表示処理装置は、ユー
ザが直接操作するコントローラ２０１、コントローラ２
０１の位置および姿勢を計測するためのセンサ２０２、
情報を表示するための例えばＬＣＤ等のディスプレイ装
置２０３、およびセンサ２０２の取得したコントローラ
２０１の位置または姿勢情報に対応する値をもとにスク
ロール処理を行ないディスプレイ装置に表示する画像を
生成する制御部２０４とを有する構成である。
【００４９】なお、この画像表示処理装置例では制御部
２０４はディスプレイ装置２０３の内部に構成され、デ
ィスプレイ装置２０３と一体化しているが、制御部２０
４をディスプレイ装置２０３とは別の制御装置として構
成してもよい。その場合、センサやディスプレイ装置と
制御部とは、ケーブル接続、あるいは無線ＬＡＮやｂｌ
ｕｅｔｏｏｔｈなどの無線通信手段で接続する構成が可
能である。
【００５０】センサ２０３は、コントローラ２０１の位
置と姿勢を計測する手段であり、コントローラ２０１の
画像を撮影するカメラ、あるいは、磁気センサ、超音波
センサ等が使用可能である。センサの配置や、センシン
グ領域、すなわち感知領域、およびセンシング情報等
は、設置するセンサによって異なる態様となる。
【００５１】例えば、センサ２０２としてカメラを利用
した場合、カメラによってコントローラ２０１を撮影
し、その撮影画像情報からコントローラ２０１の位置と
姿勢を計測する。具体的には、コントローラ２０１の表
面にバーコード等、特定のパターンからなる識別情報を
描き、パターン画像をセンサ２０２としてのカメラによ
って撮影し、コンピュータビジョンのパターンマッチン
グ処理技術を用いることによって、コントローラ２０１
の位置と姿勢情報の取得が可能となる。
【００５２】あるいは、特定の識別情報（ＩＤ）を表わ
す点滅パターンで光る発光手段（例えばＬＥＤ）をコン
トローラ２０１表面の各位置に設置し、カメラの撮影画
像に基づいて、それぞれの発光手段からの点滅信号を解
析することで、発光手段のＩＤと撮影画像上の位置を求
め、コントローラ２０１の３次元的な位置および姿勢を
計測する構成としてもよい。なお、カメラとしてのセン
サ２０２の位置は図に示す位置と異なる位置に配置して
もよい。
【００５３】図４はコントローラ２０１の位置および姿
勢の計測手段として、磁気方式によるセンシング構成を
用いた例である。
【００５４】磁場発生装置２１２から発せられる磁場の
中でのコントローラ＆センサ２１１の位置および姿勢
を、コントローラに具備された磁界検出用のセンサで検
出する。なお、磁場発生装置２１２は、センシング領域
に応じて配置され、図の位置とは異なってもよい。
【００５５】図５はコントローラの位置および姿勢の計
測手段として、超音波方式を用いた例である。コントロ
ーラ＆超音波発生装置２２１に具備された超音波発生装
置から発せられる超音波を、ディスプレイ２２５に対し
てそれぞれ異なる位置に配置した超音波センサ２２２，
２２３，２２４が検出することにより、音波が到達する
のにかかった時間を利用したり、波の干渉を利用したり
して超音波発生源としてのコントローラの位置や姿勢を
検出する。なお、コントローラが複数の超音波を発生す
る構成とし、各超音波を識別して処理する構成としても
よい。超音波センサの設置数は、センシング態様、領域
に応じて決定し、超音波センサ２２２，２２３，２２４
の位置は図に示す位置とは異なってもよい。
【００５６】図３乃至図５を参照して、コントローラの
位置、姿勢の検出構成として、カメラによる撮影画像解
析、磁気センサ、および超音波センサの例を説明した
が、本発明の構成においては、コントローラの位置、姿
勢の検出が可能な構成であればよく、その他の手段を適
用したコントローラ位置、姿勢情報取得処理構成として
もよい。すなわち、本発明の画面スクロール処理装置で
はコントローラの位置および姿勢を計測する手段は問わ
ない。
【００５７】次に、図６を参照して、本発明の画像表示
処理装置のブロック図を示す。まずユーザが直接操作す
るコントローラ３０１の位置と姿勢をセンサ３０２で計
測する。センサは上述したように、カメラ、磁気セン
サ、超音波センサ等である。センサ３０２からのコント
ローラ位置および姿勢の計測値は、それぞれのセンサ独
自に定義されるセンサ座標系での位置および姿勢として
表わされるため、制御部３１０内のコントローラ位置姿
勢情報変換部３１１でコントローラの位置と姿勢をセン
サ座標系から画面座標系へ変換する。
【００５８】次に画面座標系へ変換されたコントローラ
３０１の位置および姿勢情報を用いて、スクロールする
かどうかの判断や実際のスクロール処理態様などの決定
処理をスクロール情報生成部３１２で行なう。スクロー
ル情報生成部３１２において決定したスクロール処理の
有無および態様に基づいて、画面表示制御部３１３でデ
ィスプレイ３０３に表示すべき画像を生成、すなわちス
クロールする場合にはスクロール処理を実行し、画像を
更新してディスプレイ３０３に表示する。
【００５９】ディスプレイに対する画像表示アプリケー
ションの一例として、ディスプレイに一度に表示できな
いぐらい広い３次元仮想世界内を散策できるアプリケー
ションを考える。ユーザはコントローラを介して、３次
元仮想世界内に存在する様々なオブジェクトとインタラ
クションできる。例えば、画面に表示された３次元物体
上へコントローラを移動するとその３次元物体が何らか
のアクションを起こす、コントローラが３次元世界中の
どの位置にあるかに応じて音が鳴るなどの仕掛けがこの
３次元仮想世界の中には用意されている。しかし、画面
に一度に表示される範囲は限られているので、画面外の
オブジェクトとインタラクションするには、そのオブジ
ェクトが画面に表示されるように３次元仮想世界をスク
ロールさせる必要がある。本発明では、このコントロー
ラを介したスクロール方法について言及する。
【００６０】スクロール方法によっては必要なコントロ
ーラの位置情報もしくは姿勢情報の次元数は異なる。し
たがって、場合によっては最低でもそれぞれのスクロー
ル方法に必要な次元数を計測できるセンサが具備されて
いれば良い。また必要ならばコントローラにボタンやダ
イアルなどの他の入力装置を組み合わせても良いが、本
発明のスクロール方法では利用しない。
【００６１】コントローラの物理的な形状は特に限定せ
ず、アプリケーションに応じて適当な形状にすれば良
い。ただしスクロール方向がコントローラの方向に依存
するようなスクロール方法の場合、動物や飛行機のよう
に正面方向や上方向が分かりやすい形状のほうが望まし
い。以下に示す例においては、コントローラは正面方向
を定義できる構成とする。例えば、図３乃至図５におい
て示したコントローラ２０１において、顔の方向が正面
（Ｘ軸方向）、右方向がＹ軸方向、上（頭）方向がＺ軸
方向と定義できる。カメラ、磁気センサ、超音波センサ
は、コントローラの向きを把握可能な構成を持つ。
【００６２】本発明の画像表示処理装置の処理のメイン
ルーチンを説明したフローチャートを図７に示す。まず
始めにメインルーチンはステップＳ１０１で初期化され
る。システム状態の初期化や必要なファイルの読み込み
など様々な初期化処理が行なわれる。必要ならばコント
ローラの初期状態の設定もここで行なわれる。次にステ
ップＳ１０２において、センサの計測値として得られる
コントローラの位置および姿勢を画面座標系へ変換し、
現在のコントローラの位置および姿勢として更新する。
【００６３】ステップＳ１０３では以降の実施例で説明
されるスクロールサブルーチンのうち適切なものが呼ば
れる。場合によっては複数のスクロールサブルーチンが
呼ばれても良いし、また呼ばれるサブルーチンが状況に
応じて動的に変更されても良い。スクロールサブルーチ
ンについては、後段で詳細に説明する。
【００６４】さらにステップＳ１０４で、ユーザからの
終了要求や特定のイベント発生などの終了条件を満たし
ていればメインルーチンを終了する。Ｓ１０４で終了条
件を満たしていなければ、ステップＳ１０５で画面を更
新した後、ステップＳ１０２へ戻って上記の流れを繰り
返す。
【００６５】メインルーチンはアニメーション処理やネ
ットワーク処理などのスクロールサブルーチン以外の処
理を、ステップＳ１０３のスクロールサブルーチンの前
後で行なっても良い。またスクロールサブルーチンが特
定のハードウェア割り込みの発生時や特定の時間毎など
にメインルーチンにより呼ばれるような構成にしても良
い。また以降で述べる実施例ではすべてコントローラは
１つだけであることを想定しているが、アプリケーショ
ンによっては２つ以上のコントローラの存在を許可する
こともある。その場合、ステップＳ１０３のスクロール
サブルーチンをコントローラの数だけ繰り返し呼び、繰
り返し処理を実行する。
【００６６】以降、本発明の画像表示処理装置における
スクロールサブルーチンの具体的処理例について、複数
の態様を説明する。
【００６７】［スクロール処理例１］スクロール処理例
１は、ちょうど子供が人形遊びで歩く動作を模倣する時
のように、コントローラを左右交互に振る（ロール回
転）することによってスクロールできる方法である。コ
ントローラの形状を人型や動物型にすると、ちょうどコ
ントローラが画面上を歩いているような効果を得ること
ができる。このようなスクロール方法を「歩行型スクロ
ール」と呼ぶ。なお、本実施例のスクロール方法ではコ
ントローラの姿勢情報としての傾き情報を使用する。
【００６８】例えば図８のような正面方向（顔を描いた
面）が定義された人型のコントローラ５０１を操作して
画面５０２上で遊ぶアプリケーションを考える。まず図
８（ａ）のようにコントローラ５０１に向かって左に傾
いている状態があるとする。その後、図８（ｂ）のよう
にコントローラ５０１をある角度（閾値）以上右へ傾け
ると、コントローラの正面方向５１１へ１歩進む。つま
り、本装置例では、制御部が、画面５０２上の表示情報
をコントローラ５０１の正面方向５１１へ特定の距離だ
けスクロールする制御を実行する。
【００６９】本実施例では、図６に示す制御部３１０の
コントローラ位置，姿勢情報変換部３１１の変換情報に
基づいて、スクロール情報生成部が、コントローラ５０
１が左に傾いている状態にあるか、右に傾いている状態
にあるか、どちらにも傾いていない状態にあるかの３つ
の傾き状態を識別する。それぞれ左傾状態、右傾状態、
無傾状態と呼ぶこととする。
【００７０】コントローラ位置，姿勢情報変換部３１１
の実行する変換処理としてのコントローラ５０１の傾き
の計算方法について説明する。まず、傾きの計算に必要
となる座標系について、図９を参照して説明する。画面
座標系を５５１は、図に示すようにｘｙ平面を画面と平
行に、ｚ軸を画面と垂直に定義する。このとき、コント
ローラの画面座標系での位置および姿勢を表わす座標系
をコントローラのローカル座標系５５２とする。以降で
は、コントローラの位置および姿勢とは、画面座標系で
の位置および姿勢を表わすものとする。
【００７１】コントローラのローカル座標系５５２は画
面座標系５５１におけるコントローラの位置および姿勢
を表わす。ここでコントローラのローカル座標系５５２
のＸｃ軸を正面方向、Ｙｃ軸を左方向、Ｚｃ軸を上方向
とする。まず、Ｘｃからコントローラの画面座標系のｚ
軸方向に対する回転各Ｚｒｏｔを計算する。
【００７２】Ｘｃ方向の任意の長さのベクトルＶ１＝
［Ｖ１ｘ，Ｖ１ｙ，Ｖ１ｚ］を考えたとき、その回転角
Ｚｒｏｔは、 Ｚｒｏｔ＝ｔａｎ-1（Ｖ１ｙ／Ｖ１ｘ）・・（式１） で求めることができる。
【００７３】次にコントローラのローカル座標系を画面
座標系のｚ軸に対して−Ｚｒｏｔ回転する。これによ
り、コントローラのローカル座標系のＸｃ軸が画面座標
系のｘｚ平面と平行になる。このときのコントローラの
ローカル座標系を新たに［Ｘｃ’，Ｙｃ’，Ｚｃ’］と
する。
【００７４】次に、コントローラの新たな座標系のＺ
ｃ’と画面座標系のｘｚ平面とのなす角度を計算する。
Ｚｃ’方向の任意の長さのベクトルＶ２＝［Ｖ２ｘ，Ｖ
２ｙ，Ｖ２ｚ］を考えたとき、その角度Ｘｒｏｔは、 Ｘｒｏｔ＝ｔａｎ-1（Ｖ２ｙ／Ｖ２ｘ）・・（式２） で求めることができる。
【００７５】上記（式２）で求めた回転角度：Ｘｒｏｔ
をコントローラの傾きとし、この傾きがある閾値以上だ
と右傾状態、ある閾値以下だと左傾状態、どちらでもな
い場合を無傾状態として判別する。具体的には、例え
ば、回転角≧＋３０度であれば右傾き、回転角≦−３０
度であれば左傾き、−３０度＜回転角＜＋３０度であれ
ば無傾状態とするなどの設定である。
【００７６】図６に示す制御部３１０内のコントローラ
位置姿勢情報変換部３１１は、位置姿勢計測センサ３０
２からの入力情報に基づいて、傾き角度を算出し、算出
結果に基づいて、スクロール情報生成部３１２が、コン
トローラが左に傾いている状態にあるか、右に傾いてい
る状態にあるか、どちらにも傾いていない状態、すなわ
ち左傾状態、右傾状態、無傾状態のいずれの状態にある
かを判定し、判定結果に従ってスクロールの有無、態様
を決定する。なお、傾きの有無の判定は、上述の例のよ
うに、特定の数値（例えば３０度）を設定しても、ある
いは状況に応じて動的に変化させても良い。
【００７７】なお、上記の傾き状態の計算では、コント
ローラのＸｃ軸（ロール）方向の回転度合いを求めてい
るが、Ｚｃ軸（ヨー）方向やＹｃ軸（ピッチ）方向の回
転度合いを傾き状態の判別で用いても良く、コントロー
ラの傾き状態の求め方は、上述の方法に限らず、様々な
方法が適用可能である。
【００７８】図１０に本実施例に係る画像表示処理装置
において実行するコントローラの傾きに基づくスクロー
ル処理の手順を説明したフローチャートを示す。図１０
に示すフローチャートは、先に図７を参照して説明した
メインルーチン中のステップＳ１０３におけるスクロー
ルサブルーチンの１処理例に対応する。
【００７９】本サブルーチンでは前回実行されたサブル
ーチンでのコントローラの傾き状態を記録しておく必要
がある。ただし、前回処理がなく、初めて本サブルーチ
ンが呼ばれるときのために、メインルーチン（図７）の
初期化処理（Ｓ１０１）において、傾き状態は無傾状態
に初期化されているものとする。
【００８０】図１０に示すフローチャートについて説明
する。まずステップＳ２０１でコントローラの現在の姿
勢情報を取得する。次にその姿勢情報からステップＳ２
０２でコントローラの現在の傾き状態を判定する。姿勢
情報からのコントローラ傾きの算出処理方法は、上記で
述べた通りである。
【００８１】傾き状態は、右傾き、左傾き、無傾状態の
３状態のいずれかであると判定される。次に、ステップ
Ｓ２０３において、現在のコントローラ傾き状態と、前
回のサブルーチン実行時の記録情報、あるいは前回記録
がない場合は初期値との比較を実行する。
【００８２】現在のコントローラ傾き状態と、記録され
ている傾き状態が同じ、すなわち状態遷移がなく、右傾
き→右傾き、左傾き→左傾き、無傾状態→無傾状態の同
一状態維持であれば本サブルーチンを終了する。それ以
外の場合、すなわち、現在のコントローラ傾き状態と、
記録されている傾き状態が異なれば、すなわち状態遷移
があれば、ステップＳ２０４へ進む。
【００８３】さらにステップＳ２０４で、現在のコント
ローラ傾き状態が無傾状態、すなわち予め定めた閾値に
満たない傾きの範囲（例えば、−３０度〜３０度）内で
あると判定されると、ステップＳ２０６に進み、次回に
本サブルーチンが呼ばれたときのために現在の傾き状態
を記録して、本サブルーチンを終了する。ステップＳ２
０４で左傾状態もしくは右傾状態であると判定される
と、ステップＳ２０５で、表示画像のスクロール処理を
行ない、さらに現在のコントローラの傾き状態をステッ
プＳ２０６で記録してから本サブルーチンを終了する。
【００８４】ステップＳ２０５のスクロール処理は、図
６における制御部３１０内のスクロール情報生成部３１
２、および画面表示制御部３１３において実行される。
すなわち、スクロール情報生成部３１２において、スク
ロールの有無、態様が決定され、決定情報に従って、画
面表示制御部３１３が画面に表示されている情報を更新
し、スクロール表示する処理を実行する。
【００８５】スクロール方向は、任意に設定可能である
が、一例としては、例えば、先に図８を参照して説明し
た例のようにコントローラの正面方向へスクロールさせ
る構成とすることができる。この場合のスクロール方向
は、コントローラの正面方向、すなわち、図９に示すコ
ントローラ座標系におけるＸｃの方向となる。例えば画
面に３次元画像を提示している場合には、Ｘｃの方向を
そのまま使った３次元的なスクロールを行なえばよい。
【００８６】あるいは、ディスプレイ表示画像がｘｙ平
面２次元画像であり、２次元平面でのスクロールのみが
可能な場合等には、コントローラの正面方向、すなわ
ち、図９に示すコントローラ座標系におけるＸｃを画面
座標系のｘｙ平面に投影した方向に対するスクロール、
すなわち、画面座標系のｘｙ平面上の２次元方向のスク
ロールとしてもよい。この処理の場合、画面座標系にお
けるＸｃ方向のベクトルをＶ３＝［Ｖ３ｘ，Ｖ３ｙ，Ｖ
３ｚ］としたときの［Ｖ３ｘ，Ｖ３ｙ，０］をスクロー
ル方向として設定する。どちらもコントローラが正面方
向へ進んでいるような効果が得られる。
【００８７】なお、１回のスクロール処理でスクロール
する距離、あるいはスクロール速度は経験的に与えても
良いし、固定的なデフォルト値を適用してもよいし、あ
るいは他の要素に応じて動的に変化させても良い。本実
施例のスクロール処理では、瞬時、例えば１回のサブル
ーチンの呼び出しだけで目的の距離だけスクロールさせ
てもよいし、ある程度の時間をかけて、例えば数回のサ
ブルーチンの呼び出しにまたいで滑らかにスクロールさ
せてもよい。通常、スクロール可能な範囲を予め定めて
おき、それを超えるスクロールは行なわない。
【００８８】上述のスクロール方向の設定、さらにスク
ロール量、速度の設定は、図６の制御部３１０のスクロ
ール情報生成部が、コントローラ位置姿勢情報変換部３
１１からの情報、すなわち、現在のコントローラ傾き状
態の入力データと、前回のコントローラの傾き状態との
比較処理情報に基づいて決定するか、あるいはデフォル
トで決定済みのデータを決定情報として適用し、画面表
示制御部３１３が決定情報に従ってディスプレイ上の画
像を更新する。
【００８９】なお、ステップＳ２０５のスクロール処理
において制御部内の画面表示制御部３１３で行なわれる
他の処理としては、３次元ＣＧの場合は射影行列の変換
もしくはワールド座標系の変換など、２次元ＣＧでは描
画位置のオフセットやスケールの変更などが挙げられ
る。
【００９０】上述したように、図１０に示したサブルー
チンでは、コントローラの左傾状態以外から左傾状態
へ、または右傾状態以外から右傾状態に変わったときに
スクロール処理を行なう。つまり傾き状態が左傾→無傾
→左傾と変移したときもスクロールする。しかし、無傾
状態を記録しないでおくと、右傾状態から左傾状態へ、
または左傾状態から右傾状態へ変移したときのみスクロ
ール処理を行なう。これにより、センサの精度問題によ
り傾きの角度が閾値付近で振動してしまった場合にで
も、必要以上スクロールしてしまうのを防ぐことができ
る。そのサブルーチンを図１１に示す。
【００９１】図１１に示すフローチャートについて説明
する。まずステップＳ２５１でコントローラの現在の姿
勢情報を取得する。次にその姿勢情報からステップＳ２
５２でコントローラの現在の傾き状態を判定する。姿勢
情報からのコントローラ傾きの算出処理方法は、上記で
述べた通りである。
【００９２】傾き状態は、右傾き、左傾き、無傾状態の
３状態のいずれかであると判定される。次に、ステップ
Ｓ２５３において、現在のコントローラ傾き状態と、前
回のサブルーチン実行時の記録情報、あるいは前回記録
がない場合は初期値との比較を実行する。
【００９３】現在のコントローラ傾き状態と、記録され
ている傾き状態が同じ、すなわち、右傾き→右傾き、左
傾き→左傾き、無傾状態→無傾状態の同一状態維持であ
れば本サブルーチンを終了する。それ以外の場合、すな
わち、現在のコントローラ傾き状態と、記録されている
傾き状態が異なればステップＳ２５４へ進む。ステップ
Ｓ２５４で左傾状態もしくは右傾状態であると判定され
ると、ステップＳ２５５で、表示画像のスクロール処理
を行ない、さらに現在のコントローラの傾き状態をステ
ップＳ２５６で記録してから本サブルーチンを終了す
る。
【００９４】さらにステップＳ２５４で、現在のコント
ローラ傾き状態が無傾状態、すなわち予め定めた閾値に
満たない傾きの範囲（例えば、−３０度〜３０度）内で
あると判定されると、このサブルーチンは終了する。
【００９５】この点が先の図１０を参照して説明したサ
ブルーチンと異なる点である。すなわち、先のサブルー
チンでは、無傾状態だったときにその状態を記録してい
たが、本サブルーチンでは、無傾状態だったときにその
状態を記録しない構成とした。本構成の如く無傾状態を
記録しないでおくと、右傾状態から左傾状態へ、または
左傾状態から右傾状態へ変移したときのみスクロール処
理を行なう。これにより、センサの精度問題により傾き
の角度が閾値付近で振動してしまった場合にでも、必要
以上スクロールしてしまうのを防ぐことができる。
【００９６】［スクロール処理例２］スクロール処理例
２は、コントローラの位置が画面座標系での特定の領域
内に入っているときにスクロールを実行する方法であ
る。この特定の領域のことを「作用領域」と呼び、本実
施例のスクロール方法を「領域型スクロール方法」と呼
ぶ。本実施例では、スクロールするかどうかの判定には
コントローラの位置情報のみを用いるが、実際のスクロ
ール処理では姿勢情報も用い、姿勢情報に基づいてスク
ロール態様を決定してもよい。
【００９７】例えば、このスクロール処理例２は、先の
スクロール処理例１で説明したスクロール処理と組み合
わせた構成とすることも可能である。組み合わせ構成の
場合は、スクロール処理を実行するか否かをコントロー
ラが作用領域にあるか否かを判定し、作用領域にある場
合にのみ、先の右傾き、左傾き、無傾きの状態遷移に基
づくスクロールを実行する構成としてもよい。
【００９８】図１２は本スクロール処理例２におけるコ
ントローラの情報取得に基づくスクロール処理を説明す
るフローチャートである。図１２に示すフローチャート
は、先に図７を参照して説明したメインルーチン中のス
テップＳ１０３におけるスクロールサブルーチンの１処
理例に対応する。まず、ステップＳ３０１でコントロー
ラの位置情報、および、必要に応じて姿勢情報を取得す
る。
【００９９】次にステップＳ３０２において、ステップ
Ｓ３０１で取得したコントローラの位置が作用領域に入
っているかを判定する。ステップＳ３０２の判定は、図
６に示す制御部３１０のスクロール情報生成部３１２に
おいて実行する。スクロール情報生成部３１２は、予め
定義した作用領域情報を有し、コントローラ位置、姿勢
変換部３１１から入力されるコントローラ位置情報と、
作用領域情報とを比較してコントローラが作用領域内か
否かを判定する。コントローラが、作用領域に入ってい
なければそのまま本サブルーチンを終了する。ステップ
Ｓ３０２でコントローラが作用領域内にあると判定され
た場合、ステップＳ３０３のスクロール処理を行なう。
【０１００】本スクロール処理例において、作用領域の
形状やサイズ、またスクロールの方向や速度は任意に設
定可能である。作用領域の形状やそれぞれのスクロール
方向や速度設定の具体例を、以下説明する。
【０１０１】例えば、図１３は作用領域の一設定例を示
す図であり、水平面（ｘｙ面に画面が表示され、垂直上
方（Ｚ軸方向）に作用領域６０２を設定した例である。
コントローラ６０３の位置が画面６０４に対して垂直方
向へある距離α以上離れたときにスクロールを実行する
ように作用領域６０２を設定している。
【０１０２】作用領域と、非作用領域との境界である作
用領域境界６０１は図に示すように、画面６０４に対し
て垂直方向へ距離αの位置になる画面に並行な平面とな
る。ディスプレイ画面６０４に対して垂直方向へ距離α
以上離れた位置の空間が作用領域６０２として設定さ
れ、画面をスクロールしたい場合、ユーザは単純にコン
トローラを画面から距離α以上遠ざければ良い。
【０１０３】この作用領域の例の場合、スクロール方向
は例えば、コントローラの正面方向への３次元的なスク
ロールや、コントローラの正面方向を画面と平行な面、
すなわち図９に示すｘｙ平面に投影した方向への２次元
的なスクロールなどとすればよい。またそのスクロール
速度は経験的な一定の値を与えてもよいし、コントロー
ラの位置や姿勢に応じて変化させても良い。
【０１０４】例えば、コントローラ位置が図に示すよう
に、作用領域境界６０１からの画面に対して垂直方向の
距離をβとしたとき、スクロール速度、すなわち、画面
の移動速度をｋ1β（ｋ1は比例定数であり経験的な値と
して任意に設定可能である）とする。すなわち、スクロ
ール速度をＶｓとしたとき、 Ｖｓ＝ｋ1β として設定する。あるいはスクロール距離、すなわち１
回のスクロール処理において移動する画面の距離をｋ2
β（ｋ2は比例定数であり経験的な値として任意に設定
可能である）とする。すなわちスクロール距離をＶｖと
したとき、 Ｖｖ＝ｋ2β として設定するなどの設定が可能である。
【０１０５】あるいは、コントローラの正面方向が画面
と平行なほどスクロール速度を上げるといった構成とし
てもよい。つまり画面座標系のｘｙ平面とコントローラ
のローカル座標系のＸｃ軸とがなす角度をθとしたと
き、スクロール速度をｋ3ｃｏｓθ（ｋ3は比例定数であ
り経験的な値として任意に設定可能である）としてもよ
い。すなわちスクロール速度をＶｓとしたとき、 Ｖｓ＝ｋ3ｃｏｓθ として設定する。同様に、スクロール距離をｋ4ｃｏｓ
θ（ｋ4は比例定数であり経験的な値として任意に設定
可能である）とする設定とする。すなわちスクロール距
離をＶｖとしたとき、 Ｖｖ＝ｋ4ｃｏｓθ として設定するなどの設定が可能である。
【０１０６】領域型スクロール方法の具体例として、コ
ントローラを画面端付近や画面外へ持っていったときに
スクロールを実行する構成例について図１４を参照して
説明する。図１４は画面を上から見た図であるが、作用
領域境界６１１を画面枠６１２よりも一回り大きく設定
した例である。この例では作用領域６１３は、画面枠６
１２の周囲に形成される。
【０１０７】もちろん、作用領域境界６１１を画面枠６
１２と等しくしても、画面枠６１２よりも内側に設定し
ても良い。スクロールしたい場合、ユーザはコントロー
ラを作用領域境界６１１より外側へ移動させれば良い。
【０１０８】この作用領域設定構成におけるスクロール
方向は、図９の画面座標系５５１におけるｘ方向もしく
はｙ方向に限定しても良いし、画面中心からコントロー
ラへ向かう方向へスクロールしても良い。また、スクロ
ール速度は一定でも良いし、画面端からの距離や画面中
心からの距離に応じて変化させても良い。例えば、画面
端から離れるほどスクロール速度が上がるといった構成
が可能である。
【０１０９】さらに領域型スクロール方法における作用
領域設定処理構成の具体例として、図１５に示すように
コントローラ位置の画面中心からの距離に応じて作用領
域を設定する構成がある。図１５は、画面を上から見た
図であるが、画面中心を中心とするある半径の円を作用
領域境界６２１とし、それより外の領域を作用領域６２
２として設定した構成である。
【０１１０】このときのスクロール方法も、先の図１４
の構成例と同様、図９の画面座標系５５１におけるｘ方
向もしくはｙ方向に限定しても良いし、画面中心からコ
ントローラへ向かう方向へスクロールさせる構成として
もよい。また、スクロール速度は一定でも良いし、画面
中心からの距離に応じて変化させても良い。例えば、画
面中心からの距離が離れるほどスクロール速度が上がる
といった構成が可能である。
【０１１１】また領域型スクロール方法の具体例とし
て、ちょうど画面をコントローラでドラッグするような
スクロール方法を実行可能とする構成が、作用領域を図
１６のように設定することで実現される。
【０１１２】作用領域６３２をちょうど図１３とは逆
に、図１６に示すように画面から垂直方向へある距離α
以内に設定する。コントローラが作用領域境界６３１か
ら画面６３３内の作用領域６３２内に位置するとき、画
面はコントローラの位置に追従するように２次元的にス
クロールする。例えば、図１７のように指輪型のコント
ローラ６４２を指にはめた状態でディスプレイ画面６４
１をなぞると、実際の紙を移動しているかのように画面
をスクロールする処理とすることが作用領域の判定処理
により実現可能である。
【０１１３】［スクロール処理例３］スクロール処理例
３は、画面上に表示されたオブジェクトとの直接的なイ
ンタラクションの１つであり、車や飛行機といったディ
スプレイ画面に表示されているオブジェクトの位置や姿
勢に基づいて定義される領域（これも作用領域と呼
ぶ。）内にコントローラが位置するときにスクロールを
実行する構成である。このスクロール方法を「乗り物型
スクロール方法」と呼ぶ。作用領域の形状はどんなもの
でも良い。なお本実施例では、スクロールするかどうか
の判定にはコントローラの位置情報のみを用いるが、実
際のスクロール処理では姿勢情報によりスクロール態様
を決定する構成としてもよい。
【０１１４】具体例の１つを図１８に示す。画面７０２
に表示されている３次元仮想世界の中の仮想的な車７０
３には、その車の画面上の位置と姿勢に基づいて直方体
の作用領域７０４が定義されている。車の表示位置や姿
勢が変更されるとその作用領域７０４もそれに追従す
る。ユーザがコントローラ７０１をその作用領域７０４
内に移動すると、画面７０２は、コントローラ７０１の
正面方向に２次元的にスクロールする。
【０１１５】スクロール中は車の位置や姿勢はコントロ
ーラ７０１の位置および姿勢に追従する。これによりあ
たかもコントローラ７０１が車に乗って移動しているか
のような効果が得られる。作用領域７０４の位置は車の
画面上の位置に基づいているので、作用領域７０４は画
面に垂直な方向へは移動しない。したがってスクロール
をやめたいとき、つまり乗り物から降りたいときはコン
トローラを画面から遠ざければよい。
【０１１６】図１９は本実施例のスクロール処理を説明
するフローチャートである。図１９に示すフローチャー
トは、先に図７を参照して説明したメインルーチン中の
ステップＳ１０３におけるスクロールサブルーチンの１
処理例に対応する。
【０１１７】まずステップＳ４０１でコントローラの位
置および姿勢情報を取得する。次にＳ４０２でコントロ
ーラが作用領域内に位置するかを検査する。ステップＳ
４０２の判定は、図６に示す制御部３１０のスクロール
情報生成部３１２において実行する。スクロール情報生
成部３１２は、予め定義した作用領域情報を有し、コン
トローラ位置、姿勢変換部３１１から入力されるコント
ローラ位置情報と、作用領域情報とを比較してコントロ
ーラが作用領域内か否かを判定する。
【０１１８】ステップＳ４０２において、コントローラ
が作用領域内に位置すると判定されるとステップＳ４０
３へ進み、コントローラが作用領域内に位置しないと判
定されればそのまま本サブルーチンを終了する。
【０１１９】ステップＳ４０３ではコントローラがあた
かも乗り物に乗っているように見せるために、乗り物の
位置および姿勢をコントローラの位置および姿勢に基づ
いて修正する画像表示処理を実行する。具体的には、コ
ントローラの位置および姿勢とまったく等しく乗り物の
位置および姿勢を表示する処理を実行しても良いし、そ
れぞれにオフセットをかけて表示する処理を実行する構
成としても良い。その後、ステップＳ４０４で実際にス
クロール処理を行なってから本サブルーチンを終了す
る。
【０１２０】本実施例でのスクロール処理は、コントロ
ーラの正面方向への３次元的なスクロールや、コントロ
ーラの正面方向を画面と平行な面へ投影した方向への２
次元的なスクロールが考えられる。また、３次元仮想世
界の地形の起伏に沿った３次元的なスクロールも考えら
れる。スクロール速度も上記他の実施例同様、一定の適
当な値でも良いし、動的に変化させても良い。さらに、
例えばある港から別の港へ移動する船のように、予め決
められたパスに沿って特定の位置までスクロールさせて
も良い。
【０１２１】［スクロール処理例４］スクロール処理例
４は、ちょうどジョイスティックを操作するようにコン
トローラを傾けることによってスクロールできる方法で
ある。図２０に示すように、コントローラ８０１が傾い
ている方向８０２にスクロールする。この方法を「ジョ
イスティック型スクロール方法」と呼ぶ。本実施例では
コントローラの姿勢情報のみを使用し、２次元のスクロ
ールのみ可能である。
【０１２２】本実施例ではコントローラの姿勢情報から
傾き情報を求める。本実施例での傾き情報とは、図９と
同様の座標系を考えたとき、コントローラのコントロー
ラ座標系におけるＺｃ軸が画面座標系のｚ軸に対してど
の方向へどれぐらい傾いているかという情報である。こ
の情報はコントローラのＺｃ軸方向の単位ベクトルを画
面座標系のｘｙ平面へ投影したベクトルＶから簡単に求
まる。傾きをθとしたとき、Ｖの長さがｓｉｎθとな
る。
【０１２３】図２１は本実施例のフローチャートであ
る。図２１に示すフローチャートは、先に図７を参照し
て説明したメインルーチン中のステップＳ１０３におけ
るスクロールサブルーチンの１処理例に対応する。
【０１２４】まず、ステップＳ５０１でコントローラの
姿勢情報を取得し、ステップＳ５０２でコントローラの
傾き情報を計算する。この傾き計算は、図６の制御部に
おけるコントローラ位置、姿勢情報変換部３１１におい
て実行される処理であり、先のスクロール処理例１にお
いて説明したと同様の処理によって実行可能である。
【０１２５】ステップＳ５０３において、算出したコン
トローラの傾き角がある閾値以上であればステップＳ５
０４で実際にスクロール処理し、閾値以下であればその
まま本サブルーチンを終了する。
【０１２６】ステップＳ５０４のスクロール処理の態様
は、設定により様々な態様とすることが可能であるが、
例えばコントローラが傾いている方向にスクロールさせ
る構成とすることが可能である。これにより、コントロ
ーラが傾いている方向へ、画面上を進んでいるような効
果が得られる。スクロール量は適当な値を与えても良い
し、傾き角などに応じて動的に変化させても良い。例え
ば傾いているほどスクロールが速くなるなどが考えられ
る。またステップＳ５０３におけるコントローラの傾き
角のチェック処理を省いても良い。その場合、少しでも
コントローラが傾けばスクロールするようになる。
【０１２７】次に、図２２を参照して、本発明に係る画
像表示処理装置の具体的なハード構成例について説明す
る。図２２に示すＣＰＵ(Central processing Unit)９
０１は、各種アプリケーションプログラムや、ＯＳ（Op
erating System）を実行するプロセッサである。ＲＯＭ
（Read-Only-Memory）９０２は、ＣＰＵ９０１が実行す
るプログラム、あるいは演算パラメータとしての固定デ
ータを格納する。ＲＡＭ（Random Access Memory）９０
３は、ＣＰＵ９０１の処理において実行されるプログラ
ム、およびプログラム処理において適宜変化するパラメ
ータの格納エリア、ワーク領域として使用される。ＨＤ
Ｄ９０４はハードディスクの制御を実行し、ハードディ
スクに対する各種データ、プログラムの格納処理および
読み出し処理を実行する。
【０１２８】バス９１０はＰＣＩ（Peripheral Compone
nt Internet/Interface）バス等により構成され、各モ
ジュール、入出力インタフェース９１１を介した各入手
力装置とのデータ転送を可能にしている。
【０１２９】入力部９０５は、例えば、キーボード、ポ
インティングデバイス等によって構成され、ＣＰＵ９０
１に各種のコマンド、データを入力するためにユーザに
より操作、あるいは入力される。出力部９０６は、上述
のスクロール処理された画像を表示する例えばＣＲＴ、
液晶ディスプレイ等であり、各種情報をテキストまたは
イメージ等により表示する。
【０１３０】通信部９０７は他デバイスとの通信処理を
実行する。ドライブ９０８は、フレキシブルディスク、
ＣＤ−ＲＯＭ(Compact Disc Read Only Memory)，ＭＯ
(Magneto optical)ディスク，ＤＶＤ(Digital Versatil
e Disc)、磁気ディスク、半導体メモリなどのリムーバ
ブル記録媒体９０９の記録再生を実行するドライブであ
り、各リムーバブル記録媒体９０９からのプログラムま
たはデータ再生、リムーバブル記録媒体９０９に対する
プログラムまたはデータ格納を実行する。
【０１３１】センサ９２１およびコントローラ９２２
は、上述した実施例において説明したように、カメラ、
磁気センサ、超音波センサ等によって構成され、コント
ローラの位置、姿勢情報を入力する。
【０１３２】スクロール処理の実行に際しては、ＲＯＭ
他の記憶媒体に記録されたプログラムに従って、センサ
９２１およびコントローラ９２２の入力情報に基づい
て、ＣＰＵ９０１において処理を決定し、その結果が出
力部９０６としての画像表示装置に表示される。
【０１３３】以上、特定の実施例を参照しながら、本発
明について詳解してきた。しかしながら、本発明の要旨
を逸脱しない範囲で当業者が該実施例の修正や代用を成
し得ることは自明である。すなわち、例示という形態で
本発明を開示してきたのであり、限定的に解釈されるべ
きではない。本発明の要旨を判断するためには、冒頭に
記載した特許請求の範囲の欄を参酌すべきである。
【０１３４】なお、明細書中において説明した一連の処
理はハードウェア、またはソフトウェア、あるいは両者
の複合構成によって実行することが可能である。ソフト
ウェアによる処理を実行する場合は、処理シーケンスを
記録したプログラムを、専用のハードウェアに組み込ま
れたコンピュータ内のメモリにインストールして実行さ
せるか、あるいは、各種処理が実行可能な汎用コンピュ
ータにプログラムをインストールして実行させることが
可能である。
【０１３５】例えば、プログラムは記憶媒体としてのハ
ードディスクやＲＯＭ（Read OnlyMemory)に予め記録し
ておくことができる。あるいは、プログラムはフレキシ
ブルディスク、ＣＤ−ＲＯＭ(Compact Disc Read Only
Memory)，ＭＯ(Magneto optical)ディスク，ＤＶＤ(Dig
ital Versatile Disc)、磁気ディスク、半導体メモリな
どのリムーバブル記録媒体に、一時的あるいは永続的に
格納（記録）しておくことができる。このようなリムー
バブル記録媒体は、いわゆるパッケージソフトウエアと
して提供することができる。
【０１３６】なお、プログラムは、上述したようなリム
ーバブル記録媒体からコンピュータにインストールする
他、ダウンロードサイトから、コンピュータに無線転送
したり、ＬＡＮ(Local Area Network)、インターネット
といったネットワークを介して、コンピュータに有線で
転送し、コンピュータでは、そのようにして転送されて
くるプログラムを受信し、内蔵するハードディスク等の
記憶媒体にインストールすることができる。
【０１３７】なお、明細書に記載された各種の処理は、
記載に従って時系列に実行されるのみならず、処理を実
行する装置の処理能力あるいは必要に応じて並列的にあ
るいは個別に実行されてもよい。
【０１３８】
【発明の効果】以上、説明したように、本発明の構成に
よれば、ディスプレイに表示された画像のスクロールを
実現するために、ボタンやスクロールバーなどのＧＵＩ
コンポーネントを画面に配置する必要や、ジョイスティ
ックやトラックボールなどのデバイスを本体やコントロ
ーラ自体に追加する必要がなく、コントローラの位置や
姿勢情報に基づいて、容易にスクロールが実行され、Ｐ
Ｃ、ゲーム機の操作について熟知していないユーザにと
って、操作の簡単な画面スクロール構成が実現される。
【０１３９】また、本発明の構成によれば、ディスプレ
イに表示された画像のスクロール実行において、コント
ローラの傾きの遷移状態を検出し、検出遷移情報に基づ
いてスクロールを行なう構成としたので、あたかもコン
トローラの歩行状態を反映したスクロール処理が可能と
なる。
【０１４０】また、本発明の構成によれば、ディスプレ
イに表示された画像のスクロール実行において、コント
ローラの位置を検出し、検出位置情報に基づいてスクロ
ールを実行する構成としたので、複雑な操作を行なうこ
とのない容易なスクロール処理が可能となる。
【０１４１】さらに、本発明の構成によれば、コントロ
ーラの動き、または位置に応じて、スクロール方向ある
いはスクロール距離や速度を決定する構成としたので、
直感的かつ簡単で楽しい画面のスクロールが可能にな
る。
【図面の簡単な説明】
【図１】コントローラを用いたディスプレイ装置の構成
例を示す図である。
【図２】コントローラを用いたディスプレイ装置の構成
例における操作処理例を示す図である。
【図３】本発明の画像表示処理装置の構成例を示す図で
ある。
【図４】本発明の画像表示処理装置の磁気センサを用い
た構成例を示す図である。
【図５】本発明の画像表示処理装置の超音波センサを用
いた構成例を示す図である。
【図６】本発明の画像表示処理装置の構成例を示すブロ
ック図である。
【図７】本発明の画像表示処理装置の処理フローとして
のメインルーチンを示す図である。
【図８】本発明の画像表示処理装置のスクロール処理例
１について説明する図である。
【図９】本発明の画像表示処理装置において適用する座
標の対応について説明する図である。
【図１０】本発明の画像表示処理装置のスクロール処理
例１の処理手順（例１）を説明するフロー図である。
【図１１】本発明の画像表示処理装置のスクロール処理
例１の処理手順（例２）を説明するフロー図である。
【図１２】本発明の画像表示処理装置のスクロール処理
例２の処理手順を説明するフロー図である。
【図１３】本発明の画像表示処理装置のスクロール処理
例２における表示領域設定例を示す図である。
【図１４】本発明の画像表示処理装置のスクロール処理
例２における表示領域設定例を示す図である。
【図１５】本発明の画像表示処理装置のスクロール処理
例２における表示領域設定例を示す図である。
【図１６】本発明の画像表示処理装置のスクロール処理
例２における表示領域設定例を示す図である。
【図１７】本発明の画像表示処理装置のスクロール処理
例２における処理例を示す図である。
【図１８】本発明の画像表示処理装置のスクロール処理
例３における表示領域設定例を示す図である。
【図１９】本発明の画像表示処理装置のスクロール処理
例３における処理フローを示す図である。
【図２０】本発明の画像表示処理装置のスクロール処理
例４について説明する図である。
【図２１】本発明の画像表示処理装置のスクロール処理
例４の処理手順を説明するフロー図である。
【図２２】本発明の画像表示処理装置のハードウェア構
成例を示す図である。
【符号の説明】
１０１ コントローラ １０２ ディスプレイ １０３ ボタン １０４ 影 ２０１ コントローラ ２０２ センサ ２０３ ディスプレイ ２０４ 制御部 ２１１ コントローラ＆センサ ２１２ 磁場発生装置 ２１３ ディスプレイ ２１４ 制御部 ２２１ コントローラ＆センサ ２２２，２２３，２２４ 超音波センサ ２２５ ディスプレイ ２２６ 制御部 ５０１ コントローラ ５０２ 画面 ５１１ コントローラ正面およびスクロール方向 ５５１ 画面座標系 ５５２ コントローラ・ローカル座標系 ６０１ 作用領域境界 ６０２ 作用領域 ６０３ コントローラ ６０４ 画面 ６１１ 作用領域境界 ６１２ 画面枠 ６１３ 作用領域 ６２１ 作用領域境界 ６２２ 作用領域 ６２３ 画面枠 ６３１ 作用領域境界 ６３２ 作用領域 ６３３ 画面 ６４１ 画面 ６４２ コントローラ ７０１ コントローラ ７０２ 画面 ７０３ 車 ７０４ 作用領域 ８０１ コントローラ ８０２ 傾き方向およびスクロール方向 ９０１ ＣＰＵ ９０２ ＲＯＭ ９０３ ＲＡＭ ９０４ ＨＤＤ ９０５ 入力部 ９０６ 出力部 ９０７ 通信部 ９０８ ドライブ ９０９ リムーバブル記録媒体 ９１０ バス ９１１ 入出力インタフェース ９２１ センサ ９２２ コントローラ
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成１５年２月２０日（２００３．２．２
０）
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正内容】
【特許請求の範囲】
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】削除
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】削除
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】削除
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】削除
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】削除
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】削除
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】削除
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】削除
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】削除
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】削除
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】削除
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】削除
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】削除
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】削除
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】削除
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】削除
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】削除
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】削除
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００３８
【補正方法】削除
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００４０
【補正方法】削除
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】００４９
【補正方法】変更
【補正内容】
【００４９】なお、この画像表示処理装置例では制御部
２０４はディスプレイ装置２０３の内部に構成され、デ
ィスプレイ装置２０３と一体化しているが、制御部２０
４をディスプレイ装置２０３とは別の制御装置として構
成してもよい。その場合、センサやディスプレイ装置と
制御部とは、ケーブル接続、あるいは無線ＬＡＮやｂｌ
ｕｅｔｏｏｔｈなどの無線通信手段で接続する構成も可
能である。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】００５０
【補正方法】変更
【補正内容】
【００５０】センサ２０２は、コントローラ２０１の位
置と姿勢を計測する手段であり、コントローラ２０１の
画像を撮影するカメラ、あるいは、磁気センサ、超音波
センサ等が使用可能である。センサの配置や、センシン
グ領域、すなわち感知領域、およびセンシング情報等
は、設置するセンサによって異なる態様となる。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】００５６
【補正方法】変更
【補正内容】
【００５６】図３乃至図５を参照して、コントローラの
位置、姿勢の検出構成として、カメラによる撮影画像解
析、磁気センサ、および超音波センサの例を説明した
が、本発明の構成においては、コントローラの位置、姿
勢の検出が可能な構成であればよく、その他の手段を適
用したコントローラ位置、姿勢情報取得処理構成として
もよい。すなわち、本発明の画面表示装置ではコントロ
ーラの位置および姿勢を計測する手段は問わない。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】００６０
【補正方法】変更
【補正内容】
【００６０】必要なコントローラの位置情報もしくは姿
勢情報の次元数はスクロール方法によって異なる。した
がって、場合によっては最低でもそれぞれのスクロール
方法に必要な次元数を計測できるセンサが具備されてい
れば良い。また必要ならばコントローラにボタンやダイ
アルなどの他の入力装置を組み合わせても良いが、本発
明のスクロール方法では利用しない。
【手続補正２６】
【補正対象書類名】明細書
【補正対象項目名】００６１
【補正方法】変更
【補正内容】
【００６１】コントローラの物理的な形状は特に限定せ
ず、アプリケーションに応じて適当な形状にすれば良
い。ただしスクロール方向がコントローラの方向に依存
するようなスクロール方法の場合、例えば動物や飛行機
のように正面方向や上方向が分かりやすい形状のほうが
望ましい。以下に示す例においては、コントローラは正
面方向を定義できる構成とする。例えば、図３乃至図５
において示したコントローラ２０１において、顔の方向
が正面（Ｘ軸方向）、右方向がＹ軸方向、上（頭）方向
がＺ軸方向と定義できる。カメラ、磁気センサ、超音波
センサは、コントローラの向きを把握可能な構成を持
つ。
【手続補正２７】
【補正対象書類名】明細書
【補正対象項目名】００８８
【補正方法】変更
【補正内容】
【００８８】図６の制御部３１０のスクロール情報生成
部が、コントローラ位置姿勢情報変換部３１１からの情
報、すなわち、現在のコントローラ傾き状態の入力デー
タと、前回のコントローラの傾き状態との比較処理情報
に基づいて上述のスクロール方向の設定、さらにスクロ
ール量、速度を決定するか、あるいはデフォルトで決定
済みのデータを決定情報として、画面表示制御部３１３
が決定情報に従ってディスプレイ上の画像を更新する。
【手続補正２８】
【補正対象書類名】明細書
【補正対象項目名】００８９
【補正方法】変更
【補正内容】
【００８９】なお、ステップＳ２０５のスクロール処理
において制御部内の画面表示制御部３１３で行なわれる
他の処理としては、３次元ＣＧの場合は射影行列の変換
もしくはワールド座標系の変換などが、また２次元ＣＧ
では描画位置のオフセットやスケールの変更などが挙げ
られる。
【手続補正２９】
【補正対象書類名】明細書
【補正対象項目名】００９０
【補正方法】変更
【補正内容】
【００９０】上述したように、図１０に示したサブルー
チンでは、コントローラの左傾状態以外から左傾状態
へ、または右傾状態以外から右傾状態に変わったときに
スクロール処理を行なう。つまり傾き状態が左傾→無傾
→左傾と変移したときもスクロールする。しかし、無傾
状態を記録しないでおくと、右傾状態から左傾状態へ、
または左傾状態から右傾状態へ変移したときのみスクロ
ール処理を行なうこともできる。これにより、センサの
精度問題により傾きの角度が閾値付近で振動してしまっ
た場合にでも、必要以上スクロールしてしまうのを防ぐ
ことができる。そのサブルーチンを図１１に示す。
【手続補正３０】
【補正対象書類名】明細書
【補正対象項目名】００９５
【補正方法】変更
【補正内容】
【００９５】これが先の図１０を参照して説明したサブ
ルーチンと異なる点である。すなわち、先のサブルーチ
ンでは、無傾状態だったときにその状態を記録していた
が、本サブルーチンでは、無傾状態だったときにその状
態を記録しない構成とした。本構成の如く無傾状態を記
録しないでおくと、右傾状態から左傾状態へ、または左
傾状態から右傾状態へ変移したときのみスクロール処理
を行なうことになる。これにより、センサの精度問題に
より傾きの角度が閾値付近で振動してしまった場合にで
も、必要以上スクロールしてしまうのを防ぐことができ
る。
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ０９Ｇ 5/00 ５１０ Ｇ０９Ｇ 5/00 ５１０Ｈ ５５０ ５５０Ｃ 5/34 5/34 Ｚ Ｆターム(参考） 2C032 HB03 HC13 HC25 5B050 AA06 AA08 BA08 BA17 CA07 FA02 FA08 5B087 AA09 BC16 DE06 5C082 AA05 AA21 BA12 BA42 BB25 CA72 CB01 DA61 DA87 MM09 5E501 AA02 AA17 BA05 CB03 CB20 FB32

Claims (29)

    【特許請求の範囲】
  1. 【請求項１】ディスプレイに表示された画像データのス
    クロール処理を実行する画像表示処理装置であり、 ユーザによる操作可能なコントローラであり、３次元空
    間における位置および姿勢情報の少なくともいずれかの
    情報をセンサを介して提供するコントローラ手段と、 前記コントローラの３次元空間における位置および姿勢
    情報の少なくともいずれかの情報に基づいて、ディスプ
    レイに表示された画像データのスクロール処理態様を決
    定するスクロール情報生成手段と、 前記スクロール情報生成手段の決定に従ってディスプレ
    イの表示画像のスクロール処理としての画像更新処理を
    実行する画像表示制御手段と、 を有することを特徴とする画像表示処理装置。
  2. 【請求項２】前記スクロール情報生成手段は、 前記コントローラの右傾状態、左傾状態、および無傾状
    態の３状態の判別処理を実行し、該３状態の状態遷移の
    有無に基づいてスクロール処理の実行の有無を決定する
    構成であることを特徴とする請求項１に記載の画像表示
    処理装置。
  3. 【請求項３】前記スクロール情報生成手段は、 前記コントローラの右傾状態、左傾状態、および無傾状
    態の３状態の判別処理を実行し、右傾状態および左傾状
    態間の状態遷移の有無に基づいてスクロール処理の実行
    の有無を決定する構成であることを特徴とする請求項１
    に記載の画像表示処理装置。
  4. 【請求項４】前記画像表示処理装置は、さらに、 前記コントローラの位置および姿勢情報をディスプレイ
    面を基準とした画面座標系に対応した情報に変換する変
    換手段を有し、 前記スクロール情報生成手段は、 前記変換手段により変換された画面座標系に対応した前
    記コントローラの姿勢情報に基づいて、ディスプレイに
    表示された画像データのスクロール処理態様を決定する
    構成であることを特徴とする請求項１に記載の画像表示
    処理装置。
  5. 【請求項５】前記スクロール情報生成手段は、 前記コントローラの向きに応じて、スクロール方向を決
    定する処理を実行する構成であることを特徴とする請求
    項１に記載の画像表示処理装置。
  6. 【請求項６】前記スクロール情報生成手段は、 前記コントローラの傾きの方向に応じて、スクロール方
    向を決定する処理を実行する構成であることを特徴とす
    る請求項１に記載の画像表示処理装置。
  7. 【請求項７】前記スクロール情報生成手段は、 前記コントローラが予め定められた作用領域にあるか否
    かのコントローラ位置判別処理を実行し、前記コントロ
    ーラが予め定められた作用領域内である場合にスクロー
    ル処理の実行を決定する構成であることを特徴とする請
    求項１に記載の画像表示処理装置。
  8. 【請求項８】前記作用領域は、ディスプレイ平面から垂
    直方向に一定距離以上離間した領域として設定された構
    成であることを特徴とする請求項７に記載の画像表示処
    理装置。
  9. 【請求項９】前記作用領域は、ディスプレイ平面から該
    平面に並行方向に一定距離以上離間した領域として設定
    された構成であることを特徴とする請求項７に記載の画
    像表示処理装置。
  10. 【請求項１０】前記作用領域は、ディスプレイ中心点か
    ら一定距離以上離間した領域として設定された構成であ
    ることを特徴とする請求項７に記載の画像表示処理装
    置。
  11. 【請求項１１】前記作用領域は、ディスプレイから一定
    距離以内の領域として設定された構成であることを特徴
    とする請求項７に記載の画像表示処理装置。
  12. 【請求項１２】前記作用領域は、ディスプレイに表示さ
    れた画像データに対応付けられた３次元空間領域として
    設定された構成であることを特徴とする請求項７に記載
    の画像表示処理装置。
  13. 【請求項１３】前記スクロール情報生成手段は、 前記コントローラの作用領域内の位置情報に基づいて、
    スクロール速度またはスクロール距離を決定する構成で
    あることを特徴とする請求項７に記載の画像表示処理装
    置。
  14. 【請求項１４】前記コントローラは、３次元空間におけ
    る位置および姿勢情報を、画像撮像装置、または磁気セ
    ンサ、または超音波センサのいずれを用いた構成により
    提供する構成であることを特徴とする請求項１に記載の
    画像表示処理装置。
  15. 【請求項１５】ディスプレイに表示された画像データの
    スクロール処理を実行する画像表示処理方法であり、 ユーザの操作するコントローラの３次元空間における位
    置および姿勢情報の少なくともいずれかの情報をセンサ
    を介して提供するステップと、 前記コントローラの３次元空間における位置および姿勢
    情報の少なくともいずれかの情報に基づいて、ディスプ
    レイに表示された画像データのスクロール処理態様を決
    定するスクロール情報生成ステップと、 前記スクロール情報生成ステップにおける決定に従って
    ディスプレイに表示された画像データのスクロール処理
    としての画像更新処理を実行する画像表示制御ステップ
    と、 を有することを特徴とする画像表示処理方法。
  16. 【請求項１６】前記スクロール情報生成ステップは、 前記コントローラの右傾状態、左傾状態、および無傾状
    態の３状態の判別処理を実行し、該３状態の状態遷移の
    有無に基づいてスクロール処理の実行の有無を決定する
    ステップを含むことを特徴とする請求項１５に記載の画
    像表示処理方法。
  17. 【請求項１７】前記スクロール情報生成ステップは、 前記コントローラの右傾状態、左傾状態、および無傾状
    態の３状態の判別処理を実行し、右傾状態および左傾状
    態間の状態遷移の有無に基づいてスクロール処理の実行
    の有無を決定するステップを含むことを特徴とする請求
    項１５に記載の画像表示処理方法。
  18. 【請求項１８】前記画像表示処理方法は、さらに、 前記コントローラの位置および姿勢情報をディスプレイ
    面を基準とした画面座標系に対応した情報に変換する変
    換ステップを有し、 前記スクロール情報生成ステップは、 前記変換ステップにおいて変換された画面座標系に対応
    した前記コントローラの姿勢情報に基づいて、ディスプ
    レイに表示された画像データのスクロール処理態様を決
    定することを特徴とする請求項１５に記載の画像表示処
    理方法。
  19. 【請求項１９】前記スクロール情報生成ステップは、 前記コントローラの向きに応じて、スクロール方向を決
    定する処理を実行するステップを含むことを特徴とする
    請求項１５に記載の画像表示処理方法。
  20. 【請求項２０】前記スクロール情報生成ステップは、 前記コントローラの傾きの方向に応じて、スクロール方
    向を決定する処理を実行するステップを含むことを特徴
    とする請求項１５に記載の画像表示処理方法。
  21. 【請求項２１】前記スクロール情報生成ステップは、 前記コントローラが予め定められた作用領域にあるか否
    かのコントローラ位置判別処理を実行し、前記コントロ
    ーラが予め定められた作用領域内である場合にスクロー
    ル処理の実行を決定することを特徴とする請求項１５に
    記載の画像表示処理方法。
  22. 【請求項２２】前記作用領域は、ディスプレイ平面から
    垂直方向に一定距離以上離間した領域として設定するこ
    とを特徴とする請求項２１に記載の画像表示処理方法。
  23. 【請求項２３】前記作用領域は、ディスプレイ平面から
    該平面に並行方向に一定距離以上離間した領域として設
    定することを特徴とする請求項２１に記載の画像表示処
    理方法。
  24. 【請求項２４】前記作用領域は、ディスプレイ中心点か
    ら一定距離以上離間した領域として設定することを特徴
    とする請求項２１に記載の画像表示処理方法。
  25. 【請求項２５】前記作用領域は、ディスプレイから一定
    距離以内の領域として設定することを特徴とする請求項
    ２１に記載の画像表示処理方法。
  26. 【請求項２６】前記作用領域は、ディスプレイに表示さ
    れた画像データに対応付けられた３次元空間領域として
    設定することを特徴とする請求項２１に記載の画像表示
    処理方法。
  27. 【請求項２７】前記スクロール情報生成ステップは、 前記コントローラの作用領域内の位置情報に基づいて、
    スクロール速度またはスクロール距離を決定するステッ
    プを含むことを特徴とする請求項２１に記載の画像表示
    処理方法。
  28. 【請求項２８】前記コントローラは、３次元空間におけ
    る位置および姿勢情報を、画像撮像装置、または磁気セ
    ンサ、または超音波センサのいずれを用いた構成により
    提供することを特徴とする請求項１５に記載の画像表示
    処理方法。
  29. 【請求項２９】ディスプレイに表示された画像データの
    スクロール処理をコンピュータ・システム上で実行せし
    めるコンピュータ・プログラムであって、 ユーザの操作するコントローラの３次元空間における位
    置および姿勢情報の少なくともいずれかの情報をセンサ
    を介して提供するステップと、 前記コントローラの３次元空間における位置および姿勢
    情報の少なくともいずれかの情報に基づいて、ディスプ
    レイに表示された画像データのスクロール処理態様を決
    定するスクロール情報生成ステップと、 前記スクロール情報生成ステップにおける決定に従って
    ディスプレイに表示された画像データのスクロール処理
    としての画像更新処理を実行する画像表示制御ステップ
    と、 を有することを特徴とするコンピュータ・プログラム。
JP2002086767A 2002-03-26 2002-03-26 画像表示処理装置、および画像表示処理方法、並びにコンピュータ・プログラム Abandoned JP2003280785A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2002086767A JP2003280785A (ja) 2002-03-26 2002-03-26 画像表示処理装置、および画像表示処理方法、並びにコンピュータ・プログラム
US10/386,574 US20030210255A1 (en) 2002-03-26 2003-03-13 Image display processing apparatus, image display processing method, and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002086767A JP2003280785A (ja) 2002-03-26 2002-03-26 画像表示処理装置、および画像表示処理方法、並びにコンピュータ・プログラム

Publications (1)

Publication Number Publication Date
JP2003280785A true JP2003280785A (ja) 2003-10-02

Family

ID=29233254

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002086767A Abandoned JP2003280785A (ja) 2002-03-26 2002-03-26 画像表示処理装置、および画像表示処理方法、並びにコンピュータ・プログラム

Country Status (2)

Country Link
US (1) US20030210255A1 (ja)
JP (1) JP2003280785A (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007061489A (ja) * 2005-09-01 2007-03-15 Nintendo Co Ltd 情報処理システムおよびプログラム
JP2007075213A (ja) * 2005-09-12 2007-03-29 Nintendo Co Ltd 情報処理プログラム
JP2008033190A (ja) * 2006-07-31 2008-02-14 Sharp Corp 表示装置、制御方法およびプログラム
JP2008298946A (ja) * 2007-05-30 2008-12-11 Kyocera Corp 携帯端末、及び表示方法
WO2009072504A1 (ja) * 2007-12-07 2009-06-11 Sony Corporation 制御装置、入力装置、制御システム、制御方法及びハンドヘルド装置
US8157651B2 (en) 2005-09-12 2012-04-17 Nintendo Co., Ltd. Information processing program
US8708822B2 (en) 2005-09-01 2014-04-29 Nintendo Co., Ltd. Information processing system and program
KR101400230B1 (ko) 2008-03-11 2014-05-28 삼성전자주식회사 3차원 포인팅 입력장치 및 그 방법
WO2014185146A1 (ja) * 2013-05-15 2014-11-20 ソニー株式会社 表示制御装置、表示制御方法および記録媒体
US9141133B2 (en) 2010-04-30 2015-09-22 Sony Corporation Information processing apparatus and display screen operating method for scrolling
JP2020513699A (ja) * 2016-11-23 2020-05-14 レアリザシオンズ インコーポレイテッド モントリオール 自動校正投射システムおよび方法

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7233684B2 (en) * 2002-11-25 2007-06-19 Eastman Kodak Company Imaging method and system using affective information
US7319780B2 (en) * 2002-11-25 2008-01-15 Eastman Kodak Company Imaging method and system for health monitoring and personal security
US7206022B2 (en) * 2002-11-25 2007-04-17 Eastman Kodak Company Camera system with eye monitoring
US7046924B2 (en) * 2002-11-25 2006-05-16 Eastman Kodak Company Method and computer program product for determining an area of importance in an image using eye monitoring information
US20050212760A1 (en) * 2004-03-23 2005-09-29 Marvit David L Gesture based user interface supporting preexisting symbols
US20060044399A1 (en) * 2004-09-01 2006-03-02 Eastman Kodak Company Control system for an image capture device
US20060125928A1 (en) * 2004-12-10 2006-06-15 Eastman Kodak Company Scene and user image capture device and method
KR100641182B1 (ko) * 2004-12-30 2006-11-02 엘지전자 주식회사 휴대단말기에서의 가상화면 이동장치 및 방법
TWI263972B (en) * 2005-05-25 2006-10-11 Via Tech Inc An apparatus for image scrolling detection and method of the same
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
KR100791294B1 (ko) * 2006-03-02 2008-01-04 삼성전자주식회사 그래픽 객체의 이동을 제어하는 방법 및 이를 이용한리모트 컨트롤
EP1914622A3 (en) * 2006-10-16 2012-11-28 Samsung Electronics Co., Ltd. Method and apparatus for moving list on picture plane
GB2450103A (en) * 2007-06-12 2008-12-17 Dublin Inst Of Technology A dual analogue controller games in the form of an action figure, robot or animal
JP5469379B2 (ja) * 2009-05-28 2014-04-16 任天堂株式会社 ゲームプログラム、および、ゲーム装置
US20110092290A1 (en) * 2009-10-16 2011-04-21 Huebner Richard D Wireless video game controller
EP2699984A2 (en) * 2011-04-20 2014-02-26 Koninklijke Philips N.V. Gesture based control of element or item
US9013514B2 (en) * 2012-03-08 2015-04-21 John F. Bochniak Variable speed autoscroll system and method
JP6053332B2 (ja) * 2012-05-31 2016-12-27 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、及びプログラム
US9842571B2 (en) * 2013-02-22 2017-12-12 Samsung Electronics Co., Ltd. Context awareness-based screen scroll method, machine-readable storage medium and terminal therefor
KR102186103B1 (ko) * 2013-02-22 2020-12-03 삼성전자주식회사 상황인지 기반의 화면 스크롤 방법, 저장 매체 및 단말
CN108153422B (zh) * 2018-01-08 2023-02-17 维沃移动通信有限公司 一种显示对象控制方法和移动终端

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0335311A (ja) * 1989-06-30 1991-02-15 Sony Corp 電子ファイル検索方法及び電子ファイル検索装置
JPH0367320A (ja) * 1989-05-01 1991-03-22 Wacom Co Ltd 角度情報入力装置
JPH07295729A (ja) * 1994-04-28 1995-11-10 Wacom Co Ltd 角度情報入力装置
JPH09305306A (ja) * 1996-03-12 1997-11-28 Toho Business Kanri Center:Kk 位置入力装置、位置入力処理装置およびその方法
JPH10301750A (ja) * 1997-04-28 1998-11-13 Matsushita Commun Ind Co Ltd 携帯情報処理装置
JPH11134106A (ja) * 1997-10-30 1999-05-21 Canon Inc カーソル移動装置
JP2001136259A (ja) * 1999-11-02 2001-05-18 Nec Corp 携帯電話端末の表示画面制御装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5227985A (en) * 1991-08-19 1993-07-13 University Of Maryland Computer vision system for position monitoring in three dimensions using non-coplanar light sources attached to a monitored object
US5526022A (en) * 1993-01-06 1996-06-11 Virtual I/O, Inc. Sourceless orientation sensor
US6204839B1 (en) * 1997-06-27 2001-03-20 Compaq Computer Corporation Capacitive sensing keyboard and pointing device
US6184867B1 (en) * 1997-11-30 2001-02-06 International Business Machines Corporation Input for three dimensional navigation using two joysticks
TW461547U (en) * 1998-01-20 2001-10-21 Primax Electronics Ltd Mouse encoding apparatus
US6567101B1 (en) * 1999-10-13 2003-05-20 Gateway, Inc. System and method utilizing motion input for manipulating a display of data
DE19958443C2 (de) * 1999-12-03 2002-04-25 Siemens Ag Bedieneinrichtung

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0367320A (ja) * 1989-05-01 1991-03-22 Wacom Co Ltd 角度情報入力装置
JPH0335311A (ja) * 1989-06-30 1991-02-15 Sony Corp 電子ファイル検索方法及び電子ファイル検索装置
JPH07295729A (ja) * 1994-04-28 1995-11-10 Wacom Co Ltd 角度情報入力装置
JPH09305306A (ja) * 1996-03-12 1997-11-28 Toho Business Kanri Center:Kk 位置入力装置、位置入力処理装置およびその方法
JPH10301750A (ja) * 1997-04-28 1998-11-13 Matsushita Commun Ind Co Ltd 携帯情報処理装置
JPH11134106A (ja) * 1997-10-30 1999-05-21 Canon Inc カーソル移動装置
JP2001136259A (ja) * 1999-11-02 2001-05-18 Nec Corp 携帯電話端末の表示画面制御装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007061489A (ja) * 2005-09-01 2007-03-15 Nintendo Co Ltd 情報処理システムおよびプログラム
US8708822B2 (en) 2005-09-01 2014-04-29 Nintendo Co., Ltd. Information processing system and program
JP2007075213A (ja) * 2005-09-12 2007-03-29 Nintendo Co Ltd 情報処理プログラム
US8157651B2 (en) 2005-09-12 2012-04-17 Nintendo Co., Ltd. Information processing program
JP2008033190A (ja) * 2006-07-31 2008-02-14 Sharp Corp 表示装置、制御方法およびプログラム
JP2008298946A (ja) * 2007-05-30 2008-12-11 Kyocera Corp 携帯端末、及び表示方法
US8531399B2 (en) 2007-12-07 2013-09-10 Sony Corporation Control apparatus, input apparatus, control system, control method, and handheld apparatus
WO2009072504A1 (ja) * 2007-12-07 2009-06-11 Sony Corporation 制御装置、入力装置、制御システム、制御方法及びハンドヘルド装置
JP5531616B2 (ja) * 2007-12-07 2014-06-25 ソニー株式会社 制御装置、入力装置、制御システム、制御方法及びハンドヘルド装置
KR101400230B1 (ko) 2008-03-11 2014-05-28 삼성전자주식회사 3차원 포인팅 입력장치 및 그 방법
US9141133B2 (en) 2010-04-30 2015-09-22 Sony Corporation Information processing apparatus and display screen operating method for scrolling
WO2014185146A1 (ja) * 2013-05-15 2014-11-20 ソニー株式会社 表示制御装置、表示制御方法および記録媒体
US9940009B2 (en) 2013-05-15 2018-04-10 Sony Corporation Display control device for scrolling of content based on sensor data
JP2020513699A (ja) * 2016-11-23 2020-05-14 レアリザシオンズ インコーポレイテッド モントリオール 自動校正投射システムおよび方法

Also Published As

Publication number Publication date
US20030210255A1 (en) 2003-11-13

Similar Documents

Publication Publication Date Title
JP2003280785A (ja) 画像表示処理装置、および画像表示処理方法、並びにコンピュータ・プログラム
US10720189B2 (en) Haptic effect generation for space-dependent content
JP4115188B2 (ja) 仮想空間描画表示装置
US8395620B2 (en) Method and system for tracking of a subject
US7536655B2 (en) Three-dimensional-model processing apparatus, three-dimensional-model processing method, and computer program
US20070222746A1 (en) Gestural input for navigation and manipulation in virtual space
CN101561708B (zh) 利用动作感测判断输入模式的方法与其输入装置
US20150363980A1 (en) 3d virtual environment interaction system
CN104423881A (zh) 信息处理装置及其控制方法
US9310851B2 (en) Three-dimensional (3D) human-computer interaction system using computer mouse as a 3D pointing device and an operation method thereof
JP2009011362A (ja) 情報処理システム、ロボット装置及びその制御方法
KR20180097917A (ko) 전자 장치 및 그의 제어 방법
CN107754310B (zh) 手持式装置以及其定位方法
JP2012048393A (ja) 情報処理装置およびその動作方法
JP2008047047A (ja) 入力装置及び方法、並びにプログラム及び記憶媒体
JP7107015B2 (ja) 点群処理装置、点群処理方法およびプログラム
JPH0816137A (ja) ３次元座標入力装置及びカーソル表示制御方式
JP2003280813A (ja) ポインティングデバイス、ポインタ制御装置、ポインタ制御方法及びその方法を記録した記録媒体
EP3032380A1 (en) Image projection apparatus, and system employing interactive input-output capability
TW200935274A (en) Method for determining input mode by motion sensing and an input apparatus for the same
TWI522848B (zh) 手持式指向裝置以及其游標定位方法
CN103869941A (zh) 具虚拟触控服务的电子装置及虚拟触控即时校正方法
KR20050063469A (ko) 지자기 센서를 이용한 3차원 위치 입력 장치 및 상기 위치입력 장치를 위한 기록 매체
CN114237409A (zh) 陀螺鼠标数据处理方法、装置、系统和设备
JP4389350B2 (ja) オブジェクト属性変更処理装置、オブジェクト属性変更処理方法、および３次元モデル処理装置、３次元モデル処理方法、並びにプログラム提供媒体

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20051108

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051115

A762 Written abandonment of application

Free format text: JAPANESE INTERMEDIATE CODE: A762

Effective date: 20051219