WO2014087562A1

WO2014087562A1 - 電子機器、画像表示制御方法

Info

Publication number: WO2014087562A1
Application number: PCT/JP2013/005490
Authority: WO
Inventors: 林　正和; 石塚　健作; 学西沢; 悠生小林; 英治山田
Original assignee: 株式会社ソニー・コンピュータエンタテインメント
Priority date: 2012-12-03
Filing date: 2013-09-17
Publication date: 2014-06-12
Also published as: JP2014109926A; JP5916033B2

Abstract

　操作ボタン２２は、キー入力によって電子機器１０の操作をする。タッチパネル５０は、電子機器１０の表示領域であるとともに、タッチ操作によって電子機器１０の操作をする。画像処理部１１２は、操作ボタン２２またはタッチパネル５０による操作の少なくともいずれか一方の操作をもとに、電子機器１０の実行画面を変更する。画像処理部１１２は、操作ボタン２２が受け付けたキー入力毎に、電子機器１０の実行画面を段階的に変更する離散画面変更部１１６と、タッチパネル５０が受け付けたタッチ操作の入力量に応じて、電子機器１０の実行画面を連続的に変更する連続画面変更部１１８とを備える。連続画面変更部１１８は、タッチ操作が終了したときに、離散画面変更部１１６が段階的に変更可能な画面と一致するまで画面を変更する。

Description

電子機器、画像表示制御方法

　本発明は、電子機器および画像表示制御方法に関する。

　携帯型のゲーム機やＰＤＡ（Personal Digital Assistant）等の電子機器が普及している。多くの電子機器が通信機能を搭載し、またスマートフォンのように、携帯電話やＰＤＡ等の機能を一つにまとめた多機能型の電子機器も登場している。このような電子機器の中には、従来の操作ボタンの入力による操作に加え、ユーザにタッチパネルのタッチ操作を行わせるユーザインタフェースを提供するものも存在する。

　タッチパネルのタッチ操作をする場合、ユーザは、例えばサムネイル表示されたコンテンツ画像を指でタップすることで、そのコンテンツ画像がパネル全面に表示されるユーザインタフェースや、パネル表面を指でなぞることで、表示画像をスクロールするユーザインタフェースなどが一般的である。また近年では、同時にタッチされた複数ポイントの検出機能をもつマルチタッチスクリーンを備えた電子機器も登場し、ユーザのピンチ操作による電子機器の操作を実現するためのユーザインタフェースも実用化されている。

　操作ボタンとタッチパネルとの両方のユーザインタフェースを含む電子機器において、いずれのユーザインタフェースを用いても電子機器の操作が実行できると便利である。一方で、操作ボタンとタッチパネルとは異なるユーザインタフェースである。このため、ユーザが電子機器を操作ボタンの入力で操作する場合と、タッチパネルの入力で操作する場合とでは、ユーザが感じる操作感覚が異なり、場合によってはユーザに違和感を与えかねない。

　そこで本発明は、操作ボタンによる操作とタッチパネルによる操作との併存時におけるユーザインタフェースの改善技術を提供することを目的とする。

　上記課題を解決するために、本発明のある態様の電子機器は、キー入力によって前記電子機器の操作をする操作ボタンと、前記電子機器の表示領域であるとともに、タッチ操作によって前記電子機器の操作をするタッチパネルと、前記操作ボタンまたは前記タッチパネルによる操作の少なくともいずれか一方の操作をもとに、前記電子機器の実行画面を変更して表示する画像処理部とを備える。ここで前記画像処理部は、前記操作ボタンが受け付けたキー入力毎に、前記電子機器の実行画面を段階的に変更する離散画面変更部と、前記タッチパネルが受け付けたタッチ操作の入力量に応じて、前記電子機器の実行画面を連続的に変更する連続画面変更部とを備える。前記連続画面変更部は、タッチ操作が終了したときに、前記離散画面変更部が段階的に変更可能な画面と一致するまで画面を変更する。

　本発明の別の態様は、電子機器のプロセッサに実行させる画像表示制御方法である。この方法は、前記電子機器の操作ボタンのキー入力によるアプリケーションの操作を受け付けるステップと、前記電子機器の実行画面を表示するタッチパネルのタッチ操作による前記アプリケーションの操作を受け付けるステップと、前記操作ボタンまたは前記タッチパネルによる操作の少なくともいずれか一方の操作をもとに、前記電子機器の実行画面を変更するステップとを含む。ここで前記実行画面を変更するステップは、操作ボタンのキー入力による操作を受け付けた場合、操作ボタンのキー入力毎に、前記電子機器の実行画面を段階的に変更し、タッチパネルのタッチ操作を受け付けた場合、受け付けたタッチ操作の入力量に応じて、前記電子機器の実行画面を連続的に変更するとともに、タッチ操作が終了したときには、操作ボタンのキー入力による操作を受け付けた場合に実行画面を段階的に変更することで表示可能な画面と一致するまで画面を変更する。

　なお、以上の構成要素の任意の組み合わせ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。

　本発明によると、操作ボタンとタッチパネルとの両方で操作可能な電子機器における好適なユーザインタフェースを提供できる。

図１（ａ）は電子機器の前面を示す図であり、図１（ｂ）は電子機器の背面を示す図である。図２（ａ）は電子機器の上面を示す図であり、図２（ｂ）は電子機器の下面を示す図であり、図２（ｃ）は電子機器の左側面を示す図である。電子機器の回路構成を示す図である。電子機器の機能ブロックを示す図である。図５（ａ）－（ｂ）は、実施の形態に係る表示制御部が表示した番組表の一例を示す図である。実施の形態に係る電子機器で実行される画像表示制御処理の流れを示すフローチャートである。

　本発明の実施の形態に係る電子機器は、ユーザが電子機器を操作するためのユーザインタフェースとして、操作ボタンとタッチパネルとを有する情報端末装置であり、たとえば電子機器は携帯型のゲーム機やスマートフォンである。電子機器の電源投入時には電子機器を統括的に制御するオペレーティングソフトウェアが実行され、ゲームや画像処理、テレビチューナを備えたＮＡＳ（Network Attached Storage）のクライアントアプリケーション等、種々のアプリケーションプログラムを実行することができる。

　以下、本発明の実施の形態に係る電子機器の外観構成および回路構成を説明する。以下に示す電子機器は、携帯型のゲーム機であるが、他の種類の携帯型端末装置であってもよく、また据置型の端末装置やそのコントローラ等であってもよい。

［前面部の構成］
　図１（ａ）は、電子機器１０の前面を示す。電子機器１０は、横長の筐体により形成され、ユーザが把持する左右の領域は、円弧状の外郭を有している。電子機器１０の前面には、矩形のタッチパネル５０が設けられる。タッチパネル５０は、表示装置２０と、表示装置２０の表面を覆う透明な前面タッチパッド２１から構成される。表示装置２０は有機ＥＬ（Electro-Liminescence）パネルであり、１６：９の画面アスペクト比を有して画像を表示する。なお表示装置２０は液晶パネルなどの表示手段であってもよい。前面タッチパッド２１は、同時にタッチされた複数ポイントの検出機能をもつマルチタッチパッドであって、タッチパネル５０はマルチタッチスクリーンとして構成される。

　タッチパネル５０の右側には、菱形の頂点にそれぞれ位置する△ボタン２２ａ、○ボタン２２ｂ、×ボタン２２ｃ、□ボタン２２ｄ（以下、総称する場合には「操作ボタン２２」とよぶ）が設けられ、タッチパネル５０の左側には、上キー２３ａ、左キー２３ｂ、下キー２３ｃ、右キー２３ｄ（以下、総称する場合には「方向キー２３」とよぶ）が設けられる。ユーザは方向キー２３を操作して、上下左右および斜方の８方向を入力できる。方向キー２３の下側には左スティック２４ａが設けられ、また操作ボタン２２の下側には右スティック２４ｂが設けられる。ユーザは左スティック２４ａまたは右スティック２４ｂ（以下、総称する場合には「アナログスティック２４」とよぶ）を傾動して、方向および傾動量を入力する。筐体の左右頂部には、Ｌボタン２６ａ、Ｒボタン２６ｂが設けられる。操作ボタン２２、方向キー２３、アナログスティック２４、Ｌボタン２６ａ、Ｒボタン２６ｂは、ユーザが操作する操作手段を構成する。

　操作ボタン２２の近傍に、前面カメラ３０が設けられる。左スティック２４ａの左側および右スティック２４ｂの右側には、それぞれ音声を出力する左スピーカ２５ａおよび右スピーカ２５ｂ（以下、総称する場合には「スピーカ２５」とよぶ）が設けられる。また左スティック２４ａの下側にＨＯＭＥボタン２７が設けられ、右スティック２４ｂの下側にＳＴＡＲＴボタン２８およびＳＥＬＥＣＴボタン２９が設けられる。

［背面部の構成］
　図１（ｂ）は、電子機器１０の背面を示す。電子機器１０の背面には、背面カメラ３１および背面タッチパッド３２が設けられる。背面タッチパッド３２は、前面タッチパッド２１と同様に、マルチタッチパッドとして構成される。電子機器１０は、前面および背面において、２つのカメラおよびタッチパッドを搭載している。

［上面部の構成］
　図２（ａ）は、電子機器１０の上面を示す。既述したように、電子機器１０の上面の左右端側に、Ｌボタン２６ａ、Ｒボタン２６ｂがそれぞれ設けられる。Ｌボタン２６ａの右側には電源ボタン３３が設けられ、ユーザは、電源ボタン３３を押下することで、電源をオンまたはオフする。なお電子機器１０は、操作手段が操作されない時間（無操作時間）が所定時間続くと、サスペンド状態に遷移する電力制御機能を有している。電子機器１０がサスペンド状態に入ると、ユーザは電源ボタン３３を押下することで、電子機器１０をサスペンド状態からアウェイク状態に復帰させることができる。

　ゲームカードスロット３４は、ゲームカードを差し込むための差込口であり、この図では、ゲームカードスロット３４がスロットカバーにより覆われている状態が示される。なおゲームカードスロット３４の近傍に、ゲームカードがアクセスされているときに点滅するＬＥＤランプが設けられてもよい。アクセサリ端子３５は、周辺機器（アクセサリ）を接続するための端子であり、この図ではアクセサリ端子３５が端子カバーにより覆われている状態が示される。アクセサリ端子３５とＲボタン２６ｂの間には、ボリュームを調整するための－ボタン３６ａと＋ボタン３６ｂが設けられている。

［下面部の構成］
　図２（ｂ）は、電子機器１０の下面を示す。メモリカードスロット３７は、メモリカードを差し込むための差込口であり、この図では、メモリカードスロット３７が、スロットカバーにより覆われている状態が示される。電子機器１０の下面において、音声入出力端子３８、マイク３９およびマルチユース端子４０が設けられる。マルチユース端子４０はＵＳＢ（Universal Serial Bus）に対応し、ＵＳＢケーブルを介して他の機器と接続できる。

［左側面部の構成］
　図２（ｃ）は、電子機器１０の左側面を示す。電子機器１０の左側面には、ＳＩＭカードの差込口であるＳＩＭカードスロット４１が設けられる。

［電子機器の回路構成］
　図３は、電子機器１０の回路構成を示す。各構成はバス９２によって互いに接続されている。無線通信モジュール７１はＩＥＥＥ８０２．１１ｂ／ｇ等の通信規格に準拠した無線ＬＡＮモジュールによって構成され、ＡＰ２を介して、外部ネットワークに接続する。なお無線通信モジュール７１は、ブルートゥース（登録商標）プロトコルの通信機能を有してもよい。携帯電話モジュール７２は、ＩＴＵ（International Telecommunication Union；国際電気通信連合）によって定められたＩＭＴ－２０００（International Mobile Telecommunication 2000）規格に準拠した第３世代（3rd Generation）デジタル携帯電話方式に対応し、携帯電話網４に接続する。ＳＩＭカードスロット４１には、携帯電話の電話番号を特定するための固有のＩＤ番号が記録されたＳＩＭカード７４が挿入される。ＳＩＭカード７４がＳＩＭカードスロット４１に挿入されることで、携帯電話モジュール７２は、携帯電話網４との間で通信可能となる。

　ＣＰＵ（Central Processing Unit）６０は、メインメモリ６４にロードされたプログラムなどを実行する。ＧＰＵ（Graphics Processing Unit）６２は、画像処理に必要な計算を実行する。メインメモリ６４は、ＲＡＭ（Random Access Memory）などにより構成され、ＣＰＵ６０が使用するプログラムやデータなどを記憶する。ストレージ６６は、ＮＡＮＤ型フラッシュメモリ（NAND-type flash memory）などにより構成され、内蔵型の補助記憶装置として利用される。表示装置２０は、ＣＰＵ６０などにより生成された画像を出力する。

　モーションセンサ６７は、電子機器１０の動きを検出し、地磁気センサ６８は、３軸方向の地磁気を検出する。ＧＰＳ制御部６９は、ＧＰＳ衛星からの信号を受信し、現在位置を算出する。前面カメラ３０および背面カメラ３１は、画像を撮像し、画像データを入力する。前面カメラ３０および背面カメラ３１は、ＣＭＯＳイメージセンサ（Complementary Metal Oxide Semiconductor Image Sensor）によって構成される。

　インタフェース９０において、操作部７０は、電子機器１０における各種操作手段を含み、具体的には、操作ボタン２２、方向キー２３、アナログスティック２４、Ｌボタン２６ａ、Ｒボタン２６ｂ、ＨＯＭＥボタン２７、ＳＴＡＲＴボタン２８、ＳＥＬＥＣＴボタン２９、電源ボタン３３、－ボタン３６ａ、＋ボタン３６ｂを含む。前面タッチパッド２１および背面タッチパッド３２は、マルチタッチパッドであり、前面タッチパッド２１は、表示装置２０の表面に重ね合わせて配置される。スピーカ２５は、電子機器１０の各機能により生成される音声を出力し、マイク３９は、電子機器１０の周辺の音声を入力する。音声入出力端子３８は、外部のマイクからステレオ音声を入力し、外部のヘッドホンなどへステレオ音声を出力する。

　ゲームカードスロット３４には、ゲームファイルを記録したゲームカード７６が差し込まれる。ゲームカード７６は、データの書込可能な記録領域を有しており、ゲームカードスロット３４に装着されると、メディアドライブにより、データの書込／読出が行われる。メモリカードスロット３７には、メモリカード７８が差し込まれる。メモリカード７８は、メモリカードスロット３７に装着されると、外付け型の補助記憶装置として利用される。マルチユース端子４０は、ＵＳＢ端子として利用でき、ＵＳＢケーブル８０を接続されて、他のＵＳＢ機器とデータの送受信を行う。アクセサリ端子３５には、周辺機器が接続される。

　図４は、本発明の実施の形態に係る電子機器１０の機能ブロックを示す。電子機器１０は、インタフェース９０、表示制御部１００、処理部１１０、および出力部１２０を備える。これらの構成は、ハードウエアコンポーネントでいえば、任意のコンピュータのＣＰＵ、メモリ、メモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。

　上述したとおり、インタフェース９０は操作ボタン２２やタッチパネル５０を含む。なお、図４においてはキー入力による電子機器１０の操作をするためのインタフェースとして操作ボタン２２のみを図示するが、キー入力操作は操作ボタン２２に限られず、方向キー２３、アナログスティック２４、Ｌボタン２６ａ、Ｒボタン２６ｂ、ＨＯＭＥボタン２７、ＳＴＡＲＴボタン２８、ＳＥＬＥＣＴボタン２９、電源ボタン３３、－ボタン３６ａ、＋ボタン３６ｂであってもよい。以下は本明細書においては、キー入力操作のインタフェースの一例として、多くの場合操作ボタン２２を例に説明するが、他のボタンによるキー入力であってもよい。

　上述したように、タッチパネル５０は表示装置２０と表示装置２０の表面を覆う透明な前面タッチパッド２１から構成される。このためタッチパネル５０は、電子機器１０の実行画面の表示領域であるとともに、タッチ操作によって電子機器１０の操作をするためのインタフェースとなる。ここで「電子機器１０の操作」とは、例えば、電子機器１０を統合的に制御するためのオペレーティングソフトウェアの制御メニューの操作や、電子機器１０が実行するアプリケーションソフトウェアの操作を含む。アプリケーションソフトウェアの操作としては、例えばゲームアプリケーションにおいて操作対象となるキャラクタの操作も含まれる。

　このように、電子機器１０は、電子機器１０の操作を実現するためのユーザインタフェースとして、操作ボタン２２のキー入力とタッチパネル５０のタッチ操作との少なくともふたつの異なるインタフェースを持つ。

　表示制御部１００は、操作ボタン２２またはタッチパネル５０による操作の少なくともいずれか一方の操作を契機として、タッチパネル５０上に電子機器１０の操作を実行する。電子機器１０の操作の具体例として、表示制御部１００は、電子機器１０の操作に関する操作メニューを表示する。このため表示制御部１００は、ボタン操作管理部１０２とタッチ操作管理部１０４とを含む。「操作メニュー」としては、例えば上述したオペレーティングソフトウェアの設定メニューや、テレビや録画ビデオを視聴するためのアプリケーションにおける番組表や再生リスト、ゲームアプリケーションにおける選択メニュー等、電子機器１０が実行してタッチパネル５０上において、ユーザが選択自在に表示するものであればどのようなものでもよい。

　ボタン操作管理部１０２は、操作ボタン２２による操作を契機として、電子機器１０の操作メニュー等を表示する。これに対し、タッチ操作管理部１０４は、タッチパネル５０上にあらかじめ定められた所定の位置と操作ボタン２２とを対応付ける。タッチ操作管理部１０４は、タッチパネル５０上の所定の位置のタッチ操作があった場合、その所定の位置に対応づけられた操作ボタン２２の操作に対応するメニューを表示する。

　処理部１１０は、操作ボタン２２またはタッチパネル５０による操作の少なくともいずれか一方の操作をもとに、電子機器１０の操作を実行する。このため処理部１１０は、画像処理部１１２と、操作処理部１１４とを含む。

　操作処理部１１４は、タッチパネル５０上において選択自在に提示された操作メニューの選択があった場合、その選択に関連づけられた電子機器１０の操作を実行する。例えば操作メニューがテレビや録画ビデオを視聴するためのアプリケーションにおける番組表である場合、タッチパネル５０上にテレビ番組が一覧表示される。

　図５（ａ）－（ｂ）は、実施の形態に係る表示制御部１００が表示した番組表の一例を示す図である。より具体的には、図５（ａ）－（ｂ）は、横軸をテレビ局、縦軸を放送時間帯として、各テレビ局の各時間帯における番組を配置した番組表である。ここで図５（ａ）は５つのテレビ局の番組表を表示する場合を図示している。一方、図５（ｂ）は、図５（ａ）が表示する番組表の５つのテレビ局のうち、３局のみが表示されている。図５（ｂ）が表示するテレビ局の数は、図５（ａ）が表示するテレビ局の数より少ない。このため、図５（ｂ）が表示する番組表は、図５（ａ）が表示すると比較すると、表内の文字や画像等の表示内容が拡大されてタッチパネル５０上に表示される。

　図５（ａ）－（ｂ）は、それぞれ５つのテレビ局および３つのテレビ局の番組表を表示する例であるが、表示するテレビ局の数はこれに限られず、また操作ボタン２２やタッチパネル５０の操作で自由に変更することができる。また、図５（ａ）－（ｂ）は、８時から９時までの２時間分の番組表を示すが、表示する時間帯はこれ以上長くても短くてもよい。ユーザは操作ボタン２２を操作したり、タッチパネルを上下左右にスワイプしたりすることで、表示する時間帯やテレビ局を変更することができる。

　ユーザは、タッチパネル５０上に一覧表示された番組の中から所望のテレビ番組を選択する。例えば操作ボタン２２の操作で番組を選択する場合、ユーザは方向キー２３やアナログスティック２４等を操作して図示しないフォーカス領域を移動させる。ここでフォーカス領域とは、操作メニューのどの位置が選択されているかを示すインタフェースであり、例えば番組表において選択されている番組をハイライトすることで実現できる。ユーザはフォーカス領域を所望の番組に移動し、決定を指示する操作ボタン２２を押下することで、番組を選択できる。より具体的には、例えば○ボタン２２ｂが決定を指示するボタンとしてあらかじめ登録されており、ボタン操作管理部１０２が○ボタン２２ｂの押下を取得すると、操作処理部１１４が番組表示の操作を実行する。出力部１２０は、操作処理部１１４の実行結果をタッチパネル５０に出力して表示する。

　これに対し、ユーザがタッチパネル５０のタッチ操作で番組を選択する場合、ユーザはタッチパネル５０上に表示された所望の番組をタップする。タッチ操作管理部１０４は、タッチパネル５０上においてユーザがタップした位置を取得する。タッチ操作管理部１０４がタップ位置を取得すると、操作処理部１１４はその位置に表示されている番組の表示の操作を実行する。より具体的には、タッチ操作管理部１０４は、取得した位置に表示されている番組に対して決定を指示するボタンの押下があった場合、ボタン操作管理部１０２が操作処理部１１４に送信する信号と同様の信号を、操作処理部１１４に送信する。

　処理部１１０は、表示制御部１００を介してユーザから決定を指示する操作以外の操作も受け付ける。図５（ａ）－（ｂ）に示す番組表を例とすると、決定を指示する操作以外の操作とは、例えば表示するテレビ局の数を変更する操作である。ユーザは、操作ボタン２２またはタッチパネル５０による操作の少なくともいずれか一方の操作をすることで、番組表に表示するテレビ局の数を変更することができる。これを実現するために、処理部１１０中の画像処理部１１２は、離散画面変更部１１６と、連続画面変更部１１８とを含む。以下、電子機器１０の実行画面として図５（ａ）－（ｂ）に例示する番組表を例に説明する。

　操作ボタン２２は、ボタンのオンまたはオフを入力とするインタフェースであり、二値の入力を基本とする。そこで離散画面変更部１１６は、操作ボタン２２が受け付けたキー入力毎に、電子機器１０の実行画面である番組表に表示するテレビ局の数を段階的に変更する。より具体的には、実施の形態に係る電子機器１０は、上述したＬボタン２６ａがテレビ局数を減少させる操作に対応づけられており、Ｒボタン２６ｂがテレビ局数を増加させる操作に対応づけられている。

　図５（ａ）に示すように５つのテレビ局の番組表が表示されている状態において、ユーザがＬボタン２６ａを押下したとする。離散画面変更部１１６は、ボタン操作管理部１０２からＬボタン２６ａの押下の通知を取得すると、離散画面変更部１１６は、５つのテレビ局の番組表から図５（ｂ）に示す３つのテレビ局の番組表に変更するためにあらかじめ定められた拡大率で番組表を拡大する。このとき、Ｌボタン２６ａの押下と同時に５つのテレビ局の番組表から３つのテレビ局の番組表に切り替えて表示してもよいし、５つのテレビ局の番組表から３つのテレビ局の番組表に至るまで番組表が滑らかに移行するように、拡大率を順次変更しながらアニメーション効果を持たせて番組表を切り替えてもよい。いずれにしても、最終的に変更される番組表において、一度のボタン操作毎にテレビ局の数は段階的に変更される。

　同様に、図５（ｂ）に示すように３つのテレビ局の番組表が表示されている状態において、ユーザがＲボタン２６ｂを押下すると、離散画面変更部１１６は、３つのテレビ局の番組表から５つのテレビ局の番組表に変更するためにあらかじめ定められた縮小率で番組表を縮小する。５つのテレビ局の番組表が表示されている状態でユーザがさらにＲボタン２６ｂを押下すると、離散画面変更部１１６は、５つのテレビ局の番組表から７つのテレビ局の番組表（図示せず）に変更するためにあらかじめ定められた縮小率で番組表をさらに縮小する。このように、実施の形態に係る離散画面変更部１１６は、ユーザによるＬボタン２６ａまたはＲボタン２６ｂの押下の度に、番組表に表示するテレビ局の数を３つ、５、７つ、および９つと段階的に変化させる。つまり、離散画面変更部１１６が変更可能な番組表におけるテレビ局の数は、３つ、５、７つ、または９つのいずれかである。

　一方、ユーザがタッチパネル５０においてピンチアウト操作をしたとする。このとき、連続画面変更部１１８は、タッチパネル５０が受け付けたタッチ操作の入力量に応じて、番組表を拡大する。より具体的には、連続画面変更部１１８は、タッチパネル５０における指と指との間隔の変化率を番組表の拡大率として、タッチ操作の入力量に追従して番組表を拡大する。例えば、ユーザが指と指の間隔が２ｃｍから３ｃｍまで広げると、連続画面変更部１１８は、３ｃｍ／２ｃｍ＝１．５倍の拡大率で番組表を拡大する。同様に、ユーザがタッチパネル５０においてピンチイン操作をすると、連続画面変更部１１８は、指と指との間隔の変化率を番組表の縮小率とし番組表を縮小する。

　ここで、連続画面変更部１１８は、ユーザがタッチ操作を継続している間はタッチ操作の入力量に追従して番組表を拡縮する。一方、ユーザのタッチ操作が終了したとき、すなわちユーザの指がタッチパネル５０から離れたときは、連続画面変更部１１８は、そのときの指と指との間隔よらず、離散画面変更部１１６が段階的に変更可能な画面と一致するまで画面を変更する。つまり、連続画面変更部１１８は、ユーザのタッチ操作が終了したとき、そのときの指と指との間隔から定まる拡縮率をもとに、番組表に表示するテレビ局の数を３つ、５、７つ、または９つの中から選択して番組表を構成する。

　例えば、３つのテレビ局が表示される番組表を５つのテレビ局が表示される番組表に変更するには、番組表を３／５＝０．６倍に縮小する必要がある。このように、番組表に表示するテレビ局の数を３つ、５、７つ、または９のうちのいずれかから、別のテレビ局数に変更するために用いる拡縮率はあらかじめ計算により定めることができる。そこで、連続画面変更部１１８は、ピッチイン操作またはピッチアウト操作が終了したときは、離散画面変更部１１６が変更可能な画面とするための拡大率のうち、そのときの拡縮率と最も近い拡縮率で番組表を拡縮または縮小する。

　ここで、ユーザがピンチイン操作をしている場合、ユーザは番組表を縮小することで表示するテレビ局の数を増加することを望むと考えられる。そこで連続画面変更部１１８は、ユーザがピッチイン操作を終了したときは、そのときの拡縮率以下であって、かつ離散画面変更部１１６が変更可能な画面とするための最大の拡縮率で番組表を拡縮または縮小する。同様に、ユーザがピンチアウト操作をしている場合、ユーザは番組表を拡大することで表示するテレビ局の数を減少する意図があると考えられる。そこで連続画面変更部１１８は、ユーザがピッチアウト操作が終了したときは、そのときの拡縮率以上であって、かつ前記離散画面変更部が変更可能な画面とするための最小の拡縮率で番組表を拡大または縮小するこれにより、最終的に表示される番組表は離散画面変更部１１６が変更可能な番組表と位置し、かつ、ユーザの意図を反映することが可能となる。

　このように、連続画面変更部１１８は、タッチパネル５０が受け付けたタッチ操作の入力量に追従して連続的に電子機器１０の実行画面を変更する。このため、連続画面変更部１１８は、離散画面変更部１１６が番組表に表示するテレビ局の数を段階的に複数回変更することで到達する画面まで、一度のタッチ操作で変更自在である。これにより、操作ボタン２２とは異なり連続的な操作が可能なタッチパネル５０の特性を電子機器１０の実行画面の変更に反映することが可能となる。

　図６は、実施の形態に係る電子機器１０で実行される画像表示制御処理の流れを示すフローチャートである。本フローチャートにおける処理は、例えば電子機器１０の電源が投入されたときに開始する。

　表示制御部１００は、ユーザによるインタフェース９０の操作ボタン２２またはタッチパネル５０の操作を検出する（Ｓ１０）。検出がない間（Ｓ１２のＮ）、表示制御部１００は、操作ボタン２２またはタッチパネル５０の操作の検出を継続する（Ｓ１０）。

　操作ボタン２２またはタッチパネル５０の操作の検出を検出した場合（Ｓ１２のＹ）、表示制御部１００は操作の種類を取得する。操作の種類が操作ボタンの場合（Ｓ１４の操作ボタン）、離散画面変更部１１６は、電子機器１０の実行画面を段階的に変更する（Ｓ１６）。実行画面を変更すると、ステップＳ１０に戻って上記の処理を継続する。

　操作の種類が操作ボタンの場合（Ｓ１４のタッチパネル）、連続画面変更部１１８は、タッチ操作に追従して、電子機器１０の実行画面を連続的に変更する（Ｓ１８）。ユーザによるタッチ操作が継続している間（Ｓ２０のＮ）、連続画面変更部１１８は、タッチ操作に追従して電子機器１０の実行画面を連続的に変更することを継続する。ユーザによるタッチ操作が終了した（Ｓ２０のＹ）、連続画面変更部１１８は、離散画面変更部１１６が段階的に変更可能な画面と一致するまで画面を変更する（Ｓ２２）。実行画面を変更すると、ステップＳ１０に戻って上記の処理を継続する。

　以上説明したように、実施の形態に係る電子機器１０によれば、操作ボタン２２による操作とタッチパネル５０による操作との併存時におけるユーザインタフェースの改善技術を提供することができる。

　以上、本発明を実施の形態をもとに説明した。この実施の形態は例示であり、それらの各構成要素や各処理プロセスの組み合わせにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。

　上記の説明では、電子機器１０の実行画面の例として図５（ａ）－（ｂ）に示すような番組表を例に説明した。画像処理部１１２が処理する実行画面は番組表のような表形式の画面に限られない。この他にも、例えば静止画や動画の拡大や縮小に適用してもよいし、ゲームのコンテンツにおける操作対象のキャラクタの操作に適用してもよい。後者の場合、離散画面変更部１１６は、操作ボタン２２が受け付けたキー入力毎に、操作対象のキャラクタの表示位置を段階的に変更する。連続画面変更部１１８は、タッチパネル５０が受け付けたタッチ操作の入力量に追従して操作対象のキャラクタの表示位置を連続的に変更するが、タッチ操作が終了したときに表示する操作対象のキャラクタの位置は、離散画面変更部１１６が変更可能な位置と一致する。

　上記の説明では、電子機器１０の実行画面の例として図５（ａ）－（ｂ）に示すような番組表を例に説明した。図５（ａ）－（ｂ）は、横軸をテレビ局、縦軸を放送時間帯として、各テレビ局の各時間帯における番組を配置した番組表を例示した図である。このとき、ユーザがタッチパネル５０に表示された番組表におけるテレビ局をタップすることで、そのテレビ局の週間番組表に変更するようにしてもよい。具体的には、例えばユーザが図５（ａ）における「テレビＸ」をタップすると、横軸を１週間分の曜日、縦軸を時間帯とするテレビＸ局の週間番組表が表示される。これは、タッチ操作管理部１０４がタッチパネル５０のタッチ操作を検出し、処理部１１０が番組表の変更処理を実行することで実現できる。また、テレビＸ局の週間番組表が表示されているときに、ユーザがある曜日をタップすると、図５に示すようにタップされた曜日における各局の番組表に戻る。

　このように、タッチパネル５０に選択肢を表形式で表示する場合において、表中のいずれかの選択肢をタッチパネル５０で選択することにより、選択肢に関連づけられた操作を実行してもよい。これにより、ユーザは複数の選択肢の中からひとつの選択肢を選択することを一度の操作で実現することができる。操作ボタン２２での操作と比較して操作回数を減少することができ、ユーザビリティを向上させることができる。

　２　ＡＰ、　４　携帯電話網、　１０　電子機器、　２０　表示装置、　２１　前面タッチパッド、　２２　操作ボタン、　２３　方向キー、　２４　アナログスティック、　２５　スピーカ、　２６ａ　Ｌボタン、　２６ｂ　Ｒボタン、　２７　ＨＯＭＥボタン、　２８　ＳＴＡＲＴボタン、　２９　ＳＥＬＥＣＴボタン、　３０　前面カメラ、　３１　背面カメラ、　３２　背面タッチパッド、　３３　電源ボタン、　３４　ゲームカードスロット、　３５　アクセサリ端子、　３７　メモリカードスロット、　３８　音声入出力端子、　３９　マイク、　４０　マルチユース端子、　４１　ＳＩＭカードスロット、　５０　タッチパネル、　６０　ＣＰＵ、　６４　メインメモリ、　６６　ストレージ、　６７　モーションセンサ、　６８　地磁気センサ、　６９　ＧＰＳ制御部、　７０　操作部、　７１　無線通信モジュール、　７２　携帯電話モジュール、　７４　ＳＩＭカード、　７６　ゲームカード、　７８　メモリカード、　８０　ＵＳＢケーブル、　９０　インタフェース、　９２　バス、　１００　表示制御部、　１０２　ボタン操作管理部、　１０４　タッチ操作管理部、　１１０　処理部、　１１２　画像処理部、　１１４　操作処理部、　１１６　離散画面変更部、　１１８　連続画面変更部、　１２０　出力部。

　本発明は、電子機器および画像表示制御方法に利用可能である。

Claims

　電子機器であって、
　キー入力によって前記電子機器の操作をする操作ボタンと、
　前記電子機器の表示領域であるとともに、タッチ操作によって前記電子機器の操作をするタッチパネルと、
　前記操作ボタンまたは前記タッチパネルによる操作の少なくともいずれか一方の操作をもとに、前記電子機器の実行画面を変更して表示する画像処理部とを備え、
　前記画像処理部は、
　前記操作ボタンが受け付けたキー入力毎に、前記電子機器の実行画面を段階的に変更する離散画面変更部と、
　前記タッチパネルが受け付けたタッチ操作の入力量に応じて、前記電子機器の実行画面を連続的に変更する連続画面変更部とを備え、
　前記連続画面変更部は、タッチ操作が終了したときに、前記離散画面変更部が段階的に変更可能な画面と一致するまで画面を変更することを特徴とする電子機器。
　前記連続画面変更部は、前記離散画面変更部が前記電子機器の実行画面を段階的に複数回変更することで表示する画面まで、一度のタッチ操作で変更自在に構成されていることを特徴とする請求項１に記載の電子機器。
　前記離散画面変更部は、前記操作ボタンがキー入力を受け付ける毎に、あらかじめ定められた複数の拡縮率の中からひとつの拡縮率を段階的に選択し、選択した拡縮率で前記電子機器の実行画面を拡大または縮小し、
　前記連続画面変更部は、ピッチイン操作およびピッチアウト操作を受け付け、前記タッチパネルにおける指と指との間隔の変化率を前記電子機器の実行画面の拡縮率として前記電子機器の実行画面を拡大または縮小することを特徴とする請求項１または２に記載の電子機器。
　前記連続画面変更部は、
　ピッチイン操作が終了したときは、そのときの拡縮率以下であって、かつ前記離散画面変更部が変更可能な画面とするための最大の拡縮率で前記電子機器の実行画面を拡大または縮小し、
　ピッチアウト操作が終了したときは、そのときの拡縮率以上であって、かつ前記離散画面変更部が変更可能な画面とするための最小の拡縮率で前記電子機器の実行画面を拡大または縮小することを特徴とする請求項１から３のいずれかに記載の電子機器。
　前記連続画面変更部は、ピッチイン操作またはピッチアウト操作が終了したときは、前記離散画面変更部が変更可能な画面とするための拡縮率のうち、そのときの拡縮率と最も近い拡縮率で前記電子機器の実行画面を拡縮または縮小することを特徴とする請求項１から３のいずれかに記載の電子機器。
　電子機器のプロセッサに実行させる画像表示制御方法であって、
　前記電子機器の操作ボタンのキー入力によるアプリケーションの操作を受け付けるステップと、
　前記電子機器の実行画面を表示するタッチパネルのタッチ操作による前記アプリケーションの操作を受け付けるステップと、
　前記操作ボタンまたは前記タッチパネルによる操作の少なくともいずれか一方の操作をもとに、前記電子機器の実行画面を変更するステップとを含み、
　前記実行画面を変更するステップは、
　操作ボタンのキー入力による操作を受け付けた場合、操作ボタンのキー入力毎に、前記電子機器の実行画面を段階的に変更し、
　タッチパネルのタッチ操作を受け付けた場合、受け付けたタッチ操作の入力量に応じて、前記電子機器の実行画面を連続的に変更するとともに、タッチ操作が終了したときには、操作ボタンのキー入力による操作を受け付けた場合に実行画面を段階的に変更することで表示可能な画面と一致するまで画面を変更することを特徴とする画像表示制御方法。
　電子機器に画像表示制御機能を実現させるプログラムであって、当該機能は、
　前記電子機器の操作ボタンのキー入力によるアプリケーションの操作を受け付ける機能と、
　前記電子機器の実行画面を表示するタッチパネルのタッチ操作による前記電子機器の操作を受け付ける機能と、
　前記操作ボタンまたは前記タッチパネルによる操作の少なくともいずれか一方の操作をもとに、前記電子機器の実行画面を変更する機能とを含み、
　前記実行画面を変更する機能は、
　操作ボタンのキー入力による操作を受け付けた場合、操作ボタンのキー入力毎に、前記電子機器の実行画面を段階的に変更し、
　タッチパネルのタッチ操作を受け付けた場合、受け付けたタッチ操作の入力量に応じて、前記電子機器の実行画面を連続的に変更するとともに、タッチ操作が終了したときには、操作ボタンのキー入力による操作を受け付けた場合に実行画面を段階的に変更することで表示可能な画面と一致するまで画面を変更することを特徴とするプログラム。
　請求項７に記載のプログラムを格納したコンピュータ読み出し可能な記録媒体。