WO2013115370A1 - 電子機器、その制御方法及びプログラム - Google Patents

Abstract

　タッチパネルの表面状態、指の状態によっては、指の動きを滑らかに検出できず、ユーザの意図した処理が実行されない場合がある。そのため、タッチパネルの表面状態、指の状態、アプリケーションに依存せず、操作性を向上させる電子機器が、望まれる。画像を表示する表示部と、ユーザによる接触操作を検出する入力検出部と、前記入力検出部が検出した第１の接触操作に基づき、前記表示部に操作情報画像を表示させると共に、前記入力検出部が前記操作情報画像に対する第２の接触操作を検出した場合に、前記第２の接触操作に基づき、前記表示部が表示する画像を変更する制御部と、を備える。

Description

電子機器、その制御方法及びプログラム

　［関連出願についての記載］
　本発明は、日本国特許出願：特願２０１２－０２０４７７号（２０１２年　２月　２日出願）の優先権主張に基づくものであり、同出願の全記載内容は引用をもって本書に組み込み記載されているものとする。
　本発明は、電子機器、その制御方法及びプログラムに関する。特にタッチパネルを備える電子機器、その制御方法及びプログラムに関する。

　タッチパネルを備えるスマートフォンやタブレット、タッチ対応パーソナルコンピュータ等の電子機器は、ユーザがタッチパネルに接触することで操作が可能である。タッチパネルに接触する指の動きを検出し、直感的で素早い処理を実現する技術が以下の文献で開示されている。

　ここで、特許文献１において、タッチスクリーンを備えた携帯用端末機を片手で操作するために、携帯用端末機の一辺をユーザが握ったままで、親指をタッチスクリーン上で左右に動かすことにより、携帯用端末機を操作する技術が開示されている。

　また、特許文献２において、大量のコンテンツから少ない操作回数でコンテンツを検索するために、タッチパネルのドラッグ操作の方向と速さに基づき、コンテンツを検索できるユーザインターフェース装置が開示されている。

　また、特許文献３において、メニュー操作性を改善するために、タッチパネル上で、所定のタッチ操作（ハンドジェスチャー）が行なわれると、ハンドジェスチャーに対応するメニューを表示する技術が開示されている。

特表２０１０－５３８３５０号公報 特開２００９－２５９１６３号公報 特開２０１１－７６５６３号公報

　なお、上記先行技術文献の各開示を、本書に引用をもって繰り込むものとする。以下の分析は、本発明の観点からなされたものである。

　タッチパネルを備える電子機器は、ユーザがタッチパネルに接触することで操作が可能である。しかし、タッチパネルの表面状態、指の状態によっては、指の動きを滑らかに検出できず、ユーザの意図した処理が実行されない場合がある。これはタッチパネルを備える電子機器の操作性を低下させることとなる。

　特許文献１乃至３で開示する技術では、いずれもタッチパネル表面に触れた指の軌跡を検出する必要がある。そのため、タッチパネルの表面状態や指の状態によっては、滑らかな指の動きを検出できず、ユーザの意図した処理を実行できない場合がある。一方、タッチパネル表面に触れて、直後に離す操作（タップ操作）であれば、タッチパネル表面の瞬間的な接触を検出するのみである。そのため、タッチパネルの表面状態や指の状態が操作性に影響を与えることは少ない。しかし、タップ操作によるスクロール表示に対応していないアプリケーションもある。つまり、タップ操作では実現できる機能に制限がある。

　そのため、タッチパネルの表面状態、指の状態、アプリケーションに依存せず、操作性を向上させることに貢献する電子機器、その制御方法及びプログラムが、望まれる。

　本発明の第１の視点によれば、画像を表示する表示部と、ユーザによる接触操作を検出する入力検出部と、前記入力検出部が検出した第１の接触操作に基づき、前記表示部に操作情報画像を表示させると共に、前記入力検出部が前記操作情報画像に対する第２の接触操作を検出した場合に、前記第２の接触操作に基づき、前記表示部が表示する画像を変更する制御部と、を備える電子機器が提供される。

　本発明の第２の視点によれば、画像を表示する表示部と、ユーザによる接触操作を検出する入力検出部と、を備える電子機器の制御方法であって、前記入力検出部が検出した第１の接触操作に基づき、前記表示部に操作情報画像を表示させる工程と、前記入力検出部が前記操作情報に対応する第２の接触操作を検出した場合に、前記第２の接触操作に基づき、前記表示部に表示する画像を変更する工程と、を含む電子機器の制御方法が提供される。
　なお、本方法は、画像を表示する表示部と、ユーザによる接触操作を検出する入力検出部と、を備える電子機器という、特定の機械に結び付けられている。

　本発明の第３の視点によれば、画像を表示する表示部と、ユーザによる接触操作を検出する入力検出部と、を備える電子機器を制御するコンピュータに実行させるプログラムであって、前記入力検出部が検出した第１の接触操作に基づき、前記表示部に操作情報画像を表示させる処理と、前記入力検出部が前記操作情報画像に対応する第２の接触操作を検出した場合に、前記第２の接触操作に基づき、前記表示部に表示する画像を変更する処理と、を実行するプログラムが提供される。
　なお、このプログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。記憶媒体は、半導体メモリ、ハードディスク、磁気記録媒体、光記録媒体等の非トランジェント（ｎｏｎ－ｔｒａｎｓｉｅｎｔ）なものとすることができる。本発明は、コンピュータプログラム製品として具現することも可能である。

　本発明の各視点によれば、タッチパネルの表面状態、指の状態、アプリケーションに依存せず、操作性を向上させることに貢献する電子機器、その制御方法及びプログラムが、提供される。

一実施形態を説明するための図である。 第１の実施形態に係る電子機器１の全体構成の一例を示す平面図である。 電子機器１の内部構成の一例を示す図である。 操作情報画像４０の一例を示す図である。 表示部３０の表示の一例を示す図である。 操作情報画像４０の表示処理のフローチャートである。 区分マーク１０３の表示の一例を示す図である。 矢印画像表示領域１０２の表示の一例を示す図である。 矢印画像１０４の表示の一例を示す図である。 矢印画像１０４の非表示処理のフローチャートである。 矢印画像１０４の非表示の一例を示す図ある。 区分マーク１０３の再表示処理のフローチャートである。 区分マーク１０３の再表示の一例を示す図である。 矢印画像１０４の表示変更処理のフローチャートである。 矢印画像１０４の移動表示の一例を示す図である。 矢印画像１０４の方向反転表示の一例を示す図である。 表示画面１０１のスクロール表示処理のフローチャートである。 表示画面１０１のスクロール表示の一例を示す図である。 表示画面１０１の拡大縮小処理、及びスクロール表示処理のフローチャートである。 表示画面１０１の拡大縮小表示の一例を示す図である。 表示画面１０１のスクロール表示の一例を示す図である。 表示部３０の表示の一例を示す図である。 表示画面１０１のスクロール表示の一例を示す図である。 表示画面１０１のスクロール表示の一例を示す図である。 区分マーク１０３のパターンの一例を示す図である。

　初めに、図１を用いて一実施形態の概要について説明する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図したものではない。

　上述のように、タッチパネルの表面状態や指の状態によっては、ユーザの意図した処理を実行できない場合がある。一方、タップ操作によるスクロール表示に対応していないアプリケーションもある。つまり、タップ操作では実現できる機能に制限がある。そのため、タッチパネルの表面状態、指の状態、アプリケーションに依存せず、操作性を向上させることに貢献する電子機器、その制御方法及びプログラムが、望まれる。

　そこで、一例として図１に示す電子機器１を提供する。図１に示す電子機器１は、画像を表示する表示部と、ユーザによる接触操作を検出する入力検出部と、入力検出部が検出した第１の接触操作に基づき、表示部に操作情報画像を表示させると共に、入力検出部が操作情報画像に対する第２の接触操作を検出した場合に、第２の接触操作に基づき、前記表示部が表示する画像を変更する制御部と、を備える。

　まず、ユーザによる接触操作を入力検出部１０が検出する。制御部２０は、入力検出部１０が検出した、ユーザの第１の接触操作に基づき、操作情報画像４０を表示部３０に表示する。操作情報画像４０は、入力検出部１０が検出した操作情報に対応する画像である。かつ、制御部２０は、入力検出部１０がユーザによる接触操作を検出するたびに、どのような接触操作を入力検出部１０が検出したかを判断する。そして、制御部２０は、入力検出部１０が検出したユーザによる接触操作に基づき、表示部３０に表示する画像を変更する。

　ここで、制御部２０は、入力検出部１０で検出する接触検出位置の軌跡を考慮しない。従って、タップ操作のような１箇所での接触操作を検出するだけで、電子機器１は処理を行なうことができる。そのため、タッチパネルの表面状態、指の状態、アプリケーションに依存せず、操作性を向上させることに貢献する電子機器、その制御方法及びプログラムを提供できる。

　以下に具体的な実施の形態について、図面を参照してさらに詳しく説明する。

［第１の実施形態］
　第１の実施形態について、図面を用いてより詳細に説明する。

　図２は、本実施形態に係る電子機器１の全体構成の一例を示す平面図である。

　電子機器１は、入力検出部１０及び表示部３０を備えている。なお、入力検出部１０及び表示部３０はタッチパネルディスプレイとして一体化されているとする。表示部３０として液晶パネル、及び有機ＥＬ（Ｅｌｅｃｔｒｏ　Ｌｕｍｉｎｅｓｃｅｎｃｅ）パネル等、各種存在するがその方式は問わない。

　さらに、電子機器１が備える入力検出部１０は、平板状のセンサによりユーザの接触操作を検出するタッチパネルである。ここで、タッチパネルの方式には、静電容量方式を初めとして各種存在するが、その方式は問わない。

　図３は、電子機器１の内部構成の一例を示す図である。電子機器１は、入力検出部１０、制御部２０、表示部３０から構成されている。そして、制御部２０は、表示画面処理部２１、操作情報処理部２２、画像生成部２３、入力判断部２４から構成されている。図３には、簡単のため、本実施形態に係る電子機器１に関係するモジュールのみを記載する。入力検出部１０、表示部３０は上述のとおりであるので、さらなる説明を省略する。

　操作情報画像４０は、区分マーク又は記号の少なくともいずれか一の画像を含む。ここで、区分マークは、ユーザに入力検出部１０の検出範囲を提示するためのマークである。また、操作情報画像を表す記号は、ユーザに電子機器１を操作させるためのインターフェースである。かつ、操作情報画像４０を表す記号ないしパターンは、ユーザが接触するのに十分な面積を有する。さらに、操作情報画像４０を表す記号ないしパターンは、表示画面の操作方向をユーザに提示する記号ないしパターンである。なお、操作情報画像４０を表す記号ないしパターンは、指し示す方向が明確な記号ないしパターンであることが、好ましい。

　ここで、操作情報画像４０の記号表示の一例を図４で示す。

　ここで、図４の（ａ）図は、操作情報画像４０を矢印画像で表示する一例である。また、図４の（ｂ）図は、操作情報画像４０を三角形で表示する一例である。次に図４の（ｃ）図は、操作情報画像４０を五角形で表示する一例である。ここで、図４の（ａ）図、（ｂ）図、（ｃ）図で示す操作情報画像４０の形状は、それぞれ異なる。しかし、いずれの操作情報画像４０も、表示部３０の垂直上下方向を指し示す記号であることを容易に認識できる。

　表示画面処理部２１は表示画面を制御する。表示画面は、アプリケーションのコンテンツ等に係る画像である。入力検出部１０が検出するユーザによる接触操作に基づき、表示画面処理部２１は、表示画面の操作処理を行なう。ここで、表示画面の操作処理には、表示画面のスクロール表示処理、拡大縮小表示処理、回転表示処理などが考えられる。

　ただし、電子機器１の表示画面の操作処理には、上述の操作処理以外に、位置又は方向を指定する他の表示画面の操作処理を含んでもよい。例えば、矩形選択する処理は、電子機器１の表示画面の操作処理に含んでもよい。なぜなら、矩形の対角２頂点を決定することで、矩形領域を決定できるためである。

　操作情報処理部２２は、ユーザによる接触操作に基づく操作情報画像４０を生成する。かつ、操作情報処理部２２は、生成した画像の表示変更処理も行なう。ここでの表示変更処理としては、画像の形状の変更処理、非表示処理、表示位置の変更処理、大きさの変更処理、回転表示処理などが考えられる。

　画像生成部２３は、表示部３０に表示する画像を生成する。具体的には、画像生成部２３は、透過処理（アルファブレンディング処理）によって、表示画面の上に、操作情報画像４０に対応した画像を重ね合わせた画像を生成する。その後、画像生成部２３は、その合成画像を表示部３０に表示させる。

　入力判断部２４は、入力検出部１０が検出したユーザの接触操作について判断する。具体的には、入力検出部１０が、どの処理に対応する接触操作を検出したかを、入力判断部２４は判断する。

　次に、電子機器１の動作について説明する。

　図５は、表示部３０の表示の一例を示す図である。

　図５の（ａ）図は、区分マーク１０３の表示の一例を示す図である。区分マーク１０３は、表示部３０を２以上の領域に区画する区画線の集合である。図５の（ａ）図で示すように、本実施形態に係る電子機器１では、区分マーク１０３として、２本の対角線を表示する。

　一方、図５の（ｂ）図は、操作情報画像４０を表す記号表示の一例を示す図である。図５の（ｂ）図では、操作情報画像４０を表す記号として、矢印画像１０４を示す。本実施形態に係る電子機器１は、区分マーク１０３で区画したそれぞれの領域内に、矢印画像１０４を表示する。図５の（ｂ）図の場合には、最大４つの矢印画像１０４が表示される。そして、それぞれの矢印は、表示部３０の垂直上下方向、水平左右方向のいずれかの方向を指す。

　なお、以下の説明では、操作情報画像４０を表す記号として、矢印画像１０４を用いて、説明する。

　次に、図６のフローチャートを用いて、区分マーク１０３及び矢印画像１０４を表示する処理について説明する。

　最初に、図６のフローチャートを用いて、区分マーク１０３を表示する処理を説明する。

　ここで、操作情報画像４０が、表示部３０に表示されていない状態とする。その状態で、まず、入力検出部１０が、２以上の所定の数であり、かつ任意の箇所でユーザによる接触操作を検出したか否かを、入力判断部２４は判断する。その後、入力検出部１０が、複数箇所の接触解除を検出したか否かを、入力判断部２４は判断する（ステップＳ０１）。これは、ユーザが複数箇所のマルチタップ操作をしたことを、入力検出部１０が検出したことに相当する。なお、マルチタップ操作とは、ユーザが、入力検出部１０表面の複数箇所に同時に触れた直後に、入力検出部１０の表面に触れた全ての指を同時に離す操作である。ここで、ステップＳ０１の条件を満たすために、入力検出部の検出する接触の数を４点以上と設定することが好ましい。４点以上のマルチタップ操作を必要とするアプリケーションは少ないためである。

　次に、ステップＳ０１の条件を満たす場合には、操作情報処理部２２は、区分マーク１０３を作成する。そして、画像生成部２３は、アルファブレンディング処理によって、アプリケーションコンテンツの表示画面１０１の上に、区分マーク１０３を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ０２、図７参照）。

　そして、区分マーク１０３で区画した少なくとも１つ以上の領域で、入力検出部１０がユーザによる新たな接触を同時に検出したか否かを、入力判断部２４は判断する（ステップＳ０３）。これは、入力検出部１０が、ユーザのマルチタッチ操作を検出したことに相当する。なお、マルチタッチ操作とは、入力検出部１０表面の複数箇所に、ユーザが同時に触れる操作である。

　ここで、ステップＳ０３の状態で、マルチタッチの検出された領域を矢印画像表示領域１０２とする。そして、ステップＳ０３の条件を満たす場合には、操作情報処理部２２は、矢印画像表示領域１０２を着色した画像を生成する。次に、画像生成部２３は、アルファブレンディング処理によって、アプリケーションコンテンツの表示画面１０１の上に、区分マーク、及び着色した矢印画像表示領域１０２を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ０４、図８参照）。なお、ステップＳ０４の状態では、入力検出部１０が、ステップＳ０３で検出した接触を検出し続けている状態である。つまり、ユーザが入力検出部１０にマルチタッチし続けている状態に相当する。

　続いて、同様に図６のフローチャートを用いて、矢印画像１０４を表示する処理について説明する。

　ここで、ステップＳ０４で生成した合成画像が、表示部３０に表示されている状態とする。その状態で、入力検出部１０が、複数の接触解除を検出したとする。これは、ユーザが、マルチタッチした指を入力検出部１０から離したことに相当する。その場合には、操作情報処理部２２は、接触解除を検出したそれぞれの領域に、矢印画像１０４を生成する。そして、画像生成部２３は、アルファブレンディング処理によって、アプリケーションコンテンツの表示画面１０１の上に、生成した矢印画像１０４を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ０５、図９参照）。なお、矢印画像１０４の長さ及び幅は、矢印画像１０４の数に依存して変化してもよい。また、区分マーク１０３と矢印画像表示領域１０２は、ステップＳ０５の段階では表示しなくてもよい。

　以上より、本実施形態に係る電子機器１は、アプリケーションコンテンツの表示画面１０１の上に、操作情報画像４０を透過表示する。そのため、ユーザはアプリケーションコンテンツの表示画面１０１を視認しながら操作を行なうことができる。従って、本実施形態に係る電子機器１は、ユーザの邪魔にならずに、操作情報をユーザに提示することができる。

　次に、図１０のフローチャートを用いて、矢印画像１０４を非表示とする処理について説明する。

　ここで、矢印画像１０４が表示部３０に表示されている状態とする。その状態で、まず、入力検出部１０が、矢印画像１０４上以外の１箇所で、ユーザによる接触を検出したか否かを、入力判断部２４は判断する（ステップＳ１１、ステップＳ１２）。そして、ステップＳ１１及びステップＳ１２の条件を満たす場合には、操作情報処理部２２は、矢印画像１０４を非表示とする（ステップＳ１３）。その後、画像生成部２３は、表示部３０にアプリケーションコンテンツの表示画面１０１を表示させる。

　ここで、ステップＳ１１からステップＳ１３に示す動作について、図１１で例示する。まず、図１１の（ａ）図に示す点Ｐ１０１は、接触検出位置を表す。ここで、点Ｐ１０１は、矢印画像１０４上ではない。さらに、入力検出部１０が、点Ｐ１０１の１箇所のみで、ユーザによる接触を検出したとする。その場合、ステップＳ１１及びステップＳ１２の条件を満たす。よって、ステップＳ１２に遷移する。従って、表示部３０では、矢印画像１０４が非表示となる（図１１の（ｂ）図参照）。

　以上より、本実施形態に係る電子機器１は、操作情報画像４０を非表示とするために、ユーザに複数回のメニュー操作させることはない。本実施形態に係る電子機器１は、ユーザが入力検出部１０に１回触れるだけで、操作情報画像４０を非表示とすることができる。

　次に、図１２のフローチャートを用いて、矢印画像１０４が表示された状態から、矢印画像１０４の表示位置を決定する状態に戻す処理について説明する。

　ここで、矢印画像１０４が表示部３０に表示されている状態とする。その状態で、まず、入力検出部１０が、２以上の所定の数のユーザによる接触を同時に検出したか否かを、入力判断部２４は判断する（ステップＳ２１）。そして、ステップＳ２１の接触検出位置の少なくとも１箇所が、矢印画像１０４上であるか否かを、入力判断部２４は判断する。かつ、ステップＳ２１の接触検出位置の少なくとも１箇所が、矢印画像１０４の上ではない位置であるか否かを、入力判断部２４は判断する（ステップＳ２２）。ここで、ステップＳ２１の条件を満たすために、入力検出部１０が検出する接触の数を４点以上と設定することが、好ましい。４点以上のマルチタッチ操作を必要とするアプリケーションは少ないためである。

　さらに、入力検出部１０が、所定の閾値以上の時間、ステップＳ２１及びステップＳ２２の条件を満たすユーザによる接触を検出し続けたか否かを、入力判断部２４は判断する（ステップＳ２３）。ステップＳ２１からステップＳ２３の条件を満たす場合には、操作情報処理部２２は、矢印画像１０４を非表示とする（ステップＳ２４）。一方、画像生成部２３は、アルファブレンディング処理によって、アプリケーションコンテンツの表示画面１０１の上に、区分マーク１０３を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ２５）。

　ここで、ステップＳ２５の内部状態は、ステップＳ０２の内部状態と同等である。従って、ユーザは、再びステップＳ０３の条件を満たす操作を行なうことにより、矢印画像１０４の表示位置を再決定することができる。

　ここで、ステップＳ２１及びステップＳ２３に示す動作について、図１３で例示する。まず図１３の（ａ）図の点Ｐ１１１から点Ｐ１１４の４点は、接触検出位置を表す。ここで点Ｐ１１２、点Ｐ１１３、点Ｐ１１４の３点は、矢印画像１０４の上である。かつ、点Ｐ１１１は、矢印画像１０４の上ではない。なおかつ、所定の閾値以上の時間、点Ｐ１１１から点Ｐ１１４の位置で、入力検出部１０が接触を検出し続けたとする。さらに、入力検出部１０が、点Ｐ１１１からＰ１１４の４箇所のみで、ユーザによる接触を検出したとする。さらに、ステップＳ２１の条件を満たす接触点の数は、４点であるとする。その場合、ステップＳ２１及びステップＳ２３の条件を満たす。よって、ステップＳ２４及びステップＳ２５の処理が行なわれる。従って、矢印画像１０４が非表示となり、区分マーク１０３が表示部３０に表示される（図１３の（ｂ）図参照）。

　以上より、本実施形態に係る電子機器１は、操作段階を変更するために、ユーザに、複数回のメニュー操作をさせることはない。本実施形態に係る電子機器１は、ユーザが入力検出部１０に１回触れるだけで、操作段階を変更することができる。

　次に、図１４のフローチャートを用いて、矢印画像１０４の方向の表示位置を移動し、伸縮する処理について説明する。

　ここで、矢印画像１０４が表示部３０に表示されている状態とする。その状態で、まず、入力検出部１０が、１箇所でユーザによる接触を検出したか否かを、入力判断部２４は判断する（ステップＳ３１）。そして、ステップＳ３１の接触検出位置が、矢印の始点または終点であるか否かを、入力判断部２４は判断する（ステップＳ３２）。

　続いて、ステップＳ３１及びステップＳ３２の条件を満たす場合には、さらに接触検出状態を維持したままで、接触検出位置が移動しているか否かを、入力判断部２４は判断する（ステップＳ３３）。上述のステップＳ３１からステップＳ３３の条件を満たす場合には、接触検出位置に追従して、操作情報処理部２２は矢印画像１０４を移動させる。そして、画像生成部２３は、アルファブレンディング処理によって、アプリケーションコンテンツの表示画面１０１の上に、移動後の矢印画像１０４を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ３４）。

　また、移動後の矢印画像１０４が表示部３０に収まらない場合には、操作情報処理部２２は、矢印画像１０４の長さ及び幅を伸縮する。そして、画像生成部２３は、アルファブレンディング処理によって、アプリケーションコンテンツの表示画面１０１の上に、長さ及び幅を調整した矢印画像１０４を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ３５）。

　なお、矢印画像１０４の移動可能範囲は、表示部３０の全体である。つまり、表示部３０上の任意の位置に、ユーザは矢印画像１０４を配置することができる。

　ここで、ステップＳ３１及びステップＳ３２に示す動作について、図１５で例示する。まず、図１５に示す点Ｐ１２１は接触検出位置を表す。ここで、点Ｐ１２１は矢印画像１０４Ａの始点上である。さらに、入力検出部１０が、点Ｐ１２１の１箇所のみで、ユーザによる接触を検出したとする。その場合、ステップＳ３１及びステップＳ３２の条件を満たす。そして、図１５に示す点Ｐ１２１は移動前の接触検出位置、点Ｐ１２２は移動後の接触検出位置を表すとする。また、点Ｐ１２１の位置から点Ｐ１２２の位置への移動は、ステップＳ３３の条件を満たすとする。その場合には、ステップＳ３４により、点Ｐ１２１から点Ｐ１２２への移動に伴い、矢印画像１０４は、矢印画像１０４Ａから矢印画像１０４Ｂに移動して表示される。また、ステップＳ３５の処理により、点Ｐ１２２の位置では、矢印画像１０４Ｂのように、矢印画像１０４Ａより短い矢印画像が表示される。

　次に、図１４のフローチャートを用いて、矢印画像１０４の方向を反転する処理について説明する。

　ここでは、ステップＳ３１及びステップＳ３２の条件を満たしながら、ステップＳ３３の条件を満たさない場合を考える。つまり、入力検出部１０が、ステップＳ３１及びステップＳ３２の条件を満たすユーザによる接触を検出したが、接触検出位置が固定している場合である。この場合には、まず、ステップＳ３２の後に、入力検出部１０が接触解除を検出するか否かを、入力判断部２４は判断する（ステップＳ３６）。ステップＳ３６の条件を満たす場合には、操作情報処理部２２は、矢印画像１０４の方向を反転する。そして、画像生成部２３は、アルファブレンディング処理によって、アプリケーションコンテンツの表示画面１０１の上に、反転した矢印画像１０４を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ３７）。

　ステップＳ３６に遷移しながら、ステップＳ３６の条件を満たさない場合を考える。その場合、ステップＳ３３又はステップＳ３６の条件を満たすまで、入力判断部２４は、ステップＳ３３の条件を判断する。

　以上より、本実施形態に係る電子機器１は、操作情報画像４０を切り替えるために、ユーザに、複数回のメニュー操作をさせることはない。本実施形態に係る電子機器１は、ユーザが入力検出部１０に１回触れるだけで、操作情報画像４０を切り替えることができる。

　次に、図１７のフローチャートを用いて、アプリケーションコンテンツの表示画面１０１のスクロール表示処理について説明する。

　ここで、矢印画像１０４が、表示部３０に表示されている状態とする。その状態で、まず、入力検出部１０が、１箇所でユーザによる接触を検出したか否かを、入力判断部２４は判断する（ステップＳ４１）。かつ、ステップＳ４１の接触検出位置が、矢印画像１０４上であるか否かを、入力判断部２４は判断する（ステップＳ４２）。なおかつ、ステップＳ４２の条件を満たす場合に、ステップＳ４１の接触検出位置が、矢印の始点及び終点のいずれでもない位置であるか否かを、入力判断部２４は判断する（ステップＳ４３）。

　ステップＳ４１からステップＳ４３の条件を満たす場合には、表示画面処理部２１は、接触検出位置の矢印画像１０４で示す方向に、アプリケーションコンテンツの表示画面１０１をスクロールする。そして、画像生成部２３は、アルファブレンディング処理によって、スクロールした表示画面１０１の上に、矢印画像１０４を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ４４）。

　なお、ステップＳ４１からステップＳ４３の条件を満たした後、接触解除が検出されるまで、表示画面１０１のスクロール表示は続く。従って、本実施形態にかかる電子機器１では、ユーザは、指を入力検出部１０に固定したままで、スクロール表示を継続できる。

　ここで、ステップＳ４１からステップＳ４４に示す動作について、図１８で例示する。まず、図１８の（ａ）図の点Ｐ１４１は接触検出位置を表す。ここで、点Ｐ１４１は、矢印画像１０４上であり、矢印の始点及び終点のいずれでもない。さらに、入力検出部１０が、点Ｐ１４１の１箇所のみで、ユーザによる接触を検出したとする。その場合、ステップＳ４１からステップＳ４３の条件を満たす。よって、ステップＳ４４に遷移する。従って、点Ｐ１４１の位置の矢印画像１０４の示す方向に、アプリケーションコンテンツの表示画面１０１がスクロール表示される（図１８の（ｂ）図参照）。

　次に、図１９のフローチャートを用いて、アプリケーションコンテンツの表示画面１０１を拡大縮小表示する処理について説明する。

　ここで、矢印画像１０４が、表示部３０に表示されている状態とする。その状態で、まず、入力検出部が、２箇所でユーザによる接触を検出したか否かを、入力判断部２４は判断する（ステップＳ５１）。そして、ステップＳ５１の条件を満たす場合に、ステップＳ５１の２箇所の接触検出位置が、矢印の始点及び終点のいずれでもない位置であるか否かを、入力判断部２４は判断する（ステップＳ５２）。次に、ステップＳ５２の条件を満たす場合に、ステップＳ５１の２箇所の接触検出位置が、２つの異なる矢印画像１０４上であるか否かを、入力判断部２４は判断する（ステップＳ５３）。さらに、ステップＳ５３の条件を満たす場合に、ステップＳ５１の２箇所の接触検出位置が、同一直線上の異なる矢印画像１０４上であるか否かを、入力判断部２４は判断する（ステップＳ５４）。

　ここで、ステップＳ５１からステップＳ５４までの条件を満たす場合には、さらに、２つの矢印が外向きであるか否かを、入力判断部２４は判断する（ステップＳ５５）。ステップＳ５５の条件を満たす場合には、表示画面処理部２１は、アプリケーションコンテンツの表示画面１０１を拡大する。そして、画像生成部２３は、アルファブレンディング処理によって、拡大した表示画面１０１の上に、矢印画像１０４を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ５６）。

　一方、ステップＳ５１からステップＳ５４までの条件を満たし、ステップＳ５５の条件を満たさない場合を考える。つまり、２つの矢印が内向きである場合である。その場合には、表示画面処理部２１は、アプリケーションコンテンツの表示画面１０１を縮小する。そして、画像生成部２３は、アルファブレンディング処理によって、縮小した表示画面１０１の上に、矢印画像１０４を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ５７）。

　なお、ステップＳ５１からステップＳ５４の条件を満たした後、接触解除が検出されるまで、表示画面１０１の拡大縮小表示は続く。従って、本実施形態にかかる電子機器１では、ユーザは、指を入力検出部１０に固定したままで、拡大縮小表示を継続できる。

　ここで、ステップＳ５１からステップＳ５６までに示す動作について、図２０で例示する。まず、図２０の（ａ）図に示す点Ｐ１５１、点Ｐ１５２は接触検出位置を表す。ここで、点Ｐ１５１の位置の矢印画像１０４、及び点Ｐ１５２の位置の矢印画像１０４は、同一直線上の異なる矢印画像１０４である。かつ、２つの矢印は外向きである。さらに、入力検出部１０が、点Ｐ１５１及び点１５２の２箇所のみで、ユーザによる接触を検出したとする。その場合、ステップＳ５１からステップＳ５５の条件を満たす。よって、ステップＳ５６に遷移する。従って、アプリケーションコンテンツの表示画面１０１が拡大表示される（図２０の（ｂ）図参照）。

　次に、図１９のフローチャートを用いて、矢印画像１０４の示す方向以外への、アプリケーションコンテンツの表示画面１０１のスクロール表示処理について説明する。

　ここで、上述のステップＳ５１からステップＳ５３の条件を満たし、ステップＳ５４の条件を満たさない場合を考える。ステップＳ５４の条件を満たさないということは、ユーザによる接触検出位置が、同一直線上ではない、２つの異なる矢印画像１０４上であるということである。その場合には、表示画面処理部２１は、２つの矢印が示すベクトルの和の方向に、アプリケーションコンテンツの表示画面１０１をスクロールする。そして、画像生成部２３は、アルファブレンディング処理によって、スクロールした表示画面１０１の上に、矢印画像１０４を重ね合わせた画像を生成する。その後、画像生成部２３は、この生成した合成画像を表示部３０に表示させる（ステップＳ５８）。

　なお、ステップＳ４４のスクロール表示処理と同様に、本実施形態にかかる電子機器１では、ユーザは、指を入力検出部１０に固定したままで、スクロール表示を継続できる。

　ここで、ステップＳ５８に示す動作について、図２１で例示する。まず、図２１の（ａ）図に示す点Ｐ１６１、点Ｐ１６２は接触検出位置を表す。ここで、点Ｐ１６１、点Ｐ１６２は２つの異なる矢印画像１０４上である。かつ、その２つの矢印画像１０４は、同一直線上ではない。さらに、入力検出部１０が、点Ｐ１６１及び点Ｐ１６２の２箇所のみで、ユーザによる接触を検出したとする。その場合、ステップＳ５１からＳ５３の条件を満たしながら、ステップＳ５４の条件を満たしていない。よって、ステップＳ５８に遷移する。従って、アプリケーションコンテンツの表示画面１０１は、２つの矢印が示すベクトルの和の方向にスクロール表示される（図２１の（ｂ）図参照）。

　以上より、本実施形態に係る電子機器１の第１の効果は、ユーザがタッチパネル上で指を滑らす必要なく、表示画面１０１を操作できることである。従って、タッチパネルの表面状態、指の状態に依存して、本実施形態に係る電子機器１の操作性は低下しない。そのため、本実施形態に係る電子機器１であれば、スライド操作やフリック操作では操作しにくい状況でも、タップ操作のみで、ユーザの意図した処理を実行できる。ただし、本実施形態に係る電子機器１は、検出対象とする操作をタップ操作に限定するわけではない。

　次に、本実施形態に係る電子機器１の第２の効果は、アプリケーションコンテンツの表示画面とは独立した操作情報画像４０により、ユーザが表示画面を操作できることである。そのため、本実施形態に係る電子機器１であれば、表示画面を操作するインターフェースを備えていないアプリケーションにおいても、ユーザは表示画面を操作できる。従って、アプリケーションを問わず、上記第１の効果を期待した操作を提供することができる。

［第２の実施形態］
　続いて、第２の実施形態について、図面を参照して、詳細に説明する。

　本実施形態は、入力検出部１０の検出範囲を格子状に区画する実施形態である。なお、本実施形態における説明では、第１の実施形態と重複する部分の説明は省略する。さらに、本実施形態における説明では、第１の実施形態と同一の構成要素には、同一の符号を付し、その説明を省略する。

　まず、図２２は、本実施形態における表示部３０の表示の一例を示す図である。

　図２２の（ａ）図は、区分マーク１０３の表示の一例を示す図である。本実施形態では、区分マーク１０３は、上記の第１の操作の検出範囲を格子状に区画する。

　一方、図２２の（ｂ）図は、本実施形態における矢印画像１０４の表示の一例を示す図である。本実施形態でも、区分マーク１０３で区画したそれぞれの領域に、矢印画像１０４を表示させる。本実施形態では、それぞれの矢印は、表示部３０の右上、右下、左上、左下のいずれかの方向を指す。

　次に、図２３を用いて、矢印画像１０４で示す方向へのスクロール表示処理について説明する。

　本実施形態においても、矢印画像１０４の示す方向へのスクロール表示処理は、上述の図１７のフローチャートのとおりである。従って、詳細は省略する。

　ここで、本実施形態におけるステップＳ４１からステップＳ４３までに示す動作について、図２３の（ａ）図で例示する。まず、図２３の（ａ）図に示す点Ｐ１７１は、接触検出位置を表す。ここで、点Ｐ１７１は、矢印画像１０４上であり、矢印の始点及び終点のいずれでもない。さらに、入力検出部１０が、点Ｐ１７１の１箇所のみで、ユーザによる接触を検出したとする。その場合、ステップＳ４１からステップＳ４３の条件を満たす。よって、ステップＳ４４に遷移する。ここで、点Ｐ１７１の位置の矢印画像１０４の示す方向は、右上である。そのため、ステップＳ４４の処理により、アプリケーションコンテンツの表示画面１０１は、右上方向にスクロール表示される（図２３の（ｂ）図参照）。

　次に、図２４を用いて、アプリケーションコンテンツの表示画面１０１を、矢印画像１０４の示す方向以外へスクロール表示する処理について説明する。

　本実施形態においても、矢印画像１０４の示す方向以外へのスクロール表示処理は、上述の図１９のフローチャートのとおりである。従って、詳細は省略する。

　ここで、本実施形態におけるステップＳ５１からステップＳ５４までについて、図２４で例示する。まず、図２４の（ａ）図に示す点Ｐ１８１と点Ｐ１８２は、接触検出位置を表す。ここで、点Ｐ１８１、点Ｐ１８１は２つの異なる矢印画像１０４上である。かつ、その２つの矢印画像１０４は、同一直線上ではない。さらに、入力検出部１０が、点Ｐ１８１及び点Ｐ１８２の２箇所のみで、ユーザによる接触を検出したとする。その場合、ステップＳ５１からＳ５３までの条件を満たし、かつステップＳ５４の条件は満たさない。よって、ステップＳ５８に遷移する。ここで、点Ｐ１８１と点Ｐ１８２の位置の矢印画像の示す方向は、それぞれ右上、左上である。従って、２つの矢印のベクトルの和の方向は、表示部３０の垂直上部方向となる。そのため、ステップＳ５８の処理によって、アプリケーションコンテンツの表示画面１０１は、垂直上部方向にスクロール表示される（図２４の（ｂ）図参照）。

　なお、区分マーク１０３のパターンは、実施形態１及び実施形態２の区分マーク以外のパターンも考えられる。

　まず、図２５の（ａ）図は、４本の線を区分マーク１０３として示す一例である。なお、図２５の（ａ）図の区分マーク１０３は、実施形態１の区分マーク１０３と、実施形態２の区分マーク１０３を組み合わせた区分マーク１０３である。ここで、図２５（ａ）図では、８つの矢印画像１０４を表示部３０に表示している。従って、図２５の（ａ）図の区分マーク１０３を表示する実施形態は、実施形態１及び実施形態２の場合以上に、細かい角度での方向選択が可能な実施形態である。

　次に、図２５の（ｂ）図は、区分マーク１０３を矩形で示す一例である。ここで、図２５の（ｂ）図では、区分マーク１０３の矩形内部に矢印画像１０４を表示する。図２５（ｂ）で示す実施形態は、特定の領域内でのみ、表示画面１０１の操作処理を行なう場合に有用である。

　以上のように、電子機器１は、区分マーク１０３のパターンを切り替えるだけで、操作方法を容易に切り替えることができる。

　最後に、好ましい形態を要約する。

　（形態１）上記第１の視点に係る電子機器の通りである。

　（形態２）前記操作情報画像は、ユーザが接触するのに十分な面積の閉じた領域を有し、ユーザに方向を提示する記号、又は前記表示部を２以上の領域に区画する区画線の集合である区分マークの少なくともいずれか一を含む電子機器。

　（形態３）前記操作情報画像は、さらに、前記区分マークのそれぞれの区画線の方向、又は形状の変更を変更した区分マークの少なくとも一のパターンを含む電子機器。

　（形態４）前記制御部は、前記第２の操作に基づき、前記表示部が表示する画像の形状の変更、表示位置の変更、回転角の変更の少なくともいずれか一の処理をする電子機器。

　（形態５）前記入力検出部が、前記操作情報画像に対応する前記第１及び第２の接触操作とは異なる第３の接触操作を検出した場合に、前記第３の接触操作に基づき、前記制御部は、前記表示部に表示する前記操作情報画像の形状の変更、非表示、表示位置の変更、回転角の変更の少なくともいずれか一の処理をする電子機器。

　（形態６）前記制御部は、前記操作情報画像の透過率を変更し、アプリケーションが作成する表示画面の上に重ね合わせることで、前記表示部に表示する画像を生成する電子機器。

　（形態７）前記入力検出部は、前記入力検出部への接触の数、接触位置、接触時間の少なくともいずれか一の情報を検出する電子機器。

　（形態８）前記制御部は、前記区分マークのパターンに対応して、前記記号の形状、表示位置、回転角の少なくともいずれか一を変更する電子機器。

　（形態９）上記第２の視点に係る電子機器の制御方法の通りである。

　（形態１０）前記入力検出部が、前記操作情報画像に対応する前記第１及び第２の接触操作とは異なる第３の接触操作を検出した場合に、前記第３の接触操作に基づき、前記表示部に表示する前記操作情報画像の形状の変更工程、非表示工程、表示位置の変更工程、回転角の変更工程の少なくともいずれか一の工程と、を含む電子機器の制御方法。

　（形態１１）前記操作情報画像の透過率を変更する工程と、アプリケーションが作成する表示画面の上に、透過率を変更した前記画像を重ね合わせる画像生成工程と、前記画像生成工程で重ね合わせた画像を前記表示部に表示する工程と、を含む電子機器の制御方法。

　（形態１２）前記区分マークのそれぞれの区画線の方向、又は形状を変更した前記区分マークのパターンに対応して、前記記号の形状、表示位置、回転角の少なくともいずれか一を変更する工程を含む電子機器の制御方法。

　（形態１３）上記第３の視点に係るプログラムの通りである。

　（形態１４）前記操作情報画像の透過率を変更する処理と、アプリケーションが作成する表示画面の上に、透過率を変更した前記画像を重ね合わせる画像生成処理と、前記画像生成処理で重ね合わせた画像を前記表示部に表示する処理と、を実行するプログラム。

　（形態１５）前記入力検出部が、前記操作情報画像に対応する前記第１及び第２の接触操作とは異なる第３の接触操作を検出した場合に、前記第３の接触操作に基づき、前記表示部に表示する前記操作情報画像の形状の変更処理、非表示処理、表示位置の変更処理、回転角の変更処理の少なくともいずれか一の処理を実行するプログラム。

　（形態１６）前記区分マークのそれぞれの区画線の方向、又は形状を変更した前記区分マークのパターンに対応して、前記記号の形状、表示位置、回転角の少なくともいずれか一を変更する処理を実行するプログラム。

　なお、引用した上記の特許文献等の各開示は、本書に引用をもって繰り込むものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の開示要素（各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む）の多様な組み合わせ、ないし、選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。

１　電子機器
１０　入力検出部
２０　制御部
２１　表示画面処理部
２２　操作情報処理部
２３　画像生成部
２４　入力判断部
３０　表示部
４０　操作情報画像
１０１　表示画面
１０２　矢印画像表示領域
１０３　区分マーク
１０４　矢印画像

Claims (10)

1. 　画像を表示する表示部と、
   　ユーザによる接触操作を検出する入力検出部と、
   　前記入力検出部が検出した第１の接触操作に基づき、前記表示部に操作情報画像を表示させると共に、前記入力検出部が前記操作情報画像に対する第２の接触操作を検出した場合に、前記第２の接触操作に基づき、前記表示部が表示する画像を変更する制御部と、
   　を備えることを特徴とする電子機器。
2. 　前記操作情報画像は、ユーザが接触するのに十分な面積の閉じた領域を有し、ユーザに方向を提示する記号、又は前記表示部を２以上の領域に区画する区画線の集合である区分マークの少なくともいずれか一を含む請求項１に記載の電子機器。
3. 　前記操作情報画像は、さらに、前記区分マークのそれぞれの区画線の方向、又は形状を変更した区分マークの少なくとも一のパターンを含む請求項１又は２に記載の電子機器。
4. 　前記制御部は、前記第２の操作に基づき、前記表示部が表示する画像の形状の変更、表示位置の変更、回転角の変更の少なくともいずれか一の処理をする請求項１乃至３のいずれか一に記載の電子機器。
5. 　前記入力検出部が、前記操作情報画像に対応する前記第１及び第２の接触操作とは異なる第３の接触操作を検出した場合に、前記第３の接触操作に基づき、前記制御部は、前記表示部に表示する前記操作情報画像の形状の変更、非表示、表示位置の変更、回転角の変更の少なくともいずれか一の処理をする請求項１乃至４のいずれか一に記載の電子機器。
6. 　前記制御部は、前記操作情報画像の透過率を変更し、アプリケーションが作成する表示画面の上に重ね合わせることで、前記表示部に表示する画像を生成する請求項１乃至５のいずれか一に記載の電子機器。
7. 　前記入力検出部は、前記入力検出部への接触の数、接触位置、接触時間の少なくともいずれか一の情報を検出する請求項１乃至６のいずれか一に記載の電子機器。
8. 　前記制御部は、前記区分マークのパターンに対応して、前記記号の形状、表示位置、回転角の少なくともいずれか一を変更する請求項３乃至７のいずれか一に記載の電子機器。
9. 　画像を表示する表示部と、
   　ユーザによる接触操作を検出する入力検出部と、
   　を備える電子機器の制御方法であって、
   　前記入力検出部が検出した第１の接触操作に基づき、前記表示部に操作情報画像を表示させる工程と、
   　前記入力検出部が前記操作情報に対応する第２の接触操作を検出した場合に、前記第２の接触操作に基づき、前記表示部に表示する画像を変更する工程と、
   　を含むことを特徴とする電子機器の制御方法。
10. 　画像を表示する表示部と、
    　ユーザによる接触操作を検出する入力検出部と、
    　を備える電子機器を制御するコンピュータに実行させるプログラムであって、
    　前記入力検出部が検出した第１の接触操作に基づき、前記表示部に操作情報画像を表示させる処理と、
    　前記入力検出部が前記操作情報画像に対応する第２の接触操作を検出した場合に、前記第２の接触操作に基づき、前記表示部に表示する画像を変更する処理と、
    　を実行するプログラム。

Images