JP2021140590A - 電子機器、電子機器の制御方法、プログラム、記憶媒体 - Google Patents

Abstract

【課題】選択可能な対象が重畳表示されている場合でも、ユーザーの視線によってユーザーが所望する機能を実行させることが可能な電子機器を提供する。【解決手段】電子機器は、表示対象に重畳して表示アイテムが表示された第１の領域に対する視線入力による注視状態の継続時間が第１の時間に達する前に所定のトリガーがあっても、第１の機能と第２の機能のいずれも実行することなく、前記第１の領域に対する前記注視状態の継続時間が前記第１の時間以上かつ第２の時間未満である場合に前記所定のトリガーがあったことに応じて、前記視線入力による入力位置に基づく前記表示対象の一部を選択して前記第１の機能を実行するように制御し、当該継続時間が前記第２の時間以上である場合に前記所定のトリガーがあったことに応じて、前記表示アイテムを選択して前記第２の機能を実行するように制御する。【選択図】図４

Description

本発明は、電子機器、電子機器の制御方法、プログラム、記憶媒体に関する。

従来、視線入力を用いて領域を選択する電子機器が知られている。特許文献１では、視線入力を用いてＡＦ（オートフォーカス）対象となる追尾対象を選択する方法が提案されている。より詳しくは、ユーザーが被写体を凝視した際の視線の微小移動（固視微動）に起因してＡＦ・ＡＥエリアが変化することがないように、視線位置の変化量が眼球の固視微動現象の基準値を超えるか否かによって視線位置を決定する光学機器が提案されている。

一方、特許文献２では、２つの機能を示す表示が重畳されている領域をタッチしている時間が所定時間未満であれば上層の機能が実行され、当該時間が所定時間以上であれば下層の機能を実行するタッチスクリーンディスプレイ装置が提案されている。

特開平４−３３５６０７号公報 特開２００５−１４１７３１号公報

しかしながら、特許文献１に開示された技術では、選択可能な対象が被写体に重畳表示されている場合に、重畳表示された位置における追尾対象の被写体の選択と、当該選択可能な対象に応じた機能とのいずれかしか実行できない。特許文献２に開示された技術では、ユーザーがタッチ操作をした場合には、上層の表示物の選択と下層の表示物の選択とのうちいずれかが行われる。しかし、視線による操作の場合では、操作する意図がなくてもユーザーはいずれかの位置を自然と見てしまうので、見ている位置に関する指示をする意図がユーザーに無くても視線入力位置に関する機能が実行されてしまう。

従って、本発明は、選択可能な対象が重畳表示されている場合でも、ユーザーの視線によってユーザーが所望する機能を実行させることが可能な電子機器を提供することを目的とする。

本発明の１つの態様は、
表示手段を見るユーザーの視線による視線入力を受け付ける受付手段と、
前記表示手段に、表示対象を表示するとともに、前記表示対象に重畳して表示アイテムを表示するように制御する表示制御手段と、
前記表示アイテムが表示された第１の領域に対する前記視線入力による注視状態の継続時間が第１の時間に達する前に所定のトリガーがあっても、第１の機能と第２の機能のいずれも実行することなく、
前記第１の領域に対する前記注視状態の継続時間が前記第１の時間以上かつ第２の時間未満である場合に前記所定のトリガーがあったことに応じて、前記視線入力による入力位置に基づく前記表示対象の一部を選択して前記第１の機能を実行するように制御し、
前記第１の領域に対する前記注視状態の継続時間が前記第２の時間以上である場合に前記所定のトリガーがあったことに応じて、前記表示アイテムを選択して前記第２の機能を
実行するように制御する制御手段と
を有することを特徴とする電子機器である。

選択可能な対象が重畳表示されている場合でも、ユーザーの視線によってユーザーが所望する機能を実行させることができる。

デジタルカメラの外観図である。 デジタルカメラの構成図である。 ＥＶＦにおける表示アイテムおよびＬＶ画像の表示例を示す図である。 ユーザーの視線による処理を示すフローチャートである。 アイテム処理を示すフローチャートである。

＜デジタルカメラ１００の外観図＞
以下、図面を参照して本発明の好適な実施形態を説明する。図１（Ａ），１（Ｂ）に、本発明を適用可能な装置の一例としてのデジタルカメラ１００の外観図を示す。図１（Ａ）はデジタルカメラ１００の前面斜視図であり、図１（Ｂ）はデジタルカメラ１００の背面斜視図である。

表示部２８は、デジタルカメラ１００の背面に設けられた表示部であり、画像や各種情報を表示する。タッチパネル７０ａは、表示部２８の表示面（タッチ操作面）に対するタッチ操作を検出することができる。ファインダー外表示部４３は、デジタルカメラ１００の上面に設けられた表示部であり、シャッター速度や絞りをはじめとするデジタルカメラ１００の様々な設定値を表示する。シャッターボタン６１は撮影指示を行うための操作部材である。モード切替スイッチ６０は、各種モードを切り替えるための操作部材である。端子カバー４０は、デジタルカメラ１００を外部機器に接続するコネクタ（不図示）を保護するカバーである。

メイン電子ダイヤル７１は回転操作部材であり、メイン電子ダイヤル７１を回すことで、シャッター速度や絞りなどの設定値の変更等が行える。電源スイッチ７２は、デジタルカメラ１００の電源のＯＮとＯＦＦを切り替える操作部材である。サブ電子ダイヤル７３は回転操作部材であり、サブ電子ダイヤル７３を回すことで、選択枠（カーソル）の移動や画像送りなどが行える。４方向キー７４は、上、下、左、右部分をそれぞれ押し込み可能に構成され、４方向キー７４の押した部分に応じた処理が可能である。ＳＥＴボタン７５は、押しボタンであり、主に選択項目の決定などに用いられる。

動画ボタン７６は、動画撮影（記録）の開始や停止の指示に用いられる。ＡＥロックボタン７７は押しボタンであり、撮影待機状態でＡＥロックボタン７７を押下することにより、露出状態を固定することができる。拡大ボタン７８は、撮影モードのライブビュー表示（ＬＶ表示）において拡大モードのＯＮとＯＦＦを切り替えるための操作ボタンである。拡大モードをＯＮとしてからメイン電子ダイヤル７１を操作することにより、ライブビュー画像（ＬＶ画像）の拡大や縮小を行える。再生モードにおいては、拡大ボタン７８は、再生画像を拡大したり、その拡大率を増加させるたりするための操作ボタンとして機能する。再生ボタン７９は、撮影モードと再生モードとを切り替えるための操作ボタンである。撮影モード中に再生ボタン７９を押下することで再生モードに遷移し、記録媒体２００（後述）に記録された画像のうち最新の画像を表示部２８に表示させることができる。メニューボタン８１はメニュー画面を表示させる指示操作を行うために用いられる押しボタンであり、メニューボタン８１が押されると各種の設定が可能なメニュー画面が表示部
２８に表示される。ユーザーは、表示部２８に表示されたメニュー画面と、４方向キー７４やＳＥＴボタン７５とを用いて直感的に各種設定を行うことができる。

通信端子１０は、デジタルカメラ１００がレンズユニット１５０（後述；着脱可能）側と通信を行うための通信端子である。接眼部１６は、接眼ファインダー（覗き込み型のファインダー）の接眼部であり、ユーザーは、接眼部１６を介して内部のＥＶＦ２９（後述）に表示された映像を視認することができる。接眼検知部５７は、接眼部１６にユーザー（撮影者）が接眼しているか否かを検知する接眼検知センサである。蓋２０２は、記録媒体２００（後述）を格納するスロットの蓋である。グリップ部９０は、ユーザーがデジタルカメラ１００を構える際に右手で握りやすい形状とした保持部である。グリップ部９０を右手の小指、薬指、中指で握ってデジタルカメラ１００を保持した状態で、右手の人差指で操作可能な位置にシャッターボタン６１とメイン電子ダイヤル７１が配置されている。また、同じ状態で、右手の親指で操作可能な位置に、サブ電子ダイヤル７３が配置されている。サムレスト部９１（親指待機位置）は、デジタルカメラ１００の背面側の、どの操作部材も操作しない状態でグリップ部９０を握った右手の親指を置きやすい箇所に設けられたグリップ部材である。サムレスト部９１は、保持力（グリップ感）を高めるためのラバー部材などで構成される。

＜デジタルカメラ１００の構成ブロック図＞
図２は、デジタルカメラ１００の構成例を示すブロック図である。レンズユニット１５０は、交換可能な撮影レンズを搭載するレンズユニットである。レンズ１０３は通常、複数枚のレンズから構成されるが、図２では簡略して一枚のレンズのみで示している。通信端子６は、レンズユニット１５０がデジタルカメラ１００側と通信を行うための通信端子であり、通信端子１０は、デジタルカメラ１００がレンズユニット１５０側と通信を行うための通信端子である。レンズユニット１５０は、これら通信端子６，１０を介してシステム制御部５０と通信する。そして、レンズユニット１５０は、内部のレンズシステム制御回路４によって絞り駆動回路２を介して絞り１の制御を行う。また、レンズユニット１５０は、レンズシステム制御回路４によってＡＦ駆動回路３を介してレンズ１０３を変位させることで焦点を合わせる。

シャッター１０１は、システム制御部５０の制御で撮像部２２の露光時間を自由に制御できるフォーカルプレーンシャッターである。

撮像部２２は、光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子である。撮像部２２は、システム制御部５０にデフォーカス量情報を出力する撮像面位相差センサを有していてもよい。

画像処理部２４は、Ａ／Ｄ変換器２３からのデータ、又は、メモリ制御部１５からのデータに対し所定の処理（画素補間、縮小といったリサイズ処理、色変換処理、等）を行う。また、画像処理部２４は、撮像した画像データを用いて所定の演算処理を行い、システム制御部５０は、画像処理部２４により得られた演算結果に基づいて露光制御や測距制御を行う。これにより，ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理、等が行われる。画像処理部２４は更に、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理を行う。

メモリ制御部１５は、Ａ／Ｄ変換器２３、画像処理部２４、メモリ３２間のデータの送受信を制御する。Ａ／Ｄ変換器２３からの出力データは、画像処理部２４およびメモリ制御部１５を介してメモリ３２に書き込まれる。あるいは、Ａ／Ｄ変換器２３からの出力データは、画像処理部２４を介さずにメモリ制御部１５を介してメモリ３２に書き込まれる
。メモリ３２は、撮像部２２によって得られＡ／Ｄ変換器２３によりデジタルデータに変換された画像データや、表示部２８やＥＶＦ２９に表示するための画像データを格納する。メモリ３２は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。

また、メモリ３２は画像表示用のメモリ（ビデオメモリ）を兼ねている。メモリ３２に書き込まれた表示用の画像データはメモリ制御部１５を介して表示部２８やＥＶＦ２９により表示される。表示部２８とＥＶＦ２９のそれぞれは、ＬＣＤや有機ＥＬ等の表示器上で、メモリ制御部１５からの信号に応じた表示を行う。Ａ／Ｄ変換器２３によってＡ／Ｄ変換されメモリ３２に蓄積されたデータを表示部２８またはＥＶＦ２９に逐次転送して表示することで、ライブビュー表示（ＬＶ）が行える。以下、ライブビュー表示で表示される画像をライブビュー画像（ＬＶ画像）と称する。

視線検出部１６０は、接眼部１６におけるユーザーの視線を検出する。視線検出部１６０は、ダイクロイックミラー１６２、結像レンズ１６３、視線検知センサ１６４、視線検出回路１６５、赤外発光ダイオード１６６により構成される。なお、視線の検出に応じて、システム制御部５０が所定の処理を実行することも可能であるため、視線検出部１６０は、操作部７０の一部であるともいえる。

赤外発光ダイオード１６６は、ファインダー画面内におけるユーザーの視線位置を検出するための発光素子であり、ユーザーの眼球（目）１６１に赤外光を照射する。赤外発光ダイオード１６６から発した赤外光は眼球（目）１６１で反射し、その赤外反射光はダイクロイックミラー１６２に到達する。ダイクロイックミラー１６２は、赤外光だけを反射して、可視光を透過させる。光路が変更された赤外反射光は、結像レンズ１６３を介して視線検知センサ１６４の撮像面に結像する。結像レンズ１６３は、視線検知光学系を構成する光学部材である。視線検知センサ１６４は、ＣＣＤ型イメージセンサ等の撮像デバイスから構成される。

視線検知センサ１６４は、入射された赤外反射光を電気信号に光電変換して視線検出回路１６５へ出力する。視線検出回路１６５は、視線検知センサ１６４の出力信号に基づき、ユーザーの眼球（目）１６１の動きからユーザーの視線位置を検出し、検出情報をシステム制御部５０および注視判定部１７０に出力する。

視線入力設定部１６７は、視線検出回路１６５（視線検出部１６０）による視線検出の有効または無効を設定する。または、視線入力設定部１６７は、システム制御部５０の視線入力による処理の有効または無効を設定する。例えば、このような有効／無効の設定は、メニュー設定にて、操作部７０に対する操作によってユーザーが任意に設定できる。

注視判定部１７０は、視線検出回路１６５から受け取った検出情報に基づいて、ユーザーの視線がある領域に固定されている期間が所定の閾値を越えた場合に、その領域を注視していると判定する。従って、当該領域は、注視が行われた位置である注視位置（注視領域）であるといえる。なお、「視線がある領域に固定されている」とは、例えば、所定の期間経過するまでの間、視線の動きの平均位置が当該領域内にあり、かつ、ばらつき（分散）が所定値よりも少ないことである。なお、所定の閾値は、システム制御部５０により任意に変更可能である。また、注視判定部１７０を独立したブロックとして設けず、システム制御部５０が視線検出回路１６５から受け取った検出情報に基づいて注視判定部１７０と同じ機能を実行するようにしてもよい。

ファインダー外表示部４３には、ファインダー外表示部駆動回路４４を介して、シャッター速度や絞りをはじめとするカメラの様々な設定値が表示される。

不揮発性メモリ５６は、電気的に消去・記録可能なメモリであり、例えば、ＦＬａｓｈ−ＲＯＭ等である。不揮発性メモリ５６には、システム制御部５０の動作用の定数、プログラム等が記録される。ここでいうプログラムとは、本実施形態にて後述する各種フローチャートを実行するためのプログラムのことである。

システム制御部５０は、少なくとも１つのプロセッサまたは回路からなる制御部であり、デジタルカメラ１００全体を制御する。システム制御部５０は、前述した不揮発性メモリ５６に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。システムメモリ５２は例えばＲＡＭであり、システム制御部５０は、システム制御部５０の動作用の定数、変数、不揮発性メモリ５６から読み出したプログラム等をシステムメモリ５２に展開する。また、システム制御部５０は、メモリ３２、表示部２８等を制御することにより表示制御も行う。

システムタイマー５３は、各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。

電源制御部８０は、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出などを行う。また、電源制御部８０は、その検出結果およびシステム制御部５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２００を含む各部へ供給する。電源部３０は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。

記録媒体Ｉ／Ｆ１８は、メモリカードやハードディスク等の記録媒体２００とのインターフェースである。記録媒体２００は、撮影された画像を記録するためのメモリカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。

通信部５４は、無線または有線ケーブルによって接続された外部機器との間で、映像信号や音声信号の送受信を行う。通信部５４は無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）やインターネットとも接続可能である。また、通信部５４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＢｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙでも外部機器と通信可能である。通信部５４は撮像部２２で撮像した画像（ＬＶ画像を含む）や、記録媒体２００に記録された画像を送信可能であり、外部機器から画像データやその他の各種情報を受信することができる。

姿勢検知部５５は、重力方向に対するデジタルカメラ１００の姿勢を検知する。姿勢検知部５５で検知された姿勢に基づいて、撮像部２２で撮影された画像が、デジタルカメラ１００を横に構えて撮影された画像であるか、縦に構えて撮影された画像であるかを判別可能である。システム制御部５０は、姿勢検知部５５で検知された姿勢に応じた向き情報を撮像部２２で撮像された画像の画像ファイルに付加したり、画像を回転して記録したりすることが可能である。姿勢検知部５５としては、加速度センサやジャイロセンサーなどを用いることができる。姿勢検知部５５である加速度センサやジャイロセンサーを用いて、デジタルカメラ１００の動き（パン、チルト、持ち上げ、静止しているか否か等）を検知することも可能である。

接眼検知部５７は、接眼ファインダー１７（以後、単に「ファインダー」と記載する）の接眼部１６に対する目（物体）１６１の接近（接眼）および離脱（離眼）を検知する（接近検知）、接眼検知センサである。システム制御部５０は、接眼検知部５７で検知された状態に応じて、表示部２８とＥＶＦ２９の表示（表示状態）／非表示（非表示状態）を
切り替える。より具体的には、少なくとも撮影待機状態で、かつ、表示先の切替が自動切替である場合において、非接眼中は表示先を表示部２８として表示をオンとし、ＥＶＦ２９は非表示とする。また、接眼中は表示先をＥＶＦ２９として表示をオンとし、表示部２８は非表示とする。接眼検知部５７としては、例えば赤外線近接センサを用いることができ、ＥＶＦ２９を内蔵するファインダー１７の接眼部１６への何らかの物体の接近を検知することができる。物体が接近した場合は、接眼検知部５７の投光部（図示せず）から投光した赤外線が物体で反射して赤外線近接センサの受光部（図示せず）で受光される。受光された赤外線の量によって、物体が接眼部１６からどの距離まで近づいているか（接眼距離）も判別することができる。このように、接眼検知部５７は、接眼部１６への物体の近接距離を検知する接眼検知を行う。非接眼状態（非接近状態）から、接眼部１６に対して所定距離以内に近づく物体が検出された場合に、接眼されたと検出するものとする。接眼状態（接近状態）から、接近を検知していた物体が所定距離以上離れた場合に、離眼されたと検出するものとする。接眼を検出する閾値と、離眼を検出する閾値は例えばヒステリシスを設けるなどして異なっていてもよい。また、接眼を検出した後は、離眼を検出するまでは接眼状態であるものとする。離眼を検出した後は、接眼を検出するまでは非接眼状態であるものとする。なお、赤外線近接センサは一例であって、接眼検知部５７には、接眼とみなせる目や物体の接近を検知できるものであれば他のセンサを採用してもよい。

システム制御部５０は、注視判定部１７０または接眼検知部５７を制御することによって、接眼部１６への以下の操作、あるいは状態を検出できる。
・接眼部１６へ向けられていなかった視線が新たに接眼部１６へ向けられたこと。すなわち、視線入力の開始。
・接眼部１６へ視線入力している状態であること。
・接眼部１６へ注視している状態であること。
・接眼部１６へ向けられていた視線を外したこと。すなわち、視線入力の終了。
・接眼部１６へ何も視線入力していない状態。

これらの操作・状態や、接眼部１６に視線が向いている位置（方向）は内部バスを通じてシステム制御部５０に通知され、システム制御部５０は、通知された情報に基づいて接眼部１６上にどのような操作（視線操作）が行なわれたかを判定する。

操作部７０は、ユーザーからの操作（ユーザー操作）を受け付ける入力部であり、システム制御部５０に各種の動作指示を入力するために使用される。図２に示すように、操作部７０は、モード切替スイッチ６０、シャッターボタン６１、電源スイッチ７２、タッチパネル７０ａ、等を含む。また、操作部７０は、その他の操作部材７０ｂとして、メイン電子ダイヤル７１、サブ電子ダイヤル７３、４方向キー７４、ＳＥＴボタン７５、動画ボタン７６、ＡＥロックボタン７７、拡大ボタン７８、再生ボタン７９、メニューボタン８１、等を含む。

モード切替スイッチ６０は、システム制御部５０の動作モードを静止画撮影モード、動画撮影モード、再生モード等のいずれかに切り替える。静止画撮影モードに含まれるモードとして、オート撮影モード、オートシーン判別モード、マニュアルモード、絞り優先モード（Ａｖモード）、シャッター速度優先モード（Ｔｖモード）、プログラムＡＥモード（Ｐモード）がある。また、撮影シーン別の撮影設定となる各種シーンモード、カスタムモード等がある。モード切替スイッチ６０により、ユーザーは、これらのモードのいずれかに直接切り替えることができる。あるいは、モード切替スイッチ６０で撮影モードの一覧画面に一旦切り替えた後に、表示された複数のモードのいずれかに、他の操作部材を用いて選択的に切り替えるようにしてもよい。同様に、動画撮影モードにも複数のモードが含まれていてもよい。

シャッターボタン６１は、第１シャッタースイッチ６２と第２シャッタースイッチ６４を備える。第１シャッタースイッチ６２は、シャッターボタン６１の操作途中、いわゆる半押し（撮影準備指示）でＯＮとなり第１シャッタースイッチ信号ＳＷ１を発生する。システム制御部５０は、第１シャッタースイッチ信号ＳＷ１により、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の撮影準備動作を開始する。第２シャッタースイッチ６４は、シャッターボタン６１の操作完了、いわゆる全押し（撮影指示）でＯＮとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部５０は、第２シャッタースイッチ信号ＳＷ２により、撮像部２２からの信号読み出しから、撮像された画像を画像ファイルとして記録媒体２００に書き込むまでの、一連の撮影処理の動作を開始する。

タッチパネル７０ａと表示部２８とは一体的に構成することができる。例えば、タッチパネル７０ａは、光の透過率が表示部２８の表示を妨げないように構成され、表示部２８の表示面の上層に取り付けられる。そして、タッチパネル７０ａにおける入力座標と、表示部２８の表示面上の表示座標とを対応付ける。これにより、あたかもユーザーが表示部２８上に表示された画面を直接的に操作可能であるかのようなＧＵＩ（グラフィカルユーザーインターフェース）を提供できる。システム制御部５０は、タッチパネル７０ａへの以下の操作、あるいは状態を検出できる。

・タッチパネル７０ａにタッチしていなかった指やペンが新たにタッチパネル７０ａにタッチしたこと、すなわちタッチの開始（以下、タッチダウン（Ｔｏｕｃｈ−Ｄｏｗｎ）と称する）。
・タッチパネル７０ａを指やペンでタッチしている状態（以下、タッチオン（Ｔｏｕｃｈ−Ｏｎ）と称する）。
・指やペンがタッチパネル７０ａをタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ−Ｍｏｖｅ）と称する）。
・タッチパネル７０ａへタッチしていた指やペンがタッチパネル７０ａから離れた（リリースされた）こと、すなわちタッチの終了（以下、タッチアップ（Ｔｏｕｃｈ−Ｕｐ）と称する）。
・タッチパネル７０ａに何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ−Ｏｆｆ）と称する）。

タッチダウンが検出されると、同時にタッチオンも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出された場合も、同時にタッチオンが検出される。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていた全ての指やペンがタッチアップしたことが検出された後は、タッチオフとなる。

これらの操作・状態や、タッチパネル７０ａ上に指やペンがタッチしている位置座標は内部バスを通じてシステム制御部５０に通知される。そして、システム制御部５０は通知された情報に基づいてタッチパネル７０ａ上にどのような操作（タッチ操作）が行なわれたかを判定する。タッチムーブについてはタッチパネル７０ａ上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル７０ａ上の垂直成分・水平成分毎に判定できる。所定距離以上をタッチムーブしたことが検出された場合はスライド操作が行なわれたと判定するものとする。タッチパネル７０ａ上に指をタッチしたままある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックと呼ぶ。フリックは、言い換えればタッチパネル７０ａ上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行なわれたと判定できる（スライド操作に続いてフリックがあったものと判定できる）。更に、複数箇所（例えば２点）を共にタッチして（マルチタ
ッチして）、互いのタッチ位置を近づけるタッチ操作をピンチイン、互いのタッチ位置を遠ざけるタッチ操作をピンチアウトと称する。ピンチアウトとピンチインを総称してピンチ操作（あるいは単にピンチ）と称する。タッチパネル７０ａは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式等、様々な方式のタッチパネルのうちいずれの方式のものであってもよい。タッチパネルに対する接触があったことでタッチがあったと検出する方式や、タッチパネルに対する指やペンの接近があったことでタッチがあったと検出する方式があるが、いずれの方式でもよい。

［表示の制御方法について］
図３（Ａ）〜図３（Ｅ）を参照して、ＥＶＦ２９の表示の制御方法について説明する。図３（Ａ）〜図３（Ｅ）は、ＥＶＦ２９にライブビュー画像３００（表示対象）が表示された状態例を示した図である。図３（Ａ）〜図３（Ｅ）では、ＥＶＦ２９に、ライブビュー画像３００として人物が集合した画像が表示されている。

ここで、ユーザーがＥＶＦ２９を覗いたままデジタルカメラ１００の設定や撮影操作が行えるように、複数の種類の表示アイテム３０１（現在の撮影設定内容を示すアイコンなど）がＥＶＦ２９に表示されている。本実施形態では、図３（Ａ）に示すように、表示アイテム３０１の一例として、ホワイトバランスを示す太陽マーク３０１ａ、記録媒体２００に記録する画像サイズ３０１ｂ、オートフォーカス（ＡＦ）動作マーク３０１ｃ、ＩＳＯ感度値３０１ｄが表示される。

表示アイテム３０１は、ライブビュー画像３００の外縁部や外部（下部）に表示される。本実施形態において、太陽マーク３０１ａや画像サイズ３０１ｂ、動作マーク３０１ｃが、ライブビュー画像３００の外縁部に表示されている。一方、ＩＳＯ感度値３０１ｄが、ＥＶＦ２９のライブビュー画像３００の下部（外部）に表示されている。

ライブビュー画像３００には、大きく分類して３つの領域が存在しており、図３（Ｄ）に示す例では、破線の四角枠によって３つの領域が例示されている。ここで、ライブビュー画像３００に対して表示アイテム３０１が重畳表示された（前面に表示された）領域を領域３２０とし、ライブビュー画像３００のみ表示された領域を領域３２１とし、表示アイテム３０１のみが表示された領域を領域３２２とする。

デジタルカメラ１００では、ユーザーがＥＶＦ２９を覗いた状態でユーザーの視線の位置が検出されることによって、視線の位置に応じた処理が実行される。例えば、図３（Ｄ）に示すように、ライブビュー画像３００の一部である領域３２１に該当する被写体にユーザーが視線を向けると、被写体にピントを合わせる処理（合焦処理）を実行するための、図３（Ｅ）に示すような測距点３０２（ＡＦ枠）が表示される。そして、その後に、ＳＥＴボタン７５が押下されると、デジタルカメラ１００は、測距点３０２を選択する。具体的には、デジタルカメラ１００は、表示されている測距点の位置を選択して、ＡＦの対象位置として設定する。

また、図３（Ｄ）に示すように、ライブビュー画像３００の下部に表示された領域３２２に該当するＩＳＯ感度値３０１ｄに、ユーザーが視線を向けたと想定する。この場合には、図３（Ｅ）に示すようにＩＳＯ感度値３０１ｄが点滅表示される。そして、その後に、ＳＥＴボタン７５が押下されると、ＩＳＯ感度値３０１ｄを変更できる状態するために、デジタルカメラ１００がＩＳＯ感度設定モードに遷移する。

なお、図３（Ｅ）に示す点滅表示は、中心の表示アイコン等を点滅表示させていることを図式的に示す強調表示の一例である。このように、ユーザーが表示アイテム３０１に視線を向けると、表示アイテム３０１が点滅表示することによって、表示アイテム３０１が
選択可能な状態であることを、ユーザーに対して容易に知らせることができる。

また、領域３２０にユーザーが視線を向けた場合には、ライブビュー画像３００の人物と表示アイテム３０１との両方が表示されているため、デジタルカメラ１００は、ユーザーがどちらを選択しているのかを判定する必要がある。そこで、本実施形態では、デジタルカメラ１００は、ユーザーの視線が留まる時間（注視時間；注視状態の継続時間）を計測し、計測した時間と二段階の閾値（第１の注視時間、第２の注視時間）とを比較する。このことによって、デジタルカメラ１００は、人物と表示アイテム３０１のどちらの対象物をユーザーが選択しているのかを判定する。

（ユーザーの選択の判定方法について）
以下では、図３（Ａ）〜図３（Ｃ）を用いて、図３（Ａ）に示すような、ライブビュー画像３００に対して太陽マーク３０１ａが重畳している領域３２０をユーザーが注視する場合を例にとって、ユーザーの選択を判定する方法について具体的に説明する。

まず、図３（Ａ）に示すように、ユーザーが領域３２０に注視した場合であって、第１の注視時間を経過するまでにＳＥＴボタン７５が押下された（選択操作がされた）場合には、デジタルカメラ１００は押下の操作を無視する。つまり、デジタルカメラ１００は、いかなる機能をも実行しない。

次に、ユーザーが領域３２０に注視した場合であって、第１の注視時間が経過すると、図３（Ｂ）に示すように、デジタルカメラ１００は、領域３２０に測距点３１１を表示する。そして、第１の注視時間を経過し、かつ、第２の注視時間を経過するまでにＳＥＴボタン７５が押下された場合には、デジタルカメラ１００は、表示されている測距点をユーザーが選択したと判定し、当該選択に応じた処理を実行する。

この場合には、太陽マーク３０１ａは、図３（Ｂ）に示すように、第１の注視時間を経過した時点で非表示にされる。つまり、太陽マーク３０１ａの非表示および測距点３１１の表示によって、「第１の注視時間を経過した後で、かつ、第２の注視時間を経過するまでにＳＥＴボタン７５が押下されると、測距点の選択を実行すること」をユーザーに伝えている。なお、測距点を選択することをユーザーに伝えられればよいため、太陽マーク３０１ａの非表示には限られない。例えば、太陽マーク３０１ａ（アイコン）における文字を細字にすることや、縮小、グレーアウトすることなどの控え目な表示にすることが行われてもよい。

一方、ユーザーが領域３２０に注視した場合であって、第２の注視時間を経過した場合に、デジタルカメラ１００は、図３（Ｃ）に示すように太陽マーク３０１ａを点滅表示させる。なお、ユーザーに対して太陽マーク３０１ａが選択可能な状態であることを知らせることができれば、特に点滅表示に限らず、例えば、文字を太字若しくはマーク自体の拡大、或いは色付けする等の強調表示が行われてもよい。この場合には、測距点は非表示にされる。その後、ＳＥＴボタン７５をユーザーが押下すると、デジタルカメラ１００は、ホワイトバランスの設定変更を可能にする。

以上のように、ユーザーの注視時間に応じて、視線入力によってもユーザーが所望する処理が実行可能になる。

［ユーザーの視線による処理］
図４に示すフローチャートを用いて、表示アイテム３０１およびライブビュー画像３００に対する、視線検出部１６０（視線受付部）が受け付けたユーザーの視線による処理を説明する。このフローチャートおける各処理は、システム制御部５０が不揮発性メモリ５
６に格納されたプログラムをシステムメモリ５２に展開して実行することにより実現される。このフローチャートは、デジタルカメラ１００の電源スイッチ７２がオンに操作されると開始する。なお、以下では、ＥＶＦ２９におけるユーザーが継続して注視している位置を「注視位置」と呼び、ＥＶＦ２９における瞬間的な視点の位置を「視点位置」と呼ぶ。

Ｓ４０１では、システム制御部５０は、デジタルカメラ１００を撮影待機状態に遷移させる。

Ｓ４０２では、システム制御部５０は、接眼検知部５７を制御して、ユーザーが接眼している状態か否かを判定する。接眼している状態であると判定された場合にはＳ４０３に進み、そうでない場合にはＳ４０１に戻る。なお、システム制御部５０は、例えば、視線検知センサ１６４が視線を検知している（受け付けている）場合にも、接眼している状態であると判定してもよい。

Ｓ４０３では、システム制御部５０は、視線検出回路１６５を制御して、ＥＶＦ２９における視線位置を検知（検出）する。なお、Ｓ４０３に遷移した時点では、図３（Ａ）に示すような表示アイテム３０１が重畳表示された（上層に表示された）ライブビュー画像３００がＥＶＦ２９に表示されている。

Ｓ４０４では、システム制御部５０は、システムタイマー５３を制御して、ＥＶＦ２９の一部の領域（位置）をユーザーが注視している時間（注視時間）の計測を開始する。ここで、注視とは、上述のように、ユーザーがものを見る位置である視点位置（視線の入力位置）が領域に固定されている状態をいう。なお、視点位置が当該領域から離れた時間があったとしても、当該時間が所定の時間以内であれば、当該領域に対する注視の状態（注視状態）は継続状態であるものとみなされる。

Ｓ４０５では、システム制御部５０は、ライブビュー画像３００と表示アイテム３０１とが重畳表示された領域（重畳領域）を、ユーザーが注視しているか否かを判定する。重畳領域が注視されていると判定された場合にはＳ４０６に進み、そうでない場合にはＳ４２１に進む。

Ｓ４０６では、システム制御部５０は、直前のＳ４０４において注視時間を計測し始めてから、ユーザーの注視位置（注視している領域）が変化しているか否かを判定する。注視位置が変化していると判定された場合にはＳ４０４に戻り、そうでない場合にはＳ４０７に進む。なお、Ｓ４０６における注視位置が変化したか否かの判定は、例えば、後述するＳ４１３およびＳ４１９と同様の処理であり得る。

Ｓ４０７では、システム制御部５０は、第１の設定時間ＴＨ１を注視時間が経過しているか（注視時間が第１の設定時間ＴＨ１以上であるか）否かを判定する。注視時間が第１の設定時間ＴＨ１を経過している場合にはＳ４１２に進み、そうでない場合（注視時間が第１の設定時間ＴＨ１未満である場合）にはＳ４０８に進む。

Ｓ４０８では、システム制御部５０は、注視位置に応じた処理を選択するための操作（選択操作）であるＳＥＴボタン７５の押下が行われたか否かを判定する。ＳＥＴボタン７５の押下が行われたと判定された場合にはＳ４０９に進み、そうでない場合にはＳ４０７に戻る。なお、選択操作は、ＳＥＴボタン７５の押下に限らず、操作部７０に含まれるいずれかの操作部材に対する操作であってもよい。例えば、デジタルカメラ１００は音声を取得する音声入力部を操作部７０の一部として有していてもよく、音声入力部に対する選択を指示するような所定の音声を選択操作としてもよい。また、ユーザーの目つむりに対
応する状態を選択操作としてもよい。なお、目つむりに対応する状態は、ライブビュー画像３００の内部から視線位置が消えた場合などに、視線検知センサ１６４によって検出される。ここで、システム制御部５０が選択操作を検出することが、ユーザーの視線に応じた選択（機能）を実行するためのトリガーとなる。

Ｓ４０９では、システム制御部５０は、システムタイマー５３による注視時間の計測を終了する。つまり、システム制御部５０は、注視時間を０に設定（リセット）するとともに、再び注視時間の計測開始があるまでは注視時間が０である状態を保つ。

Ｓ４１０では、システム制御部５０は、何も実行しない。つまり、注視時間が第１の設定時間ＴＨ１よりも短い状態、言い換えると、視線が定まっていない状態で、ＳＥＴボタン７５が押下されても、その押下の操作は無効にされる。なお、システム制御部５０は、何も実行しないことに限らず、ライブビュー画像３００における注視位置（視点位置）に対応する部分と表示アイテム３０１とのいずれにも関わらない任意の機能を実行してもよい。例えば、Ｓ４１０において、システム制御部５０は、複数の設定項目の設定状態を確認することが可能な設定画面の表示をしてもよい。または、システム制御部５０は、被写体の撮像を実行してもよい。

Ｓ４１１では、システム制御部５０は、注視判定部１７０を制御して、直前のＳ４０４における注視時間の計測開始時点の視線位置から、視線が移動したか否かを判定する。視線が移動していないと判定された場合はＳ４０１に進み、そうでない場合にはＳ４０２に進む。

Ｓ４１２では、システム制御部５０は、ライブビュー画像３００において注視位置に測距点（ＡＦ対象位置）の表示を行う。このとき、システム制御部５０は、注視位置に存在していた表示アイテム３０１を控え目な表示に変更する。ここで、控え目な表示に変更するとは、例えば、表示アイテム３０１の文字の色を薄くする、表示アイテム３０１を半透明な状態にするなどの、表示アイテムが選択対象でないことを示すようにすることをいう。これらによれば、ユーザーは、ＳＥＴボタン７５を押下する（選択操作を行う）ことによって測距点を選択できることを把握できる。

Ｓ４１３では、システム制御部５０は、直前のＳ４０４における注視時間の計測開始時点から、視点位置が変化したか否かを判定する。視点位置が変化したと判定された場合はＳ４１９に進み、そうでない場合にはＳ４１４に進む。

Ｓ４１４では、システム制御部５０は、注視時間が第２の設定時間ＴＨ２を経過しているか（注視時間が第２の設定時間ＴＨ２以上であるか）否かを判定する。第２の設定時間ＴＨ２は、第１の設定時間ＴＨ１よりも長い時間である。注視時間が第２の設定時間ＴＨ２を経過したと判定された場合にはＳ４１８に進み、そうでない場合（注視時間が、第１の設定時間ＴＨ１以上、かつ、第２の設定時間ＴＨ２未満である場合）にはＳ４１５に進む。

Ｓ４１５では、システム制御部５０は、Ｓ４０８と同様に、ＳＥＴボタン７５が押下されたか（選択操作がされたか）否かを判定する。ＳＥＴボタン７５が押下されたと判定された場合にはＳ４１６に進み、そうでない場合にはＳ４１４に進む。

Ｓ４１６では、システム制御部５０は、システムタイマー５３による注視時間の計測を終了する。

Ｓ４１７では、システム制御部５０は、表示された測距点を選択する。つまり、ライブ
ビュー画像３００における一部の領域をユーザーが所定の時間注視してＳＥＴボタン７５を押下することによって、システム制御部５０は、当該領域を選択してＡＦの対象位置として設定している。ここで、測距点を選択した後には、続いて撮影動作が実行される必要があるため、本実施形態では、短い注視時間（第１の設定時間ＴＨ１）で測距点が選択できるように設定されている（優先度を高く設定されている）。なお、Ｓ４１７では、測距点が選択されるだけでなく、当該測距点についてのＡＦが実行されてもよいし、撮影動作が実行されてもよい。

Ｓ４１８では、システム制御部５０は、アイテム処理を行う。なお、アイテム処理の詳細は、図５のフローチャートを用いて後述する。

Ｓ４１９では、システム制御部５０は、Ｓ４１３にて視点位置の変化を検出してから、Ｓ４０４の注視時間の計測開始時点での注視位置に視点位置が戻るまでの時間が、所定の閾値以下（所定の閾値以内）であるか否かを判定する。視点位置が戻るまでの時間が所定の閾値以下であればＳ４１４に進み、そうでなければＳ４２０に進む。なお、Ｓ４１３にて視点位置の変化が検出されてから所定の閾値が示す時間が経過しても、Ｓ４０４の注視時間の計測開始時点での注視位置に視点位置が戻らない場合にＳ４２０に進んでもよく、そうでない場合にＳ４１４に進んでもよい。

Ｓ４１９における判定は、ユーザーが所定の位置を凝視した際には視線の微小移動（いわゆる固視微動）がユーザーの意識に関係なく生じるため、固視微動によって注視位置が変わったと判定されてしまうことを防止するために行われている。つまり、システム制御部５０は、視点位置が所定の閾値以下の時間で元の注視位置に戻れば、固視微動による視点位置の変化であると判定して、注視時間の測定を継続する。一方、システム制御部５０は、視点位置が所定の閾値以下の時間で元の注視位置に戻らなければ、ユーザーが意図して視線位置を変化させた（注視を中断した）と判定する。

Ｓ４２０では、システム制御部５０は、Ｓ４１２にて表示した測距点を非表示にする。このとき、システム制御部５０は、控えめな表示にしていた表示アイテム３０１を通常の表示（Ｓ４１２に遷移する前の表示）に戻す。

Ｓ４２１では、システム制御部５０は、ライブビュー画像３００（背景）が注視されているか否かを判定する。ライブビュー画像３００が注視されていると判定された場合はＳ４２２へ進み、そうでない場合にはＳ４２４に進む。

Ｓ４２２では、システム制御部５０は、注視位置に測距点を表示する。

Ｓ４２３では、システム制御部５０は、ＳＥＴボタン７５が押下されたか（選択操作がされたか）否かを判定する。ＳＥＴボタン７５が押下されたと判定された場合にはＳ４１６に進み、そうでない場合にはＳ４０９に進む。

Ｓ４２４では、システム制御部５０は、ライブビュー画像３００と重畳していない領域（非重畳領域）における表示アイテム３０１が注視されているか否かを判定する。非重畳領域の表示アイテム３０１が注視されていると判定された場合にはＳ４２５に進み、そうでない場合にはＳ４０２に戻る。なお、Ｓ４２４で表示アイテム３０１が注視されていないと判定された場合、ユーザーは何も注視していない状態、つまり視線を動かし続けている状態であると想定できる。

Ｓ４２５では、システム制御部５０は、図３（Ｅ）に示すように、注視された表示アイテム３０１を強調表示する。

Ｓ４２６では、システム制御部５０は、ＳＥＴボタン７５が押下されたか（選択操作が行われたか）否かを判定する。ＳＥＴボタン７５が押下されたと判定された場合には後述のＳ５０７に進み、そうでない場合にはＳ４０９に進む。

（アイテム処理；Ｓ４１８の処理）
図５のフローチャートを用いて、Ｓ４１８において行われるアイテム処理の詳細について説明する。このフローチャートおける各処理は、システム制御部５０が不揮発性メモリ５６に格納されたプログラムをシステムメモリ５２に展開して実行することにより実現される。

Ｓ５０１では、システム制御部５０は、Ｓ４１２にて表示された測距点を非表示にする。

Ｓ５０２では、システム制御部５０は、図３（Ｃ）に示すように、注視位置における表示アイテム３０１を強調表示する。表示アイテム３０１が強調表示されることによって、ユーザーは、ＳＥＴボタン７５を押下することによって、表示アイテム３０１を選択することができると認識することができる。

Ｓ５０３では、システム制御部５０は、Ｓ４１３と同様に、直前のＳ４０４における注視時間の計測開始時点から、視点位置が変化していないか否かを判定する。視点位置が変化した判定された場合はＳ５０４に進み、そうでない場合にはＳ５０６に進む。

Ｓ５０４では、システム制御部５０は、Ｓ４１９と同様に、Ｓ５０３にて視点位置の変化を検出してから、Ｓ４０４にて注視時間の計測を開始した時点での注視位置に視点位置が戻るまでの時間が、所定の閾値以下であるか否かを判定する。視点位置が戻るまでの時間が所定の閾値以下であればＳ５０６に進み、そうでなければＳ５０５に進む。

Ｓ５０５では、システム制御部５０は、Ｓ４２０と同様に、測距点を非表示にする。このとき、システム制御部５０は、控えめな表示にしていた表示アイテム３０１を通常の表示に戻す。なお、Ｓ５０５の処理が終了すると、Ｓ４０２に進む。

Ｓ５０６では、システム制御部５０は、ＳＥＴボタン７５が押下されたか（選択操作が行われたか）否かを判定する。ＳＥＴボタン７５が押下されたと判定された場合にはＳ５０７に進み、そうでない場合にはＳ４０２に進む。

Ｓ５０７では、システム制御部５０は、システムタイマー５３による注視時間の計測を終了する。

Ｓ５０８では、システム制御部５０は、注視位置における表示アイテム３０１を選択する。

Ｓ５０９では、システム制御部５０は、Ｓ５０８にて選択された表示アイテム３０１のパラメータを変更する。例えば、表示アイテム３０１が太陽マーク３０１ａであれば、システム制御部５０は、ホワイトバランスの設定値を変更する。なお、パラメータを変更する処理は、撮影前の段階で事前に行われることが多く、即時性が求められないため、測距点を選択する動作よりも選択するために必要な注視時間を長くしている（優先度を低く設定している）。なお、Ｓ５０９では、システム制御部５０は、パラメータ自体を設定変更するのではなく、表示アイテム３０１のパラメータを変更するための設定変更画面をＥＶＦ２９に表示する（パラメータの設定状態に遷移する）ようにしてもよい。

なお、注視時間を計測している間には、注視位置（視点位置）が変化しているか否かが常に判定されていることがより望ましいため、Ｓ４０８ＮｏであればＳ４０６に戻ってもよい。また、同様に、Ｓ４１５ＮｏであればＳ４１３に戻ってもよい。また、Ｓ５０６にてＳＥＴボタン７５の押下がなかった場合（Ｓ５０６ＮＯの場合）には、Ｓ５０３に戻ってもよい。つまり、ＳＥＴボタン７５が押下されるか、または注視が中断されるまでＳ５０３，Ｓ５０４，Ｓ５０６の処理が繰り返し実行されてもよい。

以上によれば、表示対象に対して表示アイテムが重畳表示されている場合でも、ユーザーの視線入力に応じて、ユーザーが所望する操作を実行することが可能になる。

なお、本実施形態では、システム制御部５０は、注視時間が第１の設定時間以上になると、表示アイテムを控えめな表示にし、注視時間が第２の設定時間以上になると、表示アイテムを強調表示するように制御した。しかし、これに限らず、注視時間が第１の設定時間以上かつ第２の設定時間未満である場合と、注視時間が第２の設定時間以上である場合とで、表示アイテムが互いに異なる表示形態にされればよい。

また、ライブビュー画像に表示アイテムが重畳して表示される例を説明したが、エクセルなどの表に対して表示アイテムが重畳される例でも本実施形態は適用可能である。この場合には、システム制御部５０は、Ｓ４１２やＳ４２２において、測距点を表示する代わりに、注視位置にあるセルを強調表示してもよい。また、システム制御部５０は、Ｓ４１７において測距点を選択する代わりに、注視位置のセルの選択をしてもよい（注視位置のセルを、情報を入力する先として決定してもよい）。

また、表示アイテムは、テキストボックスであってもよい。この場合には、システム制御部５０は、Ｓ５０９において、パラメータを変更する代わりに、テキストボックスへのテキスト入力（文字入力）が可能な状態に遷移させる機能を実行してもよい。

なお、例えば、ライブビュー画像に重畳された表示アイテムが時計やページ番号を示すようなものであれば、当該表示アイテムの重畳領域に第２の設定時間以上の注視がされても、Ｓ５０８およびＳ５０９においてシステム制御部５０は何も実行しなくてよい。これは、時計やページ番号は、ユーザーに対して情報を提示することを役割としているため、選択して何かを実行することの必要性が高くないからである。

また、例えば、表示アイテムが撮影の実行を示すようなものであれば、当該表示アイテムの重畳領域に第１の設定時間以上の注視がされると、システム制御部５０は、選択操作に応じて、当該表示アイテムに対応する機能を実行してもよい。この場合には、当該重畳領域に対して第２の設定時間以上の注視がされないと、システム制御部５０は、選択操作に応じて、測距点の選択を行わない。これは、撮影の実行などは即時性が求められるため、測距点の選択よりも素早く実行されることが求められるからである。

また、本実施形態では、ライブビュー画像と表示アイテムの選択を例にして説明した。しかし、例えば、２以上の表示アイテムが重なって表示されている場合にも本実施形態は適用可能である。例えば、２つの表示アイテムの重畳領域に対して第１の設定時間以上の注視が行われた後に選択操作が行われれば一方の表示アイテムが選択されて、第２の設定時間以上の注視が行われた後に選択操作が行われれば他方の表示アイテムが選択されてもよい。

また、本実施形態では、ユーザーの使用状況を想定して、測距点の選択の方が表示アイテムの選択よりも選択に必要な注視時間が短く設定されているが、選択に必要な注視時間
の長さは、表示アイテムの選択の方が長くてもよい。

さらに、Ｓ４１２では、測距点の表示の処理を行っているが、注視個所の画像を拡大表示してもよいし、注視個所を強調させる処理を行ってもよい。また、Ｓ４１７では、測距点の選択ではなく、追尾対象の被写体の設定（選択）が行われてもよい。

なお、システム制御部５０が行うものとして説明した上述の各種制御は１つのハードウェアが行ってもよいし、複数のハードウェア（例えば、複数のプロセッサや回路）が処理を分担することで、装置全体の制御を行ってもよい。

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。さらに、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。

また、上述した実施形態においては、本発明をデジタルカメラ１００に適用した場合を例にして説明したが、これはこの例に限定されず、視線入力の位置に応じた処理を実行するである電子機器であれば適用可能である。すなわち、本発明は、パーソナルコンピュータやＰＤＡ、携帯電話端末や携帯型の画像ビューワ、ディスプレイを備えるプリンタ装置、デジタルフォトフレーム、音楽プレーヤー、ゲーム機、電子ブックリーダーなどに適用可能である。

また、撮像装置本体に限らず、有線または無線通信を介して撮像装置（ネットワークカメラを含む）と通信し、撮像装置を遠隔で制御する制御装置にも本発明を適用可能である。撮像装置を遠隔で制御する装置としては、例えば、スマートフォンやタブレットＰＣ、デスクトップＰＣなどの装置がある。制御装置側で行われた操作や制御装置側で行われた処理に基づいて、制御装置側から撮像装置に各種動作や設定を行わせるコマンドを通知することにより、撮像装置を遠隔から制御可能である。また、撮像装置で撮影したライブビュー画像を有線または無線通信を介して受信して制御装置側で表示できるようにしてもよい。

なお、上記の各実施形態の各機能部は、個別のハードウェアであってもよいし、そうでなくてもよい。２つ以上の機能部の機能が、共通のハードウェアによって実現されてもよい。１つの機能部の複数の機能のそれぞれが、個別のハードウェアによって実現されてもよい。１つの機能部の２つ以上の機能が、共通のハードウェアによって実現されてもよい。また、各機能部は、ＡＳＩＣ、ＦＰＧＡ、ＤＳＰなどのハードウェアによって実現されてもよいし、そうでなくてもよい。例えば、装置が、プロセッサと、制御プログラムが格納されたメモリ（記憶媒体）とを有していてもよい。そして、装置が有する少なくとも一部の機能部の機能が、プロセッサがメモリから制御プログラムを読み出して実行することにより実現されてもよい。

（その他の実施形態）
本発明は、上記の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００：デジタルカメラ、５０：システム制御部、１６０：視線検出部、２９：ＥＶＦ

Claims (20)

1. 表示手段を見るユーザーの視線による視線入力を受け付ける受付手段と、
   前記表示手段に、表示対象を表示するとともに、前記表示対象に重畳して表示アイテムを表示するように制御する表示制御手段と、
   前記表示アイテムが表示された第１の領域に対する前記視線入力による注視状態の継続時間が第１の時間に達する前に所定のトリガーがあっても、第１の機能と第２の機能のいずれも実行することなく、
   前記第１の領域に対する前記注視状態の継続時間が前記第１の時間以上かつ第２の時間未満である場合に前記所定のトリガーがあったことに応じて、前記視線入力による入力位置に基づく前記表示対象の一部を選択して前記第１の機能を実行するように制御し、
   前記第１の領域に対する前記注視状態の継続時間が前記第２の時間以上である場合に前記所定のトリガーがあったことに応じて、前記表示アイテムを選択して前記第２の機能を実行するように制御する制御手段と
   を有することを特徴とする電子機器。
2. 前記表示対象は、ライブビュー画像であり、
   前記第１の機能は、ＡＦ（オートフォーカス）と、ＡＦ対象位置の設定と、追尾対象の設定とのうち少なくともいずれかの機能である
   ことを特徴とする請求項１に記載の電子機器。
3. 前記第２の機能は、前記第１の領域に表示された表示アイテムに対応する撮影設定の設定変更または設定変更画面の表示である
   ことを特徴とする請求項２に記載の電子機器。
4. 前記表示対象は、表であり、
   前記第１の機能は、前記表のうちのセルの選択である
   ことを特徴とする請求項１に記載の電子機器。
5. 前記表示アイテムは、テキストボックスであり、
   前記第２の機能は、前記第１の領域に表示された前記テキストボックスへのテキスト入力が可能な状態への遷移である
   ことを特徴とする請求項４に記載の電子機器。
6. 領域に対する前記注視状態とは、ユーザーの前記視線入力による入力位置が当該領域に固定されている状態であり、
   前記ユーザーの前記視線入力による入力位置が当該領域から離れている時間があっても、当該時間が所定の閾値以内であれば、前記注視状態が継続しているとみなされる
   ことを特徴とする請求項１乃至５のいずれか１項に記載の電子機器。
7. 前記制御手段は、前記第１の領域に対する前記注視状態の継続時間が前記第１の時間に達する前に前記所定のトリガーがあった場合であっても、当該所定のトリガーに対応する処理を実行しない
   ことを特徴とする請求項１乃至６のいずれか１項に記載の電子機器。
8. 前記制御手段は、前記第１の領域に対する前記注視状態の継続時間が前記第１の時間に達する前に前記所定のトリガーがあった場合には、第３の機能を実行する
   ことを特徴とする請求項１乃至６のいずれか１項に記載の電子機器。
9. 前記第３の機能は、前記表示対象のうち前記視線入力による入力位置に対応する部分と
   、前記表示アイテムとの、いずれにもかかわらない機能である
   ことを特徴とする請求項８に記載の電子機器。
10. 前記第３の機能は、複数の設定項目の設定状態を確認することが可能な設定画面の表示である
    ことを特徴とする請求項８または９に記載の電子機器。
11. 前記所定のトリガーは、ユーザーが実行する所定の操作の検出である
    ことを特徴とする請求項１乃至１０のいずれか１項に記載の電子機器。
12. 前記所定のトリガーは、所定の音声の検出、目つむりに対応する状態の検出のいずれかである
    ことを特徴とする請求項１乃至１１のいずれか１項に記載の電子機器。
13. 前記表示制御手段は、前記表示対象に対して前記表示アイテムが前面に配置されるように前記表示手段を制御する
    ことを特徴とする請求項１乃至１２のいずれか１項に記載の電子機器。
14. 前記表示制御手段は、
    前記第１の領域に対する前記注視状態の継続時間が前記第１の時間に達する前には、前記表示アイテムを第１の表示形態で表示し、
    前記第１の領域に対する前記注視状態の継続時間が前記第１の時間以上かつ前記第２の時間未満である場合には、前記表示アイテムを第２の表示形態で表示するように前記表示手段を制御する
    ことを特徴とする請求項１乃至１３のいずれか１項に記載の電子機器。
15. 前記表示制御手段は、
    前記第１の領域に対する前記注視状態の継続時間が前記第１の時間に達する前には、前記表示アイテムを第１の表示形態で表示し、
    前記第１の領域に対する前記注視状態の継続時間が前記第２の時間以上となった場合には、前記表示アイテムを第３の表示形態で表示するように前記表示手段を制御する
    ことを特徴とする請求項１乃至１４のいずれか１項に記載の電子機器。
16. 前記制御手段は、前記表示対象に重畳された第２の表示アイテムが表示された第２の領域に対する前記注視状態の継続時間が前記第２の時間以上である場合には、前記所定のトリガーがあっても前記第２の表示アイテムを選択する機能を実行しない
    ことを特徴とする請求項１乃至１５のいずれか１項に記載の電子機器。
17. 前記制御手段は、
    前記表示対象に重畳された第３の表示アイテムが表示された第３の領域に対する前記注視状態の継続時間が前記第１の時間以上かつ第２の時間未満である場合には、前記所定のトリガーがあると、前記第３の表示アイテムを選択する機能を実行し、
    前記第３の領域に対する前記注視状態の継続時間が前記第２の時間以上である場合に前記所定のトリガーがあったことに応じて前記視線入力による入力位置に基づく前記表示対象の一部を選択して前記第１の機能を実行するように制御する
    ことを特徴とする請求項１乃至１６のいずれか１項に記載の電子機器。
18. 表示手段を見るユーザーの視線による視線入力を受け付ける受付工程と、
    前記表示手段に、表示対象を表示するとともに、前記表示対象に重畳して表示アイテムを表示するように制御する表示制御工程と、
    前記表示アイテムが表示された第１の領域に対する前記視線入力による注視状態の継続時間が第１の時間に達する前に所定のトリガーがあっても、第１の機能と第２の機能のいずれも実行することなく、
    前記第１の領域に対する前記注視状態の継続時間が前記第１の時間以上かつ第２の時間未満である場合に前記所定のトリガーがあったことに応じて、前記視線入力による入力位置に基づく前記表示対象の一部を選択して前記第１の機能を実行するように制御し、
    前記第１の領域に対する前記注視状態の継続時間が前記第２の時間以上である場合に前記所定のトリガーがあったことに応じて、前記表示アイテムを選択して前記第２の機能を実行するように制御する制御工程と
    を有することを特徴とする電子機器の制御方法。
19. コンピュータを、請求項１乃至１７のいずれか１項に記載された電子機器の各手段として機能させるためのプログラム。
20. コンピュータを、請求項１乃至１７のいずれか１項に記載された電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
    
    

Images