JP2016059634A - Electronic equipment and light irradiation device - Google Patents
Electronic equipment and light irradiation device Download PDFInfo
- Publication number
- JP2016059634A JP2016059634A JP2014190470A JP2014190470A JP2016059634A JP 2016059634 A JP2016059634 A JP 2016059634A JP 2014190470 A JP2014190470 A JP 2014190470A JP 2014190470 A JP2014190470 A JP 2014190470A JP 2016059634 A JP2016059634 A JP 2016059634A
- Authority
- JP
- Japan
- Prior art keywords
- light
- angle
- reflecting
- reflection
- reflection mirror
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Eye Examination Apparatus (AREA)
Abstract
Description
本発明は、電子機器及び光照射装置に関する。 The present invention relates to an electronic apparatus and a light irradiation apparatus.
ユーザに光を照射し、ユーザの眼に写る画像をカメラで撮像し、その撮像した画像を用いてユーザの視線を検出する技術が知られている。また、このような視線検出機能を搭載した機器が知られている（例えば、特許文献１参照）。例えば、図１に示すディスプレイを例に挙げると、ディスプレイ１００内の左右にＬＥＤ（Light Emitting Diode）２１０が配置され、左右のいずれかのＬＥＤ２１０を点灯させ、その光を使用してユーザの視線を検出する。
A technique is known in which light is emitted to a user, an image captured by the user's eyes is captured by a camera, and the user's line of sight is detected using the captured image. Devices equipped with such a line-of-sight detection function are known (see, for example, Patent Document 1). For example, taking the display shown in FIG. 1 as an example, LEDs (Light Emitting Diodes) 210 are arranged on the left and right sides of the
しかしながら、単一のＬＥＤ２１０での出力範囲は固定されている。よって、ユーザの視線を検出するための前提として、ユーザがＬＥＤ２１０の照射範囲内にいる必要がある。例えば、図１（ａ）及び図１（ｂ）に示すように、ユーザが、ディスプレイからａ〜ｂｃｍ離れ、かつ、台からｃ〜ｄｃｍ離れた斜線で示すＬＥＤ２１０の照射範囲内にいる必要がある。ユーザがＬＥＤ２１０の照射範囲外に移動した場合、カメラ２２０は、ユーザを捉えることができないため、ユーザの視線を検出できない結果となる。
However, the output range with a
そこで、一側面では、本発明は、対象物に追従して光を照射することを目的とする。 Therefore, in one aspect, an object of the present invention is to irradiate light following an object.
一つの案では、対象物に光を照射する電子機器であって、光を発光する発光部と、前記発光部が発光した光を第１の角度に調整された第１の反射面で反射し、該第１の反射面に対向する第２の反射面に照射させる第１の反射部と、前記第１の反射部の外側に設けられ、前記照射させた光を第２の角度に調整された前記第２の反射面で反射し、前記電子機器の前面から照射させる第２の反射部と、前記対象物に光が照射されているかを検出する検出部と、前記検出部の検出結果に応じて、前記第１の角度及び前記第２の角度の少なくともいずれかの角度を制御する制御部と、を有する、電子機器が提供される。 In one proposal, an electronic device that emits light to an object, the light emitting unit emitting light, and the light emitted from the light emitting unit reflected by a first reflecting surface adjusted to a first angle. A first reflecting portion for irradiating the second reflecting surface facing the first reflecting surface, and an outer side of the first reflecting portion, and the irradiated light is adjusted to a second angle. In addition, a second reflection unit that reflects on the second reflection surface and irradiates from the front surface of the electronic device, a detection unit that detects whether the object is irradiated with light, and a detection result of the detection unit Accordingly, an electronic apparatus is provided that includes a control unit that controls at least one of the first angle and the second angle.
一側面によれば、対象物に追従して光を照射することができる。 According to one aspect, light can be irradiated following the object.
以下、本発明の実施形態について添付の図面を参照しながら説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複した説明を省く。 Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings. In addition, in this specification and drawing, about the component which has the substantially same function structure, the duplicate description is abbreviate | omitted by attaching | subjecting the same code | symbol.
［ディスプレイの全体構成］
まず、本発明の一実施形態に係るディスプレイの全体構成について、図２を参照しながら説明する。図２は、一実施形態に係るディスプレイ１の全体構成の一例を示す。本実施形態では、電子機器の一例としてディスプレイ１を挙げて説明する。電子機器の他の例としては、スマートフォン、携帯電話、携帯情報端末、タブレット型端末、サイネージ等の機器が挙げられるが、これに限らず、いずれの電子機器にも適用可能である。
[Overall display configuration]
First, the overall configuration of a display according to an embodiment of the present invention will be described with reference to FIG. FIG. 2 shows an example of the overall configuration of the display 1 according to an embodiment. In the present embodiment, a display 1 will be described as an example of an electronic device. Other examples of the electronic device include devices such as a smartphone, a mobile phone, a portable information terminal, a tablet terminal, and a signage, but are not limited to this, and can be applied to any electronic device.
本実施形態にかかるディスプレイ１の前面には、表示部１０の下にＩＲカメラ２２が配置され、ＩＲカメラ２２の両側にて二つの光照射窓２５ａが形成されている。二つの光照射窓２５ａにはレンズ２５が嵌め込まれている。
On the front surface of the display 1 according to the present embodiment, an
ディスプレイ１には、レンズ２５の奥側に光照射装置２が内蔵されている。光照射装置２は、ユーザの視線を検出するためにユーザに追従して光を照射することが可能な装置である。
In the display 1, the
光照射装置２は、ＬＥＤ２１、中央反射ミラー２３、左右反射ミラー２４、中央調整機構２８及び左右調整機構２９を有する。
The
ディスプレイ１には、光照射装置２、ＩＲカメラ２２、レンズ２５の他、ＣＰＵ(Central Processing Unit)３０、入出力インターフェース３１、記憶装置４０、ネットワークインターフェース５０を有する。
In addition to the
ＬＥＤ２１は、光を発光する光源である。本実施形態では、４つのＬＥＤ２１を含むＬＥＤ照射板から光が発光される。ＬＥＤ２１から出力される光は赤外光であるが、可視光であってもよい。
The
ＩＲカメラ２２は、ディスプレイ１の前面を撮像する。ＩＲカメラ２２が撮像する対象物にユーザの眼球が含まれる場合、ＩＲカメラ２２は、網膜上の光の反射を捉え、眼球の瞳孔部分が他の部分よりも明るく写った画像を撮像する。ＩＲカメラ２２は、撮像した画像をＣＰＵ３０へ出力する。なお、ＩＲカメラ２２は、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などを用いた撮像装置である。
The
中央反射ミラー２３は、ＬＥＤ２１が発光した光を第１の角度に調整された第１の反射面で反射する。左右反射ミラー２４は、中央反射ミラー２３の両側に設けられ、中央反射ミラー２３で照射した光を第２の角度に調整された第２の反射面で反射する。ただし、左右反射ミラー２４は、中央反射ミラー２３の外側であって片側のみに設けられてもよい。
The central reflecting
レンズ２５は、左右反射ミラー２４で反射した光を入光する。光は、凸レンズに形成されたレンズ２５を介してディスプレイ１の前面に照射される。レンズ２５を介してディスプレイ１の前面から光を照射することで、照射する光の偏光方向の調整や照射する光が拡散しないようにすることができる。
The
中央調整機構２８は、中央反射ミラー２３に設けられた第１の反射面の第１の角度を調整する。左右調整機構２９は、左右反射ミラー２４に設けられた第２の反射面の第２の角度を調整する。左右調整機構２９は、後述される左調整機構２９Ｌ及び右調整機構２９Ｒから構成される。左右反射ミラー２４は、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒから構成される。
The
入出力インターフェース３１と一例としては、タッチパネルが挙げられる。ユーザは、表示部１０のタッチパネルにタッチすることで、入力操作が可能になる。入出力インターフェース３１は、キーパッドやマウスカーソルであってもよい。
An example of the input /
ＣＰＵ(Central Processing Unit)３０は、ＩＲカメラ２２により撮像された画像に応じてユーザの瞳孔を検出し、その検出結果に応じて中央反射ミラー２３の角度及び左右反射ミラー２４の角度の少なくともいずれかの角度を制御する。
A CPU (Central Processing Unit) 30 detects the user's pupil according to the image captured by the
記憶装置４０は、読み書き可能な不揮発性の半導体メモリを有する。記憶装置４０は、後述される視線検知処理、キャリブレーション処理及び瞳孔認識処理等の各種のアプリケーションプログラム及び各種のデータを記憶する。ＣＰＵ３０は、視線検知処理、キャリブレーション処理及び瞳孔認識処理等のアプリケーションプログラムを記憶装置４０から呼び出して実行する。
The
ネットワークインターフェース５０は、ディスプレイ１をネットワークに接続するインタフェースである。これにより、ディスプレイ１は、ネットワークインターフェース５０を介して他の機器とデータ通信を行うことができる。
The
［光照射装置の内部構成］
次に、光照射装置２の内部構成について、図３を参照しながら説明する。図３は、本実施形態にかかる光照射装置２の内部構成の一例を示す。光照射装置２は、ＬＥＤ照射板２０、ＬＥＤ２１、中央反射ミラー２３、左反射ミラー２４Ｌ、右反射ミラー２４Ｒ、左道光板２７Ｌ、右道光板２７Ｒ、中央調整機構２８、左調整機構２９Ｌ及び右調整機構２９Ｒを有する。
[Internal configuration of light irradiation device]
Next, the internal configuration of the
ＬＥＤ照射板２０は、光照射装置２の中央部に配置されている。ＬＥＤ照射板２０は、４つのＬＥＤ２１を２つずつ２段に配置し、所定の強度の光を発光する光源である。
The
中央反射ミラー２３は、ＬＥＤ照射板２０が発光した光を第１の角度に調整された第１の反射面で反射し、第１の反射面に対向する第２の反射面に照射させる。
The
左反射ミラー２４Ｌは、中央反射ミラー２３の左側に設けられ、照射させた光を第２の角度に調整された第２の反射面で反射し、レンズ２４Ｌを介してディスプレイ１の前面から照射させる。
The
例えば、図４（ａ）を参照すると、ＬＥＤ照射板２０の各ＬＥＤ２１から出力された光は、中央反射ミラー２３にて反射する。中央反射ミラー２３は、点Ｏ１を中心として回転可能である。中央反射ミラー２３において、光が反射する面を「第１の反射面」といい、第１の反射面の角度を「第１の角度」という。本実施形態では、図４（ａ）に示す第１の反射面の第１の角度を中央反射ミラー２３の「基準角度（０度）」とする。
For example, referring to FIG. 4A, the light output from each
左反射ミラー２４Ｌは、中央反射ミラー２３の左側に位置し、第１の反射面で反射した光が照射される。左反射ミラー２４Ｌは、照射させた光を第２の角度に調整された第２の反射面で反射し、レンズ２５Ｌに入光させる。図５に示すように、レンズ２５Ｌは、入光した光の偏光方向を調整し、光が拡散しないように光束を収束する。
The
左反射ミラー２４Ｌは、点Ｏ２を中心として回転可能である。左反射ミラー２４Ｌにおいて、光が反射する面を「第２の反射面」といい、第２の反射面の角度を「第２の角度」という。本実施形態では、図４（ａ）に示す第２の反射面の第２の角度を左反射ミラー２４Ｌの「基準角度（０度）」とする。
The
右反射ミラー２４Ｒは、中央反射ミラー２３の右側に位置し、第１の角度が図４（ａ）に示す「基準角度（０度）」に対して「９０度」回転したときの、図４（ｄ）に示す第１の反射面で反射した光が照射される。右反射ミラー２４Ｒは、照射させた光を第２の角度に調整された第２の反射面で反射し、レンズ２５Ｒを介してディスプレイ１の前面から照射させる。
The
なお、中央反射ミラー２３は、ＬＥＤ２１が発光した光を第１の角度に調整された第１の反射面で反射する第１の反射ミラーの一例である。左反射ミラー２４Ｌ及び右反射ミラー２４Ｒは、第１の反射ミラーの外側に設けられ、照射させた光を第２の角度に調整された第２の反射面で反射する第２の反射ミラーの一例である。
The
図４（ｄ）に示すように、右反射ミラー２４Ｒは、点Ｏ３を中心として回転可能である。右反射ミラー２４Ｒにおいても、左反射ミラー２４Ｌと同様に、光が反射する面を「第２の反射面」といい、第２の反射面の角度を「第２の角度」という。本実施形態では、図４（ｄ）に示す第２の反射面の第２の角度を右反射ミラー２４Ｒの「基準角度（０度）」とする。
As shown in FIG. 4D, the
図３に戻り、左道光板２７Ｌは、中央反射ミラー２３と左反射ミラー２４Ｌとの間に設けられ、中央反射ミラー２３で反射した光を左反射ミラー２４Ｌに導く。
Returning to FIG. 3, the left
右道光板２７Ｒは、中央反射ミラー２３と反射ミラー２４Ｒとの間に設けられ、中央反射ミラー２３で反射した光を左反射ミラー２４Ｒに導く。
The right
中央調整機構２８は、光が左反射ミラー２４Ｌ又は右反射ミラー２４Ｒの第２の反射面へ照射されるように第１の角度を調整する。中央調整機構２８が第１の角度を０度（基準角度）に調整したとき、光は、左反射ミラー２４Ｌに向けて照射され、左導光板２７Ｌを経由し左反射ミラー２４Ｌで反射後、レンズ２５Ｌを通してディスプレイ１の前面に照射される。中央調整機構２８が第１の角度を９０度に調整したとき、照射された光は右反射ミラー２４Ｒに向けて照射され、右導光板２７Ｒを経由し右反射ミラー２４Ｒで反射後、レンズ２５Ｒを通してディスプレイ１の前面に照射される。
The
図６（ａ）に示すように、中央調整機構２８は、回転軸２８ａと、回転軸２８ａの回りで中央反射ミラー２３と一体的に回転するプレート２８ｄと、３つの電磁石２８ｃとを有する。プレート２８ｄには、永久磁石２８ｂが取り付けられている。図６（ａ）では、中央調整機構２８は、コイル２８ｃに所定方向の電流を流し、電磁誘導を用いて生成される磁界に応じて永久磁石２８ｂの作用により、プレート２８ｄを右側のコイル２８ｃ又は左側のコイル２８ｃに向けて回転させる。コイル２８ｃが配置された位置により中央反射ミラー２３の第１の角度は、０度と９０度とで切り替えられる。中央調整機構２８は、中央反射ミラー２３を０度から９０度、９０度から０度に回転する際に磁極を切り替える。
As shown in FIG. 6A, the
図６（ｂ）に示すように、左調整機構２９Ｌは、回転軸２９ａと、回転軸２９ａの回りで左反射ミラー２４Ｌと一体的に回転するプレート２９ｄと、３つの電磁石２９ｃとを有する。プレート２９ｄには、永久磁石２９ｂが取り付けられている。図６（ｂ）では、左調整機構２９Ｌは、コイル２９ｃに所定方向の電流を流し、電磁誘導を用いて生成される磁界に応じて永久磁石２９ｂの作用により、プレート２９ｄを右側のコイル２９ｃ又は左側のコイル２９ｃに向けて回転させる。コイル２９ｃが配置された位置により左反射ミラー２４Ｌの第２の角度は、０度と１５度（−１５度）とで切り替えられる。
As shown in FIG. 6B, the
これにより、左調整機構２９Ｌは、第２の角度を０度から１５度に調整、１５度から−１５度に調整、−１５度から０度に調整することができる。右調整機構２９Ｒの構成は、左調整機構２９Ｌと同様であるため説明は省略する。
Accordingly, the
中央調整機構２８は、第１の角度を調整する第１の調整機構の一例であり、左調整機構２９Ｌ及び右調整機構２９Ｒは、第２の角度を調整する第２の調整機構の一例である。なお、中央調整機構２８、左調整機構２９Ｌ及び右調整機構２９Ｒは、モータにより中央反射ミラー２３、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒを回転させてもよい。
The
以上、光照射装置２の内部構成について説明した。かかる構成によれば、中央調整機構２８により中央反射ミラー２３の角度を調整することで、一つのＬＥＤ照射板２０から左反射ミラー２４Ｌと右反射ミラー２４Ｒとに光を照射することができる。また、左調整機構２９Ｌは、左反射ミラー２４Ｌを、例えば図４（ａ）に示す０度に対して、図４（ｂ）に示す内側に１５度と、図４（ｃ）に示す外側に１５度というように段階的に調節することができる。右反射ミラー２４Ｒも同様に角度を段階的に調整することができる。これにより、光の照射角度に幅を持たせ、ユーザの横移動や奥移動も追従して、ユーザに光を照射することができる。これにより、視線検出時の操作性を高めることができる。また、導光板２７Ｌ，２７Ｒとレンズ２５により、光の出力を低下させずにディスプレイ１の前面から光を照射することができる。
The internal configuration of the
また、本実施形態にかかる光照射装置２によれば、中央調整機構２８により中央反射ミラー２３の角度を調整することで、左反射ミラー２４Ｌ又は右反射ミラー２４Ｒに光を照射するように制御できる。よって、本実施形態にかかる光照射装置２では、左反射ミラー２４Ｌに光を照射するＬＥＤ照射板と、右反射ミラー２４Ｒに光を照射するＬＥＤ照射板とを別々に配置する必要がない。これにより、ディスプレイ１の前面から出力する光の強度を低下させずに光ＬＥＤの個数を減らすことができ、消費電力を低減することができる。
Moreover, according to the
［光照射装置の機能構成］
次に、一実施形態に係る光照射装置２の機能構成について、図７を参照しながら説明する。図７は、一実施形態にかかる光照射装置２の機能構成の一例を示す。光照射装置２は、発光部３１、第１の反射部３２、第２の反射部３３、検出部３４、制御部３５及び撮像部３６を有する。
[Functional configuration of light irradiation device]
Next, a functional configuration of the
発光部３１は、光を発光する。ＬＥＤ照射板２０は、光を発光する発光部(光源)の一例である。
The
第１の反射部３２は、発光部３１が発光した光を第１の角度に調整された第１の反射面で反射し、該第１の反射面に対向する第２の反射面に照射させる。第２の反射部３３は、照射させた光を第２の角度に調整された第２の反射面で反射し、ディスプレイ１の前面から照射させる。
The first reflecting
中央反射ミラー２３は、発光部３１が発光した光を左反射ミラー２４Ｌ及び右反射ミラー２４Ｒに向けて反射する第１の反射部の一例である。左反射ミラー２４Ｌ及び右反射ミラー２４Ｒは、入射された光をディスプレイ１の前面から投射するために、ディスプレイ１の前面に設けられたレンズ２５に向けて反射する第２の反射部の一例である。
The central reflecting
撮像部３６は、ＬＥＤから出力された光を用いてユーザの眼を撮像する。ＩＲカメラ２２は、ユーザの眼を撮像する撮像部の一例である。
The
検出部３４は、レンズ２５から投射された光が対象物に照射されているかを検出する。本実施形態では、対象物はユーザの眼である。ただし、対象物は、ユーザの眼に限られず、例えばユーザの顔、ユーザの指紋、ユーザの身体、ユーザ以外の物体等であってもよい。検出部３４は、光を照射した眼に写る画像を用いてユーザの視線を検出する。眼球の瞳孔部分は、他の部分よりも明るく写る。これにより、検出部３４は、取得した画像から眼球の瞳孔部分を検出することができる。
The
制御部３５は、検出部３４の検出結果に応じて、第１の角度及び第２の角度の少なくともいずれかの角度を制御する。
The
［視線検知処理］
次に、本実施形態に係る視線検知処理について図８を参照しながら説明する。図８は、一実施形態に係る視線検知処理を示したフローチャートである。視線検知処理は、予め定められた時間経過後に開始してもよいし、ＩＲカメラ２２がディスプレイ１の前面を撮像するタイミングに応じて開始してもよい。
[Gaze detection processing]
Next, the line-of-sight detection process according to the present embodiment will be described with reference to FIG. FIG. 8 is a flowchart showing a line-of-sight detection process according to an embodiment. The line-of-sight detection process may be started after a predetermined time has elapsed, or may be started in accordance with the timing at which the
視線検知処理では、まず、キャリブレーション処理が開始される（ステップＳ１０）。
（キャリブレーション処理）
図９を参照しながら、キャリブレーション処理を説明する。キャリブレーション処理では、まず、発光部３１が、ＬＥＤ２１の照射を開始する（ステップＳ２１）。制御部３５は、照射されたＬＥＤの光を、中央反射ミラー２３に反射させ、左反射ミラー２４Ｌに照射させる（ステップＳ２２）。次に、制御部３５は、照射された光を、左反射ミラー２４Ｌに反射させ、ディスプレイ１の光照射窓２５ａに設けられたレンズ２５を介してディスプレイ１の前面に照射させる（ステップＳ２３）。
In the line-of-sight detection process, first, a calibration process is started (step S10).
(Calibration process)
The calibration process will be described with reference to FIG. In the calibration process, first, the
次に、検出部３４は、ＩＲカメラ２２で撮像した画像に基づき、ユーザの瞳孔を検出できるかを判定する（ステップ２４）。検出部３４がステップＳ２４において「ＹＥＳ」と判定した場合、制御部３５は、視線による制御を開始する（ステップＳ２５）。視線による制御の一例としては、視線の移動に応じたマウスカーソルの位置制御等が挙げられる。
Next, the
他方、検出部３４がステップＳ２４において「ＮＯ」と判定した場合、制御部３５は、中央反射ミラー２３を９０度回転させるように制御する（ステップ２６）。中央調整機構２８は、これに応じて中央反射ミラーを９０度回転させ、ステップＳ２１に戻る。なお、中央反射ミラー２３がすでに９０度回転済みの場合、本処理を終了する。
On the other hand, when the
次に、発光部３１が、再びＬＥＤ２１の照射を開始する（ステップＳ２１）。制御部３５は、照射されたＬＥＤの光を、中央反射ミラー２３に反射させ、右反射ミラー２４Ｒに照射させる（ステップＳ２２）。次に、制御部３５は、照射された光を、右反射ミラー２４Ｒに反射させ、レンズ２５を介してディスプレイ１の前面に照射させる（ステップＳ２３）。
Next, the
次に、検出部３４は、ＩＲカメラ２２で撮像した画像に基づき、ユーザの瞳孔を検出できるかを判定する（ステップ２４）。検出部３４がステップＳ２４において「ＹＥＳ」と判定した場合、制御部３５は、視線による制御を開始する（ステップＳ２５）。他方、検出部３４がステップＳ２４において「ＮＯ」と判定した場合、中央反射ミラーはすでに９０度回転済みであるため、本処理を終了し、図８に戻る。
Next, the
図８のステップＳ２０において、発光部３１は、ＬＥＤ２１の照射を開始する。制御部３５は、照射されたＬＥＤの光を、中央反射ミラー２３に反射させ、左反射ミラー２４Ｌに照射させる（ステップＳ３０）。次に、制御部３５は、照射された光を、左反射ミラー２４Ｌに反射させ、レンズ２５を介してディスプレイ１の前面に照射させる（ステップＳ４０）。次に、瞳孔認識処理が実行される（ステップＳ５０）。
（瞳孔認識処理）
図１０を参照しながら、瞳孔認識処理を説明する。検出部３４は、ディスプレイ１の光照射窓２５ａから照射された光が眼から反射しているかを判定する（ステップＳ５１）。具体的には、検出部３４は、ＩＲカメラ２２が撮像した画像に基づき、眼球の瞳孔部分が他の部分よりも明るく写っているかを判定する。検出部３４は、前記判定により画像にユーザの眼が写っていないと判定した場合、本処理を終了する。
In step S <b> 20 of FIG. 8, the
(Pupil recognition process)
The pupil recognition process will be described with reference to FIG. The
他方、検出部３４は、前記判定により画像にユーザの眼が写っていると判定した場合、画像中の反射された部分の情報から眼の位置を認識する（ステップＳ５２）。次に、検出部３４は、認識した眼の位置から瞳孔の位置を算出する（ステップＳ５３）。次に、検出部３４は、検出した眼の瞳孔位置を基準座標に定め（ステップＳ５４）、本処理を終了し、図８に戻る。
On the other hand, when it is determined that the user's eyes are reflected in the image by the determination, the
図８のステップＳ６０において、検出部３４は、ＩＲカメラ２２で撮像した画像に基づき、ユーザの瞳孔を検出できるかを判定する。検出部３４がステップＳ６０において「ＹＥＳ」と判定した場合、制御部３５は、視線による制御を開始する（ステップＳ７０）。他方、検出部３４がステップＳ６０において「ＮＯ」と判定した場合、制御部３５は、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒはともに内側又は外側に回転済みかを判定する（ステップＳ６１）。制御部３５がステップＳ６１において「ＹＥＳ」と判定した場合、ステップＳ１０に戻り、ステップＳ１０以後の処理を繰り返す。
In step S <b> 60 of FIG. 8, the
一方、制御部３５がステップＳ６１において「ＮＯ」と判定した場合、制御部３５は、左反射ミラー２４Ｌが内側に回転済みかを判定する（ステップＳ６２）。この時点では、図４（ａ）に示すように、左反射ミラー２４Ｌは基準角度０度に制御され、回転していない。よって、制御部３５はステップＳ６２において「ＮＯ」と判定し、左反射ミラー２４Ｌを内側に１５度回転するように制御する（ステップＳ６３）。左調整機構２９Ｌは、これに応じて左反射ミラー２４Ｌを内側に１５度回転させる。この時点では、図４（ｂ）に示すように、制御部３５は、レンズ２５を介してディスプレイ１の前面に光を照射させる（ステップＳ４０）。次に、瞳孔認識処理が実行される（ステップＳ５０）。次に、検出部３４は、ＩＲカメラ２２で撮像した画像に基づき、ユーザの瞳孔を検出できるかを判定する（ステップＳ６０）。検出部３４がステップＳ６０において「ＹＥＳ」と判定した場合、制御部３５は、視線による制御を開始する（ステップＳ７０）。
On the other hand, when the
他方、検出部３４がステップＳ６０において「ＮＯ」と判定した場合、制御部３５は、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒはともに内側又は外側に回転済みかを判定する（ステップＳ６１）。この時点では、右反射ミラー２４Ｒは回転していない。よって、制御部３５はステップＳ６１において「ＮＯ」と判定し、左反射ミラー２４Ｌが内側に回転済みかを判定する（ステップＳ６２）。この時点では、図４（ｂ）に示すように、左反射ミラー２４Ｌは内側に回転済みである。よって、制御部３５はステップＳ６２において「ＹＥＳ」と判定し、左反射ミラー２４Ｌが外側に回転済みかを判定する（ステップＳ６４）。この時点では、左反射ミラー２４Ｌは外側に回転していない。よって、制御部３５はステップＳ６４において「ＮＯ」と判定し、左反射ミラー２４Ｌを外側に３０度回転するように制御する（ステップＳ６５）。左調整機構２９Ｌは、これに応じて左反射ミラー２４Ｌを外側に３０度回転させる。これにより、図４（ｃ）に示すように、制御部３５は、レンズ２５を介してディスプレイ１の前面に光を照射させる（ステップＳ４０）。次に、瞳孔認識処理が実行される（ステップＳ５０）。次に、検出部３４は、ＩＲカメラ２２で撮像した画像に基づき、ユーザの瞳孔を検出できるかを判定する（ステップＳ６０）。検出部３４がステップＳ６０において「ＹＥＳ」と判定した場合、制御部３５は、視線による制御を開始する（ステップＳ７０）。
On the other hand, when the
他方、検出部３４がステップＳ６０において「ＮＯ」と判定した場合、制御部３５は、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒはともに内側又は外側に回転済みかを判定する（ステップＳ６１）。この時点では、左反射ミラー２４Ｌは内側及び外側に回転済みであり、右反射ミラー２４Ｒは回転していない。よって、制御部３５はステップＳ６１において「ＮＯ」と判定し、左反射ミラー２４Ｌが内側に回転済みかの判定（ステップＳ６２）、及び左反射ミラー２４Ｌが外側に回転済みかの判定（ステップＳ６４）において、いずれも「ＹＥＳ」と判定する。次に、ステップＳ６６において、左反射ミラー２４Ｌを基準角度０度に戻し、中央反射ミラー２３を９０度回転するように制御する。左調整機構２９Ｌは、これに応じて左反射ミラー２４Ｌを基準角度０度に戻し、中央調整機構２８は、中央反射ミラー２３を９０度回転させる。
On the other hand, when the
この結果、図４（ｄ）に示すように、制御部３５は、レンズ２５を介してディスプレイ１の前面に光を照射させる（ステップＳ４０）。次に、瞳孔認識処理が実行される（ステップＳ５０）。次に、検出部３４は、ＩＲカメラ２２で撮像した画像に基づき、ユーザの瞳孔を検出できるかを判定する（ステップＳ６０）。検出部３４がステップＳ６０において「ＹＥＳ」と判定した場合、制御部３５は、視線による制御を開始する（ステップＳ７０）。
As a result, as shown in FIG. 4D, the
他方、検出部３４がステップＳ６０において「ＮＯ」と判定した場合、制御部３５は、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒはともに内側又は外側に回転済みかを判定する（ステップＳ６１）。この時点では、左反射ミラー２４Ｌは内側及び外側に回転済みであり、右反射ミラー２４Ｒは回転していない。よって、制御部３５はステップＳ６１において「ＮＯ」と判定し、右反射ミラー２４Ｒが内側に回転済みかを判定し（ステップＳ６２）、ステップＳ６２において「ＮＯ」と判定する。次に、制御部３５は、右反射ミラー２４Ｒを内側に１５度回転するように制御する（ステップＳ６３）。右調整機構２９Ｒは、これに応じて右反射ミラー２４Ｒを内側に１５度回転させる。制御部３５は、この状態で光をディスプレイ１の前面に照射する（ステップＳ４０）。その後、瞳孔認識処理が実行され（ステップＳ５０）、検出部３４が、ユーザの瞳孔を検出できるかを判定する（ステップＳ６０）。検出部３４がユーザの瞳孔を検出できると判定した場合、制御部３５は、視線による制御を開始する（ステップＳ７０）。
On the other hand, when the
他方、検出部３４がステップＳ６０においてユーザの瞳孔を検出できないと判定した場合、制御部３５は、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒはともに内側又は外側に回転済みかを判定する（ステップＳ６１）。この時点では、右反射ミラー２４Ｒは外側に回転していない。よって、制御部３５はステップＳ６１において「ＮＯ」と判定し、右反射ミラー２４Ｒが内側に回転済みかを判定する（ステップＳ６２）。この時点では、右反射ミラー２４Ｒは内側に回転済みである。よって、制御部３５はステップＳ６２において「ＹＥＳ」と判定し、右反射ミラー２４Ｒが外側に回転済みかを判定し（ステップＳ６４）、ステップＳ６４において「ＮＯ」と判定し、右反射ミラー２４Ｒを外側に３０度回転するように制御する（ステップＳ６５）。右調整機構２９Ｒは、これに応じて右反射ミラー２４Ｒを外側に３０度回転させる。制御部３５は、この状態で光をディスプレイ１の前面に照射する（ステップＳ４０）。その後、瞳孔認識処理が実行され（ステップＳ５０）、検出部３４が、ユーザの瞳孔を検出できるかを判定する（ステップＳ６０）。検出部３４がユーザの瞳孔を検出できると判定した場合、制御部３５は、視線による制御を開始する（ステップＳ７０）。
On the other hand, when the
他方、検出部３４がステップＳ６０においてユーザの瞳孔を検出できないと判定した場合、制御部３５は、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒはともに内側又は外側に回転済みかを判定する（ステップＳ６１）。この時点では、左反射ミラー２４Ｌ及び右反射ミラー２４Ｒはともに内側又は外側に回転済みである。よって、制御部３５はステップＳ６１において「ＹＥＳ」と判定する。なお、この時点では、中央反射ミラー２３は９０度回転済みである。このように、制御部３５がステップＳ６１において「ＹＥＳ」と判定し、かつ、中央反射ミラー２３は９０度回転済みであると判定した場合、本処理を終了する。
On the other hand, when the
以上に説明したように、一実施形態に係る視線検知処理によれば、制御部３５により、中央反射ミラー２３の角度を０度と９０度とで切り替えることで、左反射ミラー２４Ｌと右反射ミラー２４Ｒとに光を照射することができる。
As described above, according to the line-of-sight detection processing according to the embodiment, the
また、制御部３５により、左反射ミラー２４Ｌ又は右反射ミラー２４Ｒを、０度、１５度、−１５度というように段階的に調節することで、光の照射角度に幅を持たせ、ユーザの横移動や奥移動も追従して、ユーザに光を照射することができる。この結果、従前はユーザがディスプレイ１の前面の固定領域にいないとユーザを認識できなかったことに対して、本実施形態では、ディスプレイ１の前面のより広い範囲でユーザを認識でき、これにより、視線検出時の操作性を高めることができる。なお、左反射ミラー２４Ｌ又は右反射ミラー２４Ｒの角度は、上記０度、１５度、−１５度の３つの角度に限られず、多様な角度で多段に制御することができる。
In addition, the
以上、電子機器及び光照射装置を上記実施形態により説明した。しかしながら、本発明にかかる電子機器及び光照射装置は上記実施形態に限定されるものではなく、本発明の範囲内で種々の変形及び改良が可能である。 As described above, the electronic apparatus and the light irradiation apparatus have been described according to the above embodiment. However, the electronic apparatus and the light irradiation apparatus according to the present invention are not limited to the above-described embodiments, and various modifications and improvements can be made within the scope of the present invention.
以上の説明に関し、更に以下の項を開示する。
（付記１）
対象物に光を照射する電子機器であって、
光を発光する発光部と、
前記発光部が発光した光を第１の角度に調整された第１の反射面で反射し、該第１の反射面に対向する第２の反射面に照射させる第１の反射部と、
前記第１の反射部の外側に設けられ、前記照射させた光を第２の角度に調整された前記第２の反射面で反射し、前記電子機器の前面から照射させる第２の反射部と、
前記対象物に光が照射されているかを検出する検出部と、
前記検出部の検出結果に応じて、前記第１の角度及び前記第２の角度の少なくともいずれかの角度を制御する制御部と、
を有する、電子機器。
（付記２）
前記第２の反射部は、前記第１の反射部の両側に設けられ、
前記制御部は、前第１の角度を調整し、光の照射方向を前記第２の反射部の一方の第２の反射面から他方の第２の反射面へ切り替える、
付記１に記載の電子機器。
（付記３）
電子機器の前面から光を照射する光照射装置であって、
光を発光する発光部と、
前記発光部が発光した光を第１の角度に調整された第１の反射面で反射し、該第１の反射面に対向する第２の反射面に照射させる第１の反射ミラーと、
前記第１の反射ミラーの外側に設けられ、前記照射させた光を第２の角度に調整された前記第２の反射面で反射し、前記電子機器の前面から照射させる第２の反射ミラーと、
前記第１の角度を調整する第１の調整機構と、
前記第２の角度を調整する第２の調整機構と、
を有する、光照射装置。
（付記４）
前記第２の反射ミラーは、前記第１の反射ミラーの両側に設けられ、
前記第１の調整機構は、光が前記第２の反射ミラーの一方又は他方の第２の反射面へ照射されるように前記第１の角度を調整する、
付記３に記載の電子機器。
Regarding the above description, the following items are further disclosed.
(Appendix 1)
An electronic device that emits light to an object,
A light emitting unit that emits light;
A first reflecting portion that reflects light emitted from the light emitting portion at a first reflecting surface adjusted to a first angle and irradiates a second reflecting surface facing the first reflecting surface;
A second reflection unit provided outside the first reflection unit, wherein the irradiated light is reflected by the second reflection surface adjusted to a second angle and is irradiated from the front surface of the electronic device; ,
A detection unit for detecting whether the object is irradiated with light;
A control unit that controls at least one of the first angle and the second angle according to a detection result of the detection unit;
Having an electronic device.
(Appendix 2)
The second reflecting part is provided on both sides of the first reflecting part,
The controller adjusts the front first angle and switches the light irradiation direction from one second reflecting surface of the second reflecting unit to the other second reflecting surface.
The electronic device according to attachment 1.
(Appendix 3)
A light irradiation device that emits light from the front surface of an electronic device,
A light emitting unit that emits light;
A first reflecting mirror that reflects the light emitted from the light emitting unit on a first reflecting surface adjusted to a first angle and irradiates the second reflecting surface facing the first reflecting surface;
A second reflection mirror provided outside the first reflection mirror, wherein the irradiated light is reflected by the second reflection surface adjusted to a second angle and irradiated from the front surface of the electronic device; ,
A first adjustment mechanism for adjusting the first angle;
A second adjustment mechanism for adjusting the second angle;
A light irradiation device.
(Appendix 4)
The second reflection mirror is provided on both sides of the first reflection mirror,
The first adjustment mechanism adjusts the first angle so that light is applied to one or the other second reflection surface of the second reflection mirror.
The electronic device according to attachment 3.
１：ディスプレイ
２：光照射装置
２０：ＬＥＤ照射板
２１：ＬＥＤ
２２：ＩＲカメラ
２３：中央反射ミラー
２４Ｌ：左反射ミラー
２４Ｒ：右反射ミラー
２５：レンズ
２７Ｌ：左道光板
２７Ｒ：右道光板
２８：中央調整機構
２９Ｌ：左調整機構
２９Ｒ：右調整機構
３１：発光部
３２：第１の反射部
３３：第２の反射部
３４：検出部
３５：制御部
３６：撮像部
1: Display 2: Light irradiation device 20: LED irradiation plate 21: LED
22: IR camera 23:
Claims (3)
光を発光する発光部と、
前記発光部が発光した光を第１の角度に調整された第１の反射面で反射し、該第１の反射面に対向する第２の反射面に照射させる第１の反射部と、
前記第１の反射部の外側に設けられ、前記照射させた光を第２の角度に調整された前記第２の反射面で反射し、前記電子機器の前面から照射させる第２の反射部と、
前記対象物に光が照射されているかを検出する検出部と、
前記検出部の検出結果に応じて、前記第１の角度及び前記第２の角度の少なくともいずれかの角度を制御する制御部と、
を有する、電子機器。 An electronic device that emits light to an object,
A light emitting unit that emits light;
A first reflecting portion that reflects light emitted from the light emitting portion at a first reflecting surface adjusted to a first angle and irradiates a second reflecting surface facing the first reflecting surface;
A second reflection unit provided outside the first reflection unit, wherein the irradiated light is reflected by the second reflection surface adjusted to a second angle and is irradiated from the front surface of the electronic device; ,
A detection unit for detecting whether the object is irradiated with light;
A control unit that controls at least one of the first angle and the second angle according to a detection result of the detection unit;
Having an electronic device.
前記制御部は、前第１の角度を調整し、光の照射方向を前記第２の反射部の一方の第２の反射面から他方の第２の反射面へ切り替える、
請求項１に記載の電子機器。 The second reflecting part is provided on both sides of the first reflecting part,
The controller adjusts the front first angle and switches the light irradiation direction from one second reflecting surface of the second reflecting unit to the other second reflecting surface.
The electronic device according to claim 1.
光を発光する発光部と、
前記発光部が発光した光を第１の角度に調整された第１の反射面で反射し、該第１の反射面に対向する第２の反射面に照射させる第１の反射ミラーと、
前記第１の反射ミラーの外側に設けられ、前記照射させた光を第２の角度に調整された前記第２の反射面で反射し、前記電子機器の前面から照射させる第２の反射ミラーと、
前記第１の角度を調整する第１の調整機構と、
前記第２の角度を調整する第２の調整機構と、
を有する、光照射装置。 A light irradiation device that emits light from the front surface of an electronic device,
A light emitting unit that emits light;
A first reflecting mirror that reflects the light emitted from the light emitting unit on a first reflecting surface adjusted to a first angle and irradiates the second reflecting surface facing the first reflecting surface;
A second reflection mirror provided outside the first reflection mirror, wherein the irradiated light is reflected by the second reflection surface adjusted to a second angle and irradiated from the front surface of the electronic device; ,
A first adjustment mechanism for adjusting the first angle;
A second adjustment mechanism for adjusting the second angle;
A light irradiation device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014190470A JP2016059634A (en) | 2014-09-18 | 2014-09-18 | Electronic equipment and light irradiation device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014190470A JP2016059634A (en) | 2014-09-18 | 2014-09-18 | Electronic equipment and light irradiation device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2016059634A true JP2016059634A (en) | 2016-04-25 |
Family
ID=55796526
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014190470A Pending JP2016059634A (en) | 2014-09-18 | 2014-09-18 | Electronic equipment and light irradiation device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2016059634A (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010511281A (en) * | 2006-11-29 | 2010-04-08 | トビイ テクノロジー エービー | Target tracking illumination |
| JP2010271663A (en) * | 2009-05-25 | 2010-12-02 | Hoya Corp | Electrostatically-driven optical scanner |
-
2014
- 2014-09-18 JP JP2014190470A patent/JP2016059634A/en active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010511281A (en) * | 2006-11-29 | 2010-04-08 | トビイ テクノロジー エービー | Target tracking illumination |
| JP2010271663A (en) * | 2009-05-25 | 2010-12-02 | Hoya Corp | Electrostatically-driven optical scanner |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10928904B1 (en) | User recognition and gaze tracking in a video system | |
| US8831295B2 (en) | Electronic device configured to apply facial recognition based upon reflected infrared illumination and related methods | |
| CN107480589B (en) | Infrared light source assembly and electronic device | |
| US10306209B2 (en) | Illuminator for camera system having three dimensional time-of-flight capture with movable mirror element | |
| US20170061210A1 (en) | Infrared lamp control for use with iris recognition authentication | |
| EP3238432B1 (en) | Integrated camera system having two dimensional image capture and three dimensional time-of-flight capture with movable illuminated region of interest | |
| US10318806B2 (en) | Method and device for irradiating light for photographing iris | |
| US20210201021A1 (en) | User recognition and gaze tracking in a video system | |
| US20180173980A1 (en) | Method and device for face liveness detection | |
| US11187967B2 (en) | Fill light device, method for controlling fill light device, and computer storage medium | |
| US20160162039A1 (en) | Method and system for touchless activation of a device | |
| TWI688814B (en) | Flashlight module, electronic device with the flashlight module, and method for controlling the flashlight module | |
| JP2019512847A (en) | Adaptive lighting system for mirror components and method of controlling an adaptive lighting system | |
| EP3143545A1 (en) | Electronic device and method for controlling access to same | |
| JP2018124733A5 (en) | ||
| KR20150033572A (en) | Tracking optics system for a mobile device | |
| JP2005269891A (en) | Electronic device control and power management using eye detection | |
| US11687635B2 (en) | Automatic exposure and gain control for face authentication | |
| US20210110523A1 (en) | Specular reflection reduction using polarized light sources | |
| US20170019577A1 (en) | Safety circuit for infrared and laser imaging devices | |
| US20170308763A1 (en) | Multi-modality biometric identification | |
| KR20150028430A (en) | Iris recognized system for automatically adjusting focusing of the iris and the method thereof | |
| JP2018085579A (en) | Imaging apparatus, control method, and information processing program | |
| JP2016059634A (en) | Electronic equipment and light irradiation device | |
| US10629208B2 (en) | Video communication method and robot for implementing the method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170605 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180530 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180605 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20180706 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20180713 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20180717 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20181204 |