[go: up one dir, main page]

JP5895426B2 - Display device - Google Patents

Display device Download PDF

Info

Publication number
JP5895426B2
JP5895426B2 JP2011214702A JP2011214702A JP5895426B2 JP 5895426 B2 JP5895426 B2 JP 5895426B2 JP 2011214702 A JP2011214702 A JP 2011214702A JP 2011214702 A JP2011214702 A JP 2011214702A JP 5895426 B2 JP5895426 B2 JP 5895426B2
Authority
JP
Japan
Prior art keywords
display
display device
value
illuminance sensor
person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011214702A
Other languages
Japanese (ja)
Other versions
JP2013074613A (en
JP2013074613A5 (en
Inventor
正哲 菊地
正哲 菊地
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2011214702A priority Critical patent/JP5895426B2/en
Publication of JP2013074613A publication Critical patent/JP2013074613A/en
Publication of JP2013074613A5 publication Critical patent/JP2013074613A5/ja
Application granted granted Critical
Publication of JP5895426B2 publication Critical patent/JP5895426B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Liquid Crystal Display Device Control (AREA)
  • Television Receiver Circuits (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Description

本発明は表示装置に関する。   The present invention relates to a display device.

一般にデジタルフォトフレームやテレビ等の表示装置において、見やすさのため環境に合わせて表示を変更する技術が知られている。例えば液晶ディスプレイを利用した表示装置の場合、例えば照度センサを利用して当該表示装置の設置環境の明るさの測定を行い、測定された明るさに応じて液晶ディスプレイのバックライトの輝度制御を行う技術が知られている。例えば特許文献1には、天候と周囲環境の明るさと観察位置とによって、バックライトの明るさや入力映像の画質を補正する表示装置に係る技術が開示されている。   In general, in a display device such as a digital photo frame or a television, a technique for changing the display according to the environment is known for ease of viewing. For example, in the case of a display device using a liquid crystal display, the brightness of the installation environment of the display device is measured using, for example, an illuminance sensor, and the brightness of the backlight of the liquid crystal display is controlled according to the measured brightness. Technology is known. For example, Patent Document 1 discloses a technique related to a display device that corrects the brightness of a backlight and the image quality of an input video according to the weather, the brightness of the surrounding environment, and the observation position.

特開2007−043533号公報JP 2007-043533 A

上記のような表示装置のうちで照度センサを有する表示装置においては、当該照度センサの位置に応じて次のような課題がある。   Among display devices as described above, a display device having an illuminance sensor has the following problems depending on the position of the illuminance sensor.

表示装置の表示面の裏面側に照度センサを配置した場合、例えば当該表示装置が出窓に設置されると、表示面が向いている部屋の中が比較的暗くても出窓から入射する光によって周囲は明るいと当該表示装置は誤判断することがある。また例えば当該表示装置が棚の中に設置されると、表示面が向いている部屋の中が比較的明るくても棚の中が暗いため周囲は暗いと当該表示装置は誤判断することがある。   When the illuminance sensor is arranged on the back side of the display surface of the display device, for example, when the display device is installed on the bay window, the surrounding light is incident by the light incident from the bay window even if the room facing the display surface is relatively dark. If the display is bright, the display device may misjudge. Further, for example, when the display device is installed in a shelf, the display device may erroneously determine that the surrounding area is dark because the inside of the shelf is dark even if the room facing the display surface is relatively bright. .

また表示装置の表示面側に照度センサを配置した場合、当該表示装置は例えば部屋の中の明るさを正確に判断しやすい。その反面、観察者が近寄って覗き込むように当該表示装置を観察する場合、当該表示装置がその観察者の影に入ってしまい部屋が暗くなったと当該表示装置は誤判断することがある。   When an illuminance sensor is arranged on the display surface side of the display device, the display device can easily determine, for example, the brightness in the room accurately. On the other hand, when observing the display device so that an observer approaches and looks into it, the display device may erroneously determine that the display device has entered the shadow of the observer and the room has become dark.

そこで本発明は周囲の明るさによって表示を調整する誤判断が少ない表示装置を提供することを目的とする。   SUMMARY OF THE INVENTION Accordingly, an object of the present invention is to provide a display device with less misjudgment of adjusting display according to ambient brightness.

前記目的を果たすため、本発明の表示装置の一態様は、画像を表示する表示部と、前記表示部の表示輝度を調整する制御部と、前記表示部の周囲の明るさである照度値を前記制御部に出力する照度センサと、前記表示部に対して位置する被写体を撮像した前記画像を前記制御部に出力する撮像部と、を具備し、前記制御部は、前記被写体を撮像した画像に基づいて前記画像に写る被写体の前記表示部に対する位置を特定し、前記位置に基づいて前記照度センサ前記被写体の影がかかるか否かを判断し、前記判断の結果に応じて前記照度値に基づいて前記表示輝度を調整する、ことを特徴とする。
また、前記目的を果たすため、本発明の表示装置の一態様は、画像を表示する表示部と、前記表示部の表示輝度を調整する制御部と、前記表示部の周囲の明るさである照度値を前記制御部に出力する照度センサと、前記表示部に対して前記表示部を観察する側に存在する物体の移動量を表す移動信号を前記制御部に出力する赤外線センサと、を具備し、前記制御部は、前記移動信号に基づいて前記物体の前記表示部に対する位置を特定し、前記位置に基づいて前記照度センサ前記物体の影がかかるか否かを判断し、前記判断の結果に応じて前記照度値に基づいて前記表示輝度を調整する、ことを特徴とする。
In order to achieve the object, an aspect of the display device of the present invention includes a display unit that displays an image, a control unit that adjusts the display luminance of the display unit, and an illuminance value that is the brightness around the display unit. An illuminance sensor that outputs to the control unit; and an imaging unit that outputs the image obtained by imaging the subject located with respect to the display unit to the control unit, wherein the control unit images the subject. identify the position relative to the display portion of the object caught on the image based on the position said determined whether the shadow of an object according to the illuminance sensor based on the illuminance value in response to a result of the determination The display brightness is adjusted based on the above.
In order to achieve the above object, one embodiment of the display device of the present invention includes a display unit that displays an image, a control unit that adjusts display luminance of the display unit, and illuminance that is brightness around the display unit. An illuminance sensor that outputs a value to the control unit, and an infrared sensor that outputs to the control unit a movement signal that represents the amount of movement of an object that is present on the side of observing the display unit with respect to the display unit. The control unit specifies the position of the object with respect to the display unit based on the movement signal, determines whether the illuminance sensor is shaded by the illuminance sensor based on the position, and the result of the determination The display luminance is adjusted based on the illuminance value according to the above.

本発明によれば周囲の明るさによって表示を調整する誤判断が少ない表示装置を提供できる。   ADVANTAGE OF THE INVENTION According to this invention, the display apparatus with few misjudgments which adjust a display with ambient brightness can be provided.

本発明の各実施形態に係る画像表示装置の構成例を示すブロック図。The block diagram which shows the structural example of the image display apparatus which concerns on each embodiment of this invention. 第1の実施形態に係る画像処理装置の動作例を示すフローチャート。6 is a flowchart illustrating an operation example of the image processing apparatus according to the first embodiment. 第1の実施形態の撮像部が取得する画像の例を説明するための図。The figure for demonstrating the example of the image which the imaging part of 1st Embodiment acquires. 第2の実施形態に係る画像処理装置の動作例を示すフローチャート。10 is a flowchart illustrating an operation example of the image processing apparatus according to the second embodiment.

[第1の実施形態]
まず本発明の第1の実施形態について図面を参照して説明する。本実施形態に係るデジタルフォトフレーム100の構成例を図1に示す。デジタルフォトフレーム100は、メインCPU102と、DRAM等からなるRAM104と、ROM106と、例えば液晶ディスプレイである表示部108と、外部メモリI/F110と、無線LANデバイス112と、撮像部114と、メモリが内蔵されたワンチップマイコンのサブCPU116と、入力部118と、LED120と、照度センサ122と、例えば焦電型赤外線センサによる人感センサ124と、縦横センサ126と、電源128と、バス130と、を備える。
[First Embodiment]
First, a first embodiment of the present invention will be described with reference to the drawings. A configuration example of a digital photo frame 100 according to the present embodiment is shown in FIG. The digital photo frame 100 includes a main CPU 102, a RAM 104 including a DRAM, a ROM 106, a display unit 108 such as a liquid crystal display, an external memory I / F 110, a wireless LAN device 112, an imaging unit 114, and a memory. Built-in sub-CPU 116 of one-chip microcomputer, input unit 118, LED 120, illuminance sensor 122, human sensor 124 such as pyroelectric infrared sensor, vertical / horizontal sensor 126, power supply 128, bus 130, Is provided.

ROM106と外部メモリI/F110と無線LANデバイス112とはバス130を介してメインCPU102に接続されている。またRAM104と表示部108と撮像部114とはそれぞれメインCPU102に接続されている。   The ROM 106, the external memory I / F 110, and the wireless LAN device 112 are connected to the main CPU 102 via the bus 130. The RAM 104, the display unit 108, and the imaging unit 114 are connected to the main CPU 102, respectively.

メインCPU102とサブCPU116とは例えばシリアル通信で接続されている。入力部118とLED120と照度センサ122と人感センサ124と縦横センサ126とはそれぞれサブCPU116に接続されている。電源128は各部に接続して電源を供給する。   The main CPU 102 and the sub CPU 116 are connected by serial communication, for example. The input unit 118, the LED 120, the illuminance sensor 122, the human sensor 124, and the vertical / horizontal sensor 126 are connected to the sub CPU 116, respectively. A power supply 128 is connected to each unit to supply power.

メインCPU102は各種演算を行いデジタルフォトフレーム100全体の動作を制御する。RAM104はメインCPU102による演算のため各種データを一時記憶したり画像データを展開したりするためのメモリである。ROM106は例えばデジタルフォトフレーム100の制御プログラム等が保存されており、これらプログラム等はメインCPU102の要求に応じて適宜メインCPU102に出力される。   The main CPU 102 performs various calculations and controls the operation of the entire digital photo frame 100. A RAM 104 is a memory for temporarily storing various data and developing image data for calculation by the main CPU 102. The ROM 106 stores, for example, a control program for the digital photo frame 100, and these programs and the like are appropriately output to the main CPU 102 in response to a request from the main CPU 102.

表示部108は例えば液晶ディスプレイである。表示部108はメインCPU102の制御の下で種々の画像を表示するとともに表示部108に表示させる画像の輝度を変化させる。表示部108が液晶ディスプレイであればバックライトの出力を変化させることで表示部108に表示される画像の輝度を変化させることができる。表示部108は液晶ディスプレイに限らず有機ELディスプレイやプラズマディスプレイでもよい。本実施形態においては表示部108は液晶ディスプレイであるとして以下の説明を行う。他のディスプレイを用いる場合も輝度の調整方法は異なるが輝度を調整することは同じである。   The display unit 108 is, for example, a liquid crystal display. The display unit 108 displays various images under the control of the main CPU 102 and changes the luminance of the image displayed on the display unit 108. If the display unit 108 is a liquid crystal display, the luminance of the image displayed on the display unit 108 can be changed by changing the output of the backlight. The display unit 108 is not limited to a liquid crystal display, and may be an organic EL display or a plasma display. In the present embodiment, the following description will be made assuming that the display unit 108 is a liquid crystal display. When other displays are used, the brightness adjustment method is different, but the brightness adjustment is the same.

外部メモリI/F110は例えばデジタルフォトフレーム100への画像の入出力を行う際に用いる外部メモリを接続するためのインタフェースである。無線LANデバイス112はデジタルフォトフレーム100をネットワークと接続させ、ネットワーク上の機器とデータの交換を行う際に用いられるデバイスである。   The external memory I / F 110 is an interface for connecting an external memory used when inputting / outputting an image to / from the digital photo frame 100, for example. The wireless LAN device 112 is a device used when connecting the digital photo frame 100 to a network and exchanging data with devices on the network.

撮像部114は例えば撮像素子とレンズとを有しており画像を撮影する。撮像部114はデジタルフォトフレーム100の表示部108が備えられている表示面側(以降、正面側と称する)に備えられている。撮像部114はデジタルフォトフレーム100から正面側を例えばVGAの解像度で30fpsにて撮像することができる。撮影データはメインCPU102に出力される。メインCPU102はこの撮影データに基づいて画像処理を行って人の検知を行うことができる。   The imaging unit 114 has, for example, an imaging element and a lens, and takes an image. The imaging unit 114 is provided on the display surface side (hereinafter referred to as the front side) where the display unit 108 of the digital photo frame 100 is provided. The imaging unit 114 can image the front side from the digital photo frame 100 at a resolution of, for example, VGA at 30 fps. The shooting data is output to the main CPU 102. The main CPU 102 can detect a person by performing image processing based on the photographing data.

サブCPU116は、入力部118を介したユーザによる操作の受け付け、照度センサ122、人感センサ124、縦横センサ126等の各種センサの管理、電源128の管理等を行っている。入力部118は、スイッチ、スライダ、キーボード、タッチパネル等であり、ユーザの操作を取得する。入力部118はユーザの操作を表す信号をサブCPU116に出力する。LED120はサブCPU116の制御の下でユーザに各種情報を提示する。例えば電源のON/OFF等のデジタルフォトフレーム100の状態を表示する。   The sub CPU 116 receives user operations via the input unit 118, manages various sensors such as the illuminance sensor 122, the human sensor 124, and the vertical and horizontal sensors 126, and manages the power supply 128. The input unit 118 is a switch, a slider, a keyboard, a touch panel, or the like, and acquires a user operation. The input unit 118 outputs a signal representing a user operation to the sub CPU 116. The LED 120 presents various information to the user under the control of the sub CPU 116. For example, the status of the digital photo frame 100 such as power ON / OFF is displayed.

照度センサ122は環境の明るさに合わせた電圧値をサブCPU116に出力する。照度センサ122は置き場所による影響を受けにくくするためにデジタルフォトフレーム100の正面側に設置されている。サブCPU116は照度センサ122から入力されたデータに基づいて、サブCPU116内のAD変換器で明るさを示す値に変換し、そのデジタル値をメインCPU102に出力する。メインCPU102は入力された環境照度に応じた値に基づいて表示部108の表示輝度を調整する。照度センサ122は環境の明るさに合わせた電流値をサブCPU116に出力するようにしてもよい。   The illuminance sensor 122 outputs a voltage value that matches the brightness of the environment to the sub CPU 116. The illuminance sensor 122 is installed on the front side of the digital photo frame 100 so as to be less affected by the place where it is placed. Based on the data input from the illuminance sensor 122, the sub CPU 116 converts the value indicating brightness with an AD converter in the sub CPU 116, and outputs the digital value to the main CPU 102. The main CPU 102 adjusts the display brightness of the display unit 108 based on a value corresponding to the input environmental illuminance. The illuminance sensor 122 may output a current value that matches the brightness of the environment to the sub CPU 116.

人感センサ124は例えば焦電型赤外線センサによって構成される。人感センサ124はデジタルフォトフレーム100の正面側に設置されている。人感センサ124はデジタルフォトフレーム100に対して正面側の温度時間変化を取得する。人感センサ124は取得した温度時間変化を例えばアナログ値としてサブCPU116に出力する。サブCPU116は人感センサ124から入力されたデータに基づいて、サブCPU116内のAD変換器でデジタル値に変換してメインCPU102に出力する。メインCPU102は温度時間変化値が設定された閾値を超える又は下回るといった比較によって人の有無を判定する。またこの閾値を変える事で人感センサ124の感度調節を行うことができる。   The human sensor 124 is constituted by a pyroelectric infrared sensor, for example. The human sensor 124 is installed on the front side of the digital photo frame 100. The human sensor 124 acquires a temperature time change on the front side with respect to the digital photo frame 100. The human sensor 124 outputs the acquired temperature-time change to the sub CPU 116 as an analog value, for example. Based on the data inputted from the human sensor 124, the sub CPU 116 converts it into a digital value by an AD converter in the sub CPU 116 and outputs it to the main CPU 102. The main CPU 102 determines the presence / absence of a person by comparison such that the temperature / time change value exceeds or falls below a set threshold. Further, the sensitivity of the human sensor 124 can be adjusted by changing the threshold value.

縦横センサ126はデジタルフォトフレーム100の設置向きが縦横の何れであるかを検出する。縦横センサ126は検出した傾斜方向をデジタル値としてサブCPU116に出力する。   The vertical / horizontal sensor 126 detects whether the installation direction of the digital photo frame 100 is vertical or horizontal. The vertical / horizontal sensor 126 outputs the detected inclination direction as a digital value to the sub CPU 116.

このように、例えば表示部108は画像を表示する表示部として機能し、例えばメインCPU102は前記表示部の表示輝度を調整する制御部として機能し、例えば照度センサ122は表示部の周囲の明るさである照度値を制御部に出力する照度センサとして機能し、例えば撮像部114は表示部に対して表示部を観察する側を撮像した画像を制御部に出力する撮像部として機能する。   Thus, for example, the display unit 108 functions as a display unit that displays an image, for example, the main CPU 102 functions as a control unit that adjusts the display luminance of the display unit, and the illuminance sensor 122, for example, brightness of the surroundings of the display unit For example, the imaging unit 114 functions as an imaging unit that outputs, to the control unit, an image obtained by imaging the side of the display unit viewed from the display unit.

次にデジタルフォトフレーム100の動作を説明する。ユーザが電源を投入するように入力部118を操作すると、入力部118から出力されたユーザの指示を表す信号はサブCPU116に入力される。サブCPU116は電源128を起動させて電源128に各部に電源を供給させる。   Next, the operation of the digital photo frame 100 will be described. When the user operates the input unit 118 to turn on the power, a signal representing a user instruction output from the input unit 118 is input to the sub CPU 116. The sub CPU 116 activates the power supply 128 and causes the power supply 128 to supply power to each unit.

電源が供給されたメインCPU102はROM106に内蔵された制御プログラムをRAM104上に展開して制御プログラムを実行する。メインCPU102は外部メモリI/F110に接続された外部メモリ内の画像、又は無線LANデバイス112を介してネットワークから入手した画像、をRAM104上に展開する。メインCPU102はこれら画像を表示部108に出力して表示部108にこれらの画像を表示させる。   The main CPU 102 supplied with the power develops the control program built in the ROM 106 on the RAM 104 and executes the control program. The main CPU 102 expands an image in the external memory connected to the external memory I / F 110 or an image obtained from the network via the wireless LAN device 112 on the RAM 104. The main CPU 102 outputs these images to the display unit 108 and causes the display unit 108 to display these images.

一般に周囲の明るさ即ち環境照度に基づいて、デジタルフォトフレームの表示輝度を調整する技術が知られている。液晶ディスプレイを用いている場合、表示輝度はバックライトの輝度で調整することができる。例えば暗い環境においてはバックライトの輝度を低くし、明るい環境においてはバックライトの輝度を高くすることで、見やすい表示を実現する。   In general, a technique for adjusting the display luminance of a digital photo frame based on ambient brightness, that is, ambient illuminance is known. When a liquid crystal display is used, the display brightness can be adjusted by the brightness of the backlight. For example, the backlight brightness is lowered in a dark environment, and the backlight brightness is increased in a bright environment, thereby realizing an easy-to-view display.

このような一般的な液晶ディスプレイに用いられているバックライト輝度の制御について説明する。液晶ディスプレイのバックライト輝度はPWM(Pulse Width Modulation)によって制御されている。サブCPU116は照度センサ122の出力をAD変換して得られた値を環境照度としてメインCPU102に通知する。メインCPU102は入力された環境照度を変換テーブルと照合することで、対応する液晶ディスプレイのバックライトのPWM値を取得する。得られたPWM値を用いて、メインCPU102は表示部108のバックライトの輝度制御を行う。以上のような制御を行うことで、照度センサ122が検知した照度に応じて表示部108の表示輝度が調整される。   Control of backlight luminance used in such a general liquid crystal display will be described. The backlight luminance of the liquid crystal display is controlled by PWM (Pulse Width Modulation). The sub CPU 116 notifies the main CPU 102 of the value obtained by AD converting the output of the illuminance sensor 122 as the environmental illuminance. The main CPU 102 collates the input environmental illuminance with the conversion table, thereby acquiring the PWM value of the backlight of the corresponding liquid crystal display. Using the obtained PWM value, the main CPU 102 controls the brightness of the backlight of the display unit 108. By performing the control as described above, the display brightness of the display unit 108 is adjusted according to the illuminance detected by the illuminance sensor 122.

本実施形態に係るデジタルフォトフレーム100においても、離れた場所に人が居ると判断されるときは上記の動作に従ってバックライトの輝度を調整している。   Also in the digital photo frame 100 according to the present embodiment, when it is determined that there is a person at a distant place, the luminance of the backlight is adjusted according to the above operation.

撮像部114を利用した人検出動作に基づく、デジタルフォトフレーム100におけるバックライト輝度の制御について、図2に示すフローチャートを参照して説明する。この制御では例えば人物がデジタルフォトフレーム100を覗き込んだときなどを考慮した制御である。即ち当該人物の影のために照度センサ122の出力が暗いことを表す信号となることに起因して、必要以上に表示部108の表示輝度が変化させられることを防止する。   Control of backlight luminance in the digital photo frame 100 based on a human detection operation using the imaging unit 114 will be described with reference to a flowchart shown in FIG. In this control, for example, when a person looks into the digital photo frame 100, the control is taken into consideration. That is, it is possible to prevent the display luminance of the display unit 108 from being changed more than necessary due to the signal indicating that the output of the illuminance sensor 122 is dark due to the shadow of the person.

ステップS101において、メインCPU102は撮像部114に撮像を実行させて撮像により得られた画像データを取得する。
ステップS102において、メインCPU102は取得した画像データに基づいて当該画像中の顔を検出する。顔の検出には例えばテンプレートマッチングの手法を用いることができる。
In step S101, the main CPU 102 causes the image capturing unit 114 to perform image capturing, and acquires image data obtained by the image capturing.
In step S102, the main CPU 102 detects a face in the image based on the acquired image data. For example, a template matching method can be used for face detection.

ステップS103において、メインCPU102は前フレームにおける処理で検出された顔の位置と、本フレームのステップS102で検出された顔の位置と、を比較して移動方向を検出する。顔の位置は例えば顔の上下方向の上端位置として求めることができる。   In step S103, the main CPU 102 detects the moving direction by comparing the face position detected in the process of the previous frame with the face position detected in step S102 of the main frame. The position of the face can be obtained as, for example, the upper end position of the face in the vertical direction.

ステップS104において、メインCPU102は検出された顔のうちで画像に対する顔の比率が第1の閾値より大きい顔について、その比率と位置と移動方向とを取得する。 In step S <b> 104, the main CPU 102 acquires the ratio, position, and movement direction of the detected face whose face is larger than the first threshold.

顔の比率は例えば観察者の顔のピクセル数を算出して画像の総ピクセル数との比をとることで、面積比率として求めることができる。また顔の比率は例えば観察者の顔の上下方向の長さと画像の上下方向の長さとの比をとることで、上下方向の長さ比率として求めることができる。また顔の比率は例えば観察者の顔の左右方向の長さと画像の左右方向の長さとの比をとることで、左右方向の長さ比率として求めることができる。   The face ratio can be obtained as an area ratio by, for example, calculating the number of pixels of the observer's face and taking the ratio with the total number of pixels of the image. Further, the ratio of the face can be obtained as the length ratio in the vertical direction by taking, for example, the ratio of the vertical length of the observer's face and the vertical length of the image. The ratio of the face can be obtained as the length ratio in the left-right direction by taking the ratio of the length in the left-right direction of the observer's face and the length in the left-right direction of the image, for example.

ステップS105において、メインCPU102は検出された顔の比率が第2の閾値より大きいか否か、即ちその人物が一定の距離より近くにいるか否かを判定する。ここで、第2の閾値は第1の閾値よりも大きいものとする。例えば一番近くにいる観察者の顔の比率から簡易的にその人物(観察者)とデジタルフォトフレーム100との距離を推定できる。 In step S105, the main CPU102 determines the ratio of the detected face is greater or not than the second threshold value, i.e. whether the person is closer than a certain distance. Here, it is assumed that the second threshold is larger than the first threshold. For example, the distance between the person (observer) and the digital photo frame 100 can be simply estimated from the ratio of the face of the observer who is closest.

顔の比率が第2の閾値より大きいとき、即ちその人物とデジタルフォトフレーム100との距離が一定の値よりも近いときは、メインCPU102は処理を終了する。即ちバックライトの輝度について調整を行わずに引き続き同じ輝度とする。
一方、ステップS105の判定で顔の比率が第2の閾値以下であり、その人物が一定の距離以上デジタルフォトフレーム100から離れているときは、メインCPU102は処理をステップS106に進める。
When the face ratio is larger than the second threshold, that is, when the distance between the person and the digital photo frame 100 is closer than a certain value, the main CPU 102 ends the process. That is, the backlight brightness is continuously adjusted to the same brightness without adjustment.
On the other hand, if it is determined in step S105 that the face ratio is equal to or smaller than the second threshold and the person is away from the digital photo frame 100 by a certain distance or more, the main CPU 102 advances the process to step S106.

なおステップS105の判定において顔の移動方向を考慮に入れてもよい。例えば人物がデジタルフォトフレーム100の表示面の中心側に近づくように移動しているときは処理を中止するが、遠ざかるように移動しているときは処理をステップS106に進めるような条件を加重してもよい。   Note that the face moving direction may be taken into consideration in the determination in step S105. For example, when the person is moving so as to approach the center side of the display surface of the digital photo frame 100, the process is stopped, but when the person is moving away, the condition is advanced so that the process proceeds to step S106. May be.

ステップS106において、メインCPU102は画像における顔の位置が一定の位置よりも上側であるか否かを判定する。即ちメインCPU102は顔の位置の重力方向に対する位置関係を判定する。例えば画像の下側から3分の2の水平線を設定し、顔の上端位置がこの水平線よりも上側であるか否かで判定するように設定できる。顔の位置が一定の位置よりも上側にあれば、メインCPU102は処理を終了する。即ちバックライトの輝度について調整を行わずに引き続き同じ輝度とする。一方、ステップS106の判定で顔の位置が一定の位置以上に下側にあれば、メインCPU102は処理をステップS107に進める。   In step S106, the main CPU 102 determines whether or not the position of the face in the image is above a certain position. That is, the main CPU 102 determines the positional relationship of the face position with respect to the gravity direction. For example, it is possible to set a horizontal line of two-thirds from the lower side of the image and determine whether or not the upper end position of the face is above the horizontal line. If the face position is above a certain position, the main CPU 102 ends the process. That is, the backlight brightness is continuously adjusted to the same brightness without adjustment. On the other hand, if it is determined in step S106 that the face position is below a certain position, the main CPU 102 advances the process to step S107.

なおステップS106の判定において顔の移動方向を考慮に入れてもよい。例えば人物が画像の上方向に移動しているときは処理を中止するが、下方向に移動しているときは処理をステップS10に進めるような条件を加重してもよい。 Note that the face moving direction may be taken into consideration in the determination in step S106. For example, it stops the process when the person is moving in the upward direction of the image may be weighted such conditions as the process proceeds to step S10 7 when moving downward.

以上のような経過でステップS107に進む場合は、人物が遠くにいる又は人物が近くにいるがデジタルフォトフレーム100に比べて比較的低い位置にいる場合である。即ちデジタルフォトフレーム100に人物の影がかからないと考えられる場合である。このとき照度センサ122の出力は人物の影の影響を受けず信頼できる値となっていると考えられる。そこで以降の処理では照度センサ122の出力値に基づいてバックライトの輝度の調整を行う。   When the process proceeds to step S <b> 107 as described above, the person is far away or the person is near but is at a relatively low position as compared with the digital photo frame 100. That is, it is a case where it is considered that no shadow of a person is applied to the digital photo frame 100. At this time, the output of the illuminance sensor 122 is considered to be a reliable value without being affected by the shadow of the person. Therefore, in the subsequent processing, the brightness of the backlight is adjusted based on the output value of the illuminance sensor 122.

ステップS107において、メインCPU102は照度センサ122に照度の検出を実行させる。メインCPU102は上述の通りサブCPU116を介して環境照度に係る情報を照度センサ122から取得する。   In step S107, the main CPU 102 causes the illuminance sensor 122 to detect illuminance. As described above, the main CPU 102 acquires information related to the environmental illuminance from the illuminance sensor 122 via the sub CPU 116.

なお照度センサ122の測定値が真っ暗に近い一定の値よりも暗い値を示した場合には、部屋が消灯された場合に実施する動作、例えば表示部108の表示を消す動作を行うようにしてもよい。これは人の影がかかる程度では真っ暗な状況にはなり難いため、照度センサ122の測定値が一定の値よりも暗い値を示した場合には室内の電灯が消されたとみなせるからである。   If the measured value of the illuminance sensor 122 is darker than a certain value that is almost dark, an operation that is performed when the room is turned off, for example, an operation that turns off the display of the display unit 108 is performed. Also good. This is because it is difficult to achieve a completely dark situation as long as a human shadow is applied, and it can be considered that the indoor lamp has been turned off when the measured value of the illuminance sensor 122 is darker than a certain value.

ステップS108において、メインCPU102はステップS107において取得した環境照度に基づいてバックライトのPWM値を算出する。
ステップS109において、メインCPU102はステップS108において算出したPWM値に基づいて表示部108のバックライトの輝度を変更させる。その後メインCPU102は処理を終了する。
メインCPU102は上記のステップS101乃至ステップS109の処理を繰り返し連続的に実施する。
In step S108, the main CPU 102 calculates the PWM value of the backlight based on the environmental illuminance acquired in step S107.
In step S109, the main CPU 102 changes the luminance of the backlight of the display unit 108 based on the PWM value calculated in step S108. Thereafter, the main CPU 102 ends the process.
The main CPU 102 repeatedly performs the processes in steps S101 to S109 described above continuously.

この動作によれば、例えば図3(a)に示すように人物がデジタルフォトフレーム100から離れた位置にいるときは、当該人物の影は照度センサ122を覆わないと考えられる。このような場合ステップS104において、人物の顔の比率は第1の閾値以下と判定され第1の閾値よりも大きい比率の顔はないとされる。即ち顔の位置や比率等は取得されない。このときステップS105の判定では顔の比率は取得されていないので、顔の比率は第2の閾値以下であるとして処理はステップS106に進む。さらにステップS106の判定では顔の位置は取得されていないので、顔の位置は一定の位置よりも上側でないとして処理はステップS107に進む。その結果ステップS107乃至ステップS109において、メインCPU102は通常のバックライト制御と同様の処理を実行して必要に応じてバックライトの輝度を変化させる。   According to this operation, for example, as shown in FIG. 3A, when a person is away from the digital photo frame 100, it is considered that the shadow of the person does not cover the illuminance sensor 122. In such a case, in step S104, the ratio of the person's face is determined to be equal to or lower than the first threshold value, and there is no face having a ratio larger than the first threshold value. That is, the face position and ratio are not acquired. At this time, since the face ratio is not acquired in the determination of step S105, the process proceeds to step S106 assuming that the face ratio is equal to or less than the second threshold value. Further, since the face position is not acquired in the determination in step S106, the process proceeds to step S107, assuming that the face position is not above a certain position. As a result, in step S107 to step S109, the main CPU 102 executes processing similar to normal backlight control and changes the brightness of the backlight as necessary.

一方、例えば図3(b)に示すように人物がデジタルフォトフレーム100の非常に近くにいるとき、当該人物の影は照度センサ122を覆うと考えられる。このとき照度センサ122が出力する値は環境照度を適切に表していないと考えられる。このような場合ステップS105において、顔の比率が第2の閾値よりも大きいと判定されて処理が終了される。即ちステップS107乃至ステップS109において、実施されるバックライトの輝度調整が実施されないことになる。その結果、表示部108のバックライトの輝度は変化しない。   On the other hand, for example, as shown in FIG. 3B, when a person is very close to the digital photo frame 100, it is considered that the shadow of the person covers the illuminance sensor 122. At this time, it is considered that the value output by the illuminance sensor 122 does not appropriately represent the environmental illuminance. In such a case, in step S105, it is determined that the face ratio is larger than the second threshold value, and the process is terminated. That is, in step S107 to step S109, the luminance adjustment of the backlight that is performed is not performed. As a result, the luminance of the backlight of the display unit 108 does not change.

また例えば図3(c)に示すように人物がデジタルフォトフレーム100の比較的近くにおり、さらに人物がデジタルフォトフレーム100を高い位置から見ているとき、当該人物の影が照度センサ122を覆うと考えられる。このときも照度センサ122が出力する値は環境照度を適切に表していないと考えられる。このような場合ステップS104において当該顔の比率と位置等が取得され、ステップS105では第2の閾値以下であると判定されるが、ステップS106において顔の位置が一定の位置よりも上側にあると判定されて処理が終了される。即ちステップS107乃至ステップS109において実施されるバックライトの輝度調整が実施されないことになる。その結果、表示部108のバックライトの輝度は変化しない。 For example, as shown in FIG. 3C, when a person is relatively close to the digital photo frame 100 and the person is looking at the digital photo frame 100 from a high position, the shadow of the person covers the illuminance sensor 122. it is conceivable that. At this time, it is considered that the value output from the illuminance sensor 122 does not appropriately represent the environmental illuminance. Such case is obtained as the ratio of the face and the position or the like in step S104, but is determined to be less than or equal to the step S105 in the second threshold value lies above the position position is constant in the face in step S106 Is determined and the process is terminated. That is, the backlight brightness adjustment performed in steps S107 to S109 is not performed. As a result, the luminance of the backlight of the display unit 108 does not change.

一方、例えば図3(d)に示すように人物がデジタルフォトフレーム100の比較的近くにおり、さらに人物がデジタルフォトフレーム100を低い位置から見ているとき、当該人物の影は照度センサ122を覆わないと考えられる。このとき照度センサ122の出力は人物の影の影響を受けず信頼できる値となっていると考えられる。このような場合ステップS104において当該顔の比率と位置等が取得されるが、ステップS105では第2の閾値以下であると判定されステップS106では顔の位置が一定の位置よりも下側にあると判定されて処理はステップS107に進む。従ってステップS107乃至ステップS109において、メインCPU102は通常のバックライト制御と同様の処理を実行して必要に応じてバックライトの輝度を変化させる。 On the other hand, for example, as shown in FIG. 3D, when a person is relatively close to the digital photo frame 100 and the person is looking at the digital photo frame 100 from a low position, the shadow of the person moves the illuminance sensor 122. It is thought not to cover. At this time, the output of the illuminance sensor 122 is considered to be a reliable value without being affected by the shadow of the person. Although the ratio of the face and the position or the like is obtained in such a case the step S104, on the lower side than the determined position position is constant face in step S106 to be equal to or less than the step S105 the second threshold And the process proceeds to step S107. Accordingly, in steps S107 to S109, the main CPU 102 executes processing similar to that of normal backlight control, and changes the luminance of the backlight as necessary.

本実施形態によれば撮像部114で取得された画像に基づいて、デジタルフォトフレーム100が人物の影に入っているか否か、即ち照度センサ122の出力に基づいて表示輝度を調整することが適当か否か判断される。この判断の結果、照度センサ122の出力に基づいて表示輝度を調整することが適当であれば当該表示輝度の調整を行うが、不適であると判断されれば当該表示輝度の調整を行わない。その結果、デジタルフォトフレーム100は人物の有無に関わらず輝度を適切に調整して見やすい表示を行うことができる。   According to the present embodiment, it is appropriate to adjust the display luminance based on whether the digital photo frame 100 is in the shadow of a person based on the image acquired by the imaging unit 114, that is, based on the output of the illuminance sensor 122. It is determined whether or not. As a result of this determination, if it is appropriate to adjust the display brightness based on the output of the illuminance sensor 122, the display brightness is adjusted. If it is determined to be inappropriate, the display brightness is not adjusted. As a result, the digital photo frame 100 can perform easy-to-view display by appropriately adjusting the luminance regardless of the presence or absence of a person.

なお本実施形態ではデジタルフォトフレーム100と人物との距離と、デジタルフォトフレーム100と人物との位置関係と、に基づいて表示部108の輝度調整を行うか否かを判定する構成としているが、何れか一方に基づいて判定するようにしてもよい。   In the present embodiment, it is configured to determine whether to adjust the brightness of the display unit 108 based on the distance between the digital photo frame 100 and the person and the positional relationship between the digital photo frame 100 and the person. You may make it determine based on either one.

[第2の実施形態]
本発明の第2の実施形態について説明する。ここでは第1の実施形態との相違点について説明し、同一の部分については同一の符号を付してその説明を省略する。本実施形態では人感センサ124を利用した人検出動作に基づいてバックライト輝度を制御する。
[Second Embodiment]
A second embodiment of the present invention will be described. Here, differences from the first embodiment will be described, and the same portions will be denoted by the same reference numerals and description thereof will be omitted. In the present embodiment, the backlight luminance is controlled based on a human detection operation using the human sensor 124.

人感センサ124には焦電型赤外線センサを用いることができる。焦電型赤外線センサは人の動きを検知して出力電圧を時間変化させる。この時間変化の度合いは温度時間変化の量に依存しており、大きく人が動いたとき程出力電圧の時間変化は大きい。近距離であれば小さな動きでも出力電圧の時間変化が起きる。従って大きな電圧時間変化があるときは人の動きがあり、その後小さな電圧時間変化が検出され続けた場合には人が近くに居続けていると判断することができる。逆に大きな電圧時間変化が検出された後、一定期間電圧時間変化が検出されない場合には人が移動していなくなったと判断できる。このような焦電型赤外線センサを用いた人感センサ124を用いて、第1の実施形態の撮像部114を用いた場合と同様に人物の位置に応じてバックライトの輝度を調整することができる。   A pyroelectric infrared sensor can be used as the human sensor 124. The pyroelectric infrared sensor detects the movement of a person and changes the output voltage over time. The degree of this time change depends on the amount of temperature time change, and the time change of the output voltage increases as the person moves greatly. If the distance is short, the output voltage changes over time even with small movements. Therefore, when there is a large voltage time change, there is human movement, and when a small voltage time change continues to be detected, it can be determined that the person is staying nearby. Conversely, after a large voltage / time change is detected, if no voltage / time change is detected for a certain period, it can be determined that the person is no longer moving. Using the human sensor 124 using such a pyroelectric infrared sensor, the luminance of the backlight can be adjusted in accordance with the position of the person as in the case of using the imaging unit 114 of the first embodiment. it can.

このように、例えば人感センサ124は、表示部に対して表示部を観察する側に存在する物体の移動量を表す移動信号を制御部に出力する赤外線センサとして機能する。   In this way, for example, the human sensor 124 functions as an infrared sensor that outputs a movement signal indicating the amount of movement of an object present on the side of observing the display unit to the display unit.

本実施形態に係る動作を図4に示すフローチャートを参照して説明する。
ステップS201において、メインCPU102は人感センサ124から出力されてサブCPU116でデジタル変換されたデジタル値であるセンサ値を取得する。
ステップS202において、メインCPU102はステップS201で取得したセンサ値を履歴として保存する。
ステップS203において、メインCPU102はセンサ値に対してローパスフィルタリング等のフィルタリング処理を行う。
The operation according to the present embodiment will be described with reference to the flowchart shown in FIG.
In step S <b> 201, the main CPU 102 acquires a sensor value that is a digital value output from the human sensor 124 and digitally converted by the sub CPU 116.
In step S202, the main CPU 102 stores the sensor value acquired in step S201 as a history.
In step S203, the main CPU 102 performs filtering processing such as low-pass filtering on the sensor value.

ステップS204において、メインCPU102はステップS202で保存された履歴を参照して、フィルタリング処理したセンサ値の時間変化量が第3の閾値よりも大きいか否かを判定する。ここで第3の閾値は人物の大きな移動がある場合には、その値よりも大きくなるような値である。センサ値の時間変化量が第3の閾値よりも大きければ、ステップS205においてウェイトタイマーを初期化する。その後メインCPU102は処理を終了させる。一方、センサ値の時間変化量が第3の閾値以下であれば、処理をステップS206に移す。   In step S204, the main CPU 102 refers to the history stored in step S202 to determine whether or not the temporal change amount of the filtered sensor value is larger than the third threshold value. Here, the third threshold is a value that is larger than the value when there is a large movement of the person. If the time variation of the sensor value is larger than the third threshold value, the wait timer is initialized in step S205. Thereafter, the main CPU 102 ends the process. On the other hand, if the time variation of the sensor value is equal to or smaller than the third threshold value, the process proceeds to step S206.

ステップS206において、メインCPU102はウェイトタイマーが終了値となっているか否かを判定する。終了値でなければメインCPU102はステップS207に処理を移す。   In step S206, the main CPU 102 determines whether or not the wait timer has reached the end value. If it is not the end value, the main CPU 102 shifts the processing to step S207.

ステップS207において、メインCPU102はセンサ値の時間変化量が第4の閾値よりも大きいか否かを判定する。ここで第4の閾値は第3の閾値よりも小さい値であり、デジタルフォトフレーム100の近くで人物が静止しているときのセンサ値の時間変化量が、その値よりも大きくなるような値である。即ちセンサ値の時間変化量が第4の閾値よりも大きいときに人物はデジタルフォトフレーム100の近くにおり、センサ値の時間変化量が第4の閾値以下であるときに人物はデジタルフォトフレーム100の近くにいないと判断できる。センサ値の時間変化量が第4の閾値よりも大きければ、処理をステップS205に移してウェイトタイマーを初期化する。一方、センサ値の時間変化が第4の閾値以下であれば、メインCPU102は処理をステップS208に移す。   In step S207, the main CPU 102 determines whether or not the temporal change amount of the sensor value is larger than the fourth threshold value. Here, the fourth threshold value is a value smaller than the third threshold value, and is a value such that the temporal change amount of the sensor value when the person is still near the digital photo frame 100 is larger than the value. It is. That is, the person is close to the digital photo frame 100 when the time change amount of the sensor value is larger than the fourth threshold value, and the person is the digital photo frame 100 when the time change amount of the sensor value is equal to or less than the fourth threshold value. It can be judged that it is not near. If the time change amount of the sensor value is larger than the fourth threshold value, the process proceeds to step S205 to initialize the wait timer. On the other hand, if the time change of the sensor value is equal to or smaller than the fourth threshold value, the main CPU 102 shifts the processing to step S208.

ステップS208において、メインCPU102はウェイトタイマーのカウントアップを開始させる。すでにウェイトタイマーのカウントアップが行われているときは、そのカウントアップを継続させる。その後メインCPU102は処理を終了させる。   In step S208, the main CPU 102 starts counting up the wait timer. If the wait timer has already been counted up, the count up is continued. Thereafter, the main CPU 102 ends the process.

ステップS206の判定においてウェイトタイマーが終了値であれば、メインCPU102は処理をステップS209に移す。
ステップS209において、メインCPU102はウェイトタイマーを停止させる。
If it is determined in step S206 that the wait timer is the end value, the main CPU 102 shifts the processing to step S209.
In step S209, the main CPU 102 stops the wait timer.

ステップS210において、メインCPU102は上述のようにして照度センサ122から出力されてサブCPU116によってデジタル変換された環境照度に係る情報を取得する。
なお照度センサ122の測定値が真っ暗に近い一定の値よりも暗い値を示した場合には、部屋が消灯された場合に実施する動作、例えば表示部108の表示を消す動作を行うようにしてもよい。これは人の影がかかる程度では真っ暗な状況にはなり難いため、照度センサ122の測定値が一定の値よりも暗い値を示した場合には室内の電灯が消されたとみなせるからである。
In step S <b> 210, the main CPU 102 acquires information related to the environmental illuminance output from the illuminance sensor 122 and digitally converted by the sub CPU 116 as described above.
If the measured value of the illuminance sensor 122 is darker than a certain value that is almost dark, an operation that is performed when the room is turned off, for example, an operation that turns off the display of the display unit 108 is performed. Also good. This is because it is difficult to achieve a completely dark situation as long as a human shadow is applied, and it can be considered that the indoor lamp has been turned off when the measured value of the illuminance sensor 122 is darker than a certain value.

ステップS211において、メインCPU102はステップS210において取得した環境照度に基づいてバックライトのPWM値を算出する。
ステップS212において、メインCPU102はステップS211において算出したPWM値に基づいて表示部108のバックライトの輝度を変更する。その後メインCPU102は処理を終了する。
In step S211, the main CPU 102 calculates the PWM value of the backlight based on the environmental illuminance acquired in step S210.
In step S212, the main CPU 102 changes the brightness of the backlight of the display unit 108 based on the PWM value calculated in step S211. Thereafter, the main CPU 102 ends the process.

メインCPU102は上記のステップS201乃至ステップS212の処理を繰り返し連続的に実施する。本実施形態によれば、人物が大きく移動しているときはステップS204の判定でステップS205へと処理が進んでウェイトタイマーが初期化される。この間ステップS210乃至ステップS212におけるバックライトの制御は実行されない。また人物が大きく移動していないがデジタルフォトフレーム100の近くにいるときには、ステップS207の判定でステップS205へと処理が進んでウェイトタイマーが初期化される。この間ステップS210乃至ステップS212におけるバックライトの制御は実行されない。   The main CPU 102 repeatedly performs the processes in steps S201 to S212 described above continuously. According to this embodiment, when the person is moving greatly, the process proceeds to step S205 by the determination in step S204, and the wait timer is initialized. During this time, the backlight control in steps S210 to S212 is not executed. If the person has not moved much but is near the digital photo frame 100, the process proceeds to step S205 in step S207, and the wait timer is initialized. During this time, the backlight control in steps S210 to S212 is not executed.

一方、人物の大きな動きが検出されず人物がデジタルフォトフレーム100の近くにいない状態が続くと、ステップS208においてタイマーがカウントアップされ、やがてタイマーの値がステップS206におけるタイマーの終了値となる。この場合次にステップS204において人物の移動が検知されるまでの間、ステップS210乃至ステップS212においてバックライト輝度の制御が行われる。   On the other hand, if a state in which a large movement of the person is not detected and the person is not near the digital photo frame 100 continues, the timer is counted up in step S208, and the timer value eventually becomes the timer end value in step S206. In this case, the backlight luminance is controlled in steps S210 to S212 until the movement of the person is detected in step S204.

本実施形態によっても、人が近くにいると判断されるときは第1の実施形態の場合と同様に、照度センサ122の検出値をバックライトのPWM制御に適用することを停止する。一方で、人が近くにいないと判断された場合には照度センサ122の検出値をバックライトのPWM制御に適用する。以上のようにしてデジタルフォトフレーム100において、液晶ディスプレイのバックライト輝度制御を誤動作の少ないように実現できる。   Also in this embodiment, when it is determined that a person is near, the application of the detection value of the illuminance sensor 122 to the PWM control of the backlight is stopped as in the case of the first embodiment. On the other hand, if it is determined that no person is nearby, the detection value of the illuminance sensor 122 is applied to the PWM control of the backlight. As described above, in the digital photo frame 100, the backlight luminance control of the liquid crystal display can be realized with few malfunctions.

なお第1の実施形態においても第2の実施形態においても、デジタルフォトフレーム100は撮像部114及び人感センサ124の両方備える構成として説明した。しかしながら、第1の実施形態ではデジタルフォトフレーム100は人感センサ124を備えていなくてもよいし、第2の実施形態ではデジタルフォトフレーム100は撮像部114を備えていなくてもよい。また人感センサ124は焦電型赤外線センサに限らず、その他の赤外線センサや超音波センサ等を用いてもよい。   In both the first embodiment and the second embodiment, the digital photo frame 100 has been described as a configuration including both the imaging unit 114 and the human sensor 124. However, the digital photo frame 100 may not include the human sensor 124 in the first embodiment, and the digital photo frame 100 may not include the imaging unit 114 in the second embodiment. The human sensor 124 is not limited to the pyroelectric infrared sensor, and other infrared sensors, ultrasonic sensors, or the like may be used.

これまではデジタルフォトフレームを例に挙げて説明したが、第1の実施形態及び第2の実施形態はデジタルフォトフレームに限らず、テレビや時計やその他の機器等の画像を表示する装置であれば、どのような表示装置にも用いることができる。デジタルフォトフレーム等の小型の表示装置においては人が覗き込むように観察する、即ち当該表示装置が観察者の影に入ることが多いために特に効果がある。   Until now, the digital photo frame has been described as an example. However, the first and second embodiments are not limited to the digital photo frame, but may be an apparatus that displays an image of a television, a clock, or other devices. Any display device can be used. A small display device such as a digital photo frame is particularly effective because it is observed as if a person is looking into it, that is, the display device often enters the shadow of the observer.

第1の実施形態及び第2の実施形態の説明では、人物が例えばデジタルフォトフレーム100の近くにいるときは表示部108の表示輝度の調整を行わないとした。しかしながら、表示輝度の調整を行わないとしなくとも、例えば照度センサ122の出力値を人物の影の分だけ補正して、その補正値を用いて表示輝度の調整を行うように構成してもよい。   In the description of the first embodiment and the second embodiment, the display brightness of the display unit 108 is not adjusted when a person is near the digital photo frame 100, for example. However, without adjusting the display brightness, for example, the output value of the illuminance sensor 122 may be corrected by the shadow of the person, and the display brightness may be adjusted using the correction value. .

なお本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を形成できる。例えば実施形態に示される全構成要素から幾つかの構成要素を削除しても発明が解決しようとする課題の欄で述べられた課題が解決でき、かつ発明の効果が得られる場合には、この構成要素が削除された構成も発明として抽出され得る。さらに異なる実施形態にわたる構成要素を適宜組み合わせてもよい。   Note that the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the components without departing from the scope of the invention in the implementation stage. In addition, various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the embodiment. For example, if the problem described in the column of the problem to be solved by the invention can be solved even if some components are deleted from all the elements shown in the embodiment, and the effect of the invention can be obtained, this A configuration from which components are deleted can also be extracted as an invention. Furthermore, constituent elements over different embodiments may be appropriately combined.

以下に本願出願の当初の特許請求の範囲に記載された発明を付記する。   The invention described in the scope of claims of the present application is appended below.

[1]
画像を表示する表示部と、
前記表示部の表示輝度を調整する制御部と、
前記表示部の周囲の明るさである照度値を前記制御部に出力する照度センサと、
前記表示部に対して該表示部を観察する側を撮像した画像を前記制御部に出力する撮像部と、
を具備する表示装置であって、
前記制御部は、
前記画像に基づいて該画像に写る被写体の前記表示部に対する位置を特定し、
前記位置に基づいて前記照度センサが前記被写体の影に入るか否かを判断し、
前記判断の結果に応じて前記照度値に基づいて前記表示輝度を調整する、
ことを特徴とする表示装置。
[1]
A display for displaying an image;
A control unit for adjusting display brightness of the display unit;
An illuminance sensor that outputs an illuminance value that is brightness around the display unit to the control unit;
An imaging unit that outputs to the control unit an image obtained by imaging the side of observing the display unit with respect to the display unit;
A display device comprising:
The controller is
Specifying the position of the subject in the image based on the image with respect to the display unit;
Determining whether the illuminance sensor enters the shadow of the subject based on the position;
Adjusting the display brightness based on the illuminance value according to the result of the determination;
A display device characterized by that.

[2]
前記制御部は、
前記画像に基づいて前記表示部と前記被写体との距離及び/又は前記表示部と前記被写体との重力方向に対する位置関係を求め、
前記距離及び/又は前記位置関係に基づいて、前記照度センサが前記被写体の影に入るか否かを判断する、
ことを特徴とする[1]に記載の表示装置。
[2]
The controller is
Based on the image, the distance between the display unit and the subject and / or the positional relationship of the display unit and the subject with respect to the gravitational direction are obtained,
Based on the distance and / or the positional relationship, it is determined whether or not the illuminance sensor enters the shadow of the subject.
[1] The display device according to [1].

[3]
前記制御部は、前記照度センサが前記被写体の影に入ると判断した場合に、前記照度値を用いた前記表示部の前記表示輝度の調整を行わない、
ことを特徴とする[1]に記載の表示装置。
[3]
The control unit does not adjust the display luminance of the display unit using the illuminance value when it is determined that the illuminance sensor enters the shadow of the subject.
[1] The display device according to [1].

[4]
前記制御部は、前記照度センサが前記被写体の影に入ると判断した場合に、前記照度値を前記影の分だけ補正した補正照度値を求め、前記補正照度値を用いて前記表示部の前記表示輝度を調整する、
ことを特徴とする[1]に記載の表示装置。
[4]
When determining that the illuminance sensor enters the shadow of the subject, the control unit obtains a corrected illuminance value obtained by correcting the illuminance value by the amount of the shadow, and uses the corrected illuminance value to determine the illuminance value of the display unit. Adjust the display brightness,
[1] The display device according to [1].

[5]
前記被写体は人物であることを特徴とする[1]乃至[4]の何れかに記載の表示装置。
[5]
The display device according to any one of [1] to [4], wherein the subject is a person.

[6]
前記制御部は、前記画像に基づいて前記人物の顔を検出し、前記画像に対する前記顔の比率が第1の閾値よりも大きい場合に前記照度センサに対する前記顔の位置を特定する、
ことを特徴とする[5]に記載の表示装置。
[6]
The control unit detects the face of the person based on the image, and specifies the position of the face with respect to the illuminance sensor when the ratio of the face to the image is greater than a first threshold.
[5] The display device according to [5].

[7]
前記制御部は、前記第1の閾値よりも大きい第2の閾値に対して、前記顔の前記比率が前記第1の閾値よりも大きく且つ前記第2の閾値よりも大きいときに前記照度センサが前記人物の影に入ると判断する、
ことを特徴とする[6]に記載の表示装置。
[7]
When the ratio of the face is greater than the first threshold and greater than the second threshold with respect to a second threshold that is greater than the first threshold, the illuminance sensor is Determining that it falls into the shadow of the person,
[6] The display device according to [6].

[8]
前記制御部は、前記第1の閾値よりも大きい第2の閾値に対して、前記顔の前記比率が前記第1の閾値よりも大きく且つ前記第2の閾値以下のときに、前記顔の位置が前記画像の一定の位置よりも上側であれば前記照度測定部が前記影に入ると判断する、
ことを特徴とする[6]に記載の表示装置。
[8]
When the ratio of the face is greater than the first threshold and less than or equal to the second threshold with respect to a second threshold that is greater than the first threshold, the control unit determines the position of the face. Is determined that the illuminance measurement unit enters the shadow if it is above a certain position of the image,
[6] The display device according to [6].

[9]
画像を表示する表示部と、
前記表示部の表示輝度を調整する制御部と、
前記表示部の周囲の明るさである照度値を前記制御部に出力する照度センサと、
前記表示部に対して該表示部を観察する側に存在する物体の移動量を表す移動信号を前記制御部に出力する焦電型赤外線センサと、
を具備する表示装置であって、
前記制御部は、
前記移動信号に基づいて前記物体の前記表示部に対する位置を特定し、
前記位置に基づいて前記照度センサが前記物体の影に入るか否かを判断し、
前記判断の結果に応じて前記照度値に基づいて前記表示輝度を調整する、
ことを特徴とする表示装置。
[9]
A display for displaying an image;
A control unit for adjusting display brightness of the display unit;
An illuminance sensor that outputs an illuminance value that is brightness around the display unit to the control unit;
A pyroelectric infrared sensor that outputs a movement signal representing the amount of movement of an object present on the side of observing the display unit to the display unit;
A display device comprising:
The controller is
Identifying the position of the object relative to the display based on the movement signal;
Determining whether the illuminance sensor enters the shadow of the object based on the position;
Adjusting the display brightness based on the illuminance value according to the result of the determination;
A display device characterized by that.

[10]
前記制御部は、
前記移動信号に基づいて、前記表示部と前記物体との位置関係が所定の値よりも大きく変化しているか否かを表す変化情報と、前記物体と前記表示部との距離が所定の距離よりも近いか否かを表す距離情報とを求め、
前記変化情報と前記距離情報とに基づいて前記照度センサが前記物体の影に入るか否かを判断する、
ことを特徴とする[9]に記載の表示装置。
[10]
The controller is
Based on the movement signal, change information indicating whether or not the positional relationship between the display unit and the object has changed more than a predetermined value, and the distance between the object and the display unit from a predetermined distance And distance information indicating whether or not
Determining whether the illuminance sensor enters the shadow of the object based on the change information and the distance information;
[9] The display device according to [9].

[11]
前記制御部は、前記照度センサが前記物体の影に入ると判断した場合に、前記表示輝度を変更させないことを特徴とする[9]に記載の表示装置。
[11]
The display device according to [9], wherein the control unit does not change the display brightness when it is determined that the illuminance sensor enters a shadow of the object.

[12]
前記制御部は、前記照度センサが前記物体の影に入ると判断した場合に、前記照度値を前記影の分だけ補正した補正照度値を用いて前記表示輝度を調整することを特徴とする[9]に記載の表示装置。
[12]
When the control unit determines that the illuminance sensor enters the shadow of the object, the control unit adjusts the display brightness using a corrected illuminance value obtained by correcting the illuminance value by the amount of the shadow. 9].

[13]
前記物体は人物であることを特徴とする[9]乃至[12]の何れかに記載の表示装置。
[13]
The display device according to any one of [9] to [12], wherein the object is a person.

[14]
前記赤外線センサは前記人物の温度に依存する電圧を出力し、前記制御部は前記電圧の時間変化量に基づいて前記照度測定部に対する前記人物の位置を特定する、
ことを特徴とする[13]に記載の表示装置。
[14]
The infrared sensor outputs a voltage depending on the temperature of the person, and the control unit specifies the position of the person with respect to the illuminance measurement unit based on a temporal change amount of the voltage.
[13] The display device according to [13].

[15]
前記制御部は、前記電圧の前記時間変化量が第3の閾値よりも大きい場合に前記照度センサが前記人物の影に入ると判断する、
ことを特徴とする[14]に記載の表示装置。
[15]
The control unit determines that the illuminance sensor enters the shadow of the person when the time change amount of the voltage is greater than a third threshold.
[14] The display device according to [14].

[16]
前記制御部は、前記電圧の前記時間変化量が第3の閾値以下の場合に、前記第3の閾値よりも小さい第4の閾値に対して、前記電圧の前記時間変化量が前記第4の閾値よりも大きければ、前記照度センサが前記人物の影に入ると判断する、
ことを特徴とする[14]に記載の表示装置。
[16]
When the time change amount of the voltage is equal to or smaller than a third threshold value, the control unit determines that the time change amount of the voltage is the fourth threshold value with respect to a fourth threshold value that is smaller than the third threshold value. If it is greater than the threshold, it is determined that the illuminance sensor enters the shadow of the person.
[14] The display device according to [14].

100…デジタルフォトフレーム、102…メインCPU、104…RAM、106…ROM、108…表示部、112…無線LANデバイス、114…撮像部、116…サブCPU、118…入力部、120…LED、122…照度センサ、124…人感センサ、126…縦横センサ、128…電源、130…バス。   DESCRIPTION OF SYMBOLS 100 ... Digital photo frame, 102 ... Main CPU, 104 ... RAM, 106 ... ROM, 108 ... Display part, 112 ... Wireless LAN device, 114 ... Imaging part, 116 ... Sub CPU, 118 ... Input part, 120 ... LED, 122 ... Illuminance sensor, 124 ... Human sensor, 126 ... Vertical / horizontal sensor, 128 ... Power supply, 130 ... Bus.

Claims (16)

画像を表示する表示部と、
前記表示部の表示輝度を調整する制御部と、
前記表示部の周囲の明るさである照度値を前記制御部に出力する照度センサと、
前記表示部に対して位置する被写体を撮像した画像を前記制御部に出力する撮像部と、
を具備し、
前記制御部は、
前記被写体を撮像した画像に基づいて前記被写体の前記表示部に対する位置を特定し、
前記位置に基づいて前記照度センサ前記被写体の影がかかるか否かを判断し、
前記判断の結果に応じて前記照度値に基づいて前記表示輝度を調整する、
ことを特徴とする表示装置。
A display for displaying an image;
A control unit for adjusting display brightness of the display unit;
An illuminance sensor that outputs an illuminance value that is brightness around the display unit to the control unit;
An imaging unit that outputs an image obtained by imaging a subject located with respect to the display unit to the control unit;
Comprising
The controller is
Identifying the position of the subject relative to the display unit based on an image of the subject ,
Determining whether or not a shadow of the subject is applied to the illuminance sensor based on the position;
Adjusting the display brightness based on the illuminance value according to the result of the determination;
A display device characterized by that.
前記制御部は、
前記画像に基づいて前記表示部と前記被写体との距離及び/又は前記表示部と前記被写体との重力方向に対する位置関係を求め、
前記距離及び/又は前記位置関係に基づいて、前記照度センサ前記被写体の前記影入るか否かを判断する、
ことを特徴とする請求項1に記載の表示装置。
The controller is
Based on the image, the distance between the display unit and the subject and / or the positional relationship of the display unit and the subject with respect to the gravitational direction are obtained,
It said distance and / or on the basis of the positional relationship, it is determined whether the shadow of the object to the illuminance sensor enters,
The display device according to claim 1.
前記制御部は、前記照度センサ前記被写体の前記影がかかると判断した場合に、前記照度値を用いた前記表示部の前記表示輝度の調整を行わない、
ことを特徴とする請求項1に記載の表示装置。
Wherein, when determining that the shadow of the object to the illuminance sensor is applied, does not perform adjustment of the display luminance of the display unit using the illumination value,
The display device according to claim 1.
前記制御部は、前記照度センサ前記被写体の前記影がかかると判断した場合に、前記照度値を前記影の分だけ補正した補正照度値を求め、当該補正照度値を用いて前記表示部の前記表示輝度を調整する、
ことを特徴とする請求項1に記載の表示装置。
Wherein, when determining that the shadow of the object to the illuminance sensor is applied, the intensity value determined by the amount corrected correction intensity value of the shadow of the display unit with the correct intensity value Adjusting the display brightness;
The display device according to claim 1.
前記被写体は人物であることを特徴とする請求項1乃至4の何れかに記載の表示装置。   The display device according to claim 1, wherein the subject is a person. 前記制御部は、前記画像に基づいて前記人物の顔を検出し、前記画像に対する当該顔の比率が第1の閾値よりも大きい場合に前記照度センサに対する当該顔の位置を特定する、
ことを特徴とする請求項5に記載の表示装置。
The control unit detects the face of the person based on the image, and specifies the position of the face with respect to the illuminance sensor when a ratio of the face to the image is greater than a first threshold.
The display device according to claim 5.
前記制御部は、前記第1の閾値よりも大きい第2の閾値に対して、前記顔の前記比率が前記第1の閾値よりも大きく且つ当該第2の閾値よりも大きいときに前記照度センサ前記人物の前記影がかかると判断する、
ことを特徴とする請求項6に記載の表示装置。
The control unit, to the first second threshold greater than the threshold, the illuminance sensor when the ratio of the face is greater than the first large and the second threshold value than the threshold it is determined that it takes the shadow of the person,
The display device according to claim 6.
前記制御部は、前記第1の閾値よりも大きい第2の閾値に対して、前記顔の前記比率が前記第1の閾値よりも大きく且つ当該第2の閾値以下のときに、前記顔の位置が前記画像の一定の位置よりも上側であれば前記照度センサ前記人物の前記影がかかると判断する、
ことを特徴とする請求項6に記載の表示装置。
When the ratio of the face is greater than the first threshold and less than or equal to the second threshold with respect to a second threshold that is greater than the first threshold, the control unit determines the position of the face. There the shadow of the person to the illuminance sensor is determined to take if above the predetermined position of the image,
The display device according to claim 6.
画像を表示する表示部と、
前記表示部の表示輝度を調整する制御部と、
前記表示部の周囲の明るさである照度値を前記制御部に出力する照度センサと、
前記表示部に対して前記表示部を観察する側に存在する物体の移動量を表す移動信号を前記制御部に出力する赤外線センサと、
を具備し、
前記制御部は、
前記移動信号に基づいて前記物体の前記表示部に対する位置を特定し、
前記位置に基づいて前記照度センサ前記物体の影がかかるか否かを判断し、
前記判断の結果に応じて前記照度値に基づいて前記表示輝度を調整する、
ことを特徴とする表示装置。
A display for displaying an image;
A control unit for adjusting display brightness of the display unit;
An illuminance sensor that outputs an illuminance value that is brightness around the display unit to the control unit;
An infrared sensor that outputs a movement signal representing a movement amount of an object existing on the side of observing the display unit to the display unit to the control unit;
Comprising
The controller is
Identifying the position of the object relative to the display based on the movement signal;
Determining whether or not the illuminance sensor is shaded by the object based on the position;
Adjusting the display brightness based on the illuminance value according to the result of the determination;
A display device characterized by that.
前記制御部は、
前記移動信号に基づいて、前記表示部と前記物体との位置関係が所定の値よりも大きく変化しているか否かを表す変化情報と、前記物体と前記表示部との距離が所定の距離よりも近いか否かを表す距離情報と、を求め、
前記変化情報と前記距離情報とに基づいて前記照度センサ前記物体の前記影がかかるか否かを判断する、
ことを特徴とする請求項9に記載の表示装置。
The controller is
Based on the movement signal, change information indicating whether or not the positional relationship between the display unit and the object has changed more than a predetermined value, and the distance between the object and the display unit from a predetermined distance And distance information indicating whether or not
Determining whether the shadow of the object is applied to the illuminance sensor based on the change information and the distance information;
The display device according to claim 9.
前記制御部は、前記照度センサ前記物体の前記影がかかると判断した場合に、前記表示輝度を変更させないことを特徴とする請求項9に記載の表示装置。 Wherein the control unit, the display device according to claim 9, wherein when said shadow of said object illuminance sensor is judged according, characterized in that it does not change the display brightness. 前記制御部は、前記照度センサ前記物体の前記影がかかると判断した場合に、前記照度値を前記影の分だけ補正した補正照度値を求め、当該補正照度値を用いて前記表示輝度を調整することを特徴とする請求項9に記載の表示装置。 Wherein, when determining that the shadow of the object to the illuminance sensor is applied, the illumination value calculated correction intensity values only corrected amount of the shadow, the display brightness using the correction intensity value The display device according to claim 9, wherein the display device is adjusted. 前記物体は人物であることを特徴とする請求項9乃至12の何れかに記載の表示装置。   The display device according to claim 9, wherein the object is a person. 前記赤外線センサは前記人物の温度に依存する電圧を出力し、前記制御部は当該電圧の時間変化量に基づいて前記照度センサに対する前記人物の位置を特定する、
ことを特徴とする請求項13に記載の表示装置。
The infrared sensor outputs a voltage depending on the temperature of the person, and the control unit specifies the position of the person with respect to the illuminance sensor based on a temporal change amount of the voltage.
The display device according to claim 13.
前記制御部は、前記電圧の前記時間変化量が第3の閾値よりも大きい場合に前記照度センサ前記人物の影がかかると判断する、
ことを特徴とする請求項14に記載の表示装置。
Wherein the control unit, the time variation of the voltage is determined to the shadow of the person to the illuminance sensor is greater than the third threshold value such,
The display device according to claim 14.
前記制御部は、前記電圧の前記時間変化量が第3の閾値以下の場合に、当該第3の閾値よりも小さい第4の閾値に対して、前記電圧の前記時間変化量が当該第4の閾値よりも大きければ、前記照度センサ前記人物の影がかかると判断する、
ことを特徴とする請求項14に記載の表示装置。
When the time change amount of the voltage is equal to or smaller than a third threshold value, the control unit determines that the time change amount of the voltage is the fourth threshold value with respect to a fourth threshold value smaller than the third threshold value. If greater than the threshold, it is determined that the illuminance sensor is shaded by the person.
The display device according to claim 14.
JP2011214702A 2011-09-29 2011-09-29 Display device Active JP5895426B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011214702A JP5895426B2 (en) 2011-09-29 2011-09-29 Display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011214702A JP5895426B2 (en) 2011-09-29 2011-09-29 Display device

Publications (3)

Publication Number Publication Date
JP2013074613A JP2013074613A (en) 2013-04-22
JP2013074613A5 JP2013074613A5 (en) 2014-10-16
JP5895426B2 true JP5895426B2 (en) 2016-03-30

Family

ID=48478714

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011214702A Active JP5895426B2 (en) 2011-09-29 2011-09-29 Display device

Country Status (1)

Country Link
JP (1) JP5895426B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016038504A (en) * 2014-08-08 2016-03-22 シャープ株式会社 Portable terminal device and control method therefor
JP6540004B2 (en) * 2014-12-08 2019-07-10 セイコーエプソン株式会社 Display device and control method of display device
JP2017079001A (en) * 2015-10-21 2017-04-27 レノボ・シンガポール・プライベート・リミテッド Information processing device, luminance control method of display device, and program executable by computer
JP7312599B2 (en) * 2019-04-24 2023-07-21 セコム株式会社 surveillance display

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5016896B2 (en) * 2006-11-06 2012-09-05 株式会社ジャパンディスプレイセントラル Display device
KR101824513B1 (en) * 2010-12-29 2018-02-01 삼성전자 주식회사 Terminal and brightness control method thereof
JP5695974B2 (en) * 2011-05-26 2015-04-08 京セラ株式会社 Mobile terminal, brightness control program, and brightness control method
TW201305998A (en) * 2011-07-20 2013-02-01 Hon Hai Prec Ind Co Ltd Electronic device with function of adjusting backlight and method thereof

Also Published As

Publication number Publication date
JP2013074613A (en) 2013-04-22

Similar Documents

Publication Publication Date Title
US9060129B2 (en) Imaging device, control method of imaging device, and computer program
JP4018695B2 (en) Method and apparatus for continuous focusing and exposure adjustment in a digital imaging device
US20160034019A1 (en) Display apparatus and control method for controlling power consumption thereof
JP2009300515A (en) Display control apparatus and display control method
US20120169901A1 (en) Electronic apparatus, image capturing device and method for automatically capturing image thereof
CN101986691B (en) Image processing apparatus and image processing method
US20140362281A1 (en) Exposure control device, imaging device, image display device, and exposure control method
CN105915807B (en) Method and electronic device for calculating light quantity change characteristics
JP5895426B2 (en) Display device
US20170364765A1 (en) Image processing apparatus, image processing system, vehicle, imaging apparatus and image processing method
KR101282567B1 (en) Apparatus and method for amending non-uniformity of handheld thermal imaging camera
JP2013074613A5 (en)
JP2015171116A (en) Display device of camera
TW201722208A (en) Illuminance acquiring device, illuminance control system, and program
JP2010177821A (en) Imaging apparatus and imaging method
JP2019161335A (en) Imaging apparatus
US20210350577A1 (en) Image analysis device, image analysis method, and program
US10986272B2 (en) Image capturing device and captured image display method
JP2018054762A5 (en)
CN106128414A (en) Control method, control device and electronic installation
JP2016005110A (en) Imaging device
US11816873B2 (en) Image analysis device, image analysis method, and program
JP2011187292A (en) Lighting control device, and lighting unit
RU2694579C1 (en) Surveillance camera and surveillance camera system provided with said
JP6681593B2 (en) Illuminance acquisition system, lighting control system, and illuminance acquisition program

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140901

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140901

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150616

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150623

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150824

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160202

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160215

R150 Certificate of patent (=grant) or registration of utility model

Ref document number: 5895426

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150