JP5166570B2 - 電子機器、及び映像処理方法 - Google Patents

Description

本発明の実施の形態は、電子機器、及び映像処理方法に関する。

近年、技術に発達により例えばカメラを備えたデジタルテレビのように、撮像手段を備えた電子機器が提案されている。このような撮像手段を備えた電子機器においては、撮像手段によって撮像された映像よりユーザの顔を検出、又はユーザの顔を認識し、これに基づいて各種機能を実行する場合がある。

特開２００７−２１２６６４号公報

しかし、撮像環境又は検出／認識対象であるユーザの個性等により対象の検出／認識が困難である場合が存在する。例えば、対象であるユーザが照明の暗い環境にいるような場合には、撮像した映像の中から対象を検出／認識することが困難となる可能性があり、このような環境でユーザが色黒であるような場合には、より一層検出／認識が困難となる。

本発明は上記事情に鑑みてなされたものであって、検出対象の検出率を向上させることの可能な電子機器及び映像処理方法を提供することを課題とする。

実施形態の電子機器は撮像手段と、検出手段と、機能実行手段と、映像処理手段と、を具備する。検出手段は、前記撮像手段によって撮像された映像から、所定のオブジェクトを検出する。機能実行手段は、前記検出手段の検出結果に基づいて所定の機能を実行する。映像処理手段は前記検出手段の検出対象の前記所定のオブジェクトを検出し易くするように、前記検出手段が検出処理を実行する映像に映像処理を実行する。

実施形態におけるＤＴＶの一例を示す概念図。 実施形態におけるＤＴＶの内部構造の一例を示すブロック図。 実施形態におけるＤＴＶ中の顔検出／認識機能に関する構成の一例を示すブロック図。 実施形態における映像処理部が顔検出／認識処理対象の映像に対する映像処理を説明するための図。 実施形態における調整用画面の一例を示す概念図。 実施形態における顔検出／認識に関連する処理の一例を示すフロー図。

本発明に関する実施の形態の一例を、以下で図面を参照しながら説明する。

図１は本実施形態におけるＤＴＶ１の一例を示す概念図である。

ＤＴＶ１は例えばデジタルテレビ（Digital Television）であって本実施形態における電子機器の一例である。本実施形態では電子機器の一例としてＤＴＶ１を示すが、これに限定されるものではなく、例えばＤＶＤ（Digital Versatile Disc）プレーヤ、ＨＤＤ（Hard Disk Drive）プレーヤ、ＳＴＢ（Set Top Box）、又はＰＣ（Personal Computer）等の様々なものが電子機器の例として考えられる。

ＤＴＶ１は、例えば放送波等から受信した放送信号をデコードし、これを映像や音声として、表示部１２０やスピーカ１１０から出力することができる。

ＤＴＶ１は撮像部３０を有しており、撮像部３０は撮影手段としてＤＴＶ１正面の像を撮影することができる。つまり、ＤＴＶ１に正対したユーザの顔を撮影することができる。

次にＤＴＶ１の内部構造に関して詳細に説明を行う。

図２は本実施形態におけるＤＴＶ１の内部構造の一例を示すブロック図である。

ＤＴＶ１は、装置各部の動作を制御する制御部１５６を備えている。制御部１５６は、ＣＰＵ（Central Processing Unit）等を内蔵している。制御部１５６は、操作部１１６から入力される操作信号や、リモートコントローラ１１７から送信され受光部１１８を介して受信される操作信号に応じて、ＲＯＭ（Read Only Memory）１５７に予め記憶されたシステム制御プログラム及び各種処理プログラムを起動させる。制御部１５６は、起動したプログラムに従って、ＲＡＭ（Random Access Memory）１５８をワークメモリとして装置各部の動作を制御する。また、制御部１５６は各種機能を実行するための処理部を有している。この処理部については図３を用いて後述にて説明を行う。

入力端子１４４は、ＢＳ／ＣＳデジタル放送受信用のアンテナ１４３が受信した衛星デジタルテレビジョン放送信号を衛星デジタル放送用のチューナ１４５に供給する。チューナ１４５は、受信したデジタル放送信号のチューニングを行い、チューニングしたデジタル放送信号をＰＳＫ（Phase Shift Keying）復調器１４６に送信する。ＰＳＫ復調器１４６は、ＴＳ（Transport Stream）の復調を行い、復調したＴＳをＴＳ復号器１４７ａに供給し、ＴＳ復号器１４７ａは、TSをデジタル映像信信号、デジタル音声信号、およびデータ信号を含むデジタル信号に復号した後、信号処理部１００にこれを出力する。ここでのデジタル映像信号とはＤＴＶ１が出力可能な映像に関するデジタル信号であり、音声信号はＤＴＶ１が出力可能な音声に関するデジタル信号である。またデータ信号とは、例えばＤＴＶ１が電子番組表であるＥＰＧ（Electronic Program Guide）を生成するときに使用する情報である番組関連情報等を含む、放送波の放送番組に関する情報に関するデジタル信号である。

入力端子１４９は、地上波デジタル放送受信用のアンテナ１４８が受信した地上波デジタルテレビジョン放送信号を地上波デジタル放送用のチューナ１５０に供給する。チューナ１５０は、受信したデジタル放送信号のチューニングを行い、チューニングしたデジタル放送信号をそれぞれのＯＦＤＭ（Orthogonal Frequency Division Multiplexing）復調器１５１に送信する。ＯＦＤＭ復調器１５１は、ＴＳの復調を行い、復調したＴＳをそれぞれのＴＳ復号器１４７ｂに供給し、ＴＳ復号器１４７ｂは、ＴＳをデジタル映像信号及び音声信号等に復号した後、信号処理部１００にこれを出力する。また、ＤＴＶ１は、一例として、アンテナ１４８が接続される入力端子１４９にＣＡＴＶ（Common Antenna Television）用のチューナを接続することによってＣＡＴＶも視聴することができる。

信号処理部１００は、ＴＳ復号器１４７ａ、１４７ｂ、または制御部１５６から出力されたデジタル信号に、適切な信号処理を施す。より具体的には、信号処理部１００はデジタル信号を映像信号、デジタル音声信号、およびデータ信号に分離する。分離された映像信号はグラフィック処理部１５２に、音声信号は音声処理部１５３に出力される。また信号処理部１００は、ライン入力端子１３７からの入力信号にも所定のデジタル信号処理を施す。

ＯＳＤ（On Screen Display）信号生成部１５４は、制御部１５６の制御に従って、ＵＩ（ユーザ・インタフェース）画面などを表示するためのＯＳＤ信号を生成する。また信号処理部１００においてデジタル放送信号から分離されたデータ信号は、ＯＳＤ信号生成部１５４により適切なフォーマットのＯＳＤ信号に変換され、グラフィック処理部１５２に出力される。

グラフィック処理部１５２は、信号処理部１００から出力されるデジタルの映像信号のデコード処理を行う。デコードされた映像信号は、ＯＳＤ信号生成部１５４から出力されたＯＳＤ信号と重ね合わせて合成され、映像処理部１５５に出力される。グラフィック処理部１５２は、デコードされた映像信号またはＯＳＤ信号を、映像処理部１５５に選択的に出力することもできる。

映像処理部１５５は、グラフィック処理部１５２から出力された信号に対して画質の補正を行った上で、表示部処理部１５５で表示可能なフォーマットの映像信号に変換する。映像処理部１５５で変換された映像信号は、表示部１２０に表示される。映像処理部１５５における画質の補正については、図３以降の説明にて詳細に述べる。

表示部１２０はＬＣＤ（Liquid Crystal Display）によって構成されており、液晶によって映像を表示する。バックライト１２１は表示部１２０を後方より照射する。

音声処理部１５３は、入力された音声信号を、スピーカ１１０で再生可能なフォーマットの音声信号に変換する。変換された音声信号は、スピーカ１１０に出力されて再生される。

ＬＡＮ端子１３１は、ＬＡＮＩ／Ｆ１６４を介して制御部１５６に接続されている。ＬＡＮ端子１３１は、イーサネット（登録商標）を用いた一般的なＬＡＮ対応ポートとして使用される。本実施形態においてＬＡＮ端子１３１にはＬＡＮケーブルが接続されており、インターネット３と通信可能となっている。

カメラセンサモジュール１６０は表示部１２０の下側に設けられており、カメラ１６０正面の像を撮像することができる。カメラセンサモジュール１６０は撮像した映像の中からユーザの顔を検出することができ、更に、検出したユーザの顔の情報を登録されたユーザの顔の情報と照合することで、検出されたユーザが登録されたユーザであるか否かを判別することができる。ＤＴＶ１は、カメラセンサモジュール１６０によって撮像された映像にユーザの顔が存在する（検出された）場合、つまり一般的にはユーザがＤＴＶ１を視聴している場合には、これに基づいて各種処理を実行することができる。また、ユーザの顔が登録されたユーザと一致するような場合には、ユーザ個別の機能又は設定を実行することができる。カメラセンサモジュール１６０は、撮像した映像よりユーザの顔が検出できた場合には、制御部１５６に検出できた旨を示す情報を通知し、登録ユーザの顔を認識できた場合には、このユーザを示す認識情報を制御部１５６に通知する機能を有している。ここでの顔検出の方法としては、例えばユーザの顔や、肩の輪郭に基づいて顔を検出するとしても良いし、これとは異なる方法で認識しても良い。また、ここでの顔認識の技術の方法としては、例えばユーザの目、鼻、口等の形状を認識し、これに基づいてユーザを認識（認識）しても良いし、これとは異なる特徴量に基づいて認識するとしても良い。

ＵＳＢ（Universal Serial Bus）端子１３３は、ＵＳＢ Ｉ／Ｆ１６６を介して制御部１５６に接続されている。ＵＳＢ端子１３３は、一般的なＵＳＢ対応ポートとして使用される。ＵＳＢ端子１３３には、例えばハブを介して、携帯電話、デジタルカメラ、各種メモリカードに対するカードリーダ／ライタ、ＨＤＤ、キーボード等が接続される。制御部１５６は、ＵＳＢ端子１３３を介して接続される機器との間で、情報の通信（送受信）を行うことができる。

ＨＤＤ１７０はＤＴＶ１に内蔵される磁気記憶媒体であってＤＴＶ１が有する各種情報を記憶する機能を有している。

本実施形態におけるＤＴＶ１は、撮像部で撮像した映像に基づいて、ユーザの顔を検出／認識し、これに基づいて各種処理を実行する機能を有している。以下では、この機能について詳細に説明を行う。

図３は本実施形態における、ＤＴＶ１の顔検出／認識機能に関する構成の一例を示すブロック図で有る。

カメラセンサモジュール１６０及び制御部１５６が顔検出／認識機能に関する構成を有してしており、ここではまず、カメラセンサモジュール１６０内の機能構成について説明する。

撮像部３０は、例えばカメラ等の撮像手段であり、表示部１２０正面の像を撮像する機能を有している。撮像部３０は撮像した映像を映像調整部３３に入力する。

検出／認識部３４は映像調整部３３から出力された映像の中から、ユーザの顔を検出／認識する機能を有する。ここでの検出／認識方法としては上述のように映像中から各種特徴量を抽出することで顔の検出／認識を行う。検出／認識部３４は自身の持つレジスタの中に顔の特徴量の情報を有しており、この特徴量と照合することで、入力された映像の中に顔が存在するか（顔検出）、及び検出された顔は登録されたユーザの顔と対応（一致）するか否かの判別（顔認識）を行う。検出／認識部３４は、入力された映像中より顔が検出された場合には、この旨及び映像中の顔の存在する位置の情報を制御部１５６の顔関連機能実行部３７及び調整用画面作成部３５に通知し、検出された顔と登録された顔の特徴量とが対応（一致）する場合には、このユーザを示す認識子を顔関連機能実行部３７に通知する。

映像処理部３３は、撮像部３０から入力する映像に対して所定の映像処理を実行する機能を有している。撮像部３０より入力された撮像映像は一般的に撮像部３０のカメラレンズ等の特性の影響を受けた映像となっており、この映像を各種機能に利用するにはカメラレンズ等の特性の影響を低減させることが好適である。本実施形態においては、撮像部３０で撮像した映像に対して、輝度ゲインを調整するガンマ補正という補正処理を実行する。つまり、映像処理部３３は撮像部３０から入力される映像について、輝度調整を行い、調整後の映像を検出／認識部３４に出力する。映像処理部３３が撮像部３０より入力された映像に対して実行する所定の映像処理については図４を用いて後述にて詳細に説明する。

検出／認識処理について、検出／認識部３４ではＤＴＶ１周囲の撮像環境又は検出／認識対象であるユーザの個性等により対象の検出／認識が困難である場合が存在する。例えば、対象であるユーザが照明の暗い環境にいるような場合には、撮像した映像の中から対象を検出／認識することが困難となる可能性があり、このような環境でユーザが色黒であるような場合には、より一層顔の検出／認識が困難となる。ユーザの顔の検出／認識ができない場合には、この顔の検出／認識に基づいた各種機能が使えず、ユーザに十分なサービスを提供することができない。このように、ＤＴＶ１周囲の撮像環境又は検出／認識対象であるユーザの個性等により対象の検出／認識が困難である場合には、映像処理部３３は撮像部３０より入力される映像に対して所定の映像処理を実行し、映像中のユーザを顔の検出／認識し易くした上で検出／認識部３４に対して映像を出力する。この処理によって検出／認識部３４は映像中の顔の検出／認識率を向上させることができる。

調整用画面作成部３５は、検出／認識部３４が顔の検出／認識を実行する対象の映像の映像処理量を調整について、ユーザからの操作指示を受け付けるための画面を作成し、ユーザに対して提供する機能を有している。調整用画面作成部３５は、映像処理部３３及び検出／認識部３４から入力した信号に基づいて調整用画面を作成する。この調整用画面の例は図５で示し、詳細な説明については、後に図５の説明として後述にて行う。

指示部３６は、例えばリモートコントローラ１１７を介して入力されるユーザからの指示に基づいて、映像処理部３３に映像処理量の調整を指示する機能を有している。

顔関連機能実行部３７は、撮像部３０によって撮像された映像からユーザの顔を検出／認識できた場合、この検出／認識結果に基づいて各種機能を実行する機能を有している。

ここでの、顔の検出結果に基づいた各種機能とは、ＤＴＶ１の自動電源ＯＮ／ＯＦＦ機能、表示部１２０のバックライトの輝度調整機能等が例として挙げられる。自動電源ＯＮ／ＯＦＦ機能としては、ＤＴＶ１がユーザの顔を検出しなくなると自動的に電源をＯＦＦし、検出すると自動的にＯＮする機能を指し、バックライト輝度調整機能とは、ユーザの顔を検出しなくなると自動的にバックライトの輝度を下げ、省エネを図る機能を指す。

また、顔の認識結果に基づいた各種機能とは、パーソナル画質・音質設定機能、パレンタルロック機能、ユーザお好みのＥＰＧ提供機能、お気に入りチャンネル機能、録画コンテンツの個別管理機能等の機能が挙げられる。パーソナル画質・音声設定機能とは登録されたユーザ個人の好みの画質・音質を設定しておき、認識されたユーザと対応する画質・音質で映像・音声を出力する機能を指し、パレンタルロック機能とはユーザの個人登録に基づいて、所定番組の視聴をロックする機能を指す。また、ユーザお好みＥＰＧ提供機能としては、例えば登録されたユーザによってカスタマイズされたＥＰＧを表示する機能を指し、また、お気に入りチャンネル機能とは、登録されたユーザのお気に入りのチャンネルをユーザに推薦する機能を指し、録画コンテンツ個別管理機能とは、登録されたユーザごとに録画コンテンツを管理する機能を指す。

次に、映像処理部３３が実行する映像処理について図４を用いて詳細に説明を行う。

図４は本実施形態における映像処理部３３が顔検出／認識処理対象の映像に対する映像処理を説明するための図である。

上述のように撮像部３０で撮像された映像は一般的にカメラレンズ等の特性の影響を受けており、映像処理部３３は通常はこの特性の影響を低減するべく、ガンマ補正処理を実行する。

カメラレンズ等の特性の影響を受けると、撮像部３０で撮像された映像（出力される映像の輝度）は実際の像（カメラレンズに入力される映像の輝度）と比較して、図４（Ａ）直線４０に示されるような理想的な輝度値ではなく、曲線４１に示されるような理想的な輝度値からずれが生じたものとなってしまう。

この補正では、図４（Ｂ）の曲線４２に示されるようなカメラレンズの特性の逆関数となるようなガンマ補正テーブルを、撮像された映像の輝度値に乗ずる。これにより、図４（Ｃ）直線４３に示すように、映像は理想的な輝度値に近いものとなる。

ここで、本実施形態における映像処理部３３は、特性を低減させるためのガンマ補正テーブルのみでなく、より多くのガンマ補正テーブルを有する。これらのガンマ補正テーブルは図４（Ｄ）に示されている。

図４（Ｄ）は映像にガンマ補正を行う場合に用いられるガンマ補正テーブルを示す図である。図４（Ｄ）に示される複数の曲線４２、曲線４４乃至曲線４８はそれぞれ、複数のガンマ補正テーブルを示している。曲線４４乃至曲線４８はカメラレンズ等の特性を低減させるために行うガンマ補正に用いられるテーブルではなく、検出／認識部３２が映像の中の顔を検出／認識しやすくするための輝度処理に用いられるガンマ補正テーブルである。

つまり、照明が暗い等によって映像が暗いと、映像が一部黒つぶれしてしまうという場合がある。そこで、映像の輝度を上昇させるべく撮像部３０の特性に対応したガンマ補正テーブルとは異なるガンマ補正テーブルが用意されている。曲線４４乃至曲線４８の中では、曲線４４が最も入力された映像信号と出力される輝度信号の輝度との差が最も小さくなる（輝度の上昇が小さい）ガンマ補正テーブルとなり、曲線４８が最も輝度差が大きくなる（輝度の上昇が大きい）ガンマ補正テーブルとなる。

本実施形態においては、顔検出／認識用のガンマ補正テーブルとして、５段階のガンマ補正処理を行うべく、曲線４４乃至曲線４８のガンマ補正テーブルが用意されている。映像処理部３３は、これらのガンマ補正テーブルを用いて入力される映像に対して映像信号の輝度を上昇させる（映像を明るくする）映像処理を実行し、これを検出／認識部３４に対して出力する。また、本実施形態における曲線４４乃至曲線４８に入力される輝度値が小さいほど、この輝度に乗ずる補正値が高く設定されている。つまり、映像中の暗い箇所程、より大きく輝度が変化し、画素が明るくなる。

本実施形態においては、図４で示すように映像の輝度が上昇するように輝度調整処理（ガンマ補正処理）を実行する。これにより映像が明るくなるため、上述のように撮像した映像が暗い場合等であっても、映像の中での黒つぶれする箇所が減り、ユーザの輪郭、目、鼻、口等を検出／認識部３４は検出／認識し易くなる。

この輝度調整（ガンマ補正）処理は、ＤＴＶ１によって自動的に行われるとしても、ユーザによって指示されて行われるとしてもどちらでも良い。更に、これらが組み合わされるとしても良い。本実施形態では、ユーザが自動調整とユーザ入力による調整を切り換えることができ、更にユーザはガンマ補正の度合いを選択することができる。この選択の際には、ユーザにガンマ補正の調整用の画面である調整用画面が提供される。次にこの調整用画面について説明を行う。

図５は本実施形態における調整用画面の一例を示す概念図である。

調整用画面５１は、ユーザがガンマ補正の自動／手動設定の切り替えや、手動の場合のガンマ補正の度合いの切り替えを行うためにユーザに提供される画面であって、調整用画面作成部３５によって作成され、表示部１２０に表示される画面である。また、ユーザは現在自分の顔が検出されているのか否かを、この調整用画面５１によって知ることができる。

調整用画面５１は、一部に対象映像表示５２を有している。この対象映像表示５２は顔の検出／認識対象の映像の表示であり、この映像は映像処理部３３から入力される映像をそのまま貼り付けたものである。つまり、検出／認識対象の映像にガンマ補正が施される場合には、ガンマ補正処理後の映像が表示されることとなる。これによって、現在撮像部３０に撮像されている像を認識することができ、ユーザは自分が撮像部３０に撮像されていることを確認することができる。例えば、ユーザがＤＴＶ１の前に存在するにも関わらず、顔検出／認識による機能が開始されないような場合には、一般的にユーザは顔検出／認識による機能が開始されない理由を判断することは難しい。これは、ユーザにとって顔検出／認識機能についてどこに問題点があるのかわからないためである。つまり、ユーザは撮像部３０の故障なのか、顔が検出／認識されていないのかを知ることができない。しかし、本実施形態におけるＤＴＶ１では、ユーザは調整用画面５１の表示指示を行うことが可能であり、この中に対象映像表示５２が含まれているため、ユーザは自分が正しく撮像されているか否かを知ることができる。

また、調整用画面５１では顔検出通知表示５３を表示することができる。顔検出通知表示５３は、検出／認識部３２が映像からユーザの顔が検出していない間は暗い色で表示されており、検出すると明るい色で表示される。また、本実施形態においては顔検出通知表示５３は「Face detected」と顔の検出の旨を示す表示である。

更に、調整用画面５１では顔検出通知アイコン５４が表示される。この顔検出通知アイコン５４も、ユーザに対して顔を検出した旨を示す機能を有しており、本実施形態においてはユーザの顔を検出すると検出通知アイコン５４の表情が変化することで、ユーザに検出した旨を通知する。この表情の変化としては、検出しない間は顔検出通知アイコン５４が無表情であり、顔を検出すると笑顔になる等の例が挙げられる。また、表情が変化する以外でも、色が変わる、透明度が変化する等の変化によって通知するとしても良い。更に、この顔検出の通知については顔検出通知表示５３、顔検出通知アイコン５４をもって行われないとしても良い。例えば、顔を検出できた場合には、調整用画面作成部３５が検出／認識部３２から入力されるユーザの顔の映像上での位置情報に基づいてユーザの顔にカーソルを表示するとしても良い。

調整用画面５１では、ユーザがガンマ補正について指示を行うための調整表示５５が表示されている。調整表示５５はユーザに、ガンマ補正をＤＴＶ１に自動で行わせるか、ユーザ指示の基で行わせるかの選択を促すことができる。ユーザはリモートコントローラ１１７等によって調整表示５５にフォーカスを合わせ、リモートコントローラ１１７の横ボタンを押すことで、自動／手動調整の切り替え及びガンマ補正量の調整を行うことができる。フォーカスがあわせられ、横ボタンが押されるたびに、調整表示５５は「ＡＵＴＯ」、「１」、「２」、「３」、「４」、「５」という表示をトグルで切り換えて表示する。この切り換えは横ボタンで行われなくてもよく、例えばリモコンに所定のボタンを割り当て、このボタンを押下すると、トグルで切り替わるとしてもよい。

ここでユーザが「ＡＵＴＯ」を選択すると、ユーザにガンマ補正の度合いを指示させず、ＤＴＶ１が自動的にガンマ補正を行う。このとき、映像処理部３３がガンマ補正テーブルを自動的に切り換えて、検出／認識部３２が顔の検出／認識処理を実行する。

「ＡＵＴＯ」以外の選択肢はユーザが手動でガンマ補正の度合いの変更を行うためのものであり、番号の昇順でガンマ補正の処理の度合いが大きくなる。すなわち、「１」が選択されている場合には、映像処理部３３はガンマ補正テーブルとして曲線４４を用いてガンマ補正処理を行う。また、「５」が選択されている場合には、映像処理部３３はガンマ補正テーブルとして曲線４８を用いてガンマ補正処理を行う。

ここでは、リモートコントローラ１１７から操作指示を受信すると、指示部３６が映像処理部３３に対してガンマ補正処理の指示を行う。

次に、処理フローについて説明を行う。

図６は、本実施形態における顔検出／認識に関連する処理の一例を示すフロー図である。

まず、撮像部３０がＤＴＶ１正面の像を撮像する（ステップＳ６０１）。

次に、検出／認識部３２が入力された映像から顔検出／認識できたか否かを判別する（ステップＳ６０２）。

ステップＳ６０２において、検出／認識部３２が入力された映像から顔検出／認識ができない場合（ステップＳ６０２：Ｎｏ）、制御部１５６は、撮像部３０が撮像を開始してから所定時間が経過したか否かの判別を行う（ステップＳ６０３）。

所定時間が経過しない間（ステップＳ６０３：Ｎｏ）には、制御部１５６はユーザから調整用画面５１の表示指示を受けたか否かの判別を行う（ステップＳ６０４）。

制御部１５６がユーザから調整用画面５１の表示指示を受けた場合（ステップＳ６０４：Ｙｅｓ）、調整用画面作成部３５は調整用画面５１を作成し、表示部１２０に表示する（ステップＳ６０５）。

調整用画面５１を表示すると、制御部１５６は、ユーザからガンマ補正について「ＡＵＴＯ」が選択されたか、それとも「１」、「２」、「３」、「４」、「５」が選択されたか（ユーザ指示が選択されたか）を判別する（ステップＳ６０６）。

制御部１５６がユーザから調整用画面５１の表示指示を受けない場合（ステップＳ６０４：Ｎｏ）、及びユーザから「ＡＵＴＯ」が選択された場合には（ステップＳ６０６：ＡＵＴＯ）、映像処理部３３は自動でガンマ補正テーブルを切り換えて、ガンマ補正処理を実行する（ステップＳ６０７）。

また、ステップＳ６０６においてユーザから「１」、「２」、「３」、「４」、「５」（ユーザ指示用選択肢）が選択された場合には（ステップＳ６０６：ユーザ指示）、映像処理部３３はこの指示に基づいてガンマ補正テーブルを切り換えて、ガンマ補正処理を実行する（ステップＳ６０８）。

ここで、本実施形態では、調整表示５５で「ＡＵＴＯ」が選択されている場合には、ユーザ指示用選択肢「１」乃至「５」が選択されている場合よりも、ガンマ値の小さいガンマ補正テーブルを用いてガンマ補正を実行するものと例示する。しかし、これに限定されない。

ステップＳ６０２において、検出／認識部３２が入力された映像から顔検出／認識をできた場合（ステップＳ６０２：Ｙｅｓ）、検出／認識部３２はこの旨及び／又は認識されたユーザの認識子を顔関連機能実行部３７に送信し、顔関連機能実行部３７が顔関連の各種機能を実行する（ステップＳ６０９）。

また、ステップＳ６０３において、撮像部３０が撮像を開始してから所定時間したと判別するときは（ステップＳ６１０）、制御部１５６は検出／認識対象の映像から顔の検出／認識不可能であると判断する。

ステップＳ６０９、ステップＳ６１０の終了後、上記処理フローは終了となる。

本実施形態におけるＤＴＶ１は、顔の検出／認識対象の映像に対して輝度調整を行うことによって、顔の検出／認識率を向上させることができる。

上述においては、顔の検出／認識と並列して記載をしているが、顔の検出のみに上記の映像処理を行うとしても良い。また、検出／認識対象の部位としては顔でなくてもよく、手、肩等の人間の他の部位であっても良いし、さらに検出／認識対象は人間以外であっても良い。

また、本実施形態では暗い箇所を明るくするように映像の輝度調整を行って、検出／認識率を向上させているが、これに限定されず、明るい箇所を暗くするように輝度の調整を行って検出／認識を行うとしても良い。例えば、周囲が明るすぎて撮像映像が白とびをしてしまうような場合には、このような処理が有効であると考えられる。更に、上述では、ガンマ補正によって映像の輝度の調整を行って、検出／認識率を向上させているが、検出／認識率を向上させるための映像の調整処理としてはこれに限定されず、例えばＲＧＢ等のその他の値を調整することで検出／認識率を向上させるとしても良い。

さらに、撮像された映像の中にユーザが複数存在する場合において、ユーザの個性によって、複数のユーザの一部のユーザが検出／認識され、他のユーザが検出されないような場合が発生することも考えられる。本実施形態では、ユーザ操作によって検出／認識のための映像処理を実行することができるため、このような場合にも検出／認識されていないユーザの検出／認識を実行することができる。このとき、映像処理前に既に検出／認識されたユーザについては、検出／認識結果を保持し、映像処理後に新たに検出／認識されたユーザについての結果を、保持された結果に追加するとしても良い。つまり、このように構成することによって、映像処理前に既に検出／認識されたていたユーザが映像処理によって検出／認識できなくなってしまう場合であっても、ＤＴＶ１は映像処理前と映像処理後のそれぞれの映像で検出／認識できるユーザを、検出／認識の結果として同時に管理することができる。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具現化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

１…ＤＴＶ、３…インターネット、１１０…スピーカ、１２０…表示部、１００…信号処理部、１１６…操作部、１１７…リモートコントローラ、１１８…受光部、１３１…ＬＡＮ端子、１３３…ＵＳＢ端子、１３７…ライン入力端子、１４３…アンテナ、１４４…入力端子、１４５…チューナ、１４６…ＰＳＫ復調器、１４７…ＴＳ復号器、１４８…アンテナ、１４９…入力端子、１５０…チューナ、１５１…ＯＦＤＭ復調器、１５２…グラフィック処理部、１５３…音声処理部、１５４…ＯＳＤ信号生成部、１５５…映像処理部、１５６…制御部、１５７…ＲＯＭ、１５８…ＲＡＭ、１６０…カメラセンサモジュール、１６４…ＬＡＮ Ｉ／Ｆ、１６６…ＵＳＢ Ｉ／Ｆ、３０…撮像部、３２…検出／認識部、３３…映像処理部、３５…調整用画面作成部、３６…指示部、３７…顔関連機能実行部、４０乃至４４…曲線（ガンマ補正テーブル）、４５乃至４９…曲線（出力）、５１…調整用画面、５２…対象映像表示、５３…顔検出通知表示、５４…顔検出通知アイコン、５５…調整表示。

Claims (10)

1. 撮像手段と、
   前記撮像手段によって撮像された映像から、所定のオブジェクトを検出する検出手段と、
   前記検出手段の検出結果に基づいて所定の機能を実行する機能実行手段と、
   前記検出手段が前記所定のオブジェクトを検出し易くなるように、前記映像の暗部を明るくするための輝度調整を前記映像に対して実行する映像処理手段と、
   前記輝度調整を自動または手動のどちらで行うかの選択を受付ける選択受付手段と、
   前記撮像手段によって複数の所定のオブジェクトが撮像され、前記検出手段が前記複数のオブジェクトのうちの少なくとも１のオブジェクトを検出し、かつ他のオブジェクトを検出しなかった場合に、前記１のオブジェクトの検出結果を保持させる手段と
   を備え、
   前記輝度調整の結果、前記検出手段が前記他のオブジェクトを新たに検出し、かつ前記検出された１のオブジェクトを新たに検出しなかった場合に、前記機能実行手段は、前記保持された１のオブジェクトの検出結果と前記他のオブジェクトの検出結果に基づいて前記所定の機能を実行する電子機器。
2. 前記映像処理手段は、前記輝度調整として前記映像のガンマ補正を実行する請求項１記載の電子機器。
3. 前記映像処理手段は、複数段階でガンマ補正処理を行うためのガンマ補正テーブルを切り換えて前記ガンマ補正を実行する請求項２記載の電子機器。
4. 前記映像処理手段は、前記受付手段が前記輝度調整を手動で行う選択を受付けた場合に、ユーザからの操作入力に基づいて前記ガンマ補正テーブルの切り替えを実行する請求項３記載の電子機器。
5. 前記映像処理手段は、前記受付手段が前記輝度調整を自動で行う選択を受付けた場合に、前記ガンマ補正テーブルの切り替えを自動的に実行する請求項３記載の電子機器。
6. ユーザに前記輝度調整の実行についての選択を提供する選択用画面を作成する作成手段を更に具備した請求項１記載の電子機器。
7. 前記作成手段は、前記検出手段が前記オブジェクトを検出すると、前記選択用画面内にこの旨を示す検出通知の表示を行う請求項６記載の電子機器。
8. 前記作成手段は、前記選択用画面内において、第１の領域に撮像対象の映像を表示させ、前記第１の領域以外の第２の領域で前記検出通知の表示を行う請求項７に記載の電子機器。
9. 前記検出手段が検出する前記オブジェクトはユーザの顔である請求項１記載の電子機器。
10. 電子機器に搭載された撮像手段によって撮像された映像データが入力され、
    複数の所定のオブジェクトのうちの少なくとも１のオブジェクトが検出され、かつ他のオブジェクトを検出しなかった場合に、前記１のオブジェクトの検出結果を保持させ、
    前記所定のオブジェクトが検出され易くなるように前記映像の暗部を明るくする輝度調整を自動または手動のどちらで行うかの選択を受付け、
    前記受付けられた選択に対応させて、前記映像の輝度を調整して、前記映像の暗部を明るくし、
    前記輝度の調整の結果、他のオブジェクトを新たに検出し、かつ前記検出された１のオブジェクトを新たに検出しなかった場合に、前記保持された１のオブジェクトの検出結果と前記他のオブジェクトの検出結果に基づいて所定の機能を実行する映像処理方法。

Images