JP2020064102A - 表示装置および表示方法 - Google Patents
表示装置および表示方法 Download PDFInfo
- Publication number
- JP2020064102A JP2020064102A JP2018194207A JP2018194207A JP2020064102A JP 2020064102 A JP2020064102 A JP 2020064102A JP 2018194207 A JP2018194207 A JP 2018194207A JP 2018194207 A JP2018194207 A JP 2018194207A JP 2020064102 A JP2020064102 A JP 2020064102A
- Authority
- JP
- Japan
- Prior art keywords
- brightness
- image data
- knee
- luminance
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims description 18
- 238000006243 chemical reaction Methods 0.000 claims abstract description 66
- 210000003127 knee Anatomy 0.000 claims description 222
- 238000012937 correction Methods 0.000 claims description 72
- 238000003384 imaging method Methods 0.000 description 25
- 230000006870 function Effects 0.000 description 21
- 230000009021 linear effect Effects 0.000 description 17
- 238000012545 processing Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000009022 nonlinear effect Effects 0.000 description 1
- 230000005693 optoelectronics Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/10—Intensity circuits
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/02—Improving the quality of display appearance
- G09G2320/0233—Improving the luminance or brightness uniformity across the screen
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/02—Improving the quality of display appearance
- G09G2320/0271—Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/08—Arrangements within a display terminal for setting, manually or automatically, display parameters of the display terminal
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Controls And Circuits For Display Device (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
- Picture Signal Circuits (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
【課題】好適な表示輝度での表示をより確実に実現できる技術を提供する。【解決手段】本発明の表示装置は、輝度の増加に対する階調値の増加の特性が第1の輝度の上下で異なるように変換された第1の画像データを取得する取得手段と、第2の輝度に基づいて、輝度の増加に対する階調値の増加の特性が前記第2の輝度の上下で異なるような第2の画像データに、前記第1の画像データを変換する変換手段と、前記第2の画像データに基づいて画像を表示する表示手段と、を有し、前記第2の輝度は、前記第1の輝度以上である。【選択図】図1
Description
本発明は、表示装置および表示方法に関する。
近年、撮像装置の受光性能向上に伴い、一般的なビデオガンマとして用いられているBT.709よりも広いダイナミックレンジ(輝度レンジ)を有する画像(画像データ)が生成されるようになってきている。ダイナミックレンジが広い画像は、「HDR(High Dynamic Range)画像」などと呼ばれる。HDR画像のデータフォーマットとして、例えば、ダイナミックレンジが広いフィルムの特性に基づいて定められたCineon Logが使用される。
画像制作ワークフローにおいては、HDR画像を表示装置(表示装置の表示面)に表示して、輝度調整作業や色調整作業などの画質調整作業が行われる。この場合、好適な表示輝度(表示面の輝度)でHDR画像が表示されるように、HDR画像は階調変換が施されて表示される。
撮像装置では、ダイナミックレンジがより広い画像を得るために、「ニー補正」などと呼ばれる階調変換が行われることがある(特許文献1)。ニー補正が施された画像では、輝度の増加に対する階調値の増加の特性が或る点の上下で異なる。この点は「ニーポイント」などと呼ばれる。以後、撮像装置のニー補正を「第1ニー補正」と記載し、第1ニー補正のニーポイントを「第1ニーポイント」と記載する。第1ニーポイント以下の輝度レンジにおいて、第1ニー補正前の輝度(被写体の輝度)と第1ニー補正後の輝度との対応関係は線形特性(リニア特性)となり、第1ニーポイントより高い輝度レンジにおいて、当該対応関係は非線形特性(ノンリニア特性)となる。このため、第1ニー補正が施された画像を表示装置で表示する場合は、少なくとも第1ニーポイント以下の階調値を、第1ニー補正前の輝度(被写体の輝度)に対応する(略等しい)表示輝度で表示することが好ましい。一方、第1ニーポイントより大きい階調値については、第1ニーポイント以下の階調値に比べ、画質に対する要求水準は低い。
表示装置でも、高輝度部の階調性がより高い画像を表示するために、ニー補正が行われることがある(特許文献2)。以後、表示装置のニー補正を「第2ニー補正」と記載し、第2ニー補正のニーポイントを「第2ニーポイント」と記載する。第2ニーポイント以下の輝度レンジにおいて、第2ニー補正前の輝度と第2ニー補正後の輝度(表示輝度)との対応関係は線形特性となり、第2ニーポイントよりも高い輝度レンジにおいて、当該対応関係は非線形特性となる。このため、第2ニーポイント以下の階調値は、第2ニー補正前の画像の輝度に対応する表示輝度で表示できる。一方、第2ニーポイントよりも大きい階調値は、第2ニー補正前の輝度に対応する表示輝度で表示することが難しい。
従来技術では、第1ニーポイントと第2ニーポイントは個別かつ任意に設定される。このため、第2ニー補正前の輝度に対応する表示輝度で表示することが好ましい輝度レンジ
について、そのような表示輝度(好適な表示輝度)での表示を実現できないことがある。
について、そのような表示輝度(好適な表示輝度)での表示を実現できないことがある。
本発明は、好適な表示輝度での表示をより確実に実現できる技術を提供することを目的とする。
本発明の第1の態様は、
輝度の増加に対する階調値の増加の特性が第1の輝度の上下で異なるように変換された第1の画像データを取得する取得手段と、
第2の輝度に基づいて、輝度の増加に対する階調値の増加の特性が前記第2の輝度の上下で異なるような第2の画像データに、前記第1の画像データを変換する変換手段と、
前記第2の画像データに基づいて画像を表示する表示手段と、
を有し、
前記第2の輝度は、前記第1の輝度以上である
ことを特徴とする表示装置である。
輝度の増加に対する階調値の増加の特性が第1の輝度の上下で異なるように変換された第1の画像データを取得する取得手段と、
第2の輝度に基づいて、輝度の増加に対する階調値の増加の特性が前記第2の輝度の上下で異なるような第2の画像データに、前記第1の画像データを変換する変換手段と、
前記第2の画像データに基づいて画像を表示する表示手段と、
を有し、
前記第2の輝度は、前記第1の輝度以上である
ことを特徴とする表示装置である。
本発明の第2の態様は、
輝度の増加に対する階調値の増加の特性が第1の輝度の上下で異なるように変換された第1の画像データを取得するステップと、
第2の輝度に基づいて、輝度の増加に対する階調値の増加の特性が前記第2の輝度の上下で異なるような第2の画像データに、前記第1の画像データを変換するステップと、
前記第2の画像データに基づいて画像を表示するステップと、
を有し、
前記第2の輝度は、前記第1の輝度以上である
ことを特徴とする表示方法である。
輝度の増加に対する階調値の増加の特性が第1の輝度の上下で異なるように変換された第1の画像データを取得するステップと、
第2の輝度に基づいて、輝度の増加に対する階調値の増加の特性が前記第2の輝度の上下で異なるような第2の画像データに、前記第1の画像データを変換するステップと、
前記第2の画像データに基づいて画像を表示するステップと、
を有し、
前記第2の輝度は、前記第1の輝度以上である
ことを特徴とする表示方法である。
本発明の第3の態様は、コンピュータを、上述した表示装置の各手段として機能させるためのプログラムである。
本発明によれば、好適な表示輝度での表示をより確実に実現できる。
<実施例1>
以下、本発明の実施例1について説明する。本実施例に係る表示装置は、例えば、液晶表示装置、有機EL(Electro Luminescence)表示装置、プラズマ表示装置、MEMS(Micro Electro Mechanical System)シャッタ方式表示装置、等である。
以下、本発明の実施例1について説明する。本実施例に係る表示装置は、例えば、液晶表示装置、有機EL(Electro Luminescence)表示装置、プラズマ表示装置、MEMS(Micro Electro Mechanical System)シャッタ方式表示装置、等である。
図1は、本実施例に係る表示装置100を含む表示システムの構成例を示すブロック図である。表示装置100は撮像装置105に接続されている。表示装置100は、EOTF変換部101、第2ニーポイント決定部102、第2ニー補正部103、及び、表示部104を有する。撮像装置105は、撮像部106、OETF変換部107、露出設定入力部108、第1ニーポイント入力部109、及び、第1ニー補正部110を有する。
撮像装置105において、撮像部106は、被写体を撮像し、撮像画像データ(撮像結果の信号)を出力する。OETF変換部107は、撮像画像データを、OETF(Opto−Electronic Transfer Function)変換を施して出力する。OETF変換については後述する。露出設定入力部108は、露出設定値を指定(入力)するユーザ操作を受け付け、当該ユーザ操作に応じた露出設定値を出力する。露出設定値はOETF変換で使用される。第1ニーポイント入力部109は、第1ニーポイントを指定するユーザ操作を受け付け、当該ユーザ操作に応じた第1ニーポイントの情報を出力する。第1ニーポイントの情報は、撮像装置105の外部にも出力される。第1ニー補正部110は、OETF変換後の画像データ(OETF変換部107から出力された画像データ)を、第1ニーポイントに基づく第1ニー補正を施して、撮像装置105の外部に出力する。第1ニー補正はニー補正であり、第1ニーポイントは第1ニー補正のニーポイントである。ニー補正とニーポイントについては後述する。
表示装置100において、EOTF変換部101は、入力画像データ(撮像装置105(第1ニー補正部110)から出力され表示装置100に入力された画像データ)を取得する。そして、EOTF変換部101は、入力画像データを、EOTF(Electro
Optical Transfer Function)変換を施して出力する。EOTF変換については後述する。第2ニーポイント決定部102は、入力情報(撮像装置105(第1ニーポイント入力部109)から出力され表示装置100に入力された情報;第1ニーポイントの情報)を取得する。そして、第2ニーポイント決定部102は、入力情報に基づいて第2ニーポイントを決定し出力する。本実施例では、第2ニーポイントは、第2ニー補正部103に出力されて設定される。第2ニー補正部103は、EOTF変換後の画像データ(EOTF変換部101から出力された画像データ)を、第2ニーポイントに基づく第2ニー補正を施して出力する。表示部104は、第2ニー補正後の画像データ(第2ニー補正部103から出力された画像データ)に基づいて表示面に画像を表示する。
Optical Transfer Function)変換を施して出力する。EOTF変換については後述する。第2ニーポイント決定部102は、入力情報(撮像装置105(第1ニーポイント入力部109)から出力され表示装置100に入力された情報;第1ニーポイントの情報)を取得する。そして、第2ニーポイント決定部102は、入力情報に基づいて第2ニーポイントを決定し出力する。本実施例では、第2ニーポイントは、第2ニー補正部103に出力されて設定される。第2ニー補正部103は、EOTF変換後の画像データ(EOTF変換部101から出力された画像データ)を、第2ニーポイントに基づく第2ニー補正を施して出力する。表示部104は、第2ニー補正後の画像データ(第2ニー補正部103から出力された画像データ)に基づいて表示面に画像を表示する。
撮像装置105について、より詳細に説明する。撮像装置105は、「HDR(High Dynamic Range)」などと呼ばれる広いダイナミックレンジ(輝度レンジ)に対応した装置である。
撮像部106は、例えばCMOS(Complementary Metal Oxide Semiconductor)センサであり、光学レンズを介して被写体を撮像し、階調値が被写体の輝度に比例(略比例)する撮像画像データを出力する。輝度の表現の一形式として、光が物体で反射する際の反射率が使用されることがある。環境光に照らされた物体の輝度は0〜100%程度の反射率で表現され、それを超える輝度(照明装置、太陽、等の光源の輝度)は100%よりも高い反射率で表現されることが多い。本実施例では、被写体の輝度として反射率が使用されるとし、撮像部106は2000%以下の反
射率を撮像可能であるとする。
射率を撮像可能であるとする。
階調値が被写体の輝度に比例する撮像画像データのデータサイズは大きい。OETF変換部107は、データサイズがより小さく(階調値のレンジがより狭く)且つダイナミックレンジがより広い画像データを得るために、撮像画像データにOETF変換を施す。そして、OETF変換部107は、OETF変換後の画像データを出力する。本実施例では、OETF変換後の画像データの階調値は10bitの値(0〜1023)であるとする。また、OETF変換部107のOETF変換では、図2に示す対応関係(反射率0〜2000%にOETF変換後の階調値0〜1023が対応付けられた非線形特性(対数特性))に従って、撮像画像データの各階調値が変換されるとする(階調変換)。
なお、OETF変換の特性(反射率(OETF変換前の階調値;OETF変換部107の入力値)と階調値(OETF変換後の階調値;OETF変換部107の出力値)との対応関係)は、HDR規格に依存する。HDR規格として、HLG(Hybrid Log−Gamma)やPQ(Perceptual Quantization)などがある。その他、撮像装置のメーカ独自のLogカーブ(数式)などが規定されている。
また、OETF変換部107は、露出設定入力部108に入力された露出設定値(ユーザによって指定された露出設定値)に基づいて露出調整を行う。露出調整は「画像データにおける被写体の輝度調整」とも言える。本実施例では、OETF変換部107は、露出設定値に基づいて階調値(出力値)を増加または低減することにより、露出調整を実現するとする。
本実施例では、OETF変換部107は、反射率100%の出力値が増加するような露出調整を行い、図3の実線で示す特性で変換された画像データが得られるように、撮像画像データを変換して出力するとする。図3には、露出調整前の特性(図2と同じ)も破線で示されている。図3の例では、露出調整により、反射率100%に対応する出力値が増加するため、反射率100%がより高い表示輝度(表示面の輝度)で表示できるようになる。しかしながら、1200%よりも高い反射率については、出力値が上限値1023に飽和する。このため、OETF変換部107から出力される画像データのダイナミックレンジは、反射率0〜2000%のレンジから反射率0〜1200%のレンジに縮小されてしまう。
このようなダイナミックレンジの縮小を抑制するなどのために、第1ニー補正部110は第1ニー補正を行う。なお、露出調整が行われた場合でなくても、第1ニー補正は行われることがある。例えば、OETF変換で撮像画像データのダイナミックレンジを拡大する場合などにおいて、第1ニー補正が行われることがある。ニー補正は、輝度の増加に対する階調値の増加の特性がニーポイントの上下で異なるような画像データを得る階調変換である。つまり、第1ニー補正は、輝度の増加に対する階調値の増加の特性が第1ニーポイントの上下で異なるような画像データを得る階調変換である。
本実施例では、図4に示すようなグラフィック画像(OSD(On Screen Display)画像;(GUI(Graphical User Interface)画像)が、撮像装置105の表示部(不図示)に表示される。そして、ユーザは、このグラフィック画像を用いたユーザ操作により、第1ニーポイント入力部109に第1ニーポイントを入力する。本実施例では、第1ニーポイントの反射率(輝度)として以下の値が設定されたとする。
第1ニーポイントの反射率=800%
第1ニーポイントの反射率=800%
第1ニー補正部110は、OETF変換後の画像データ(OETF変換部107から出力された画像データ)を、第1ニーポイントに基づく第1ニー補正を施して、撮像装置105の外部に出力する。具体的には、図5の破線で示すように、第1ニー補正により、第1ニーポイントよりも高いレンジの特性が、当該レンジの全体で輝度(被写体の反射率)の増加に対して階調値が(指数関数的に)増加するように変更される。図5の実線で示すように、第1ニーポイント以下のレンジの特性は変更されない。
本実施例では、上述した処理により、撮像装置105から、以下のような特性を有する画像データが出力される。
800%以下の反射率のレンジ:
被写体の輝度と第1ニー補正後の輝度(第1ニー補正部110から出力される画像データによって表された輝度)との対応関係が線形特性(リニア特性)である。
800%よりも高い反射率のレンジ:
被写体の輝度と第1ニー補正後の輝度との対応関係は非線形特性(ノンリニア特性)であるが、被写体の輝度の増加に対して第1ニー補正後の輝度も増加する。
800%以下の反射率のレンジ:
被写体の輝度と第1ニー補正後の輝度(第1ニー補正部110から出力される画像データによって表された輝度)との対応関係が線形特性(リニア特性)である。
800%よりも高い反射率のレンジ:
被写体の輝度と第1ニー補正後の輝度との対応関係は非線形特性(ノンリニア特性)であるが、被写体の輝度の増加に対して第1ニー補正後の輝度も増加する。
表示装置100について、より詳細に説明する。表示装置100も、「HDR(High Dynamic Range)」などと呼ばれる広いダイナミックレンジに対応した装置である。本実施例では、表示輝度のレンジが0〜1000nitsのレンジであるとする。
EOTF変換部101は、入力画像データ(撮像装置105(第1ニー補正部110)から出力され表示装置100に入力された画像データ)を取得する。そして、EOTF変換部101は、入力画像データを、EOTF変換を施して出力する。本実施例では、EOTF変換により、図6に示す対応関係(入力画像データの階調値0〜1023に表示輝度0〜1000nitsが対応付けられた非線形特性(指数関数特性))に従って、撮像画像データの各階調値が変換されるとする(階調変換)。
本実施例では、EOTF変換の特性(関数)は、OETF変換の特性(関数)の逆特性(逆関数)に基づくとする。つまり、図6の特性は、図2の特性に基づくとする。このため、EOTF変換後の画像データとして、階調値が被写体の輝度に比例する画像データが得られる(生成される)。つまり、EOTF変換後の画像データを用いれば、図7に示すように、被写体の輝度に比例する表示輝度が実現可能となる。
本実施例では、反射率の単位(%)は表示輝度の単位(nits)に読み替えることができるとする。上述したように、表示輝度のレンジは、0〜1000nitsのレンジであり、撮像画像データや入力画像データのダイナミックレンジ(0〜2000%)よりも狭い。このため、図7に示すように、1000%よりも高い反射率は1000nitsの表示輝度となる(クリップ)。つまり、EOTF変換により、入力画像データのダイナミックレンジが変換(本実施例では圧縮)される(レンジ変換)。具体的には、図6に示すように、反射率1000%に対応する階調値960は、表示輝度1000nitsに対応する階調値に変換される(クリップ)。
上述したクリップでは、1000%よりも高い複数の反射率に同じ階調値や表示輝度が割り当たるため、高輝度部の階調分布(階調性)が確認できなくなる(階調つぶれ)。このような階調つぶれを抑制するなどのために、第2ニー補正部103は第2ニー補正を行う。なお、クリップが行われた場合でなくても、第2ニー補正は行われることがある。例
えば、EOTF変換で入力画像データのダイナミックレンジを拡張する場合などにおいて、第2ニー補正が行われることがある。
えば、EOTF変換で入力画像データのダイナミックレンジを拡張する場合などにおいて、第2ニー補正が行われることがある。
上述したように、第1ニーポイント以下の輝度レンジでは、被写体の輝度と入力画像データによって表された輝度との対応関係は線形特性である。このため、少なくとも第1ニーポイント以下の階調値を、被写体の輝度に対応する(略等しい)表示輝度で表示することが好ましい。第2ニー補正により、第2ニーポイント以下の輝度レンジでは、入力画像データの輝度と表示輝度との対応関係は線形特性となるが、第2ニーポイントよりも高い輝度レンジでは、入力画像データの輝度と表示輝度との対応関係は非線形特性となる。このため、第2ニーポイントの輝度が第1ニーポイントの輝度よりも低いと、第2ニーポイントよりも高く且つ第1ニーポイント以下である階調値を、被写体の輝度に対応する表示輝度で表示できない。
そこで、本実施例では、第2ニーポイント決定部102は、入力情報(撮像装置105(第1ニーポイント入力部109)から出力され表示装置100に入力された情報;第1ニーポイントの情報)を取得する。そして、第2ニーポイント決定部102は、入力情報に基づいて、輝度が第1ニーポイントの輝度以下である第2ニーポイントを決定し出力する。本実施例では、以下に示すように、第2ニーポイントの輝度として、第1ニーポイントの輝度と同じ値が設定されたとする。
第2ニーポイント=800%
=896(入力画像データの階調値)
第2ニーポイント=800%
=896(入力画像データの階調値)
なお、第1ニーポイントの情報の取得方法は特に限定されない。ここで、撮像装置105と表示装置100をSDI(Serial Digital Interface)で互いに接続する場合を考える。この場合には、撮像装置105は、第1ニーポイントの情報をSDIのアンシラリ領域に書き込んで画像データと共に出力できる。そして、表示装置100は、撮像装置105から出力された画像データと、アンシラリ領域に書き込まれた情報とを取得することができる。撮像装置105と表示装置100をHDMI(High−Definition Multimedia Interface)で互いに接続する場合にも、同様の処理を行うことができる。
第2ニー補正部103は、EOTF変換後の画像データ(EOTF変換部101から出力された画像データ)を、第2ニーポイントに基づく第2ニー補正を施して出力する。具体的には、図8,9の破線で示すように、第2ニー補正により、第2ニーポイントよりも高いレンジの特性が、当該レンジの全体で階調値や反射率の増加に対して表示輝度が(指数関数的に)増加するように変更される(特性変換)。図8,9の実線で示すように、第2ニーポイント以下のレンジの特性は変更されない。
本実施例では、上述した処理により、図9に示すように、被写体の輝度と入力画像データによって表された輝度との対応関係が線形特性である輝度範囲(0〜800%)について、被写体の輝度に表示輝度が比例する線形特性を得ることができる。また、他の輝度範囲について、被写体の輝度に表示輝度が増加する非線形特性を得ることができ、階調つぶれを抑制できる。つまり、以下のとおりである。
800%以下の反射率のレンジ:
被写体の輝度と表示輝度との対応関係が線形特性である。
800%よりも高い反射率のレンジ:
被写体の輝度と表示輝度との対応関係は非線形特性であるが、被写体の輝度の増加に
対して表示輝度も増加する。
800%以下の反射率のレンジ:
被写体の輝度と表示輝度との対応関係が線形特性である。
800%よりも高い反射率のレンジ:
被写体の輝度と表示輝度との対応関係は非線形特性であるが、被写体の輝度の増加に
対して表示輝度も増加する。
以上述べたように、本実施例によれば、好適な表示輝度での表示をより確実に実現できる。具体的には、ニー補正が施された画像データをニー補正を施して表示する場合においても、被写体の輝度に対応する表示輝度を好適に実現できる。
なお、本実施例では、撮像装置105が第1ニー補正を行い、撮像装置105と表示装置100が互いに接続され、表示装置100が撮像装置105から画像データと第1ニーポイントの情報とを個別に取得する例を説明したが、これに限られない。例えば、第1ニー補正を行う装置は撮像装置105でなくてもよい。また、第1ニーポイントの情報は、第1ニー補正後の画像データにメタデータとして付加されてもよい。この場合には、表示装置100は、第1ニー補正を行う装置とは異なる装置(画像の編集工程で使用される編集装置など)に接続されていても、接続された装置からの画像データに付加されたメタデータを取得することで、第1ニーポイントの情報を取得できる。
また、表示装置100は、ニー補正が施されていない画像データを取得した場合に、所定のニーポイントを第2ニーポイントとして使用してもよい。第2ニー処理後の画像データのダイナミックレンジは、第2ニー処理前の画像データのダイナミックレンジより狭くても広くてもよい。第2ニー処理後の画像データのダイナミックレンジは、表示輝度のレンジより狭くても広くてもよい。EOTF変換と第2ニー処理とは個別に行われなくてもよい。
また、本実施例では第1ニーポイントが反射率(%)で指定される例を説明したが(図4)、第1ニーポイントは、階調値(0〜1023;図3に示す露出調整後の階調値)で指定されてもよいし、輝度(nits)で指定されてもよい。同様に、第1ニーポイントの情報は、反射率を示す情報であってもよいし、階調値を示す情報であってもよいし、輝度を示す情報であってもよい。第1ニーポイントの情報は、それら3つの情報のうちの2つ以上を含んでいてもよい。
第1ニーポイントの輝度(nits)は、図3に示す露出調整後の階調値から、図6に示すようなEOTF変換の関数(特性)を用いて算出できる。但し、EOTF変換の関数として、クリップをしない関数を使用する。第1ニーポイントの輝度(nits)は、他の方法でも算出できる。例えば、撮像装置105で設定された露出設定値(反射率100%と輝度(nits)の関係)を表示装置100に送信する。表示装置100は、露出設定値から図7に示すような関数(特性)を判断し、判断した関数を用いて第1ニーポイントの反射率(%)から輝度(nits)を算出できる。但し、関数として、クリップをしない関数を使用する。撮像装置105の露出基準値(露出設定値の基準値)に基づいて、第1ニーポイントの反射率(%)を絶対輝度に変換できる。
<実施例2>
以下、本発明の実施例2について説明する。実施例1では、第1ニーポイントの輝度が表示輝度の上限(第2ニー処理後の画像データの輝度の上限)以下である例として説明した。実施例2では、第1ニーポイントの輝度が表示輝度の上限よりも高い場合の例を説明する。なお、以下では、実施例1と異なる点(構成、処理、等)について詳しく説明し、実施例1と同じ点についての説明は省略する。
以下、本発明の実施例2について説明する。実施例1では、第1ニーポイントの輝度が表示輝度の上限(第2ニー処理後の画像データの輝度の上限)以下である例として説明した。実施例2では、第1ニーポイントの輝度が表示輝度の上限よりも高い場合の例を説明する。なお、以下では、実施例1と異なる点(構成、処理、等)について詳しく説明し、実施例1と同じ点についての説明は省略する。
図10は、本実施例に係る表示システムの構成例を示すブロック図である。図10において、図1(実施例1)と同じブロックには図1と同じ符号が付されている。
表示装置200において、EOTF変換部201は、図1のEOTF変換部101と同様の機能を有する。但し、EOTF変換部201は、第1ニーポイントの情報を撮像装置105から取得する。そして、EOTF変換部201は、第1ニーポイントの輝度が表示輝度の上限よりも高い場合に、第1ニーポイントに基づいて画像データ(入力画像データ)のダイナミックレンジを変換する。これにより、特定の輝度レンジにおいて輝度(表示輝度)が入力画像データの輝度(被写体の輝度)に比例(略比例)する画像データが生成される。
本実施例では、第1ニーポイントの輝度が800%(800nits)であり、表示輝度の上限が500nitsであるとする。そして、EOTF変換部201は、1000nits以下の輝度レンジを特定の輝度レンジとして用いるとする。このため、図11に示すように、入力画像データのダイナミックレンジが、0〜1000%の輝度レンジから0〜500nitsの輝度レンジに圧縮される。
これにより、画像の表示輝度が全体的に低下するが、反射率の変化に対する表示輝度の変化の線形性を保つことができる。なお、特定の輝度レンジにおける表示輝度の下限は、1000%に限られず、第2のニーポイントの輝度以上の輝度であればよい。また、ダイナミックレンジの圧縮方法は特に限定されない。例えば、圧縮方法として、従来提案された様々な方法(特開2016−173477号公報に記載の方法など)を使用できる。
そして、EOTF変換部201から出力された画像データは、第2ニー補正部103で第2ニー補正が施されて表示部104で表示される。第2ニーポイントの輝度を800%として第2ニー補正を行うことにより、図11の特性は図12の特性に変換される。
以上述べたように、本実施例によれば、第1ニーポイントの輝度が表示輝度の上限(第2ニー処理後の画像データの輝度の上限)より高い場合であっても、好適な表示輝度での表示を実現できる。具体的には、第1ニーポイントの輝度以下の輝度レンジにおいて、被写体の輝度よりは低いが被写体の輝度に比例する表示輝度を実現できる。
<実施例3>
以下、本発明の実施例3について説明する。実施例1では、第1のニーポイントに基づいて第2のニーポイントが自動で決定されて設定される例を説明した。本実施例では、第2のニーポイントを指定するユーザ操作に応じて第2のニーポイントが設定される例を説明する。なお、以下では、実施例1と異なる点(構成、処理、等)について詳しく説明し、実施例1と同じ点についての説明は省略する。
以下、本発明の実施例3について説明する。実施例1では、第1のニーポイントに基づいて第2のニーポイントが自動で決定されて設定される例を説明した。本実施例では、第2のニーポイントを指定するユーザ操作に応じて第2のニーポイントが設定される例を説明する。なお、以下では、実施例1と異なる点(構成、処理、等)について詳しく説明し、実施例1と同じ点についての説明は省略する。
図13は、本実施例に係る表示システムの構成例を示すブロック図である。本発明の第3の実施形態が適用できるブロック図である。図13において、図1(実施例1)と同じブロックには図1と同じ符号が付されている。表示装置300は、図1の第2ニーポイント決定部102の代わりに、第2ニーポイント下限決定部301と第2ニーポイント入力部302を有する。
第2ニーポイント下限決定部301は、入力情報(撮像装置105(第1ニーポイント入力部109)から出力され表示装置100に入力された情報;第1ニーポイントの情報)を取得する。そして、第2ニーポイント下限決定部301は、入力情報に基づいて第1ニーポイント(第1ニーポイントの輝度)を、第2ニーポイント(第2ニーポイントの輝度)の下限として第2ニーポイント入力部302に通知する。
第2ニーポイント入力部302は、第2ニーポイント下限決定部301からの通知に基づいて、第1ニーポイントが第2ニーポイントの下限となるように、第2ニーポイントを
指定するユーザ操作を受け付ける。そして、第2ニーポイント入力部302は、ユーザ操作によって応じた第2ニーポイント(ユーザ操作によって指定された第2ニーポイント)を、第2ニー補正部103に出力して設定する。
指定するユーザ操作を受け付ける。そして、第2ニーポイント入力部302は、ユーザ操作によって応じた第2ニーポイント(ユーザ操作によって指定された第2ニーポイント)を、第2ニー補正部103に出力して設定する。
本実施例では、第1ニーポイントの輝度が800%(800nits)であるとする。このため、図14に示すようなグラフィック画像(OSD(On Screen Display)画像;(GUI(Graphical User Interface)画像)が、表示部104に表示される。そして、ユーザは、このグラフィック画像を用いたユーザ操作により、第2ニーポイント入力部302に第2ニーポイントを入力する。図14のグラフィック画像では、800nits(第1ニーポイントの輝度)が第2ニーポイントの輝度の下限として示されている。ユーザは、800nits以上の輝度を第2ニーポイントの輝度として指定でき、800nits未満の輝度を第2ニーポイントの輝度として指定できない。
以上述べたように、本実施例によれば、第1ニーポイントの輝度以上の輝度を第2ニーポイントの輝度としてユーザが指定できる。これにより、より好適な表示輝度での表示をより確実に実現できる。
なお、第1ニーポイントの決定前に、ユーザ操作に応じて任意の第2ニーポイントが設定されてもよい。そして、表示装置300は、第2ニーポイントの輝度が第1ニーポイントの輝度の上限となるように、第2ニーポイントの輝度に関する情報を表示装置300の外部に出力してもよい。この場合には、撮像装置105は、図15に示すようなグラフィック画像を表示部(不図示)に表示する。そして、ユーザは、このグラフィック画像を用いたユーザ操作により、第1ニーポイント入力部109に第1ニーポイントを入力する。
図15は、第2ニーポイントの輝度が800nits(800%)である場合の例を示す。図15のグラフィック画像では、800nits(第2ニーポイントの輝度)が第1ニーポイントの輝度の上限として示されている。ユーザは、800nits以下の輝度を第1ニーポイントの輝度として指定でき、800nitsよりも高い輝度を第1ニーポイントの輝度として指定できない。
また、本実施例では第2ニーポイントが輝度(nits)で指定される例を説明したが(図14)、第2ニーポイントは、階調値で指定されてもよいし、反射率(%)で指定されてもよい。同様に、第2ニーポイントの情報は、反射率を示す情報であってもよいし、階調値を示す情報であってもよいし、輝度を示す情報であってもよい。第2ニーポイントの情報は、それら3つの情報のうちの2つ以上を含んでいてもよい。
なお、実施例1〜3(図1,10,13)の各ブロックは、個別のハードウェアであってもよいし、そうでなくてもよい。2つ以上のブロックの機能が、共通のハードウェアによって実現されてもよい。1つのブロックの複数の機能のそれぞれが、個別のハードウェアによって実現されてもよい。1つのブロックの2つ以上の機能が、共通のハードウェアによって実現されてもよい。また、各ブロックは、ハードウェアによって実現されてもよいし、そうでなくてもよい。例えば、装置が、プロセッサと、制御プログラムが格納されたメモリとを有していてもよい。そして、装置が有する少なくとも一部のブロックの機能が、プロセッサがメモリから制御プログラムを読み出して実行することにより実現されてもよい。
なお、実施例1〜3(上述した変形例を含む)はあくまで一例であり、本発明の要旨の範囲内で実施例1〜3の構成を適宜変形したり変更したりすることにより得られる構成も、本発明に含まれる。実施例1〜3の構成を適宜組み合わせて得られる構成も、本発明に
含まれる。
含まれる。
<その他の実施例>
本発明は、上述の実施例の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
本発明は、上述の実施例の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
100,200,300:表示装置 101,201:EOTF変換部
102:第2ニーポイント決定部 103:第2ニー補正部 104:表示部
301:第2ニーポイント下限決定部 302:第2ニーポイント入力部
102:第2ニーポイント決定部 103:第2ニー補正部 104:表示部
301:第2ニーポイント下限決定部 302:第2ニーポイント入力部
Claims (11)
- 輝度の増加に対する階調値の増加の特性が第1の輝度の上下で異なるように変換された第1の画像データを取得する取得手段と、
第2の輝度に基づいて、輝度の増加に対する階調値の増加の特性が前記第2の輝度の上下で異なるような第2の画像データに、前記第1の画像データを変換する変換手段と、
前記第2の画像データに基づいて画像を表示する表示手段と、
を有し、
前記第2の輝度は、前記第1の輝度以上である
ことを特徴とする表示装置。 - 前記第1の画像データと前記第2の画像データとのそれぞれは、ニー補正が施された画像データであり、
前記第1の輝度は、前記第1の画像データを得るためのニー補正におけるニーポイントに対応し、
前記第2の輝度は、前記第2の画像データを得るためのニー補正におけるニーポイントに対応する
ことを特徴とする請求項1に記載の表示装置。 - 前記第1の画像データの輝度レンジは、前記第2の画像データの輝度レンジよりも狭いことを特徴とする請求項1または2に記載の表示装置。
- 前記第2の画像データの輝度レンジは、表示輝度のレンジと等しい
ことを特徴とする請求項1〜3のいずれか1項に記載の表示装置。 - 前記変換手段は、
前記第1の画像データの輝度レンジを変換して、前記第2の輝度以上の輝度である第3の輝度以下の輝度レンジにおいて輝度が前記第1の画像データの輝度に略比例する第3の画像データを生成するレンジ変換手段と、
前記第2の輝度に基づいて、前記第2の輝度以上の輝度レンジにおける前記第3の画像データの特性を変換して前記第2の画像データを生成する特性変換手段と、
を有する
ことを特徴とする請求項1〜4のいずれか1項に記載の表示装置。 - 前記第1の輝度に関する情報を取得する取得手段と、
前記情報に基づいて前記第2の輝度を設定する設定手段と、
をさらに有する
ことを特徴とする請求項1〜5のいずれか1項に記載の表示装置。 - 前記設定手段は、前記情報に基づいて前記第2の輝度を自動で設定する
ことを特徴とする請求項6に記載の表示装置。 - 前記設定手段は、
前記情報に基づいて、前記第1の輝度が前記第2の輝度の下限となるように、前記第2の輝度を指定するユーザ操作を受け付け、
前記ユーザ操作によって指定された前記第2の輝度を設定する
ことを特徴とする請求項6に記載の表示装置。 - ユーザ操作に応じて前記第2の輝度を設定する設定手段と、
前記第2の輝度が第1の輝度の上限となるように、前記第2の輝度に関する情報を前記
表示装置の外部に出力する出力手段と、
をさらに有する
ことを特徴とする請求項1〜5のいずれか1項に記載の表示装置。 - 輝度の増加に対する階調値の増加の特性が第1の輝度の上下で異なるように変換された第1の画像データを取得するステップと、
第2の輝度に基づいて、輝度の増加に対する階調値の増加の特性が前記第2の輝度の上下で異なるような第2の画像データに、前記第1の画像データを変換するステップと、
前記第2の画像データに基づいて画像を表示するステップと、
を有し、
前記第2の輝度は、前記第1の輝度以上である
ことを特徴とする表示方法。 - コンピュータを、請求項1〜9のいずれか1項に記載の表示装置の各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018194207A JP2020064102A (ja) | 2018-10-15 | 2018-10-15 | 表示装置および表示方法 |
US16/599,233 US11037527B2 (en) | 2018-10-15 | 2019-10-11 | Display apparatus and display method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018194207A JP2020064102A (ja) | 2018-10-15 | 2018-10-15 | 表示装置および表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020064102A true JP2020064102A (ja) | 2020-04-23 |
JP2020064102A5 JP2020064102A5 (ja) | 2021-11-18 |
Family
ID=70161439
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018194207A Withdrawn JP2020064102A (ja) | 2018-10-15 | 2018-10-15 | 表示装置および表示方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11037527B2 (ja) |
JP (1) | JP2020064102A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7579153B2 (ja) | 2021-01-14 | 2024-11-07 | キヤノン株式会社 | 画像処理装置、画像表示システム、画像処理方法、プログラム、記憶媒体 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100617781B1 (ko) * | 2004-06-29 | 2006-08-28 | 삼성전자주식회사 | 이미지 센서의 화질 개선장치 및 방법 |
JP4131280B2 (ja) | 2006-04-20 | 2008-08-13 | ソニー株式会社 | 撮像装置と映像信号処理方法 |
JP5211521B2 (ja) * | 2007-03-26 | 2013-06-12 | 株式会社ニコン | 画像処理装置、画像処理方法、画像処理プログラム、およびカメラ |
JP6202330B2 (ja) * | 2013-10-15 | 2017-09-27 | ソニー株式会社 | 復号装置および復号方法、並びに符号化装置および符号化方法 |
CN106464966B (zh) * | 2014-05-12 | 2020-12-08 | 索尼公司 | 通信装置、通信方法和计算机可读存储介质 |
JP6552228B2 (ja) | 2015-03-17 | 2019-07-31 | キヤノン株式会社 | 画像表示装置及びその制御方法 |
JP6700880B2 (ja) * | 2016-03-17 | 2020-05-27 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
JP2018042198A (ja) * | 2016-09-09 | 2018-03-15 | オリンパス株式会社 | 撮像装置及び撮像方法 |
JP7054851B2 (ja) | 2016-09-09 | 2022-04-15 | パナソニックIpマネジメント株式会社 | 表示装置および信号処理方法 |
EP3511928B1 (en) | 2016-09-09 | 2022-01-12 | Panasonic Intellectual Property Management Co., Ltd. | Display device and signal processing method |
US10726315B2 (en) * | 2016-11-17 | 2020-07-28 | Panasonic Intellectual Property Management Co., Ltd. | Image processing device, image processing method, and program |
-
2018
- 2018-10-15 JP JP2018194207A patent/JP2020064102A/ja not_active Withdrawn
-
2019
- 2019-10-11 US US16/599,233 patent/US11037527B2/en not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7579153B2 (ja) | 2021-01-14 | 2024-11-07 | キヤノン株式会社 | 画像処理装置、画像表示システム、画像処理方法、プログラム、記憶媒体 |
Also Published As
Publication number | Publication date |
---|---|
US20200118523A1 (en) | 2020-04-16 |
US11037527B2 (en) | 2021-06-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5991502B2 (ja) | 変換方法および変換装置 | |
JP2016213809A (ja) | 表示方法および表示装置 | |
JP6700880B2 (ja) | 情報処理装置および情報処理方法 | |
JP2015141333A (ja) | 画像処理装置、画像処理方法、表示装置、表示装置の制御方法、及び、プログラム | |
CN102045506A (zh) | 图像处理装置及图像处理方法 | |
JP2011119868A (ja) | 画像処理装置及び画像処理方法 | |
WO2021148057A1 (zh) | 低比特位宽hdr图像的生成方法及装置、存储介质、终端 | |
JP6552228B2 (ja) | 画像表示装置及びその制御方法 | |
JP7332325B2 (ja) | 画像処理装置、撮像装置、画像処理方法、及びプログラム | |
JP2018017931A (ja) | 画像処理装置及びその制御方法、表示装置 | |
JP5732175B2 (ja) | 画像ファイル生成装置及び表示装置 | |
JP2019080156A (ja) | 画像処理方法および画像処理装置 | |
JP2020064102A (ja) | 表示装置および表示方法 | |
JP6210772B2 (ja) | 情報処理装置、撮像装置、制御方法、及びプログラム | |
JP2017182702A (ja) | 画像処理装置、その制御方法、およびプログラム | |
US10121265B2 (en) | Image processing device and method to calculate luminosity of an environmental light of an image | |
JP6948173B2 (ja) | 画像処理装置及び方法、撮像装置、及び、撮像システム | |
JP6628925B2 (ja) | 画像表示装置及びその制御方法 | |
JP2021078051A (ja) | 画像処理装置および画像制御方法、プログラム、並びに記憶媒体 | |
JP2019149106A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP2018136482A (ja) | 画像処理装置および画像処理方法 | |
JP2018124377A (ja) | 表示装置、表示システム、及び、表示方法 | |
JP2021048522A (ja) | 画像処理装置および画像処理方法 | |
JP2020060626A (ja) | 画像処理装置、画像処理方法 | |
JP2018056611A (ja) | 画像処理装置及びその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211008 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211008 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20211125 |