JP4466378B2 - 履歴付加装置、電子カメラ、および画像処理プログラム - Google Patents

Description

本発明は、履歴付き画像ファイルの生成技術に関する。
また、本発明は、この履歴付き画像ファイルを生成する電子カメラに関する。
また、本発明は、履歴付き画像ファイルから、画像処理前の画像を復元する画像処理プログラムに関する。

従来、電子カメラ内では、画像データに対して、色補間、色補正、ノイズ除去、および輪郭強調などの画像処理が施される。このように生成される処理済み画像は、汎用性が高く、一般的な画像表示ソフトで開いてすぐに印刷できるなど、ユーザーにとって利便性の高い画像となる。

一方、従来の電子カメラにおいて、撮像素子の出力状態に近いＲＡＷ画像を生成するものも知られている。ユーザーは、このＲＡＷ画像に対して、高度な画像処理を事後的に施すことができる（画質の事後決定）。また、１つのＲＡＷ画像から、高精細印刷用に適した画像を生成しつつ、電子メール添付用に適した小画像を生成するなど、使用目的に合わせて後から画像を作成することができる（複数目的利用）。さらに、ＲＡＷ画像の形態で画像を保存しておくことにより、将来の高度な画像処理技術を適用することが可能になる。その結果、撮影時よりも優れた画質を将来的に得ることが可能になる（最新技術の適用）。

このように、処理済み画像には利便性が高いという利点があり、その一方で、ＲＡＷ画像には高度な画像処理を事後的に実施できるという利点がある。
従来の電子カメラでは、これら処理済み画像とＲＡＷ画像のいずれか一方を選択して、記録するものが知られている（例えば、特許文献１）。
また、従来の電子カメラとして、１回の撮影ごとに、このＲＡＷ画像と処理済み画像の両方を生成し、両方を独立に記録するもの（例えば、ＲＡＷ＋ＪＰＥＧ同時記録）も知られている。
特開２００１−６１０６７号公報

ところで、一旦完成した処理済み画像に対して、後から画像処理を追加実施する場合がある。例えば、ユーザーが、処理済み画像に対して、後から所望の画質調整を加える場合がある。また例えば、プリンタなどに出力機器が、出力用途に最適化するために、処理済み画像に追加の自動画質調整を加える場合もある。このような追加の画像処理により、例えば、下記のような画質劣化が生じる。

［例１］電子カメラ内で輪郭強調を実施した処理済み画像に対して、後からアンシャープマスクなどの高域強調処理を重ねることにより、高域の画像ノイズが増える。また、太いオーバーシュートやジャギーが生じるなどエッジ波形が劣化する。

［例２］電子カメラ内で彩度強調を強めに実施した処理済み画像に対して、後から特定色域の彩度強調を実施することにより、特定色域で色飽和が生じて自然な色合いが失われる。

［例３］電子カメラ内で色補間処理を実施した処理済み画像に対して、後から彩度強調を実施することにより、色補間時の偽色が強調される。
このような画質劣化を避けるためには、ＲＡＷ画像の使用が有効である。しかしながら、このＲＡＷ画像は、そのまま印刷することはできないなど、処理済み画像よりも利便性の点で劣ってしまう。

ちなみに、ＲＡＷ＋ＪＰＥＧ同時記録によって、両ファイルの利点を得ることができる。しかしながら、ＲＡＷ＋ＪＰＥＧ同時記録では、２種類の画像ファイルを独立に記録するため、データ量が大きいといった問題が生じてしまう。

そこで、本発明は、処理済み画像の利便性と、ＲＡＷ画像の高画質処理とを併せ持った新たな画像データ（本発明では『履歴付き画像ファイル』という）の生成技術を提供することを目的とする。

《１》
本発明の履歴付加装置は、画像処理部、および履歴付加部を備える。
画像処理部は、入力画像に対して画像処理を施し、処理済み画像を生成する。
一方、履歴付加部は、処理済み画像を入力画像に戻す復元処理に必要な履歴情報を生成する。履歴付加部は、この履歴情報を処理済み画像に付加することによって、復元処理が可能な画像ファイル（以下『履歴付き画像ファイル』という）を生成するとともに、前記画像処理の設定に基づいて、前記画像処理が可逆と見なせる画像処理であるか否かを判断し、前記画像処理が可逆と見なせない画像処理であると判断された場合、前記入力画像と前記処理済み画像との差分画像を、前記履歴情報として前記処理済み画像に付加し、前記画像処理が可逆と見なせる画像処理であると判断された場合、前記画像処理の処理内容を示す情報、または前記画像処理の逆変換を示す情報を、前記履歴情報として前記処理済み画像に付加する。

《２》
また好ましくは、履歴付加装置は、入力画像として、画素単位に複数種類の色信号を有するカラー画像を扱う。この場合、履歴付加部は、入力画像と処理済み画像との差分画像を色信号別に生成する。履歴付加部は、これら色信号別の差分画像を、履歴情報として処理済み画像に付加する。

《３》
なお好ましくは、履歴付加装置は、入力画像として、予め定められた色配列パターンに従って複数種類の色信号を画素単位に振り分けてなるカラー画像を扱う。この場合、画像処理部では、入力画像に対して少なくとも色補間の処理を施し、画素単位に複数種類の色成分を揃えた処理済み画像を生成する。
この場合、履歴付加部は、処理済み画像から色配列パターンの色信号を抽出して色配列画像を生成する。履歴付加部は、入力画像と色配列画像との差分画像を求め、履歴情報として処理済み画像に付加する。

《４》
本発明の電子カメラは、上記《１》〜《３》のいずれか１項に記載の履歴付加装置と、被写体像を撮像してＲＡＷ画像を生成する撮像部とを備える。この電子カメラの画像処理部は、ＲＡＷ画像を入力画像として画像処理を施し、履歴付加部は、履歴付き画像ファイルを生成する。

《５》
なお好ましくは、履歴付加装置は、輪郭強調の処理前画像と処理済み画像との差分画像を求める。履歴付加装置は、この差分画像を履歴情報として処理済み画像に付加する。このような履歴付加装置によって、電子カメラは、電子カメラ内における輪郭強調の画質影響を後から取り除くことが可能な履歴付き画像ファイルを生成する。

《６》
また好ましくは、履歴付加装置は、彩度強調の処理前画像と処理済み画像との差分画像を求める。履歴付加装置は、この差分画像を履歴情報として処理済み画像に付加する。このような履歴付加装置によって、電子カメラは、電子カメラ内における彩度強調の画質影響を後から取り除くことが可能な履歴付き画像ファイルを生成する。

《７》
本発明の画像処理プログラムは、上記《４》〜《６》いずれかの電子カメラで生成された履歴付き画像ファイルをコンピュータで画像処理するための画像処理プログラムである。この画像処理プログラムによって、コンピュータは、入力処理部、復元処理部、および再画像処理部として機能する。
この入力処理部は、履歴付き画像ファイルから処理済み画像と履歴情報を取得する。一方、復元処理部は、処理済み画像に対して、履歴情報が示す復元処理を施し、復元画像（画像処理前の入力画像に近似した画像）を得る。再画像処理部は、復元処理部によって復元された復元画像に対して、改めて画像処理を施す。

［１］
本発明の履歴付加装置は、履歴付き画像ファイルを生成する。
この履歴付き画像ファイルには、画像処理を済ませた処理済み画像が含まれる。この処理済み画像は、画像処理済みであるため、汎用の画像表示ソフトで開いてすぐに印刷することが可能であり、高い利便性が得られる。
さらに、この履歴付き画像ファイルには、履歴情報が含まれる。この履歴情報を使用することで、処理済み画像を、画像処理前の画像（復元画像）に戻すことができる。この復元画像は、画像処理の影響が軽減された画像である。したがって、従来のＲＡＷ画像とほぼ同様の利点、例えば『画質の事後決定』や『複数目的利用』や『最新技術の適用』といった利点を得ることができる。
特に、この復元画像に新たな画像処理を加えた場合、画像処理の重複による画質劣化を避け、良好な画質の画像を得ることができる。
このように本発明では、処理済み画像の利便性と、復元画像による高品質な画像処理といった両方の長所を備えた『履歴付き画像ファイル』を生成することができる。
さらに、上述の履歴付加装置は、画像処理の設定内容から画像処理の可逆性を判断し、その判断結果に応じて履歴情報を適宜に変更する。
すなわち、画像処理が不可逆と判断された場合には、入力画像と処理済み画像との差分画像を、履歴情報として処理済み画像に付加する。この差分画像には、不可逆な画像処理によって失われる画像情報が差分として保存される。したがって、この差分画像と処理済み画像とを事後的に処理することによって、不可逆な画像処理であっても確実な復元処理が実現可能となる。
一方、画像処理が可逆と判断された場合には、画像処理の処理内容を示す情報、または画像処理の逆変換を示す情報を、履歴情報とする。この履歴情報から逆変換を実施することにより、復元処理が可能になる。特に、この履歴情報は、逆変換を決定するための情報であれば足りるため、上記の差分画像よりデータ量が格段に少ない。したがって、画像処理が可逆であった場合には、履歴付き画像ファイルのデータ容量を適応的に削減することができる。

［２］
また、本発明では、入力画像として、画素単位に複数種類の色信号を有するカラー画像を扱うことが好ましい。この場合、入力画像と処理済み画像との差分画像を色信号別に生成して履歴情報とする。
この色信号別の差分画像を後から使用することによって、色信号別の復元処理が可能となり、色信号の揃った復元画像を作成できる。

［３］
また、本発明では、入力画像として、予め定められた色配列パターンに従って複数種類の色信号を画素単位に振り分けてなるカラー画像を扱うことが好ましい。
この場合、処理済み画像は、色補間を含む画像処理によって、画素単位に複数種類の色成分を揃えた処理済み画像となる。そこで、この処理済み画像から、入力画像の色配列パターンに該当する色信号を抽出して、入力画像と同じ色配列の色配列画像を生成する。そして、この入力画像と色配列画像との差分画像を生成して、履歴情報とする。
この履歴情報を履歴付き画像ファイルに含めることにより、次のような事後的な復元処理が可能になる。
まず、履歴付き画像ファイルから処理済み画像を得て、入力画像の色配列パターンに該当する色信号を抽出し、入力画像と同じ色配列の色配列画像を生成する。
次に、履歴付き画像ファイルから差分画像を得て、この色配列画像と差分画像とを加算し、入力画像とほぼ同等の復元画像を得る。
このような処理により、処理済み画像から、例えばベイヤ配列のＲＡＷ画像を復元するといった処理が実現可能になる。

［４］
なお、この履歴付加装置を電子カメラに搭載することにより、上述した履歴付き画像ファイルを電子カメラ内で生成することが可能になる。
ところで、処理済み画像と復元画像とは、巨視的には同一絵柄であり、類似画像である。履歴情報は、これら類似画像間での変換に使用する情報であるため、一般に少ない情報量で足りる。
そのため、従来のＲＡＷ＋ＪＰＥＧ同時記録に比べて履歴付き画像ファイルのデータ量は小さく、電子カメラ側では、記録時間の短縮や、記録媒体の記録可能コマ数を増やすことが実現可能になる。

［５］
また、輪郭強調を含む画像処理の処理前後について差分画像を作成することが好ましい。この差分画像を後から利用することによって、輪郭強調の画質影響を事後的に取り除くことが可能になる。
その結果、後から高域強調処理（アンシャープマスクなど）を実施した際に、高域ノイズを抑制できる。また、太いオーバーシュートやジャギーが生じるといった画質劣化を抑制できる。

［６］
また、彩度強調を含む画像処理の処理前後について差分画像を作成することが好ましい。この差分画像を後から利用することによって、彩度強調の画質影響を事後的に取り除くことが可能になる。
その結果、後から改めて彩度強調を行う際に、特定色域で色飽和が生じて自然な色合いが失われるといった画質劣化を抑制することができる。

［７］
本発明の画像処理プログラムでは、履歴情報を使用することで、カメラ内での画像処理の影響を低減した復元画像を生成する。この復元画像に対して新たな画像処理を実施することにより、画像処理の重複による画質劣化を避け、良好な画像を作成することが可能になる。

《電子カメラおよび履歴付加装置の実施形態》
［構成説明］
図１は、本実施形態の電子カメラ１１の構成を示す図である。
図１において、電子カメラ１１には、撮影レンズ１２が装着される。この撮影レンズ１２の像空間には、撮像素子１３の受光面が配置される。この撮像素子１３の受光面には、ベイヤ配列パターンのＲＧＢカラーフィルタが配置され、ベイヤ配列パターンに色信号を配列したＲＡＷ画像が生成される。このＲＡＷ画像は、Ａ／Ｄ変換部１４を介してデジタル化された後、画像処理部１５に入力される。

この画像処理部１５の内部には、下記の処理ユニットが含まれる。
（１）補正部１６・・オフセット補正、固定パターンノイズ補正、リニアリティ補正など、主として撮像素子１３の特性を補正する。
（２）ホワイトバランス補正部１７・・光源色温度によるＲＡＷ画像の色の偏りを、ＲＲ色信号およびＢ色信号のゲイン調整によって補正する。
（３）色補間部１８・・ベイヤ配列のＲＡＷ画像に色補間処理を実施して、画素単位にＲＧＢの各色信号を揃えた画像データを生成する。
（４）ガンマ処理部１９・・画像データに階調補正を加える。
（５）色処理部２０・・画像データに彩度強調や色相補正を加える。
（６）輪郭強調部２１・・画像データの輪郭を強調する。

これらの処理ユニット１６〜２１を介して画像処理された処理済み画像は、画像圧縮部２２に入力される。画像圧縮部２２は、入力される画像データに対して画像圧縮を施し、圧縮データをファイル生成部２３に出力する。
一方、電子カメラ１１内には、システムコントロール用の制御部２６、操作部２７、差分処理部２８、画像伸長部５０が設けられる。この差分処理部２８は、画像処理部１５内の処理ユニット１６〜２１の各段から画像を選択的に読み込み、差分画像を生成する。この差分画像は差分圧縮部２９へ出力される。差分圧縮部２９は、この差分画像を画像圧縮して、ファイル生成部２３へ出力する。
ファイル生成部２３は、履歴付き画像ファイルを出力する。この履歴付き画像ファイルは、記録部２４を介して記録媒体２５に記録される。

［発明との対応関係］
以下、発明と本実施形態との対応関係について説明する。なお、ここでの対応関係は、参考のために一解釈を例示するものであり、本発明を徒らに限定するものではない。
請求項記載の画像処理部は、処理ユニット１６〜２１の一部または全部に対応する。
請求項記載の履歴付加部は、制御部２６、差分処理部２８、差分圧縮部２９、およびファイル生成部２３に対応する。

［動作説明］
図２は、履歴付き画像ファイルの生成動作を示す流れ図である。以下、図２に示すステップ番号に沿って、履歴付き画像ファイルの生成動作を説明する。

ステップＳ１： 制御部２６は、操作部２７を介して設定される画質モードに応じて、処理ユニット１６〜２１の画像処理設定を行う。

ステップＳ２： ユーザーからのレリーズ操作（操作部２７）により、制御部２６は、撮像素子１３を駆動制御する。撮像素子１３からは、被写体像を撮像してＲＡＷ画像を出力する。このＲＡＷ画像は、画像処理部１５内の処理ユニット１６〜２１を段階的に経て、処理済み画像となる。この処理済み画像は、画像圧縮部２２によって画像圧縮された後、圧縮データとしてファイル生成部２３へ出力される。

ステップＳ３： 電子カメラ１１では、カスタム設定機能を用いて、履歴付き画像ファイルにおける画像処理の復元段階を、処理ユニット１６〜２１の各段階から任意に選ぶことができる。なお、初期設定では、補正部１６の出力ＲＡＷ画像（撮像素子１３の特性補償を行っただけの段階）が復元段階として設定されている。
制御部２６は、この復元段階から処理済み画像までの間に実施される画像処理群（すなわち復元対象とする画像処理）について、可逆性を判断する。
この可逆性の判断については、復元対象とする画像処理の種類や組み合わせから簡易に判定してもよい。また、画像処理前後のヒストグラム解析などによって、階調飛び、色飽和、または黒潰れなどの不可逆変換を検出することで、正確な可逆性を判断してもよい。
このような判断により、復元対象の画像処理が可逆と見なせる場合、制御部２６はステップＳ４に動作を移行する。
一方、復元対象の画像処理が不可逆である場合、制御部２６はステップＳ５に動作を移行する。

ステップＳ４： ここでは、復元対象とする画像処理が可逆と見なせるため、復元処理には、これら画像処理群の逆変換を逆順に実施すればよい。このような逆変換は、画像処理の数学モデルから計算で求めることができる。また、このような逆変換を実験的に決定することも可能である。
制御部２６内には、この逆変換に必要な情報が、対応テーブルの形式で予め格納されている。制御部２６は、復元対象の画像処理（具体的には処理パラメータ）を対応テーブルに照会し、対応する逆変換用パラメータを取得する。制御部２６は、この逆変換用パラメータを、履歴情報としてファイル生成部２３へ出力する。
なお、制御部２６は、復元対象の画像処理を示す処理パラメータを、履歴情報としてファイル生成部２３へ出力してもよい。
このような処理の後、制御部２６はステップＳ１０に動作を移行する。

ステップＳ５： 制御部２６は、復元段階の画像（請求項の『入力画像』に対応）が、色補間前の画像（いわゆるＲＡＷ画像）か否かを判定する。
ここで、復元段階の画像が、色補間後の画像であり、ＲＧＢ３面の色信号が全て揃っている画像である場合、制御部２６はステップＳ６に動作を移行する。
一方、復元段階の画像が、色補間前の画像であり、ベイヤ配列状に色信号を並べた画像である場合、制御部２６はステップＳ７に動作を移行する。

ステップＳ６： 制御部２６は、差分処理部２８に対して、色信号別の差分処理を指示する。差分処理部２８は、画像処理部１５または画像伸長部５０から出力される処理済み画像と、復元段階の画像とを読み込み、図３に示すように色信号別の差分画像を生成する。
このように差分画像を求めた後、制御部２６はステップＳ９に動作を移行する。

ステップＳ７： 制御部２６は、差分処理部２８に対して、ＲＡＷ画像の差分生成を指示する。差分処理部２８は、画像処理部１５または画像伸長部５０から出力される処理済み画像を取得し、撮像素子１３の色配列パターンに従って画素１つ１つについて一種類の色信号を決定する。このような処理により、処理済み画像をＲＡＷ画像と同じ色配列に変換した色配列画像を得る。

ステップＳ８： 差分処理部２８は、図４に示すように、復元段階の画像（ＲＡＷ画像状の入力画像）と、色配列画像との差分画像を生成する。
このように差分画像を求めた後、制御部２６はステップＳ９に動作を移行する。

ステップＳ９： 差分圧縮部２９は、差分処理部２８から出力される差分画像を圧縮し、履歴情報としてファイル生成部２３へ出力する。

ステップＳ１０： ファイル生成部２３は、画像圧縮部２２から入力される圧縮データ（処理済み画像の圧縮結果）に、履歴情報を付加して、履歴付き画像ファイルを生成する。
この履歴付き画像ファイルには、例えば次のようなファイル構造を有する。

（１）ＳＯＩ（Start Of Image）マーカー
（２）Exif規格に基づくメタデータ
（３）ＤＱＴ（量子化テーブル）
（４）ＳＯＦ（フレームヘッダ）
（５）ＤＨＴ（ハフマンテーブル）
（６）ＳＯＳ（スキャンヘッダ）
（７）処理済み画像の圧縮データ
（８）ＥＯＩ（End Of Image）マーカー
（９）履歴情報

なお、履歴情報をファイル内のアプリケーションセグメントに格納してもよい。
このような互換性を維持したファイル構造により、従来の汎用画像処理ソフトにおいても、処理済み画像の圧縮データを従来通りに扱うことが可能になる。

ステップＳ１１： 完成した履歴付き画像ファイルは、記録部２４によって記録媒体２５に記録される。

《画像処理プログラムの実施形態》
続いて、履歴付き画像ファイルをコンピュータ上で扱うための画像処理プログラムについて説明する。
図５は、画像処理プログラムに制御されたコンピュータ動作を説明する図である。以下、図５に示すステップ番号に沿って動作説明を行う。

ステップＳ２１： コンピュータは、電子カメラ１１で生成された履歴付き画像ファイルを、記録媒体２５や通信媒体を介して読み込み、コンピュータ内のメモリ上に格納する。

ステップＳ２２： コンピュータは、この履歴付き画像ファイルから、処理済み画像の圧縮データを取得する。コンピュータは、この圧縮データを画像伸長して、ＹＣｂＣｒ表色系の処理済み画像を得る。次に、コンピュータは、この処理済み画像に対して、ＹＣｂＣｒ表色系からＲＧＢ表色系への色座標変換を実施し、ＲＧＢ色信号からなる処理済み画像を得る。

ステップＳ２３： コンピュータは、処理済み画像に対する画質調整の指示入力をユーザーから受け付けると、ステップＳ２５に動作を移行する。
一方、このような指示入力がない場合、コンピュータはステップＳ２４に動作を移行する。

ステップＳ２４： コンピュータは、処理済み画像のままで足りる処理（そのままの印刷処理など）については、処理済み画像を積極的に使用する。これらの処理の後、コンピュータはステップＳ２３に動作を戻す。

ステップＳ２５： 一方、コンピュータは、画質調整のように、処理済み画像のまま処理したのでは画質劣化が問題となる処理については、復元画像を一旦生成する。この復元処理のため、コンピュータは、履歴付き画像ファイルから履歴情報を取得する。

ステップＳ２６： この履歴情報には、不可逆な画像処理を復元するための差分画像と、可逆な画像処理を逆変換するためのパラメータ情報の少なくとも二種類が存在する。コンピュータは、履歴付き画像ファイルに含まれる履歴情報について、差分画像／パラメータ情報のいずれであるかを判定する。
この判定の結果、履歴情報がパラメータ情報の場合、コンピュータはステップＳ２７に動作を移行する。
一方、履歴情報が差分画像の場合、コンピュータはステップＳ２９に動作を移行する。

ステップＳ２７： コンピュータは、履歴情報から逆変換用パラメータを求め、このパラメータに従って、逆変換の処理内容を設定する。なお、履歴情報が、単に画像処理の処理パラメータであった場合、コンピュータは、ステップＳ４と同様の対応テーブルに照会することによって、処理パラメータから逆変換用パラメータを取得する。

ステップＳ２８： コンピュータは、設定された逆変換を処理済み画像に施すことで、復元画像を得る。この動作の後、コンピュータはステップＳ３４に動作を移行する。

ステップＳ２９： このステップでは、コンピュータが、履歴情報すなわち『差分画像の圧縮データ』を画像伸長して、差分画像を得る。

ステップＳ３０： コンピュータは、差分画像が、図３に示すような色信号別の差分画像か否かを判定する。
ここで、色信号別の差分画像であった場合、コンピュータはステップＳ３１に動作を移行する。
一方、差分画像が、図４に示すようなベイヤ配列の差分画像であった場合、コンピュータはステップＳ３２に動作を移行する。

ステップＳ３１： コンピュータは、差分画像と処理済み画像とを色信号別に画素加算することにより、復元画像を得る。この動作の後、コンピュータはステップＳ３４に動作を移行する。

ステップＳ３２： コンピュータは、処理済み画像から、撮像素子１３の色配列パターンに従って色信号を選択する。この処理により、処理済み画像は、差分画像と同じ色配列の色配列画像に変換される。ここでの変換処理は、ステップＳ７と完全等価な処理であることが好ましい。

ステップＳ３３： コンピュータは、差分画像と色配列画像とを画素加算することにより、ベイヤ配列の復元画像を得る。

ステップＳ３４： コンピュータは、求めた復元画像に対して、ユーザー指示された画像処理を実施し、新たな処理済み画像を生成する。

ステップＳ３５： コンピュータは、ステップＳ３４で求めた新たな処理済み画像に、新たな履歴情報を付加することにより、履歴付き画像ファイルを再作成する。なお、この再作成の処理については、図２のステップＳ３以降の処理と同じため、ここでの説明を省略する。

《実施形態の効果など》
以上説明したように、電子カメラ１１は、履歴付き画像ファイルを生成する。この履歴付き画像ファイルは、カメラ内で画像処理を済ませているため、汎用の画像表示ソフトで開いてそのまま印刷したり、プリンタに電子カメラ１１をつないでダイレクト印刷することが可能となる。

一方、この履歴付き画像ファイルには、履歴情報が含まれる。この履歴情報を使って復元処理を行うことにより、カメラ内での画像処理の影響を後から取り除くことができる。その結果、この復元画像に画質調整などを行っても、画像処理の重複による画質劣化は殆ど生じない。
このように、履歴付き画像ファイルは、処理済み画像の利便性と、復元画像による高画質な処理といった長所を兼ね備える。

特に、輪郭強調前に画像を復元することによって、事後的な画質調整においてノイズが増加したり、太いオーバーシュートやジャギーが生じるといった画質劣化を効果的に抑止できる。また、彩度強調前に画像を復元することによって、事後的な画質調整において特定色域が色飽和するなどの事態を効果的に抑止することができる。

さらに、上述した画像処理プログラムでは、画質調整後に、履歴付き画像ファイルを再作成する。したがって、コンピュータ上で画質調整を複数回繰り返しても、画像処理が重複することがなく、画像処理の重複による画質劣化は殆ど生じない。

《実施形態の補足事項》
なお、上述した実施形態では、ベイヤ配列のＲＡＷ画像について説明した。しかしながら、ＲＡＷ画像の色配列パターンはベイヤ配列に限定されるものではない。

また、上述した実施形態では、電子カメラ１１に履歴付加装置を搭載するケースについて説明した。しかしながら、本発明はこれに限定されるものではない。例えば、フィルムスキャナーなどに履歴付加装置を搭載してもよい。

以上説明したように、本発明は、履歴付加装置、電子カメラ、または画像処理プログラムなどに利用可能な技術である。

本実施形態の電子カメラ１１の構成を示す図である。 履歴付き画像ファイルの生成動作を示す流れ図である。 差分画像の生成動作を示す図である。 差分画像の生成動作を示す図である。 画像処理プログラムによるコンピュータ動作を説明する図である。

符号の説明

１１ 電子カメラ
１２ 撮影レンズ
１３ 撮像素子
１４ Ａ／Ｄ変換部
１５ 画像処理部
１６ 補正部
１７ ホワイトバランス補正部
１８ 色補間部
１９ ガンマ処理部
２０ 色処理部
２１ 輪郭強調部
２２ 画像圧縮部
２３ ファイル生成部
２４ 記録部
２５ 記録媒体
２６ 制御部
２７ 操作部
２８ 差分処理部
２９ 差分圧縮部
５０ 画像伸長部

Claims (7)

1. 入力画像に対して画像処理を施し、処理済み画像を生成する画像処理部と、
   前記処理済み画像を前記入力画像に戻す復元処理に必要な履歴情報を生成し、前記前記処理済み画像に前記履歴情報を付加して、前記復元処理が可能な画像ファイル（以下『履歴付き画像ファイル』という）を生成するとともに、前記画像処理の設定に基づいて、前記画像処理が可逆と見なせる画像処理であるか否かを判断し、前記画像処理が可逆と見なせない画像処理であると判断された場合、前記入力画像と前記処理済み画像との差分画像を、前記履歴情報として前記処理済み画像に付加し、前記画像処理が可逆と見なせる画像処理であると判断された場合、前記画像処理の処理内容を示す情報、または前記画像処理の逆変換を示す情報を、前記履歴情報として前記処理済み画像に付加する履歴付加部と
   を備えたことを特徴とする履歴付加装置。
2. 請求項１に記載の履歴付加装置において、
   前記入力画像は、画素単位に複数種類の色信号を有するカラー画像であり、
   前記履歴付加部は、前記入力画像と前記処理済み画像との差分画像を前記色信号別に生成し、前記色信号別の差分画像を含む前記履歴情報を前記処理済み画像に付加する
   ことを特徴とする履歴付加装置。
3. 請求項１に記載の履歴付加装置において、
   前記入力画像は、予め定められた色配列パターンに従って複数種類の色信号を画素単位に振り分けてなるカラー画像であり、
   前記画像処理部は、少なくとも前記入力画像を色補間して、画素単位に複数種類の色成分を揃えた前記処理済み画像を生成し、
   前記履歴付加部は、前記処理済み画像から前記色配列パターンの色信号を抽出して色配列画像を生成し、前記入力画像と前記色配列画像との差分画像を、前記履歴情報として前記処理済み画像に付加する
   ことを特徴とする履歴付加装置。
4. 請求項１ないし請求項３のいずれか１項に記載の履歴付加装置と、
   被写体像を撮像してＲＡＷ画像を生成する撮像部とを備え、
   前記画像処理部は、前記ＲＡＷ画像を前記入力画像として前記画像処理を施し、
   前記履歴付加部は、前記履歴付き画像ファイルを生成する
   ことを特徴とする電子カメラ。
5. 請求項４に記載の電子カメラにおいて、
   前記履歴付加装置は、輪郭強調の処理前画像と処理済み画像との差分画像を求め、前記差分画像を前記履歴情報として処理済み画像に付加することにより、前記電子カメラ内における前記輪郭強調の画質影響を後から取り除くことが可能な履歴付き画像ファイルを生成する
   ことを特徴とする電子カメラ。
6. 請求項４に記載の電子カメラにおいて、
   前記履歴付加装置は、彩度強調の処理前画像と処理済み画像との差分画像を求め、前記差分画像を前記履歴情報として処理済み画像に付加することにより、前記電子カメラ内における前記彩度強調の画質影響を後から取り除くことが可能な履歴付き画像ファイルを生成する
   ことを特徴とする電子カメラ。
7. 請求項４ないし請求項６のいずれか１項に記載の電子カメラで生成された前記履歴付き画像ファイルをコンピュータで画像処理するための画像処理プログラムであって、
   前記コンピュータを、
   前記履歴付き画像ファイルから前記処理済み画像と前記履歴情報を取得する入力処理部と、
   前記処理済み画像に前記履歴情報が示す前記復元処理を施し、復元画像（前記画像処理前の入力画像に近似した画像）を得る復元処理部と、
   前記復元処理部によって得た前記復元画像に対して、改めて画像処理を施す再画像処理部として機能させるための画像処理プログラム。

Images