JP4696614B2 - 画像表示制御装置及びプログラム - Google Patents

Description

本発明は、複数の画像を記憶し、一覧表示される選択画像のなかから所望の画像を選択可能として選択された画像を再生して表示装置に表示させる画像表示制御装置（いわゆる、電子アルバム装置）における画像の表示技術に関する。

複数の撮影画像をサムネイル（縮小画像）一覧、あるいはインデックス一覧として出力（印刷、若しくは表示）する際、各画像が正立画像になるように画像の姿勢を調整して出力する技術（例えば、特許文献１参照）がある。

また、撮影時の天地情報を基に自動的に正立画像を表示させる技術（例えば、特許文献２参照）がある。
特開平９−４３７３６号公報 特開平１０−１７３９８４号公報

カメラによる撮影画像は通常縦横のサイズが異なる（通常はアスペクト比４：３、つまり、横４：縦３の比率）が、上記特許文献１に開示の技術では横向き画像（例えば、アスペクト比４：３のフレームサイズのカメラで縦に構えて撮影した画像の被写体は横方向に右または左向きの横長画像として記録される）を正立画像にする場合に、縦横のサイズが異なる画像をどのように取り扱うかが開示されていないといった課題があった。

また、上記特許文献２に開示の技術では撮影時に天地情報が付されるので横向き画像を正立させることはできるが、正立した画像は全体を９０°回転させた縦長画像（アスペクト比４：３の横向き画像）を９０°回転させると（アスペクト比３：４（横３：縦４）の）縦長画像となるので、異なる時期に撮影した縦長画像や横長画像が混在して記録された画像の縮小画像を生成して一覧表示すると図１０に示すように横長画像１０１と縦長画像１０２が混在して無駄なスペース１０３が生じてしまうといった課題があった。

縦横比の異なる画像を正立させて画像を一覧表示する際に無駄なスペースを生じないように複数の画像を配列する方法として、全ての画像を縦長か横長のどちらかに統一して表示する方法が考えられる。横長画像に統一するケースでは、正立した縦長画像を横長画像にするには、（Ａ）；縦長画像全体を横長形状に変換して表現する方法と、（Ｂ）；縦長画像から横長画像への部分画像の切出しを行う方法が考えられる。

（Ａ）；更に、縦長画像全体を横長形状に変換して表現する方法としては、縦長画像を縦長の形状のまま縮小して横長形状とする方法と縦長画像全体の形状を横長に伸張して横長とする方法があるが、前者では画像が小さすぎて見づらいし、無駄なスペースが生じてしまう（左右に余白ができる）といった課題があり、後者では横長に伸張するために画像が変形して（歪んで）しまい、不自然な絵柄になってしまうといった課題がある。
（Ｂ）；縦長画像から横長画像への部分画像の切出しを行う方法では、縦長形状のどの部分を切出すかが問題であり、中央部分を切出す方法が技術的には容易ではあるが撮影対象が人物であったような場合には顔が途中で切り取られるといった現象が生じて元の画像イメージが分からなくなってしまうといった課題がある。

また、縦長画像に統一するケースでも上述した（１）のケースと同様の課題がある。
つまり、一覧表示する画像を全て横長画像にした場合には、横長画像はフルに表示されるが縦長画像は縦方向の約半分が切り捨てられ、逆に一覧表示する画像を全て縦長画像にした場合には、縦長画像はフルに表示されるが横長画像は横方向の約半分が切り捨てられるため、いずれの画像形状に統一したとしても一覧表示される画像はバランスを欠いたものとなるといった課題があった。

本発明は上記課題を解決することためになされたものであり、縦横比の異なる画像を無駄なスペースを生じないようにしてそれらの正立画像を表示させ得る画像表示制御装置及びプログラムの提供を目的とする。

上記課題を解決するために、請求項１に記載の発明では、保存メモリに記録されている画像データを再生し、再生画像を画像表示装置に表示させる画像表示制御装置であって、再生画像の合焦位置を取得する合焦位置取得手段と、合焦位置取得手段によって取得された合焦位置を基準として再生画像から最大サイズの正方形状の画像を切出す画像切出し手段と、画像切出し手段によって切出された正方形状の画像を画像表示装置に表示させる表示制御手段と、を備え、前記合焦位置取得手段は、前記再生画像に合焦位置データが対応付けられていない場合は、該再生画像の中央位置を合焦位置として取得することを特徴とする画像表示制御装置を提供する。

また、請求項２に記載の発明では、画像データは撮影時に複数の合焦可能位置の中から選択され自動合焦に用いられた合焦位置データと対応付けられており、合焦位置取得手段は再生画像に対応付けられている合焦位置データを基に再生画像の合焦位置を取得することを特徴とする請求項１に記載の画像表示制御装置を提供する。

また、請求項３に記載の発明では、前画像切出し手段によって切出された正方形状の画像から縮小画像を生成する縮小画像生成手段を備え、表示制御手段はこの縮小画像生成手段によって生成された縮小画像を画像表示装置に一覧表示させること、を特徴とする請求項１に記載の画像表示制御装置を提供する。

また、請求項４に記載の発明では、保存メモリに記録されている画像データを再生し、再生画像を画像表示装置に表示させる画像表示制御装置であって、画像データの撮影時に複数の合焦可能位置の中から選択され該画像データに対応付けられている合焦位置データがあるとき、該合焦位置データから再生画像の合焦位置を取得する合焦位置取得手段と、合焦位置取得手段によって取得された合焦位置を基準として再生画像から最大サイズの正方形状の画像を切出す画像切出し手段と、画像切出し手段によって切出された正方形状の画像から縮小画像を生成する縮小画像生成手段と、縮小画像生成手段によって生成された縮小画像を画像表示装置に一覧表示させる表示制御手段と、を備え、前記合焦位置取得手段は、前記再生画像に合焦位置データが対応付けられていない場合は、該再生画像の中央位置を合焦位置として取得することを特徴とする画像表示制御装置を提供する。

また、請求項７に記載の発明では、縮小画像生成手段は、再生画像に対応付けられている正立判別データを基に再生画像を正立させる手段を有することを特徴とする請求項３または４に記載の画像表示制御装置を提供する。

また、請求項６項に記載の発明では、保存メモリに記録されている画像データを再生し、再生画像を画像表示装置に表示させる画像表示制御装置のコンピュータに、保存メモリに記録されている画像データを再生する機能と、再生画像の合焦位置を取得する機能と、取得した合焦位置を基準として再生画像から最大サイズの正方形状の画像を切出す機能と、切出した正方形状の画像を画像表示装置に表示させる機能と、を実現させるためのプログラムを提供する。

また、請求項７に記載の発明では、保存メモリに記録されている画像データを再生し、再生画像を画像表示装置に表示させる画像表示制御装置のコンピュータに、画像データの撮影時に複数の合焦可能位置の中から選択され該画像データに対応付けられている合焦位置データがあるとき、該合焦位置データから最大サイズの再生画像の合焦位置を取得する機能と、取得した合焦位置を基準として再生画像から正方形状の画像を切出す機能と、切出した正方形状の画像から縮小画像を生成する機能と、生成した縮小画像を画像表示装置に一覧表示させる機能と、を実現させるためのプログラムを提供する。

本発明によれば、撮影時に複数の合焦可能位置の中から選択され自動合焦に用いられた合焦位置に基づいて切出した正方形の画像を表示するので、余分な画像が切り捨てられ、撮影者が注目していた撮影対象だけが正方形の略中央に位置することから、撮影者が注目していた撮影対象が明らかな画像を表示できる。また、複数の画像を画像表示装置に表示させるような場合に、縦横比の異なる複数の画像が混在していたとしても、各画像を合焦位置を中心とした正方形状の画像として切出すので、元の画像が縦長画像であっても横長画像であってもバランスのとれた画像を表示することができる。また、正方形状の画像の切出しの際は合焦位置を基準にして切出しを行うので、ユーザは表示された画像の特徴を容易に読み取ることができる。

図１は本発明に係わる正方形画像切出し方法の概要説明図であり、図１（ａ）は横長画像を示し、図１（ｂ）は切出された正方形状の画像を示す。図１で横長画像８１はマルチフォーカスＡＦ（複数焦点によるオートフォーカス）機能を備えたカメラによって撮影された画像である。説明上、カメラは図４に示すような３つの合焦位置（ＡＦ１〜ＡＦ３）を備えており、図示のように横長画像８１の合焦位置をＡＦ１とし、ユーザは犬８２を注目して撮影したものとする。このとき、横長画像８１はその合焦位ＡＦ１を中心として横長画像８１の短辺８３を一辺の長さＬとした正方形状の画像８５が切出される。このように切出すことにより、一覧表示の際に無駄なスペースが生じなくて見やすく、また、撮影者の撮影意図が明確に現された画像を縮小画像またはインデックス画像として一覧表示できる。

図２は本発明に係る画像表示制御装置の一例としてのデジタルカメラの一実施例の外観図である。
図２で、デジタルカメラ１は図２（ａ）に示すように正面側に撮像レンズ２を有している。また、デジタルカメラ１の背面には図２（ｂ）に示すように、モードダイヤル３、液晶モニタ画面４、カーソルキー５、ＳＥＴキー６等が設けられている。また、上面には図２（ｃ）に示すようにズームレバー７、シャッターキー８及び電源ボタン９が設けられ、図示されていないが側部にはパーソナルコンピュータ（以下、パソコン）やモデム等の外部装置とＵＳＢケーブルに接続する場合に用いるＵＳＢ端子接続部が設けられている。

図３は、図２に示したデジタルカメラの電子回路構成の一実施例を示す図である。図３で、デジタルカメラ１は、基本モードである撮影モードにおいて、フォーカスレンズ１２を移動させて合焦動作を行わせるＡＦ駆動部１１、ズームレンズ及びフォーカスレンズ１２を含む撮像レンズ２を構成するレンズ光学系、撮像素子であるＣＣＤ１３、タイミング発生器（ＴＧ）１４、垂直ドライバ１５、サンプルホールド回路（Ｓ／Ｈ）１６、Ａ／Ｄ変換器１７、カラープロセス回路１８、ＤＭＡ（Direct Memory Access）コントローラ１９、ＤＲＡＭインターフェイス（Ｉ／Ｆ）２０、ＤＲＡＭ２１、縦横検出部２２、縮小画像生成部２３、保存メモリ２４、制御部２５、ＪＰＥＧ回路２６、ＶＲＡＭ２７、ＶＲＡＭコントローラ２８、デジタルビデオエンコーダ２９、表示部３０、キー入力部３１等を備えている。また、警告や告知情報を出力する音声出力部（図示せず）を設けるようにしてもよい。

撮影モードでのモニタリング状態においては、ＡＦ駆動部１１は図示しないフォーカスレンズ駆動モータを駆動してフォーカスレンズ１２を移動させる。撮像レンズ２を構成する光学系１２の撮影光軸後方に配置された撮像素子であるＣＣＤ１３が、タイミング発生器（ＴＧ）１４、垂直ドライバ１５によって走査駆動され、一定周期毎に結像した光像に対応する光電変換出力を１画面分出力する。

ＣＣＤ１３は被写体の二次元画像を撮像する固体撮像デバイスであり、典型的には毎秒数十フレームの画像を撮像する。なお、撮像素子はＣＣＤに限定されずＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの固体撮像デバイスでもよい。

この光電変換出力は、アナログ値の信号の状態でＲＧＢの各原色成分毎に適宜ゲイン調整された後に、サンプルホールド回路（Ｓ／Ｈ）１６でサンプルホールドされ、Ａ／Ｄ変換器１７でデジタルデータに変換され、カラープロセス回路１８で画像補間処理及びγ補正処理を含むカラープロセス処理が行われて、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒが生成され、ＤＭＡ（Direct Memory Access）コントローラ１９に出力される。

ＤＭＡコントローラ１９は、カラープロセス回路１８の出力する輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒを、同じくカラープロセス回路１８からの複合（composite）同期信号、メモリ書き込みイネーブル信号、及びクロック信号を用いてＤＲＡＭインターフェイス（Ｉ／Ｆ）２０を介してバッファメモリとして使用されるＤＲＡＭ２１にＤＭＡ転送する。

縦横検出部２２はカメラの傾き角度を検出する傾きセンサからなり、検出結果を制御部２５に送出する。また、縮小画像生成部２３は制御部２５の制御により合焦位置に基づいて正方形状の画像を切出し、その縮小画像を生成する。なお、縮小画像生成部２３を正方縮小画像一覧動作プログラムのプログラムモジュールまたはサブプログラムとして構成してもよい。

制御部２５は、このデジタルカメラ１全体の制御動作を司るものであり、ＣＰＵ若しくはＭＰＵ（以下、ＣＰＵ）と、後述するように再生モード時の画像表示動作制御を含む該ＣＰＵで実行される動作プログラムを固定的に記憶したフラッシュメモリ等のプログラム格納メモリ、及びワークメモリとして使用されるＲＡＭ等により構成され、上記輝度及び色差信号のＤＲＡＭ２１へのＤＭＡ転送終了後に、この輝度及び色差信号をＤＲＡＭインターフェイス２０を介してＤＲＡＭ２１から読出し、ＶＲＡＭコントローラ２８を介してＶＲＡＭ２７に書込む。

制御部２５は、また、キー入力部３１からの状態信号に対応してフラッシュメモリ等のプログラム格納用メモリに格納されている各モードに対応の処理プログラムやメニューデータを取り出して、デジタルカメラ１の他の各機能の実行制御、例えば、画像の一覧表示時に、撮影画像の合焦位置を基準とした正方形状の画像の切出しや正立した縮小画像の生成と生成した縮小画像の一覧表示等に係わる制御の他、スルー表示、自動合焦、撮影、記録、及び記録した画像の再生・表示等の実行制御等や、機能選択時の機能選択メニューの表示制御や設定画面の表示制御等を行う。

デジタルビデオエンコーダ２９は、上記輝度及び色差信号をＶＲＡＭコントローラ２８を介してＶＲＡＭ２７から定期的に読み出し、これらのデータを基にビデオ信号を生成して表示部３０に出力する。

表示部３０は、上述したように撮影モード時にはモニタ表示部（電子ファインダ）として機能するもので、デジタルビデオエンコーダ２９からのビデオ信号に基づいた表示を行うことで、その時点でＶＲＡＭコントローラ２８から取込んでいる画像情報に基づく画像をリアルタイムに液晶モニタ画面４に表示することになる。

制御部２５は合焦指示（本実施形態ではシャッターキー８の半押し）があるとＡＦ駆動部１１に駆動制御信号を送ってレンズ光学系１２のフォーカスレンズ１２移動させて複数の合焦位置（本実施例ではＡＦ１〜ＡＦ３）のいずれかに合焦するように合焦（ＡＦ）動作を行わせ、撮像指示（本実施形態ではシャッターキー８の全押し）があると撮影を行い（つまり、その時点で直ちにＣＣＤ１３からのＤＲＡＭ２１への経路を停止してスルー画像取得時とは異なる本撮影時のＣＣＤ駆動方式への切り替えを実行し）、記録保存の状態に遷移する。

この保存記録の状態では、制御部２５がＤＲＡＭ２１に書込まれている１フレーム分の輝度及び色差信号をＤＲＡＭインターフェイス２０を介してＹ、Ｃｂ、Ｃｒの各コンポーネント毎に縦８画素×横８画素の基本ブロックと呼称される単位で読み出してＪＰＥＧ（Joint Photograph cording Experts Group）回路２７に書込み、このＪＰＥＧ回路２６でＡＤＣＴ（Adaptive Discrete Cosine Transform：適応離散コサイン変換）、エントロピ符号化方式であるハフマン符号化等の処理によりデータ圧縮する。

そして得た符号データをＪＰＥＧ回路２６から読出し、１画像のデータファイルとしてデジタルカメラ１の記録媒体である保存メモリ２４に記録し、１フレーム分の輝度及び色差信号の圧縮処理及び保存メモリ２４への圧縮データの書込み終了に伴って、制御部２５はＣＣＤ１３からＤＲＡＭ２１への経路を再び起動する。

上記ＪＰＥＧ回路２６は複数の圧縮率に対応しており、圧縮率に対応させて記憶するモードは圧縮率の低い高解像度（一般に、高精密、ファイン、ノーマルなどと呼ばれる）に対応するモードと圧縮率の高い低解像度（一般にエコノミーなどと呼ばれる）モードがある。
また、高画素数から低画素数にも対応している。例えば、ＳＸＧＡ（１６００×１２００）、ＸＧＡ（１０２４×７８６）、ＳＶＧＡ（８００×６００）、ＶＧＡ（６４０×４８０）等と呼ばれる画素サイズがある。

また、基本モードである再生モード時には、制御部２５が保存メモリ２４に記録されている画像データを選択的に読出し、ＪＰＥＧ回路２６で撮影時にデータ圧縮した手順とまったく逆の手順で圧縮されている画像データを伸張し、伸張した画像データをＶＲＡＭコントローラ２８を介してＶＲＡＭ２７に展開して記憶させた上で、このＶＲＡＭ２７から定期的に読出し、これらの画像データを元にビデオ信号を生成して表示部３０の液晶モニタ画面４に再生画像を出力（＝表示）させる。

キー入力部３１は、上述したモードダイヤル３、カーソルキー５、ＳＥＴキー６、ズームレバー７、シャッターキー８、電源ボタン９等から構成され、それらのキー操作に伴う信号は直接制御部２５に送出される。

モードダイヤル３は記録モードと再生モードを切り替えるものである。カーソルキー５はモード設定やメニュー選択等に際して液晶モニタ画面４に表示されるメニューやアイコン等をカーソルでポイント（指定）する際や、マルチフォーカスの場合に表示される複数の合焦位置のうちの一つを指定（選択）する際に操作するキーであり、カーソルキー５の操作によりカーソルを上下又は左右に移動させることができる。また、ＳＥＴキー６はカーソルキー５によってカーソル表示されている項目や位置を選択、設定若しくは確認する際に押すキーである。

ズームレバー７は、ズーム操作に用いられ、光学ズームの場合はズームレバー７の操作に対応してズームレンズ（可変焦点距離レンズ）１２−１がワイド側又はテレ側に移動され、ズームレバー７の操作に対応してズーム値が決定され、ズーム値の変化に追従して画角が実際に変化し、液晶モニタ画面４には広角画像又はテレ画像が表示される。また、デジタルズームの場合はズームレバー７の操作に対応してズーム値が決定されるが、実際の画角は変化せず、液晶モニタ画面４にはズーム値に応じたサイズの画像がトリミングされて表示される。

シャッターキー８は、撮影時にレリーズ操作を行うもので、２段階のストロークを有しており、１段目の操作（半押し状態）でオートフォーカス（ＡＦ）と自動露出（ＡＥ）を行わせるための合焦指示信号を発生し、２段目の操作（全押し状態）で撮影処理を行うための撮影指示信号を発生する。

図４はマルチフォーカスエリアの説明図であり、図４（ａ）は横長画像撮影時に液晶モニタ画面４に表示される合焦位置（フォーカスエリア）の例であり、３つの合焦位置ＡＦ１（左）、ＡＦ２（中央）、ＡＦ３（右）が半透過表示される。また、図４（ｂ）は横長画像撮影時に液晶モニタ画面４に表示される合焦位置の例であり、３つの合焦位置ＡＦ１（上）、ＡＦ２（中央）、ＡＦ３（下）が半透過表示される。なお、この例では３つの合焦位置を横一列、また、縦一列に配置したが合焦位置の数及び配置はこの例に限定されない。

撮影時にシャッターキー８が半押し操作されると合焦動作が開始されるが、ＡＦ１〜ＡＦ３のいずれかの合焦位置で合焦するとシャッターキー８の全押し操作が可能となり、シャッターキー８の全押操作が行なわれると撮影処理が行われる。また、この際、カメラの縦横を判別する縦横フラグ及び合焦位置が画像ファイルと関連付けて記憶される。

図５は画像ファイルに関連付けられて保存メモリに記憶される撮影情報の一実施例を示す図であり、撮影情報５０は本実施例ではＥＸＩＦ（Exchangeable Image File Format）データとして各画像ファイルに埋め込まれているが、画像と撮影情報の関連付け方法はこれに限定されない。
撮影情報５０には、図５に示すように、ファイル番号５１、日時５２、縦横フラグ５３、合焦位置５４、撮影画像の画像サイズ５５等が含まれている。ここで、縦横フラグ５３のデフォルト値は「０」で「横」を意味し、「１」は縦を意味するものとする。また、合焦位置５４のデフォルト位置は中央（「ＡＦ２」）とする。また、画像サイズ５５は撮影時に設定された画素サイズ（例えば、１６００×１２００ピクセル、１０２４×７８６ピクセル、８００×６００ピクセル、６４０×４８０ピクセルのいずれか）が記憶される。

図６は横長画像からの正方形状の画像の切出し方法の説明図であり、図６（ａ）はワークエリア上での再生画像の配置を視覚的に示した図、図６（ｂ）は合焦位置がＡＦ１（図４（ａ））の場合の正方形状の画像の切出し方法の説明図、図６（ｃ）は合焦位置がＡＦ２の場合の正方形状の画像の切出し方法の説明図、図６（ｄ）は合焦位置がＡＦ３の場合の正方形状の画像の切出し方法の説明図である。

図６（ａ）で、符号６０、つまり、記号Ａ、Ｂ、Ｃ、Ｄで囲まれている横長の矩形（長方形）は６４０×４８０ピクセルの撮影画像を意味し、符号６１、つまり、記号Ａ‘、Ｂ’、Ｃ‘、Ｄ’で囲まれている矩形はアスペクト比４：３の標準画像領域を意味し、符号６１、つまり、記号Ａ“、Ｂ”、Ｃ“、Ｄ”で囲まれている矩形（長方形）はアスペクト比１６：９のワイド画像領域を意味するものとする。ここで、記号Ｗは撮影画像の横方向の長さ、記号Ｈは撮影画像の縦方向の長さを意味するものとすると、矩形Ａ、Ｂ、Ｃ、Ｄの座標はＡを原点とすると、Ａ（０，０）、Ｂ（０，Ｈ）、Ｃ（Ｗ，Ｈ）、Ｄ（０，Ｗ）となる。なお、この例ではＷ＞Ｈである。

また、図６（ｂ）は図６（ａ）に示した撮影画像６０で、合焦位置がＡＦ１（図４（ａ））のときに切出される正方形状の画像６１−１を示し、画像６１−１は撮影画像６０の辺の長さのうち短いほうの長さＨを辺とした正方形画像として切出される。つまり、図示のように、左側の合焦位置ＡＦ１が中央になるようして、座標（０，０）、（０，Ｈ）、（Ｈ，Ｈ）、（Ｈ，０）で囲まれる正方形部分が切出される。

また、図６（ｃ）は図６（ａ）に示した撮影画像６０で、合焦位置がＡＦ２のときに切出される正方形状の画像６１−２を示し、画像６１−２は撮影画像６０の辺の長さのうち短いほうの辺の長さＨを辺とした正方形画像として切出される。つまり、図示のように、真ん中の合焦位置ＡＦ２が中央になるようして、座標（（Ｗ−Ｈ）／２，０）、（０，Ｈ）、（（Ｗ＋Ｈ）／２，Ｈ）、（（Ｗ＋Ｈ）／２，０）で囲まれる正方形部分が切出される。

また、図６（ｄ）は図６（ａ）に示した撮影画像で、合焦位置がＡＦ３のときに切出される正方形状の画像６１−３を示し、画像６１−３は撮影画像６０の辺の長さのうち短いほうの辺の辺の長さＨを辺とした正方形画像として切出される。つまり、図示のように、右側の合焦位置ＡＦ３が中央になるようにして、座標（Ｗ−Ｈ，０）、（Ｗ−Ｈ，Ｈ）、（Ｗ，Ｈ）、（Ｗ，０）で囲まれる正方形部分が切出される。

図７は縦長画像からの正方形状の画像の切出し方法の説明図であり、図７（ａ）はワークエリア上での再生画像の配置を視覚的に示した図、図７（ｂ）は合焦位置がＡＦ１（図４（ｂ））の場合の正方形状の画像の切出し方法の説明図、図７（ｃ）は合焦位置がＡＦ２の場合の正方形状の画像の切出し方法の説明図、図７（ｄ）は合焦位置がＡＦ３の場合の正方形状の画像の切出し方法の説明図である

図７（ａ）で、符号７０、つまり、記号Α、Β、Γ、Δで囲まれている縦長の矩形（破線で表されている長方形）は６４０×４８０ピクセルの横向きの画像（縦撮りの撮影画像）を意味し、符号７１、つまり、記号Α‘、Β’、Γ‘、Δ’で囲まれている矩形は横向きの画像７０を９０°左方向に回転させて正立させた縦長の画像（正立画像）領域を意味するものとする。ここで、記号Ｗは正立画像の横方向の長さ、記号Ｈは正立画像の縦方向の長さを意味するものとすると、矩形Α‘、Β’、Γ‘、Δ’の座標はΑを原点とすると、Α‘（０，０）、Β’（０，Ｈ）、Γ‘（Ｗ，Ｈ）、Δ’（０，Ｗ）となる。なお、この例ではＷ＜Ｈである。

また、図７（ｂ）は図７（ａ）に示した正立画像７１で、合焦位置がＡＦ１のときに切出される正方形状の画像７２−１を示し、画像７２−１は正立画像７１の辺の長さのうち短いほうの辺の長さＷを辺とした正方形画像として切出される。つまり、図示のように、上側の合焦位置ＡＦ１が中央になるようにして、座標（０，０）、（０，Ｗ）、（Ｗ，Ｗ）、（Ｗ，０）で囲まれる正方形部分が切出される。

また、図７（ｃ）は図７（ａ）に示した正立画像７１で、合焦位置がＡＦ２のときに切出される正方形状の画像７２−２を示し、画像７２−２は正立画像７１の辺の長さのうち短いほうの辺の長さＷを辺とした正方形画像として切出される。つまり、図示のように、真ん中の合焦位置ＡＦ２が中央になるようして、座標（（Ｈ−Ｗ）／２，０）、（０，Ｈ）、（Ｗ，（Ｗ＋Ｈ）／２）、（Ｗ，（Ｗ−Ｈ）／２）で囲まれる正方形部分が切出される。

また、図７（ｄ）は図７（ａ）に示した正立画像７１で、合焦位置がＡＦ３のときに切出される正方形状の画像７２−３を示し、画像７２−３は正立画像７１の辺の長さのうち短いほうの長さＨを辺とした正方形画像として切出される。つまり、図示のように、右側の合焦位置ＡＦ３が中央になるようした座標（０，Ｗ−Ｈ）、（０，Ｈ）、Ｃ（Ｗ，Ｈ）、Ｄ（Ｗ，Ｈ−Ｗ）で囲まれる正方形部分が切出される。

図８は、デジタルカメラの撮影制御動作及び記録画像の一覧表示制御動作例を示すフローチャートであり、このフローチャートはデジタルカメラ１に本願発明の正方形状の縮小画像の一覧表示機能を実現させるためのプログラムを説明するためのものである。
以下に示す処理は基本的に制御部２５が予めフラッシュメモリ等のプログラムメモリに記憶されたプログラムに従って実行する例で説明するが、全ての機能をプログラムメモリに格納する必要はなく、必要に応じて、その一部若しくは全部をネットワークを介して受信して実現するようにしてもよい。以下、図１〜図７に基いて説明する。

デジタルカメラ１が起動されると、ユーザはモードダイヤル３を操作して処理モードの選択を行うので、制御部２５はキー入力部３１からの信号を調べ、記録モードが選択された場合はステップＳ２に進み、再生モードが選択された場合にはステップＳ１８に進み、その他のモードが選択された場合には選択されたその他の処理モードの実行を制御し、終了操作がなされた場合には記録モードを終了する（ステップＳ１）。

記録モードが選択されると、制御部２５は表示部２６に選択可能な画像サイズを示すデータと撮影画像サイズの選択をユーザに促すメッセージデータを送って液晶モニタ画面４に表示させ、ユーザによる選択を促し、ユーザがカーソルキー５を操作して表示されている撮影画像サイズの選択を行うとそのサイズ値をＲＡＭに保持し、ステップＳ３に進む。なお、単にＳＥＴキー６を押すと標準画像サイズが保持される（ステップＳ２）。

次に、制御部２５はその時点のズーム値に対応した焦点距離でＡＥ処理を実行し、ＣＣＤ１３から画像データを得ると共に自動ホワイトバランス（ＡＷＢ）処理により光源の色に対応したホワイトバランスになるようにカラープロセス回路１８で調整を施した上で座標変換部１８、ＤＭＡコントローラ１９及びＤＲＡＭインターフェイス（Ｉ／Ｆ）２０を介してＤＲＡＭ２１にＤＭＡ転送すると共に、ＶＡＭ２７をＣＣＤ１３からの画像データを間引いたビデオスルー画像データで書き換えて表示部２６の液晶モニタ画面４にスルー画像をステップＳ１で設定された画像サイズで表示する。なお、この際、液晶モニタ画面４にカメラの向きにあわせて合焦位置ＡＦ１、ＡＦ２、ＡＦ３を半透過表示する（図４参照）（ステップＳ３）。

制御部２５はキー入力部３１からの信号を調べ、シャッターキー８が半押しされた場合はステップＳ６に進み、押されていない場合はステップＳ３に戻る（ステップＳ４）。

ユーザはカーソルキー５を操作して合焦位置を指定できるので、制御部２５はキー入力部３１からの信号を調べ、合焦位置ＡＦ３が指定された場合はステップＳ７に進み、合焦位置ＡＦ１が指定された場合はステップＳ８に進み、合焦位置ＡＦ２が指定された場合またはカーソルキー５による合焦位置の指定操作がなされなかった場合は（合焦位置のデフォルト＝ＡＦ２）ステップＳ９に進む（ステップＳ６）。

制御部２５は、合焦位置ＡＦ１にピントが合うようにＡＦ駆動部１１を制御して自動合焦処理、つまり、フォーカスレンズを移動させて合焦動作を行わせると共に絞り制御を行い合焦処理が終わると合焦位置をロックしてステップＳ１０に進む。なお、図示していないが合焦動作中もスルー画像は表示される（ステップＳ７）。

制御部２５は、合焦位置ＡＦ３にピントが合うようにＡＦ駆動部１１を制御して自動合焦処理、つまり、フォーカスレンズを移動させて合焦動作を行わせると共に絞り制御を行い合焦処理が終わると合焦位置をロックしてステップＳ１０に進む。なお、図示されていないが合焦動作中もスルー画像は表示される（ステップＳ８）。

制御部２５は、合焦位置ＡＦ２にピントが合うようにＡＦ駆動部１１を制御して自動合焦処理、つまり、フォーカスレンズを移動させて合焦動作を行わせると共に絞り制御を行い合焦処理が終わると合焦位置をロックしてステップＳ１０に進む。なお、図示されていないが合焦動作中もスルー画像は表示される（ステップＳ９）。

制御部２５はキー入力部３１からの信号を調べてシャッターキー８が全押し操作されたか否かを判定し、シャッターキー８が全押しされた場合はステップＳ１１に進む（ステップＳ１０）。

シャッターキー８が全押しされた場合は、その時点で直ちにＣＣＤ１３からのＤＲＡＭ２１への経路を停止してスルー画像取得時とは異なる本撮影時のＣＣＤ駆動方式への切替を実行して画像データを取り込むと共に（ステップＳ１１）、上記ステップＳ２で設定した撮影画像サイズや撮影日時、上記ステップＳ９で取得した合焦位置を含むＥＸＩＦファイルを生成する（ステップＳ１２）。

制御部２５は、また縦横検出部２２からの信号を調べ、傾き角度を基にカメラが横位置（カメラを横に構えた状態）である場合にはステップＳ１４に進み、縦位置（カメラを縦に構えた状態）である場合にはステップＳ１５に進み（ステップＳ１３）、カメラが横位置の場合は上記Ｓ１２で生成したＥＸＩＦファイルの縦横フラグ５３の値を「０」にしてステップＳ１６に進む（ステップＳ１４）。また、カメラが縦位置の場合は上記Ｓ１２で生成したＥＸＩＦファイルの縦横フラグ５３の値を「１」にしてステップＳ１６に進む（ステップＳ１５）。

制御部２５は上記ステップＳ１１で取り込んだ画像データに上記ステップＳ１２〜Ｓ１４で生成したＥＸＩＦファイルを対応付けてからＪＰＥＧ回路２６で画像圧縮処理を施し（ステップＳ１６）、この圧縮データからなる画像ファイルを保存メモリ２４に記録してステップＳ１に戻る（ステップＳ１７）。

再生モードが選択されると、制御部２５は更に選択された再生モードが（例えばサムネイル表示モードといったような）縮小画像一覧表示モードか通常再生モードかを調べ、縮小画像一覧表示モードの場合にはステップＳ１９に進み、通常再生モードの場合にはステップＳ２１に進む。また、ユーザが終了操作を行った場合には再生モードを終了する（ステップＳ１８）。

縮小画像一覧再生モードが選択されると、制御部２５は図９に示すような縮小画像一覧表示処理（画像の正立、縦横の辺のうち長さが短い辺を一辺とする正方形画像の切出し及び切出した画像の縮小画像の生成等）の実行制御を行って（ステップＳ１９）、キー入力部３１からの信号を調べ、再生モードの変更操作が行なわれた場合にはステップＳ１８に戻り、そうでない場合にはステップＳ１９に戻る（ステップＳ２０）。

通常覧再生モードが選択されると、制御部２５は通常再生処理を行なって表示部２６に選択された画像の再生表示を行なわせ（ステップＳ２１）、キー入力部３１からの信号を調べ、再生モードの変更操作が行なわれた場合にはステップＳ１８に戻り、そうでない場合にはステップＳ２１に戻る（ステップＳ２２）。

上記図８のフローチャートに示した動作により、デジタルカメラ１は再生モードで、画像の縦横を判定して正立させた画像を合焦位置を中央とした正方形状の縮小画像を生成して一覧表示できるので、画面上の一覧表示領域には正方形の正立画像が略隙間なく配列されることから画面上に無駄なスペースが生じず、表示領域を有効に活用できる。また合焦位置を中央とした正方形の画像を縮小表示するので、撮影者がユーザが注目していた撮影対象が明らかになり、撮影者の撮影意図が明瞭な画像と正方形状に配列されることから縮小画像が見やすく、画像の選択がしやすい。

また、上記図８のフローチャートのステップＳ６で合焦位置のデフォルト値をＡＦ２（中央）とし、合焦位置の指定操作がない場合にはＡＦ２（中央）を合焦位置としたことにより、複数の合焦可能位置を備えていない撮像装置で撮影された画像や、画像データに合焦位置データが対応付けられていない画像についても合焦位置に基づいて切出した正方形の画像を縮小表示することができる。

また、図８のフローチャートのステップＳ１９では、縦横の辺のうち長さが短い辺を一辺とする正方形画像を切出すようにしたが、表示領域に表示可能な最大サイズの正方形画像を切り出すようにしてもよい。

図９は上記図８に示したフローチャートの縮小画像の一覧表示処理動作の詳細なフローチャートであり、ステップＳ１９−１６、Ｓ１９−１７の動作は縮小画像生成部２３（図３）の動作に相当する。なお、縮小画像生成部２３に代えてテップＳ１９−１６、Ｓ１９−１７の動作もプログラムで行なうようにしてもよい。

図８のフローフローチャートのステップＳ１８で再生モードが縮小画像一覧表示モードのとき、図９で、制御部２５は保存メモリ２４に記録されている圧縮画像ファイルを読み出してＪＰＥＧ回路２６に圧縮データの伸張処理を行わせ（ステップＳ１９−１）、この伸張された画像データを対応付けられているＥＸＩＦファイルに含まれている画像サイズと同一のサイズでＤＲＡＭ２１のワークエリアに描画（ビットマップ展開）する（ステップＳ１９−２）。

制御部２５はＥＸＩＦファイルに含まれている縦横フラグの値を調べ、縦横フラグ＝「１」なら横向き画像（つまり、縦撮りされた画像）と判定してステップＳ１９−４に進み、縦横フラグ＝「０」ならステップＳ１９−５に進む（ステップＳ１９−３）。そして、 横向き画像の場合は、上記ステップＳ１９−２でＤＲＡＭ２１のワークエリアに描画された横向きの画像領域を図７（ａ）に示したように９０°左方向に回転させて正立させた縦長の画像（正立画像）を再度ワークエリアに描画（ビットマップ展開）する（ステップＳ１９−４）。

次に、制御部２５はワークエリアに描画した矩形画像領域の縦の長さ（Ｈ）と横の長さ（Ｗ）を取得すると共に（ステップＳ１９−５）、ＥＸＩＦファイルに含まれている合焦位置を取得し（ステップＳ１９−６）、縦横フラグを再度調べて縦横フラグの値が「０」の場合は横長の画像と判定してステップＳ１９−８に進み、「１」の場合は縦長の画像と判定してステップＳ１９−１２に進む（ステップＳ１９−７）。

横長の画像の場合は、制御部２５は上記ステップＳ１９−６で取得した合焦位置を調べ、合焦位置がＡＦ１（図４（ａ）の例で左）の場合はステップＳ１９−９に進み、ＡＦ３（右）の場合はステップＳ１９−１０に進み、ＡＦ２（中央）の場合はステップＳ１９−１１に進む（ステップＳ１９−８）。

横長の画像の合焦位置がＡＦ１の場合は、制御部２５はワークエリア内の座標（０，０）を特定してステップＳ１９−１６に進み（ステップＳ１９−９）、ＡＦ３の場合はワークエリア内の座標（Ｗ−Ｈ，０）を特定してステップＳ１９−１６に進み（ステップＳ１９−１０）、ＡＦ２の場合はワークエリア内の座標（（Ｗ−Ｈ）／２，０）を特定してステップＳ１９−１６に進む（ステップＳ１９−１１）。

また、縦長の画像の場合は、制御部２５は上記ステップＳ１９−６で取得した合焦位置を調べ、合焦位置がＡＦ１（図４（ｂ）の例で上）の場合はステップＳ１９−１３に進み、ＡＦ３（下）の場合はステップＳ１９−１４に進み、ＡＦ２（中央）の場合はステップＳ１９−１５に進む（ステップＳ１９−１２）。

縦長の画像の合焦位置がＡＦ１の場合は、制御部２５はワークエリア内の座標（０，０）を特定してステップＳ１９−１６に進み（ステップＳ１９−１３）、ＡＦ３の場合はワークエリア内の座標（０，Ｈ−Ｗ）を特定してステップＳ１９−１６に進み（ステップＳ１９−４）、ＡＦ２の場合はワークエリア内の座標（０，（Ｈ−Ｗ）／２）を特定してステップＳ１９−１６に進む（ステップＳ１９−１５）。

制御部２５は縮小画像生成部２３（図３）に上記ステップＳ１９−９〜Ｓ１９−１１のいずれか、または上記ステップＳ１９−１３〜Ｓ１９−１５のいずれかで特定した座標を左端点として与え、図６（ｂ）〜図６（ｄ）または図７（ｂ）〜図７（ｄ）に示したように正方形領域の画像を切出させ（ステップＳ１９−１６）、切出した領域の画像を所定のサイズ（例えば、サムネイル画像のサイズ）に縮小した縮小画像を生成させる（ステップＳ１９−１７）。

制御部２５は上記ステップＳ１９−１７で縮小画像生成部２３に生成させた縮小画像をＤＲＡＭインターフェイス２０を介してＤＲＡＭ２１から読出し、ＶＲＡＭコントローラ２８を介してＶＲＡＭ２７の一覧表示画面の表示行の表示位置に書込んで表示部３０のモニタ画面４上に表示させる（ステップＳ１９−１８）。

次に、制御部２５は一覧表示可能数分の縮小画像を表示したか否かを調べ、表示可能数に満たない場合は次の画像を取り出すためにステップＳ１９−１に戻り、表示可能数分の縮小画像を表示した場合は図８のフローチャートのステップＳ２０に進む（ステップＳ１９−１９）。

図１０は従来技術によるサムネイル画像の一覧表示例を示す図であり、図示のように一覧表示画面内で横長画像１０１と縦長画像１０２が混在して表示され無駄なスペース１０３が生じていて見難い。

図１１は本発明に基づく縮小画像の一覧表示例を示す図であり、正方形の正立画像１１１が略隙間なく配列されているので画面上に無駄なスペースがない。また、撮影者の撮影意図が明瞭な画像と正方形状に配列されることから縮小画像が見やすく、画像の選択がしやすい。

なお、上記各実施例の説明では、静止画像の場合を例としたが、本発明の適用範囲は静止画に限定されない。動画に本発明を適用する場合には、デジタルカメラ１に、動画撮影開始／終了ボタンと動画撮影モードおよび動画再生モードを付加し、図３の構成にＭＰＥＧ（Motion Picture Experts Group）圧縮／伸張処理を行うＭＰＥＧ回路および音声入出力部を備えるようにし、図８のフローチャートで「撮影モード」および「再生モード」を「動画撮影モード」および「動画再生モード」と読み替え、図８のフローチャートのステップＳ１６でＭＰＥＧ回路で動画を圧縮するようにし、ステップＳ１６で圧縮された動画ファイルを保存メモリ２４に記録するようにする。更に、図９のステップＳ１９−１で動画ファイルをＭＰＥＧ回路で伸張するものとする。

また、上記各実施例の説明では画像表示制御装置としてデジタルカメラを例としたが、デジタルカメラに限定されるものではなく、保存メモリに記録した画像を再生して表示装置（外部表示装置でもよい）に一覧表示させる装置（例えば、電子アルバム装置）であってもよい。

以上、本発明のいくつかの実施例について説明したが本発明は上記各実施例に限定されるものではなく、種々の変形実施が可能であることはいうまでもない。

本発明に係わる正方形画像の切出し方法の概要説明図である。 本発明に係る画像表示制御装置の一例としてのデジタルカメラの一実施例の外観を示す図である。 デジタルカメラの電子回路構成の一実施例を示す図である。 マルチフォーカスエリアの説明図である。 画像ファイルに関連付けられて保存メモリに記憶される撮影情報の一実施例を示す図である。 横長画像からの正方形状の画像の切出し方法の説明図である。 縦長画像からの正方形状の画像の切出し方法の説明図である。 デジタルカメラの撮影制御動作及び記録画像の一覧表示制御動作例を示すフローチャートである。 上記図８に示したフローチャートの縮小画像の一覧表示処理動作の詳細なフローチャートである。 従来技術によるサムネイル画像の一覧表示例を示す図である。 本発明に基づく縮小画像の一覧表示例を示す図である。

符号の説明

１ デジタルカメラ（画像表示制御装置）
２２ 制御部（合焦位置取得手段、画像切出し手段）
２３ 縮小画像生成部（縮小画像生成手段）
２４ 保存メモリ
２６ 表示部（画像表示装置）
５３ 縦横フラグ（正立判別データ）
５４ 合焦位置（合焦位置データ）
５５ 画像サイズ
ＡＦ１、ＡＦ２、ＡＦ３ 合焦位置

Claims (7)

1. 保存メモリに記録されている画像データを再生し、再生画像を画像表示装置に表示させる画像表示制御装置であって、
   前記再生画像の合焦位置を取得する合焦位置取得手段と、
   前記合焦位置取得手段によって取得された合焦位置を基準として前記再生画像から最大サイズの正方形状の画像を切出す画像切出し手段と、
   前記画像切出し手段によって切出された正方形状の画像を前記画像表示装置に表示させる表示制御手段と、を備え、
   前記合焦位置取得手段は、前記再生画像に合焦位置データが対応付けられていない場合は、該再生画像の中央位置を合焦位置として取得する
   ことを特徴とする画像表示制御装置。
2. 前記画像データは撮影時に複数の合焦可能位置の中から選択され自動合焦に用いられた合焦位置データと対応付けられており、前記合焦位置取得手段は前記再生画像に対応付けられている合焦位置データを基に前記再生画像の合焦位置を取得することを特徴とする請求項１に記載の画像表示制御装置。
3. 前記画像切出し手段によって切出された正方形状の画像から縮小画像を生成する縮小画像生成手段を備え、前記表示制御手段はこの縮小画像生成手段によって生成された縮小画像を前記画像表示装置に一覧表示させること、を特徴とする請求項１に記載の画像表示制御装置。
4. 保存メモリに記録されている画像データを再生し、再生画像を画像表示装置に表示させる画像表示制御装置であって、
   前記画像データの撮影時に複数の合焦可能位置の中から選択され該画像データに対応付けられている合焦位置データがあるとき、該合焦位置データから前記再生画像の合焦位置を取得する合焦位置取得手段と、
   前記合焦位置取得手段によって取得された合焦位置を基準として前記再生画像から最大サイズの正方形状の画像を切出す画像切出し手段と、
   前記画像切出し手段によって切出された正方形状の画像から縮小画像を生成する縮小画像生成手段と、
   前記縮小画像生成手段によって生成された縮小画像を前記画像表示装置に一覧表示させる表示制御手段と、を備え、
   前記合焦位置取得手段は、前記再生画像に合焦位置データが対応付けられていない場合は、該再生画像の中央位置を合焦位置として取得する
   ことを特徴とする画像表示制御装置。
5. 前記縮小画像生成手段は、前記再生画像に対応付けられている正立判別データを基に前記再生画像を正立させる手段を有することを特徴とする請求項３または４に記載の画像表示制御装置。
6. 保存メモリに記録されている画像データを再生し、再生画像を画像表示装置に表示させる画像表示制御装置のコンピュータに、保存メモリに記録されている画像データを再生する機能と、前記再生画像の合焦位置を取得する機能と、取得した合焦位置を基準として前記再生画像から最大サイズの正方形状の画像を切出す機能と、切出した正方形状の画像を前記画像表示装置に表示させる機能と、を実現させるためのプログラム。
7. 保存メモリに記録されている画像データを再生し、再生画像を画像表示装置に表示させる画像表示制御装置のコンピュータに、前記画像データの撮影時に複数の合焦可能位置の中から選択され該画像データに対応付けられている合焦位置データがあるとき、該合焦位置データから前記再生画像の合焦位置を取得する機能と、取得した合焦位置を基準として前記再生画像から最大サイズの正方形状の画像を切出す機能と、切出した正方形状の画像から縮小画像を生成する機能と、生成した縮小画像を前記画像表示装置に一覧表示させる機能と、を実現させるためのプログラム。

Images