JP2000322417A - 画像ファイリング装置及び方法及び記憶媒体 - Google Patents

Abstract

(57)【要約】 【課題】 文書画像をファイリングして所望とする文字
列で検索させたとき、その文字列が文書画像中のどの位
置の文字列画像に対応するかを明示する。 【解決手段】 原稿画像を読み取り、その中のテキスト
領域中の文字画像を認識する。そして、読み取って得ら
れた原稿画像データ、認識して得られた文字コード、及
び、認識対象となった文字画像の位置情報を記憶する。
そして、検索時には、与えられた検索文字列に一致する
文字列を探し出し、その文字列を有する画像を表示す
る。且つ、表示する画像中の該当する文字列画像部分を
強調表示する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は画像ファイリング装
置及び方法及び記憶媒体に関するものである。

【０００２】

【従来の技術】紙の文書をスキャナで光学信号から電気
信号に変換する文書の電子化は、今日ではごく一般的に
行われている。特に、近年の文字認識技術の発展によ
り、文書を単なる画像データとしてではなく、その内容
までも計算機に可読な形でコード化することが可能にな
った。

【０００３】その技術を応用すると、紙で与えられた文
書中から、ある特定の単語、文字列に関連する情報をピ
ックアップするために、これまで人手を介して入力して
いた作業が不要になると共に、与えられた文書内の全て
の文字コード列が検索対象として使用できるようにもな
る。

【０００４】図５は、文書画像を入力して、その中に記
載された文字コード列を得る、いわゆる文字認識ソフト
ウェアの実行画面の例である。ディスプレイ上のマルチ
ウィンドウ表示を用い、左側に入力された文書画像のビ
ットマップ表示、右側に認識出力された、文書内の文字
コード列のテキスト表示がなされている。図例では更
に、テキスト表示の内容に対し、「レイアウト」という
文字列の検索が行なわれており、検出された部分が反転
で強調表示されていることを示している。この検出結果
から、文書中の所望の文字列を索引として取得すること
ができる。

【０００５】しかし、現在の文字認識技術では、比較的
状態のよい印刷文書を対象にしてさえも１００％の完全
な認識率を得るのは難しい。したがって、前記のテキス
ト表示部に表示された文字コード列は、元の文書の情報
を完全に正しく再現しているとは限らない。さらに、文
書には図、写真等、テキスト表示部には現れない情報が
含まれていることもある。よって、情報を正しく得るた
めには、図５の例では、テキスト表示ではなく、画像デ
ータ表示部から、検索結果の文字列に対応する部分を見
つけて情報を参照する必要がある。

【０００６】

【発明が解決しようとする課題】前述の例では、テキス
ト表示部に示された検索の結果から、画像表示部の画像
データの対応づけは、オペレータが行わなければならな
い。特に、文書が多数の段組からなっていたり、複雑な
文字配置になっている場合、さらに、複数ページからな
る大量の文書から検索を行った場合など、テキスト表示
部の文字列に対応する部分を表示画像から目視で探索す
る手間は非常に大きかった。

【０００７】本発明はかかる問題点に鑑みなされたもの
であり、文書画像をファイリングして所望とする文字列
で検索させたとき、その文字列が文書画像中のどの位置
の文字列画像に対応するかを明示することを可能ならし
める画像ファイリング装置及び方法及び記憶媒体を提供
しようとするものである。

【０００８】

【課題を解決するための手段】この課題を解決するた
め、例えば本発明の画像ファイリング装置は以下の構成
を備える。すなわち、原稿画像を読み取り記憶保存する
画像ファイリング装置であって、読み取って得られた原
稿画像データ中のテキスト領域中の文字画像を認識する
文字認識手段と、認識して得られた文字コード及び認識
された文字画像の前記原稿画像データ中における位置情
報を、前記原稿画像データと関連づけて保存する保存手
段と、入力された文字コード列を検索文字コード列と
し、前記保存手段に保存された文字コード群の中から検
索する検索手段と、該検索手段によって一致する文字コ
ード列を含む画像を前記保存手段で保存された中から抽
出し、表示する画像表示手段と、該表示手段で表示され
る画像中の、検索された文字コード群のそれぞれの位置
情報に基づく領域を強調表示する強調表示手段とを備え
る。

【０００９】

【発明の実施の形態】以下、添付図面に従って本発明に
かかる実施形態を詳細に説明する。

【００１０】図１は本発明の第一の実施例の構成を示す
ブロック図である。

【００１１】１０１は原稿を光電変換により画像データ
に変換する、スキャナ等の入力装置、１０２は画像デー
タ、およびオペレータ操作の表示インタフェースとなる
ディスプレイ装置、１０３はオペレータ操作の入力イン
タフェースであるキーボード、マウス等の入力装置、１
０４は画像データやテキスト文字を紙に印刷する印刷装
置である。

【００１２】１０５は文書画像をテキスト領域、図領
域、表領域といった性質の異るブロックに分割する領域
分割部、１０６はテキスト領域部の文字を認識して文字
コード列とする文字認識部、１０７は文字コード列か
ら、オペレータの指示した検索文字列を検索する、文字
列検索部である。

【００１３】１０８は１０５，１０６，１０７の動作を
制御しながら、１０２，１０３，１０４，１０５と入出
力を行い実施例全体を制御する中央制御装置（以下、Ｃ
ＰＵ）である。１０９メモリはＣＰＵ１０８が行う制御
プログラム、および取り扱われる画像や文字コードなど
を収める、ＲＡＭ、ハードデイスク等の記憶装置であ
る。

【００１４】本発明の第１の実施例の動作を、図２のフ
ローチャートを用いて説明する。

【００１５】先ず、ステップＳ２０１にて、原稿文書
（紙）をスキャナ等を用いて画像データへと変換する。
手動、あるいはオートドキュメントフィーダなどを用い
て、複数枚を入力した場合は、枚数と同じ個別の画像デ
ータが生成され、それぞれに与えられた個別の画像ＩＤ
を割り当て、入力順にメモリ１０９に保存していく。

【００１６】全ての原稿画像データの保存が終わると、
ステップＳ２０２に進んで、メモリ１０９に格納された
中の未処理の画像データを入力順に１つ選択する。次い
で、ステップＳ２０３に進み、選択された画像データに
対しテキスト領域、図領域、表領域といった性質の異る
ブロックに分割する。

【００１７】この処理の内容を図３を用いて説明する。
選択された画像データは、その領域識別処理を行って、
性質の異なる矩形領域（ブロック）に分割し、各ブロッ
クについてそのブロックがテキスト領域であるのか、図
形領域であるのかを判断する。判断する手法としては、
本実施形態の場合、領域の黒画素の密集度などを用いて
行ったが、勿論、これ以外の公知技術を用いてもよい。

【００１８】ステップＳ２０４では、こうして判別され
たブロックの中で、テキスト領域として判別されたブロ
ックのすべてに対し文字認識処理を行い、結果を文字コ
ード列としてメモリに保存する。文字認識処理そのもの
は公知のものを用いるものとするが、実施形態では、認
識対象の切り出そうとする文字イメージの原稿画像中の
どの位置にあるのかを示す位置情報及びその大ききなど
の情報が各文字に伴なわれて記憶していく。

【００１９】こうして得られた文字コード列のデータの
例を図４に示す。なお、図示の左端の「文字」は文字コ
ードに対応する文字が如何なるものであるのかを示して
いるだけであり、実際はそれ以外の文字コード、その文
字コードが存在する画像ＩＤ、そして座標位置とサイズ
情報が記憶されることになる。また、文字イメージの位
置情報はその文字の切り出し位置の左下位置を（ｘ、
ｙ）形式で保存し、その位置から垂直及び水平方向のド
ット数をサイズ情報として記憶するようにした。

【００２０】図２に戻って、上記のようにして文字認識
処理を行うが、未処理の画像データがある場合はステッ
プＳ２０２に戻り、すべての画像を処理していく。

【００２１】以上の結果、スキャナ１０１で全ての原稿
に対応する画像データが特有のＩＤで記憶管理されると
共に、各画像中のテキストブロックの認識結果である文
字コードが、どの画像のものであるかを示す情報（Ｉ
Ｄ）とその座標位置及び大きさと共に関連づけられて保
存されることになる。

【００２２】次いで、ステップＳ２０６に処理が進む
と、オペレータが、キーボードやマウス等を用いて検索
指示を行い、検索文字列を入力して検索処理を行わせる
と、ステップＳ２０７に進んで、その検索文字列に合致
する文字コード群を、メモリ１０９に保存されている文
字コード群の中から探し出す。

【００２３】ステップＳ２０８では、文字コード列中の
検出された文字列と対応するＩＤを持つ画像を画像表示
装置に表示する。このとき、検索文字列と一致する文字
コードに付随する座標データ及びそのサイズ情報を得る
ことができるので、それらの情報に基づいて、表示され
た画像中の該当する文字画像領域の強調表示させる。

【００２４】図６は、検索文字列として「レイアウト」
を設定して上記処理を行った例を示している。図示の如
く、検索処理を行ったとき、レイアウトなる文字画像部
分がハイライト表示され、その画像が検索条件に一致し
たこと、及び、どの位置の文字画像が一致したかが一目
瞭然とさせることができる。

【００２５】なお、強調表示には、反転表示に限るもの
ではなく、文字部分の背景がまわりの背景とは異なる色
にしたり、アンダーラインを施したりしても良い。

【００２６】また、検索文字列に一致する文字列が複数
の画像で検出された場合には、まず先頭の文字列に対応
する画像を表示する。そして、図示の操作ウインドウ６
００の上下のボタンをマウス等で操作することで、次の
画像、前の画像へと切り替えて表示する。画像の切り換
わりが行われたとき、その画像中の一致した文字画像を
強調表示するのは勿論である。

【００２７】こうして、更に別の文字列の検索を行うと
の指示があると、処理はステップＳ２０６に戻り、上記
処理を再度行う。また、検索終了の指示があると、本処
理を終える。

【００２８】なお、図２のフローチャートは、一連の処
理をまとめてたものであり、実際は、ステップＳ２０１
〜Ｓ２０５と、ステップＳ２０６〜ステップＳ２０９は
それぞれ独立して起動できるものである。

【００２９】以上説明したように本実施形態によれば、
操作者からすれば、文書画像をファイリングしていって
データベースを構築できると共に、あたかもキーボード
等から入力した文字列を検索文字列として検索させ、該
当する文字画像を有する文書画像を検索することが可能
となる。しかも、そのとき、文書画像中のどの位置の文
字列画像が検索に一致したかが一目瞭然とさせることも
可能になる。

【００３０】先に説明したように、従来は、文字認識し
て得られたテキストウインドウを別個に表示して、その
中で検索していたのに対し、本実施形態の処理にしたが
えば、テキストウインドウを表示するスペースも不要に
なり、表示スペースを有効利用することも可能になる。

【００３１】なお、上記実施形態では、紙の文書を画像
データ化して文字認識を行い、その文字コード列に対す
る検索を行って、結果を画像データ中の文字列強調とし
て、ディスプレイに表示したが、画像データを紙に印刷
できるプリンタ等の印刷装置を用い、検索結果の文字列
への強調修飾を含んだ画像データをプリントアウトして
もよい。

【００３２】その場合、紙の文書中にある任意の検索文
字列に関連する情報を得るために、オペレータは元文書
と同じ形式で、かつ検索結果文字列が強調印刷された紙
の文書を得ることができ、それをチェックするだけで所
望の情報を容易に参照できるようになる。よって検索に
よる情報収集作業の効率が向上する。

【００３３】また、本発明は、複数の機器（例えばホス
トコンピュータ、インタフェイス機器、リーダ、プリン
タなど）から構成されるシステムに適用しても、一つの
機器からなる装置に適用してもよい。また、ファイリン
グ装置により作成されたデータベースをネットワーク上
のサーバに設け、クライアント側から検索するシステム
に適用しても構わない。

【００３４】また、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体（または記録媒体）を、システムあるい
は装置に供給し、そのシステムあるいは装置のコンピュ
ータ（またはCPUやMPU）が記憶媒体に格納されたプログ
ラムコードを読み出し実行することによっても、達成さ
れることは言うまでもない。この場合、記憶媒体から読
み出されたプログラムコード自体が前述した実施形態の
機能を実現することになり、そのプログラムコードを記
憶した記憶媒体は本発明を構成することになる。また、
コンピュータが読み出したプログラムコードを実行する
ことにより、前述した実施形態の機能が実現されるだけ
でなく、そのプログラムコードの指示に基づき、コンピ
ュータ上で稼働しているオペレーティングシステム(OS)
などが実際の処理の一部または全部を行い、その処理に
よって前述した実施形態の機能が実現される場合も含ま
れることは言うまでもない。

【００３５】さらに、記憶媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張カー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書込まれた後、そのプログラムコードの指示
に基づき、その機能拡張カードや機能拡張ユニットに備
わるCPUなどが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれることは言うまでもない。

【００３６】

【発明の効果】以上説明したように本発明によれば、文
書画像をファイリングして所望とする文字列で検索させ
たとき、その文字列が文書画像中のどの位置の文字列画
像に対応するかを明示することが可能になる。

【図面の簡単な説明】

【図１】実施形態の装置のブロック構成図である。

【図２】実施形態の処理手順を示すフローチャートであ
る。

【図３】実施形態における領域分割の例を示す図であ
る。

【図４】実施形態における文字認識結果の情報の構造を
示す図である。

【図５】従来の文字認識ソフトウェアを用いた文字列検
索の例を示す図である。

【図６】実施形態における文字列検索結果の一例を示す
図である。

Claims (5)

【特許請求の範囲】
1. 【請求項１】 原稿画像を読み取り記憶保存する画像フ
   ァイリング装置であって、 読み取って得られた原稿画像データ中のテキスト領域中
   の文字画像を認識する文字認識手段と、 認識して得られた文字コード及び認識された文字画像の
   前記原稿画像データ中における位置情報を、前記原稿画
   像データと関連づけて保存する保存手段と、 入力された文字コード列を検索文字コード列とし、前記
   保存手段に保存された文字コード群の中から検索する検
   索手段と、 該検索手段によって一致する文字コード列を含む画像を
   前記保存手段で保存された中から抽出し、表示する画像
   表示手段と、 該表示手段で表示される画像中の、検索された文字コー
   ド群のそれぞれの位置情報に基づく領域を強調表示する
   強調表示手段とを備えることを特徴とする画像ファイリ
   ング装置。
2. 【請求項２】 前記保存手段で保存する位置情報には、
   文字画像のサイズ情報が含まれることを特徴とする請求
   項第１項に記載の画像ファイリング装置。
3. 【請求項３】 前記強調表示手段は、文字画像の位置と
   サイズ情報に基づいて、該当する文字画像を反転して表
   示する手段であることを特徴とする請求項第２項に記載
   の画像ファイリング装置。
4. 【請求項４】 原稿画像を読み取り記憶保存する画像フ
   ァイリング方法であって、 読み取って得られた原稿画像データ中のテキスト領域中
   の文字画像を認識する文字認識工程と、 認識して得られた文字コード及び認識された文字画像の
   前記原稿画像データ中における位置情報を、前記原稿画
   像データと関連づけて保存する保存工程と、 入力された文字コード列を検索文字コード列とし、前記
   保存工程によって保存された文字コード群の中から検索
   する検索工程と、 該検索工程によって一致する文字コード列を含む画像を
   前記保存工程によって保存された中から抽出し、表示す
   る画像表示工程と、 該画像表示工程によって表示される画像中の、検索され
   た文字コード群のそれぞれの位置情報に基づく領域を強
   調表示する強調表示工程とを備えることを特徴とする画
   像ファイリング方法。
5. 【請求項５】 コンピュータが読み込み実行するプログ
   ラムコードを格納する記憶媒体であって、 読み取って得られた原稿画像データ中のテキスト領域中
   の文字画像を認識する文字認識手段と、 認識して得られた文字コード及び認識された文字画像の
   前記原稿画像データ中における位置情報を、前記原稿画
   像データと関連づけて保存する保存手段と、 入力された文字コード列を検索文字コード列とし、前記
   保存手段に保存された文字コード群の中から検索する検
   索手段と、 該検索手段によって一致する文字コード列を含む画像を
   前記保存手段で保存された中から抽出し、表示する画像
   表示手段と、 該表示手段で表示される画像中の、検索された文字コー
   ド群のそれぞれの位置情報に基づく領域を強調表示する
   強調表示手段として機能するプログラムコードを格納す
   る記憶媒体。