JP7354697B2 - 情報処理装置、及び情報処理プログラム - Google Patents

Description

本発明は、情報処理装置、及び情報処理プログラムに関する。

特許文献１には、端末装置の表示手段で表示を行いつつ媒体に記入されたデータを入力する際のデータ入力画面の表示方法において、表示手段にイメージ表示エリアと項目入力エリアから成る画面を表示し、前記イメージ表示エリアにスキャナで読み取った媒体のイメージのうちの入力すべき少なくとも１つの項目を含む部分を表示すると共に、項目入力エリアには入力すべき項目別の入力用フィールドを表示し、項目入力エリアの１つの入力用フィールドにデータが入力される毎にイメージ表示エリアに表示されるイメージを自動的にスクロールして、次の入力すべき項目を含むイメージの一部分を表示することを特徴とするデータ入力画面の表示方法が開示されている。

特開２０００－３４７７７７号公報

ＯＣＲ（Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅｃｏｇｎｉｔｉｏｎ）処理で読み取った書類の項目を確認して訂正する場合において、訂正する項目に関連する箇所を確認しながら、ユーザによって異なる順番で項目を確認及び訂正することがある。

しかしながら、書類に並んでいる順番で項目を表示すると、訂正する項目に関連する箇所を確認しながら訂正を行う場合において、関連する箇所間の移動が多くなるため、確認する作業が煩雑になり、確認する作業の負担を軽減することが困難であった。

本発明は、書類を確認する作業において、書類に並んでいる順番で項目を表示する場合と比較して、項目を確認する作業の負担を軽減することができる情報処理装置及び情報処理プログラムを提供することを目的とする。

第１の態様の情報処理装置は、プロセッサを備え、プロセッサは、項目に対して記載欄が設けられた書類を認識した結果である認識結果を項目毎に表示し、表示された認識結果を確認した順番である確認順を項目毎に取得し、取得した確認順を用いて、認識結果を表示する順番である表示順を変更する制御を行う。

第２の態様の情報処理装置は、第１の態様に係る情報処理装置において、プロセッサは、表示順と、確認順とが異なる場合、取得した確認順を表示順に反映させるか否かを選択させる。

第３の態様の情報処理装置は、第２の態様に係る情報処理装置において、プロセッサは、確認順を表示順に反映して、認識結果を複数回表示させた結果、各々の認識結果の表示順が予め定めた回数同一であった場合、各々の認識結果の表示順を次回以降の表示順に反映するか否かを選択させる。

第４の態様の情報処理装置は、第１の態様から第３の態様までのいずれか１つの態様に係る情報処理装置において、プロセッサは、各々の認識結果が有する関係性に基づいて、認識結果を関連付けて表示する制御を行う。

第５の態様の情報処理装置は、第４の態様に係る情報処理装置において、関係性は、各々の認識結果が有する従属関係である。

第６の態様の情報処理装置は、第５の態様に係る情報処理装置において、プロセッサは、各々の認識結果の確認順が前後関係を有する場合、従属関係として、各々の認識結果を関連付ける。

第７の態様の情報処理装置は、第１の態様から第６の態様までのいずれか１つの態様に係る情報処理装置において、プロセッサは、予め定められた順番で表示する方法、及び表示順を変更して表示する方法を切り替えて、認識結果を表示する。

第８の態様の情報処理装置は、第１の態様から第７の態様までのいずれか１つの態様に係る情報処理装置において、プロセッサは、確認順を取得するか否かを切り替えて、認識結果を表示する。

第９の態様の情報処理装置は、第１の態様から第８の態様までのいずれか１つの態様に係る情報処理装置において、プロセッサは、書類を読み取った画像データを表示し、表示された画像データにおいて、確認した認識結果に対応した箇所と、未だ確認していない箇所とを区分して表示する。

第１０の態様の情報処理プログラムは、コンピュータに項目に対して記載欄が設けられた書類を認識した結果である認識結果を項目毎に表示し、表示された認識結果を確認した順番である確認順を項目毎に取得し、取得した確認順を用いて、認識結果を表示する順番である表示順を変更する制御を行うことを実行させる。

第１の態様の情報処理装置及び第１０の態様の情報処理プログラムによれば、書類を確認する作業において、書類に並んでいる順番で項目を表示する場合と比較して、項目を確認する作業の負担を軽減することができる。

第２の態様の情報処理装置によれば、取得した確認順を前記表示順に反映させるか否かを選択できない場合と比較して、よりユーザの好みに応じた表示順で表示することができる。

第３の態様の情報処理装置によれば、次回以降の前記表示順に反映するか否かを選択させない場合と比較して、頻繁に確認する順番をより表示順に反映することができる。

第４の態様の情報処理装置によれば、より確認する作業の負担を軽減することができる。

第５の態様の情報処理装置によれば、従属関係を用いらない場合と比較して、ユーザの作業の負担をより軽減することができる。

第６の態様の情報処理装置によれば、関連する項目を明確に定義することができる。

第７の態様の情報処理装置によれば、表示する順番を切り替えることができない場合と比較して、より確認する作業の負担を軽減することができる。

第８の態様の情報処理装置によれば、確認順を取得するか否かを切り替えることができない場合と比較して、現在適用されている表示順を変更することなく、より確認する作業の負担を軽減することができる。

第９の態様の情報処理装置によれば、確認した認識結果に対応した箇所と、未だ確認していない箇所とを区分して表示しない場合と比較して、表示された項目を確認する作業の進捗状況を確認しやすくなる。

各実施形態に係る情報処理システムの構成の一例を示す概略図である。 各実施形態に係る情報処理装置のハードウェア構成の一例を示すブロック図である。 各実施形態に係る情報処理装置の機能的な構成の一例を示すブロック図である。 第一実施形態に係る情報処理装置が表示する確認訂正画面の一例を示す模式図である。 各実施形態に係る項目毎の認識結果の関係性の説明に供する情報処理装置が表示する確認訂正画面の一例を示す模式図である。 第一実施形態に係る情報処理の一例を示すフローチャートである。 第二実施形態に係る情報処理装置が表示する確認訂正画面の一例を示す模式図である。 第二実施形態に係る情報処理の一例を示すフローチャートである。

［第１実施形態］
以下、図面を参照して、本開示の技術を実施するための形態例を詳細に説明する。なお、本実施形態に係る情報処理装置３は、一例として、書類を読み取ったデータを管理するサーバである形態について説明する。しかし、これに限定されない。情報処理装置３は、例えばプリント機能、コピー機能、スキャン機能、及びファクシミリ機能等の機能を有する複合機に搭載されてもよいし、スキャナが接続されたパーソナルコンピュータ等の端末に搭載されてもよい。

図１は、本実施形態に係る情報処理システム１の構成の一例を示す概略図である。図１に示すように、本実施形態に係る情報処理システム１は、複合機２、情報処理装置３、及び端末４がネットワークに接続されて構成されている。

複合機２は、スキャン機能を有し、項目に対して記載欄が設けられた書類をスキャンし、スキャンした画像データを情報処理装置３に送信する。

情報処理装置３は、複合機２によって読み取られた画像データから項目毎にスキャンした画像データと、項目毎にＯＣＲ処理によって認識した結果（以下、「認識結果」という）である文字列とを抽出する。また、情報処理装置３は、書類をスキャンした画像データと、画像データから抽出した項目毎の画像データと、画像データから抽出した文字列を端末４に送信する。

端末４は、情報処理装置３から受信した、画像データと、項目毎の画像データと、項目毎の文字列とを表示する。ユーザは、端末４を操作し、項目毎の画像データと、項目毎の文字列とを確認及び訂正する処理（以下、「確認訂正処理」という。）を行う。

なお、本実施形態では、スキャンした項目毎の画像データ、及び項目毎の認識結果を端末４に表示する形態について説明した。しかし、これに限定されない。情報処理装置３は、モニターが接続されており、情報処理装置３にスキャンした項目毎の画像データ、及び項目毎の認識結果を表示する形態であってもよい。

以下では、説明を簡単にするために、情報処理装置３は、スキャンした項目毎の画像データ、及び項目毎の認識結果を表示するモニターを備え、ユーザによって情報処理装置３を介して確認訂正処理が行われる形態について説明する。

図２は、本実施形態に係る情報処理装置３のハードウェア構成の一例を示すブロック図である。図２に示すように、本実施形態に係る情報処理装置３は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３、ストレージ１４、入力部１５、モニター１６、及び通信インターフェース（通信Ｉ／Ｆ）１７を含んで構成されている。ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、ストレージ１４、入力部１５、モニター１６、及び通信Ｉ／Ｆ１７の各々はバス１８により相互に接続されている。ここで、ＣＰＵ１１は、プロセッサの一例である。

ＣＰＵ１１は、情報処理装置３の全体を統括し、制御する。ＲＯＭ１２は、本実施形態で用いる情報処理プログラムを含む各種プログラム及びデータ等を記憶している。ＲＡＭ１３は、各種プログラムの実行時のワークエリアとして用いられるメモリである。ＣＰＵ１１は、ＲＯＭ１２に記憶されたプログラムをＲＡＭ１３に展開して実行することにより、項目毎の画像データ等の抽出し、記憶する処理を行う。ストレージ１４は、一例としてＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、又はフラッシュメモリ等である。なお、ストレージ１４には、情報処理プログラム等を記憶してもよい。入力部１５は、文字及び選択等の入力を受け付けるキーボード及びマウス等である。モニター１６は、画像データ等を表示する。通信Ｉ／Ｆ１７は、データの送受信を行う。

次に、図３を参照して、情報処理装置３の機能構成について説明する。図３は、本実施形態に係る情報処理装置３の機能的な構成の一例を示すブロック図である。

図３に示すように、情報処理装置３は、表示部２１、取得部２２、制御部２３、受付部２４、及び記憶部２５を有する。ＣＰＵ１１が情報処理プログラムを実行することで、表示部２１、取得部２２、制御部２３、受付部２４、及び記憶部２５として機能する。

表示部２１は、項目に対して記載欄が設けられた書類を認識した結果である認識結果を項目毎に表示する。

取得部２２は、表示された項目毎の認識結果を確認した順番（以下、「確認順」という。）を項目毎に取得する。

制御部２３は、取得した確認順を用いて、項目毎の認識結果を表示する順番（以下、「表示順」という。）を変更する制御を行う。制御部２３は、各々の認識結果が有する関係性に基づいて、認識結果を関連付けて表示する制御を行う。なお、上述した関係性とは、各々の認識結果が有する従属関係である。具体的には、制御部２３は、各々の認識結果の確認順が前後関係を有する場合、従属関係として、各々の認識結果を関連付ける。

制御部２３は、予め定められた順番で表示する方法と、表示順を変更して表示する方法とを切り替えて認識結果を表示する制御を行い、確認順を取得するか否かを切り替えて認識結果を表示する制御を行う。制御部２３は、書類を読み取った画像データを表示し、表示された画像データにおいて、確認した認識結果に対応した箇所と、未だ確認していない箇所とを区分して表示する制御を行う。

受付部２４は、表示順と、確認順とが異なる場合、取得した確認順を表示順に反映させるか否かの選択を受け付ける。受付部２４は、確認順を表示順に反映して、認識結果を複数回表示させた結果、各々の認識結果の表示順が予め定めた回数同一であった場合、各々の認識結果の表示順を次回以降の表示順に反映するか否かの選択を受け付ける。

記憶部２５は、取得した画像データ、項目毎の画像データ、項目毎の認識結果、訂正された項目毎の確認結果、及び項目毎の確認順を記憶する。

次に、情報処理装置３の作用について説明する前に、図４から図５を参照して、情報処理装置３が行う確認順を取得して認識結果の表示順を変更するための手法について説明する。

次に、図４を参照して、確認訂正処理を行う際の確認訂正処理画面について説明する。図４は、本実施形態に係る情報処理装置３が表示する確認訂正画面の一例を示す模式図である。

情報処理装置３は、図４に示すように、確認訂正画面４０に、取得した画像データ４１と、確認訂正表示領域４２における項目毎の画像データ４３と、項目毎の認識結果４４とを表示する。項目毎の認識結果４４をクリックすることで、入力可能な状態となり、認識結果４４に表示されている文字列が訂正される。また、マウス等によって操作されるカーソル４５が、認識結果４４が表示されている箇所と重なると、認識結果４４が表示されている箇所の表示の色が変化する（以下、「マウスオーバー」という。）。情報処理装置３は、項目毎の認識結果４４がマウスオーバーの状態になった順番を項目毎に取得し、確認順として記憶する。例えば、「児童氏名１」、「児童続柄１」、「児童生年月日１」の順番で、カーソル４５を重ね、マウスオーバーになった場合、情報処理装置３は、確認順として、「児童氏名１」を「１」、「児童続柄１」を「２」、「児童生年月日１」を「３」として記憶する。

情報処理装置３は、項目毎の確認順を用いて、項目の確認順及び参照関係を学習する。例えば、情報処理装置３は、項目毎の確認順と、項目毎の表示順とが異なる場合、項目毎の確認順、確認される頻度が高い項目、及び項目間の確認順の前後関係等を学習して、表示順を変更する学習モデルを作成する。情報処理装置３は、作成した学習モデルをＯＣＲ処理を行った書類毎に記憶する。情報処理装置３は、作成した学習モデルを用いて、次回以降に同一の書類についてＯＣＲ処理が行われた場合、認識結果の表示順を変更して表示する。

なお、本実施形態では認識結果４４が表示されている箇所にカーソル４５を重ねる形態について説明した。しかし、これに限定されない。例えば、ヘッドマウントディスプレイ等に項目毎の画像データ４３と、項目毎の認識結果４４とを表示し、項目毎の認識結果４４に向けている視線を検知して、確認順を取得してもよい。また、タブレット等の携帯端末に表示し、タップされた項目毎の認識結果４４を検知して、確認順を取得してもよい。

情報処理装置３は、取得した確認順を用いて学習し、表示順の変更を行う。一例として、図４に示すように、確認訂正画面４０では、項目毎の画像データ４３と、項目毎の認識結果４４とを縦に一列に並べて表示している。しかし、これに限定されない。項目毎が有する関係性に応じて、項目毎の画像データ４３と、項目毎の認識結果４４とを並列に表示してもよい。

次に、図５を参照して、確認訂正処理を行う際に、項目毎の画像データ４３と、項目毎の認識結果４４とを並列に表示する確認訂正処理画面について説明する。図５は、本実施形態に係る項目毎の認識結果４４の関係性の説明に供する情報処理装置３が表示する確認訂正画面の一例を示す模式図である。

情報処理装置３は、図５に示すように、確認訂正画面４０に、取得した画像データ４１と、確認訂正表示領域４２に項目毎の画像データ４３と、項目毎の認識結果４４とを表示する。例えば、情報処理装置３は、「受給者氏名」、「児童氏名１」、「児童続柄１」、「児童生年月日１」、「受給者氏名」、「児童氏名２」、「児童続柄２」、「児童生年月日２」の順番で確認順を取得し、学習モデルに反映した場合について説明する。項目を複数回確認した場合、情報処理装置３は、複数回確認した項目と、当該項目と前後関係を有する項目とを関連付けを行う。

まず、情報処理装置３は、「児童氏名１」、「児童続柄１」、「児童生年月日１」が「受給者氏名」に従属する項目として関連付けを行い、同様に「児童氏名２」、「児童続柄２」、「児童生年月日２」が「受給者氏名」に従属する項目として関連付けを行う。次に、情報処理装置３は、上位の項目として、「受給者氏名」を表示し、「受給者氏名」に従属する項目として、「児童氏名１」、「児童続柄１」、及び「児童生年月日１」と、「児童氏名２」、「児童続柄２」、及び「児童生年月日２」とを並べて表示する。これにより、情報処理装置３は、関連する項目を並列に表示する処理を行う。

なお、本実施形態では、項目が複数回確認された場合、関連付けを行う形態について説明した。しかし、これに限定されない。項目間で前後関係を有する頻度が高い項目を関連があるとして、関連付けを行ってもよいし、関連付けを行う項目の従属関係をファイル等に定義して記憶しておいてもよい。

また、本実施形態では、項目毎の認識結果間の関係性として、従属関係を有する形態について説明した。しかし、これに限定されない。同一項目に対して異なる内容が記載された項目を同種関係で関連付けを行ってもよい。例えば、「児童氏名１」と、「児童氏名２」とは、同一の「児童氏名」という種類を示すが異なる内容が記載されている。情報処理装置３は、同一の種類の項目を関連付けて、並列に表示する形態としてもよい。また、本実施形態では、関連する項目を並列に表示する形態について説明した。しかし、これに限定されない。例えば、各々の項目が連結して、項目間の関連を示すネットワークグラフ等の二次元的に描画するグラフを用いてもよいし、複数の項目が交差しないように連結し、各々の項目の関連を示す力学モデル等の三次元的に描画するグラフを用いて表示してもよい。

また、本実施形態では、確認順を用いて、表示順を変更する形態について説明した。しかし、これに限定されない。同一の表示順で複数回認識結果を表示させた場合、認識結果の表示順を次回以降の表示順に反映してもよいし、表示順を反映するか否かを選択できるようにしてもよい。具体的には、「受給者氏名」、「児童氏名１」、「児童生年月日１」の順番で予め定められた回数表示した場合、ユーザは、「受給者氏名」、「児童氏名１」、「児童生年月日１」の順番を次回以降の表示順に反映するか否かを選択する。情報処理装置３は、反映が選択された場合、次回以降の項目毎の認識結果４４を表示する際に、「受給者氏名」、「児童氏名１」、「児童生年月日１」の順番で、項目毎の画像データ４３及び項目毎の認識結果４４を表示する。

次に、図６を参照して、本実施形態に係る情報処理プログラムの作用について説明する。まず、図６は、本実施形態に係る情報処理の一例を示すフローチャートである。ＣＰＵ１１がＲＯＭ１２又はストレージ１４から情報処理プログラムを読み出し、実行することによって、図６に示す情報処理が実行される。図６に示す情報処理は、例えば、ユーザによって情報処理プログラムの実行指示が入力された場合、情報処理が実行される。

ステップＳ１０１において、ＣＰＵ１１は、画像データが入力されたか否かの判定を行う。画像データが入力された場合（ステップＳ１０１：ＹＥＳ）、ＣＰＵ１１は、ステップＳ１０２に移行する。一方、画像データが入力されていない場合（ステップＳ１０１：ＮＯ）、ＣＰＵ１１は、画像データが入力されるまで待機する。ここで、画像データの入力と共に、書類の種類に関する情報、学習モデルの使用の有無、確認順を学習する有無、及び設定情報の入力がなされる。

ステップＳ１０２において、ＣＰＵ１１は、入力された画像データからＯＣＲ処理によって認識結果を取得する。

ステップＳ１０３において、ＣＰＵ１１は、学習モデルを使用して表示順を変更するか否かの判定を行う。学習モデルを使用して表示順を変更する場合（ステップＳ１０３：ＹＥＳ）、ＣＰＵ１１は、ステップＳ１０５に移行する。一方、学習モデルを使用しない場合（ステップＳ１０３：ＮＯ）、ＣＰＵ１１は、ステップＳ１０４に移行する。

ステップＳ１０４において、ＣＰＵ１１は、設定情報に定義された表示順で項目毎の画像データ４３及び項目毎の認識結果４４を表示する。なお、本実施形態では、学習モデルを使用しない場合、設定情報に設定された表示順で表示する形態について説明した。しかし、これに限定されない。学習モデルを使用しない場合、予め定められた表示順で表示する形態としてもよい。例えば、書類に記載されている順番で表示してもよい。

ステップＳ１０５において、ＣＰＵ１１は、入力された画像データに適合する学習モデルがあるか否かの判定を行う。入力された画像データに適合する学習モデルがある場合（ステップＳ１０５：ＹＥＳ）、ＣＰＵ１１は、ステップＳ１０６に移行する。一方、入力された画像データに適合する学習モデルがない場合（ステップＳ１０５：ＮＯ）、ＣＰＵ１１は、ステップＳ１０４に移行する。

ステップＳ１０６において、ＣＰＵ１１は、学習モデルを用いて表示順を算出し、算出した表示順を用いて項目毎の画像データ４３及び項目毎の認識結果４４を表示する。ここで、ユーザは、表示された項目毎の画像データ４３及び項目毎の認識結果４４の確認訂正処理を行う。

ステップＳ１０７において、ＣＰＵ１１は、確認された項目毎の認識結果４４の確認順として、ユーザの操作によって、マウスオーバーの状態となった項目毎の認識結果４４、及びマウスオーバーの状態となった順番を取得する。

ステップＳ１０８において、ＣＰＵ１１は、ユーザによる確認訂正が終了したか否かの判定を行う。確認訂正が終了した場合（ステップＳ１０８：ＹＥＳ）、ＣＰＵ１１は、ステップＳ１０９に移行する。一方、確認訂正が終了していない場合（ステップＳ１０８：ＮＯ）、ＣＰＵ１１は、ステップＳ１０７に移行する。

ステップＳ１０９において、ＣＰＵ１１は、取得した確認順を用いて学習し、学習モデルを作成するか否かの判定を行う。確認順を学習する場合（ステップＳ１０９：ＹＥＳ）、ＣＰＵ１１は、ステップＳ１１０に移行する。一方、ＣＰＵ１１は、確認順を学習しない場合（ステップＳ１０９：ＮＯ）、ＣＰＵ１１は、情報処理を終了する。なお、本実施形態では、確認順を学習する有無を予め入力する形態について説明した。しかし、これに限定されない。表示順と、確認順とが異なる場合、確認順を学習モデルに反映するか否かを選択させてもよい。

ステップＳ１１０において、ＣＰＵ１１は、取得した確認順を記憶する。

ステップＳ１１１において、ＣＰＵ１１は、同一の書類を示す画像データ毎に記憶した確認順を用いて、学習モデルを生成する。なお、本実施形態に係る学習モデルは、同一の書類を示す画像データ毎に学習モデルを生成する形態について、説明した。しかし、これに限定されない。学習モデルは、ユーザ毎に作成してもよいし、ユーザ毎、かつ同一の書類を示す画像データ毎に作成してもよい。

ステップＳ１１２において、ＣＰＵ１１は、生成した学習モデル、及び表示順を記憶する。

以上説明したように、本実施形態によれば、認識結果４４を確認する確認順を取得し、取得した学習モデルを生成することで表示順が変更される。したがって、書類を確認する作業において、書類に並んでいる順番で項目を表示する場合と比較して、項目を確認する作業の負担が軽減される。

［第２実施形態］
第１実施形態では、確認訂正画面４０に表示される項目毎の画像データ４３と、項目毎の認識結果４４との表示順を変更して表示、及び項目毎の画像データ４３と、項目毎の認識結果４４とを並列に表示する形態について説明した。本実施形態では、確認訂正画面４０に表示される画像データ４１の表示を変更する形態について説明する。なお、本実施形態に係る情報処理システム１の構成を示す概略図（図１参照）、情報処理装置３のハードウェア構成を示すブロック図（図２参照）、情報処理装置３の機能的な構成を示すブロック図（図３参照）は、第１実施形態と同様であるため、説明を省略する。また、情報処理装置３が表示する確認訂正画面４０の模式図（図４参照）、及び認識結果４４の関係性の説明に供する情報処理装置３が表示する確認訂正画面４０の模式図（図５参照）は、第１実施形態と同様であるため、説明を省略する。

図７を参照して、確認訂正処理を行う際の確認訂正画面４０について説明する。図７は、本実施形態に係る情報処理装置３が表示する確認訂正画面４０の一例を示す模式図である。なお、図７における図４に示す確認訂正画面４０と同一の構成については、図４と同一の符号を付して、その説明を省略する。

情報処理装置３は、図７に示すように、確認訂正画面４０に、取得した画像データ４１と、確認訂正表示領域４２における項目毎の画像データ４３と、項目毎の認識結果４４と、取得した画像データ４１における未確認領域４６と、確認済領域４７とを表示する。

未確認領域４６は、まだ確認されていない項目毎の認識結果４４に対応した画像データ４１における領域を縦線の網掛けで示し、確認済領域４７は、確認が行われた項目毎の認識結果４４に対応した画像データ４１における領域を格子状の網掛けで示している。情報処理装置３は、項目毎の認識結果４４の確認が行われた場合、項目毎の認識結果４４の確認が行われた項目に対応する画像データ４１の領域の表示を変更する。例えば、図７に示すように、情報処理装置３は、確認訂正表示領域４２において、「児童氏名１」が確認されたと判定した場合、画像データ４１における「児童氏名１」に対応する領域の表示を未確認領域４６から確認済領域４７に変更する。

なお、本実施形態では、未確認領域４６を縦線の網掛けで表示し、確認済領域４７を格子状の網掛けで表示する形態について説明した。しかし、これに限定されない。未確認領域４６、確認済領域４７、及びその他の領域において、色を変更して表示してもよいし、未確認領域４６、及び確認済領域４７の一方を網掛けして表示してもよい。

次に、図８を参照して、本実施形態に係る情報処理プログラムの作用について説明する。図８は、第２実施形態に係る情報処理の一例を示すフローチャートである。ＣＰＵ１１がＲＯＭ１２又はストレージ１４から情報処理プログラムを読み出し、実行することによって、図８に示す情報処理が実行される。図８に示す情報処理は、例えば、ユーザによって情報処理プログラムの実行指示が入力された場合、情報処理が実行される。なお、図８における図６に示す情報処理と同一のステップについては、図６と同一の符号を付して、その説明を省略する。

ステップＳ１１３において、ＣＰＵ１１は、確認訂正画面４０に表示される画像データ４１の項目毎の認識結果４４に対応する領域に未確認領域４６を示す表示をする。

ステップＳ１１４において、ＣＰＵ１１は、確認訂正画面４０に表示される画像データ４１において、マウスオーバーの状態になった項目毎の認識結果４４に対応する領域に確認済領域４７を示す表示をする。

以上説明したように、本実施形態によれば、確認訂正画面４０に表示される画像データ４１において、確認が行われた項目に対応する領域の表示を変更することで、表示順を変更した項目の確認作業の進捗状況が確認され、より確認する作業の負担が軽減される。

なお、本実施形態では、確認訂正処理が完了した後に、確認順を学習する形態について説明した。しかし、これに限定されない。確認訂正処理を行っている際に、項目毎の認識結果４４を確認する度に確認順を取得して、確認順を学習する形態としてもよい。

その他、上記実施形態で説明した情報処理装置３の構成は、一例であり、主旨を逸脱しない範囲内において状況に応じて変更してもよい。

また、上記実施形態で説明したプログラムの処理の流れも、一例であり、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよい。

なお、上記各実施形態において、プロセッサとは、広義的なプロセッサを指し、例えば ＣＰＵ（ Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等の汎用的なプロセッサや、例えば ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、及びプログラマブル論理デバイス等の専用のプロセッサを含むものである。

また、上記各実施形態におけるプロセッサの動作は、１つのプロセッサによって成すのみでなく、物理的に離れた位置に存在する複数のプロセッサが協働して成すものであってもよい。また、プロセッサの各動作の順序は上記各実施形態において記載した順序のみに限定されるものではなく、適宜変更してもよい。

また、上記各実施形態では、情報処理のプログラムがストレージ１４に予め記憶（インストール）されている態様を説明したが、これに限定されない。プログラムは、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ－ＲＯＭ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、及びＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリ等の記録媒体に記録された形態で提供されてもよい。また、プログラムは、ネットワークを介して外部装置からダウンロードされる形態としてもよい。

１ 情報処理システム
２ 複合機
３ 情報処理装置
４ 端末
１１ ＣＰＵ
１２ ＲＯＭ
１３ ＲＡＭ
１４ ストレージ
１５ 入力部
１６ モニター
１７ 通信Ｉ／Ｆ
１８ バス
２１ 表示部
２２ 取得部
２３ 制御部
２４ 受付部
２５ 記憶部
３１ 書類設定部
３２ 画像入力部
３３ 書類認識処理部
３４ 確認訂正部
３５ データ記憶部
３６ 操作学習部
４０ 確認訂正画面
４１ 画像データ
４２ 確認訂正表示領域
４３ 項目毎の画像データ
４４ 項目毎の認識結果
４５ カーソル
４６ 未確認領域
４７ 確認済領域

Claims (11)

1. プロセッサを備え、前記プロセッサは、
   項目に対して予め情報が記載される記載欄が設けられた書類を認識した結果である認識結果を項目毎に表示し、
   表示された前記認識結果が選択されることで確認された順番である確認順を項目毎に取得し、
   取得した前記確認順を用いて、前記認識結果を表示する順番である表示順を変更する制御を行う、
   情報処理装置。
2. プロセッサを備え、前記プロセッサは、
   項目に対して記載欄が設けられた書類を認識した結果である認識結果を項目毎に表示し、
   表示された前記認識結果を確認した順番である確認順を項目毎に取得し、
   取得した前記確認順を用いて、前記認識結果を表示する順番である表示順を変更する制御を行い、
   前記表示順と、前記確認順とが異なる場合、取得した確認順を前記表示順に反映させるか否かを選択させる、
   情報処理装置。
3. 前記プロセッサは、前記確認順を前記表示順に反映して、前記認識結果を複数回表示させた結果、各々の前記認識結果の前記表示順が予め定めた回数同一であった場合、各々の前記認識結果の前記表示順を次回以降の前記表示順に反映するか否かを選択させる請求項２に記載の情報処理装置。
4. 前記プロセッサは、各々の前記認識結果が有する関係性に基づいて、前記認識結果を関連付けて表示する制御を行う請求項１から請求項３のいずれか１項に記載の情報処理装置。
5. 前記関係性は、各々の前記認識結果が有する従属関係である請求項４に記載の情報処理装置。
6. 前記プロセッサは、各々の前記認識結果の前記確認順が前後関係を有する場合、前記従属関係として、各々の前記認識結果を関連付ける請求項５に記載の情報処理装置。
7. 前記プロセッサは、予め定められた順番で表示する方法、及び前記表示順を変更して表示する方法を切り替えて、前記認識結果を表示する請求項１から請求項６のいずれか１項に記載の情報処理装置。
8. 前記プロセッサは、前記確認順を取得するか否かを切り替えて、前記認識結果を表示する請求項１から請求項７のいずれか１項に記載の情報処理装置。
9. 前記プロセッサは、前記書類を読み取った画像データを表示し、表示された前記画像データにおいて、確認した前記認識結果に対応した箇所と、未だ確認していない箇所とを区分して表示する請求項１から請求項８のいずれか１項に記載の情報処理装置。
10. コンピュータに
    項目に対して予め情報が記載される記載欄が設けられた書類を認識した結果である認識結果を項目毎に表示し、
    表示された前記認識結果が選択されることで確認された順番である確認順を項目毎に取得し、
    取得した前記確認順を用いて、前記認識結果を表示する順番である表示順を変更する制御を行う、
    ことを実行させる情報処理プログラム。
11. コンピュータに、
    項目に対して記載欄が設けられた書類を認識した結果である認識結果を項目毎に表示し、
    表示された前記認識結果を確認した順番である確認順を項目毎に取得し、
    取得した前記確認順を用いて、前記認識結果を表示する順番である表示順を変更する制御を行い、
    前記表示順と、前記確認順とが異なる場合、取得した確認順を前記表示順に反映させるか否かを選択させる、
    ことを実行させる情報処理プログラム。