JP2010140250A - 情報提供管理システム、情報提供管理方法及び情報提供管理プログラム - Google Patents

Abstract

【課題】紙媒体を閲覧する利用者に対して、この紙媒体に関連する電子情報を提供することができる情報提供管理システム、情報提供管理方法及び情報提供管理プログラムを提供する。
【解決手段】管理サーバ２０の制御部２１は、出版会社サーバ３０からオリジナルファイルの取得し、テキストを含む画像認識に適した特徴抽出を行なう。そして、特徴量を用いてツリー構造からなるインデックス作成する。そして、各記事に対する関連情報を登録する。更に、オークション情報を公開し、入札を受け付け、入札情報を登録する。そして、制御部２１は、利用者の携帯電話端末１０から部分画像を取得し、部分検索処理を実行し、紙面や記事を特定する。そして、制御部２１は、関連情報を付加した記事情報を携帯電話端末１０に提供する。更に、クリップ要求を取得した制御部２１は、クリップ情報の登録処理を実行する。
【選択図】図１

Description

本発明は、紙媒体に対応した電子情報を提供するための情報提供管理システム、情報提供管理方法及び情報提供管理プログラムに関する。

今日、各種情報は色々な媒体を介して提供されている。そして、このような情報を効率的に利用者に提供するための各種技術が検討されている。例えば、画像処理技術と携帯電話端末を利用して、利用者に対して、利便性の高い支援情報を提供するための情報提供管理システムが検討されている（特許文献１を参照。）。この文献記載の支援情報提供システムは、管理コンピュータ、パーツ画像データ記憶部及びヘルプデータ記憶部を備える。そして、利用者は携帯電話端末を用いて、ヘルプ情報を要求する複写機のパーツを撮影する。そして、携帯電話端末は、撮影した画像データを含むヘルプ要求を支援情報提供システムに送信する。管理コンピュータは、ヘルプ要求に含まれる機種識別子や、撮影画像データに基づいてパーツ画像データ記憶部に記録されたパーツ画像データを特定する。そして、管理コンピュータは支援情報を抽出し、携帯電話端末にヘルプ画面データを送信する。

また、画像検索技術においても、紙情報と電子情報を関連付ける技術としてＭＭＲ技術（Mixed Media Reality 技術）が検討されている（非特許文献１を参照。）。この文献に記載されたＭＭＲ技術においては、紙文書と電子情報とをつなぐことを目的としている。この技術においては、紙文書の見た目やフォーマットを一切変える必要がなく、カメラ付き携帯電話を通じてその各リンク先を印刷物上でクリックできるものである。特に、このＭＭＲ技術においては、テキストを含む画像において、ＯＣＲが困難である場合にも、テキスト文書における部分的なテキスト画像の配置（ピッチや位置関係等）を利用して、元の画像を特定することが可能である。

また、検索を行なう場合の高速化を実現するための技術も検討されている（特許文献２を参照。）。この文献記載の技術では、動的にオブジェクトを挿入することができることを前提としつつ、検索速度を高速度化する。このため、空間データを登録し、登録された空間データについて予め木構造をなすＭ−ｔｒｅｅ形式の空間インデックスを生成しておき、ユーザが指定した空間データに類似する空間データを、空間インデックスを利用して検索する。この場合、空間インデックスの木構造を構成する各ノードの領域を下位に存在するすべての空間データを包含する領域とすることで、各ノード領域間のオーバーラップを削除し、検索速度を高速化する。
特開２００５−１０７９９２号公報（図５、図６） 特開２００７−７３０６３号公報（図５、図６） Ricoh Technical Report No.33 DECEMBER, 2007、「ミックスド・メディア・リアリティ（ＭＭＲ）：紙と電子世界をつなぐ新しい方法」、［online］、［平成２０年８月１５日検索］、インターネット、＜ＵＲＬ：http://www.ricoh.co.jp/about/business_overview/report/33/pdf/A3314.pdf＞

電子情報は加工や保存には適しているが、新聞等の紙媒体を用いての情報発信も多様な場面において利用されている。このような紙媒体と電子情報とを結びつける技術があれば有効である。例えば、リンク先情報を埋め込んだ二次元コードを用いることも可能であるが、新聞等のような紙媒体を印刷する場合には記事やレイアウトを確定し印刷するまでの
時間が必要であり、時間的な制約が大きい。又、リンク先は状況に応じて変更したい場合もある。

テキストを用いて検索する場合には、テキスト情報によるインデックスを準備しておく必要がある。

更に、紙媒体の場合、新聞記事等においては所望の記事を切り抜いて、スクラップ帳等に記事を貼り付けておく場合もあるが、手間がかかる上、裏面の記事を読めなくなるという不都合がある。また、新聞記事をスキャンして画像データとして保存することも可能であるが、スキャンや保存といったような操作が必要であり、所望の記事だけを加工する手間もかかる。

本発明は、上記課題を解決するためになされたものであり、その目的は、紙媒体を閲覧する利用者に対して、この紙媒体に関連する電子情報を提供することができる情報提供管理システム、情報提供管理方法及び情報提供管理プログラムを提供することにある。

上記問題点を解決するために、請求項１に記載の発明は、印刷物の画像を登録した画像データ記憶手段に接続される制御手段と、前記画像を検索するためのインデックスを登録したインデックス記憶手段とを備えた情報提供管理システムであって、前記制御手段が、前記画像データ記憶手段に記録された画像についての特徴量を抽出し、この特徴量に基づいて検索インデックスを生成し、印刷物の特定情報に関連づけて前記インデックス記憶手段に記録する手段と、利用者端末から印刷物の部分画像を取得した場合には、この部分画像の特徴量を抽出し、前記インデックス記憶手段を用いて印刷物を特定する手段と、前記印刷物に関する情報を前記利用者端末に提供する手段とを備えたことを要旨とする。

請求項２に記載の発明は、請求項１に記載の情報提供管理システムにおいて、前記印刷物は、複数の要素から構成されており、利用者端末から取得した部分画像の特徴量に基づいて、前記印刷物における部分画像の位置を特定し、この位置の要素を特定して、この要素に関する情報を前記利用者端末に提供することを要旨とする。

請求項３に記載の発明は、請求項１又は２に記載の情報提供管理システムにおいて、印刷物に関する関連情報を記録した関連情報記憶手段を更に備え、前記利用者端末に関連情報を更に提供することを要旨とする。

請求項４に記載の発明は、請求項３に記載の情報提供管理システムにおいて、前記画像データ記憶手段に記録された画像を公開し、前記画像に対して付加する関連情報について、入札金額を含めた入札を受け付け、前記入札金額が高い関連情報を特定して、前記利用者端末に提供することを要旨とする。

請求項５に記載の発明は、印刷物の画像を登録した画像データ記憶手段に接続される制御手段と、前記画像を検索するためのインデックスを登録したインデックス記憶手段とを備えた情報提供管理システムを用いて、情報の提供を管理する方法であって、前記制御手段が、前記画像データ記憶手段に記録された画像についての特徴量を抽出し、この特徴量に基づいて検索インデックスを生成し、印刷物の特定情報に関連づけて前記インデックス記憶手段に記録する段階と、利用者端末から印刷物の部分画像を取得した場合には、この部分画像の特徴量を抽出し、前記インデックス記憶手段を用いて印刷物を特定する段階と、前記印刷物に関する情報を前記利用者端末に提供する段階とを実行することを要旨とする。

請求項６に記載の発明は、印刷物の画像を登録した画像データ記憶手段に接続される制
御手段と、前記画像を検索するためのインデックスを登録したインデックス記憶手段とを備えた情報提供管理システムを用いて、情報の提供を管理するプログラムであって、前記制御手段を、前記画像データ記憶手段に記録された画像についての特徴量を抽出し、この特徴量に基づいて検索インデックスを生成し、印刷物の特定情報に関連づけて前記インデックス記憶手段に記録する手段、利用者端末から印刷物の部分画像を取得した場合には、この部分画像の特徴量を抽出し、前記インデックス記憶手段を用いて印刷物を特定する手段、前記印刷物に関する情報を前記利用者端末に提供する手段として機能させることを要旨とする。

（作用）
請求項１、５又は６に記載の発明によれば、制御手段が、画像データ記憶手段に記録された画像についての特徴量を抽出し、この特徴量に基づいて検索インデックスを生成し、印刷物の特定情報に関連づけてインデックス記憶手段に記録する。そして、利用者端末から印刷物の部分画像を取得した場合には、この部分画像の特徴量を抽出する。次に、インデックス記憶手段を用いて印刷物を特定し、印刷物に関する情報を利用者端末に提供する。このため、利用者に対して提供された印刷物の一部分を撮影することにより、全体についての電子情報を提供することができる。特に、利用者端末として携帯電話端末等の携帯端末を利用する場合には、テキスト画像としての解像度が悪い場合にも、的確な電子情報を提供することができる。従って、利用者は、印刷物の利便性と電子情報の利便性とを享受することができる。

請求項２に記載の発明によれば、利用者端末から取得した部分画像の特徴量に基づいて、印刷物における部分画像の位置を特定し、この位置の要素を特定して、この要素に関する情報を利用者端末に提供する。このため、複数の要素から構成された印刷物について、要素毎に電子情報提供することができる。例えば、新聞等においては記事毎に電子情報を提供することができる。

請求項３に記載の発明によれば、印刷物に関する関連情報を記録した関連情報記憶手段を更に備え、利用者端末に関連情報を更に提供する。このため、印刷物に表示された情報だけではなく、付加価値が高い関連情報を提供することができる。関連情報は電子情報であるため、動的に変更することが可能であり、利用者に対してタイムリーな情報を提供することができる。

請求項４に記載の発明によれば、画像データ記憶手段に記録された画像を公開する。画像に対して付加する関連情報について、入札金額を含めた入札を受け付け、入札金額が高い関連情報を特定して、利用者端末に提供する。このため、関連情報の付加についてはオークションを行なうことができる。

本発明によれば、紙媒体を閲覧する利用者に対して、この紙媒体に関連する電子情報を提供することができる。

以下、本発明を具体化した一実施形態を、図１〜図６に従って説明する。本実施形態では、紙媒体を閲覧する利用者に対して電子情報を提供するサービスを行なうための情報提供管理システム、情報提供管理方法及び情報提供管理プログラムとして説明する。ここでは、図１に示す管理サーバ２０が、インターネット等のネットワークを介して電子情報を提供する。この管理サーバ２０は、ネットワークを介して出版会社サーバ３０に接続される。本実施形態では、この出版会社は、各種要素を掲載した紙媒体５００を発行し、利用者に提供するものとする。ここでは、紙媒体５００として、記事（要素）が掲載された新
聞を発行する場合を想定する。

電子情報の閲覧を希望する利用者は、図１に示すように、利用者端末としての携帯電話端末１０を用いる。この携帯電話端末１０は、ダイヤル番号ボタンの他に、表示部、セレクタボタン、モード切り替えボタンを有する。この携帯電話端末１０は、通常の電話モードの他に、Ｗｅｂページの表示を行なうためのブラウザモードを備えている。各モード（例えば、電話モード）から他のモード（例えば、ブラウザモード）に切り替える場合には、モード切り替えボタンを用いる。

更に、この携帯電話端末１０は、撮像手段としてのカメラを内蔵し、被写体を撮影することができる。そして、携帯電話端末１０は、撮影した画像データを、ネットワークを介して送信することができる。

表示部には、携帯電話端末１０が受信したＷｅｂページや、内蔵されたデジタルカメラで撮影した画像が表示される。また、携帯電話端末１０のセレクタボタンは、ポインタ移動機能とクリック機能とを有する。このセレクタボタンを用いて方向指示を行なうことによりポインタを移動させることができ、セレクタボタンを押すことにより、ポインタが示している項目を選択することができる。

一方、管理サーバ２０は、利用者に対して電子情報を提供するサービス提供企業が管理するコンピュータシステムである。この管理サーバ２０は、図１に示すように、制御手段としての制御部２１、コンテンツデータベース２２、インデックスデータベース２３、入札管理データベース２４、広告管理データベース２５、ユーザ管理データベース２６を備えている。

制御部２１は、図示しないＣＰＵ、ＲＡＭ及びＲＯＭ等を有し、後述する処理（コンテンツ管理段階、インデックス生成段階、関連情報登録段階、入札管理段階、ユーザ管理段階、画像検索段階、関連情報提供段階等を含む処理）を行なう。このための情報提供管理プログラムを実行することにより、制御部２１は、コンテンツ管理手段２１１、インデックス生成手段２１２、関連情報登録手段２１３、広告管理手段２１４、サービス管理手段２１５、画像検索手段２１６、関連情報提供手段２１７等として機能する。

コンテンツ管理手段２１１は、出版会社サーバ３０から取得した新聞の紙面画像をコンテンツデータベース２２に登録する処理を実行する。

インデックス生成手段２１２は、取得した紙面画像を用いて特徴抽出を行ない、検索を行なうためのインデックスを作成する処理を実行する。

関連情報登録手段２１３は、管理サーバ２０に接続された管理者端末２８からの指示に基づいて、各記事に対する関連情報の登録処理を実行する。

広告管理手段２１４は、広告主端末４０からの入札を登録する処理を実行する。そして、広告管理手段２１４は、記事に付加する広告を決定し、利用者に提供する処理を実行する。

サービス管理手段２１５は、利用者の携帯電話端末１０から紙媒体５００の一部を撮影した部分画像を取得する処理を実行する。更に、サービス管理手段２１５は、利用者からのクリップ要求に基づいて、記事の登録処理を実行する。

画像検索手段２１６は、取得した部分画像の特徴抽出を行ない、この部分画像を含め紙面（オリジン情報）を検索する処理を実行する。

関連情報提供手段２１７は、特定した紙面の記事に関連する情報を取得し、携帯電話端
末１０に提供する処理を実行する。

コンテンツデータベース２２は画像データ記憶手段として機能し、図２（ａ）に示すように、出版会社サーバ３０から提供されたコンテンツに関するデータが記録される。ここでは、コンテンツデータベース２２には、オリジナルデータ２２１と、記事データ２２２とを含んでいる。このオリジナルデータ２２１は、出版会社サーバ３０から紙媒体のイメージデータを取得した場合に記録される。記事データ２２２は、イメージデータに含まれる各記事の座標領域や、この記事に関連する情報が登録された場合に記録される。オリジナルデータ２２１は、紙面識別子及び紙面画像に関するデータを含んで構成される。

紙面識別子データ領域には、出版会社サーバ３０から取得したコンテンツを特定するための識別子に関するデータが記録される。本実施形態では、新聞の紙面を特定するためのデータ（例えば、「○年○月○日、○○新聞、朝刊、第○面」）が記録される。

紙面画像データ領域には、出版会社サーバ３０から取得したコンテンツに関するデータが記録される。本実施形態では、新聞の紙面画像データが記録される。

また、記事データ２２２は関連情報記憶手段として機能し、紙面識別子、記事識別子、記事領域、リンク先に関するデータを含んで構成される。

紙面識別子データ領域には、各コンテンツを特定するための識別子に関するデータが記録される。

記事識別子データ領域には、コンテンツ中に含まれる各要素（ここでは、紙面を構成する各記事）を特定するための識別子に関するデータが記録される。

記事領域データ領域には、紙媒体（新聞紙面）において各要素（各記事）が配置された領域を特定するための座標に関するデータが記録される。

リンク先データ領域には、各要素に関連する関連情報の格納場所を特定するための識別子（ＵＲＬ）に関するデータが記録される。

インデックスデータベース２３はインデックス記憶手段として機能し、図２（ｂ）に示すように、部分画像を含むコンテンツを特定するためのインデックスデータ２３０が記録される。このインデックスデータ２３０は、紙面画像に基づいてインデックスを生成した場合に記録される。このインデックスデータ２３０は、上位インデックス、下位インデックス、紙面識別子、座標に関するデータを含んで構成される。

上位インデックス、下位インデックスデータ領域には、非特許文献１に開示されたＭＭＲを用いて算出された特徴量によって付与されたインデックスが記録される。本実施形態では、ツリー構造を備えており、代表的な上位インデックスに関連付けられた詳細な下位インデックスに展開されている。

紙面識別子、座標データ領域には、最下層の下位インデックスに対して、この特徴量が算出された紙面を特定するための識別子及びその位置を特定するための座標に関するデータが記録される。

入札管理データベース２４は関連情報記憶手段として機能し、図３（ａ）に示すように、オークションにより記事に付加する広告を決定するための入札を管理するための入札管理レコード２４０が記録される。この入札管理レコード２４０は、広告主企業によって、記事に対して付加したい広告が入札された場合に記録される。入札管理レコード２４０は、記事識別子、広告主識別子、リンク先、入札金額に関するデータを含んで構成される。

記事識別子データ領域には、入札対象の記事を特定するための識別子に関するデータが記録される。

広告主識別子データ領域には、この記事について広告提供を希望する広告主を特定するための識別子に関するデータが記録される。

リンク先データ領域には、各記事に付加する広告情報の格納場所を特定するための識別子（ＵＲＬ）に関するデータが記録される。

入札金額データ領域には、広告を出すための入札金額に関するデータが記録される。本実施形態では、各記事に対して広告が関連付けられた場合の１回当たりの料金を入札する場合を想定する。この入札金額の中で最も高い金額を提示した広告主の広告のリンク先情報が利用者に対して提供される。

広告管理データベース２５には、図３（ｂ）に示すように、提供した広告についての課金を管理するための広告管理レコード２５０が記録される。この広告管理レコード２５０は、記事に関連付けて広告を提供した場合に記録される。広告管理レコード２５０は、広告主識別子、記事識別子、提供回数、課金額に関するデータを含んで構成される。

広告主識別子データ領域には、広告を提供した広告主を特定するための識別子に関するデータが記録される。

記事識別子データ領域には、広告を関連付けた記事を特定するための識別子に関するデータが記録される。

提供回数データ領域には、この広告についてのリンク先情報の提供回数に関するデータが記録される。

課金額データ領域には、この記事に関連付けられた広告によって、広告主に対して課金する金額に関するデータが記録される。ここでは、入札金額に提供回数を乗算した金額が記録される。

ユーザ管理データベース２６には、図３（ｃ）に示すように、このサービスを利用する利用者を管理するためのユーザ管理レコード２６０が記録される。このユーザ管理レコード２６０は、利用者登録が行なわれた場合に記録される。ユーザ管理レコード２６０は、ユーザ識別子、端末識別子、記事識別子に関するデータを含んで構成される。

ユーザ識別子データ領域には、このサービスを利用する利用者を特定するための識別子に関するデータが記録される。

端末識別子データ領域には、この利用者が利用する携帯電話端末を特定するための識別子に関するデータが記録される。

記事識別子データ領域には、この利用者がクリップを希望した記事を特定するための識別子に関するデータが記録される。

更に、管理サーバ２０には、管理者端末２８、広告主端末４０が接続される。この管理者端末２８、広告主端末４０は、キーボード、マウス等の入力手段、ディスプレイ（表示手段）等を有する。各端末は、電子情報を表示するためのブラウザ機能を有し、インターネットに接続可能なコンピュータ端末である。

上記のように構成されたシステムにおいて、電子情報を提供する場合の処理手順を、図４、図５に従って説明する。ここでは、電子情報登録処理（図４）、電子情報提供処理（図５）の順番に説明する。

（電子情報登録処理）
まず、図４を用いて、電子情報登録処理を説明する。

ここでは、まず、管理サーバ２０の制御部２１は、オリジナルファイルの取得処理を実行する（ステップＳ１−１）。具体的には、制御部２１のコンテンツ管理手段２１１は、出版会社サーバ３０から紙媒体５００の電子データを取得する。本実施形態では、新聞の紙面画像データを取得する。そして、コンテンツ管理手段２１１は、紙面識別子を付与したオリジナルデータ２２１を生成し、コンテンツデータベース２２に登録する。更に、コンテンツ管理手段２１１は、各紙面に含まれる記事の領域を特定し、記事識別子を付与する。そして、コンテンツ管理手段２１１は、紙面識別子、記事識別子、記事領域に関するデータを記録した記事データ２２２を生成し、コンテンツデータベース２２に登録する。

次に、管理サーバ２０の制御部２１は、特徴抽出処理を実行する（ステップＳ１−２）。具体的には、制御部２１のインデックス生成手段２１２は、出版会社サーバ３０から取得した紙面画像において、前述したＭＭＲ技術を用いて特徴抽出を行なう。ここでは、紙面画像において多次元の特徴量を算出し、幅広いインデックスから詳細なインデックスに階層化させたツリー構造を生成してインデックスデータベース２３に登録する。

次に、管理サーバ２０の制御部２１は、インデックスの作成処理を実行する（ステップＳ１−３）。具体的には、制御部２１のインデックス生成手段２１２は、抽出した特徴量に応じてツリー構造からなるインデックスデータ２３０を生成し、インデックスデータベース２３に登録する。

次に、管理サーバ２０の制御部２１は、関連情報登録処理を実行する（ステップＳ１−４）。各記事に対して関連情報の登録を希望する場合には、管理サーバ２０に接続された管理者端末２８を用いる。具体的には、管理者端末２８により管理サーバ２０にアクセスする。この場合、制御部２１の関連情報登録手段２１３は、コンテンツデータベース２２に登録された記事の一覧表示画面を管理者端末２８に供給する。この一覧表示画面を用いて、関連情報を付加する記事の特定と、関連情報が格納されたアドレス（リンク先情報）を登録することができる。この場合、管理者端末２８は、記事識別子とリンク先情報を含めた登録要求を管理サーバ２０に送信する。管理者端末２８から登録要求を受信した制御部２１の関連情報登録手段２１３は、管理者端末２８からの指示に基づいて、コンテンツデータベース２２に記録された記事データ２２２にリンク先情報を登録する。

次に、管理サーバ２０の制御部２１は、オークション情報公開処理を実行する（ステップＳ１−５）。各記事に対して広告の登録を希望する場合には、管理サーバ２０に接続された広告主端末４０を用いる。具体的には、広告主端末４０により管理サーバ２０にアクセスする。この場合、制御部２１の広告管理手段２１４は、コンテンツデータベース２２に登録された記事の一覧表示画面を広告主端末４０に供給する。

次に、管理サーバ２０の制御部２１は、入札処理を実行する（ステップＳ１−６）。この一覧表示画面を用いて、広告の付加を希望する記事の特定、広告が格納されたアドレス（リンク先情報）、入札金額を登録することができる。この場合、広告主端末４０は、記事識別子、リンク先情報、入札金額を含めた登録要求を管理サーバ２０に送信する。

次に、管理サーバ２０の制御部２１は、入札情報の登録処理を実行する（ステップＳ１−７）。具体的には、広告主端末４０から登録要求を受信した制御部２１の広告管理手段２１４は、広告主端末４０からの登録要求に基づいて入札管理レコード２４０を生成し、入札管理データベース２４に登録する。

（電子情報提供処理）
次に、図５を用いて、電子情報提供処理を説明する。

ここでは、管理サーバ２０の制御部２１は、部分画像の取得処理を実行する（ステップＳ２−１）。図６に示すように、紙媒体５００に掲載された記事に興味を持った利用者は、自分の携帯電話端末１０のカメラを用いて、この記事の一部を撮影する。ここでは、紙媒体５００の領域６００を撮影する場合を想定する。この場合、携帯電話端末１０は、検索要求を管理サーバ２０に送信する。この検索要求には、撮影された記事の部分画像及び端末識別子に関するデータを含める。そして、検索要求を受信した制御部２１のサービス管理手段２１５は、ユーザ管理データベース２６を用いて、受信した端末識別子によりユーザ認証を行なう。なお、利用者登録されていない場合には、利用を拒否してアクセスを終了する。

次に、管理サーバ２０の制御部２１は、部分検索処理を実行する（ステップＳ２−２）。具体的には、制御部２１の画像検索手段２１６は、受信した部分画像の特徴抽出を、前述したＭＭＲ技術を用いて行なう。

次に、管理サーバ２０の制御部２１は、紙面の特定処理を実行する（ステップＳ２−３）。具体的には、制御部２１の画像検索手段２１６は、部分画像から抽出した特徴量に近いインデックスを、インデックスデータベース２３から抽出する。そして、多次元の特徴量においてヒストグラムにより、確からしいインデックスを特定する。更に、このインデックスに関連付けられた下位インデックスを特定し、最終的にインデックスに関連付けられている紙面識別子や座標を取得する。

次に、管理サーバ２０の制御部２１は、記事の特定処理を実行する（ステップＳ２−４）。具体的には、制御部２１の画像検索手段２１６は、取得した紙面識別子及び座標に基づいて、この座標が含まれる領域の記事をコンテンツデータベース２２において特定する。ここでは、利用者が指定した画像の中心座標を算出し、この中心座標がコンテンツデータベース２２において管理されている場合に記事を特定する。これにより、領域６００が含まれる記事が特定され、図６に示すように、記事画像５１０が特定される。

次に、管理サーバ２０の制御部２１は、関連情報を付加した記事情報の提供処理を実行する（ステップＳ２−５）。具体的には、制御部２１の関連情報提供手段２１７は、記事データ２２２にリンク先が登録されている場合には、この記事に対してリンク先情報を埋め込む。これにより、記事画像５１０には、関連情報５２０に対するリンク情報が埋め込まれる。

更に、広告管理手段２１４は、入札管理データベース２４から、この記事の記事識別子に関連付けられた入札管理レコード２４０を抽出する。そして、抽出した入札管理レコード２４０において最も高い入札金額が記録されたレコードを特定する。そして、広告管理手段２１４は、この入札管理レコード２４０に記録されたリンク先情報を埋め込む。これにより、記事画像５１０には、広告情報５３０に対するリンク情報が埋め込まれる。

更に、広告管理手段２１４は、広告管理データベース２５において提供回数をインクリメントする。そして、広告管理手段２１４は、入札金額に対応する広告料を課金額に加算する。そして、サービス管理手段２１５は、関連情報が付加された記事情報（Ｗｅｂページ）を携帯電話端末１０に送信する。

次に、管理サーバ２０の制御部２１は、クリップ要求の取得処理を実行する（ステップＳ２−６）。ここで、利用者がこの記事の保存を希望する場合には、携帯電話端末１０を用いてクリップ要求を送信する。この場合、制御部２１のサービス管理手段２１５は、携帯電話端末１０から、記事識別子に関するデータを含めたクリップ要求を取得する。

この場合、管理サーバ２０の制御部２１は、クリップ情報の登録処理を実行する（ステップＳ２−７）。具体的には、制御部２１のサービス管理手段２１５は、ユーザ識別子に関連付けて、クリップ要求があった記事識別子をユーザ管理データベース２６に登録する。

このように利用者毎にクリック登録された記事の利用方法について説明する。このような記事を再度閲覧する場合には、利用者は管理サーバ２０にアクセスし、クリップされた記事の出力要求を送信する。この場合、制御部２１のサービス管理手段２１５は、ユーザ識別子を取得し、ユーザ管理データベース２６に記録された記事識別子の一覧表示画面を生成し、携帯電話端末１０に提供する。この携帯電話端末１０から、所望の記事識別子を受信した場合には、この記事識別子に関連付けられた記事データ２２２をコンテンツデータベース２２から取得し、この記事の携帯電話端末１０に提供する。

本実施形態によれば、以下のような効果を得ることができる。

・ 本実施形態においては、管理サーバ２０の制御部２１は、オリジナルファイルの取得処理を実行する（ステップＳ１−１）。次に、管理サーバ２０の制御部２１は、特徴抽出処理を実行する（ステップＳ１−２）。具体的には、制御部２１のインデックス生成手段２１２は、出版会社サーバ３０から取得した紙面画像において、前述したＭＭＲ技術を用いて特徴抽出を行なう。ここでは、紙面画像において多次元の特徴量を算出し、幅広いインデックスから詳細なインデックスに階層化させたツリー構造を生成してインデックスデータベース２３に登録する。具体的には、テキストの配置に基づいて、画像の特徴抽出を行なっているため、文字が印刷された紙媒体のコンテンツの特定に有効である。携帯電話端末１０のカメラ等のように高い解像度を期待できない場合においても、的確にコンテンツを特定することができる。

そして、管理サーバ２０の制御部２１は、インデックスの作成処理を実行する（ステップＳ１−３）。テキストを含む画像の特徴量に基づいたインデックスにより検索を行なうため、高速にコンテンツを特定することができる。

・ 本実施形態においては、管理サーバ２０の制御部２１は、関連情報登録処理を実行する（ステップＳ１−４）。そして、管理サーバ２０の制御部２１は、関連情報を付加した記事情報の提供処理を実行する（ステップＳ２−５）。これにより、紙媒体のように固定化された情報に対して、状況に応じて動的な情報を提供することができる。例えば、紙媒体の印刷後、読者である利用者の手元に届くまでの時間を利用して、広告の入札を行なうことができる。更に、所定期間の経過（例えば、数日後）には広告のリンクを取り止めることもできる。

・ 本実施形態においては、管理サーバ２０の制御部２１は、オークション情報公開処理を実行する（ステップＳ１−５）。次に、管理サーバ２０の制御部２１は、入札処理（ステップＳ１−６）、入札情報の登録処理を実行する（ステップＳ１−７）。そして、管理サーバ２０の制御部２１は、関連情報を付加した記事情報の提供処理を実行する（ステップＳ２−５）。ここでは、広告管理手段２１４は、入札管理データベース２４から、この記事の記事識別子に関連付けられた入札管理レコード２４０を抽出する。そして、抽出した入札管理レコード２４０において最も高い入札金額が記録されたレコードを特定する。これにより、利用者にとっては、このページに関連する有益な情報を取得できる。そして、収益性の高いサービスを提供することができる。

・ 本実施形態においては、管理サーバ２０の制御部２１は、クリップ要求を取得し（ステップＳ２−６）、クリップ情報の登録処理を実行する（ステップＳ２−７）。これにより、紙媒体を切り貼りしたり、スキャンして保存したりすることなく、所望の記事を効
率的に保存や閲覧を行なうことができる。

なお、上記各実施形態は以下のように変更してもよい。

○ 上記実施形態では、管理サーバ２０は、利用者に対して情報を提供するサービス提供企業が管理するコンピュータシステムである。この管理サーバ２０は、コンテンツデータベース２２、インデックスデータベース２３、入札管理データベース２４、広告管理データベース２５、ユーザ管理データベース２６を備えている。これに代えて、管理サーバ２０において検索サービスのみを提供するようにしてもよい。この場合には、コンテンツデータベース２２を、オリジナルデータを作成する企業のサーバに設置する。その具体例を、図７に示す。ここでは、複数の広告を印刷した紙媒体を利用者に提供する広告印刷企業の広告印刷企業サーバ５０にコンテンツデータベースを設ける。

そして、管理サーバ２０は、コンテンツデータベース２２にアクセスして、紙媒体の広告画像を取得する。この広告画像の特徴抽出を行なって作成したインデックスを、インデックスデータベース２３に登録する。この場合、インデックスに関連付けて、コンテンツが保存されたアドレスを特定する情報（アドレス情報）を記憶しておく。

この場合、携帯電話端末１０からアクセスを受けた管理サーバ２０は、インデックスデータベースを用いて検索を行ない、抽出したコンテンツのアドレス情報を携帯電話端末１０に提供する。これにより、他のシステムに格納されたコンテンツを利用した検索サービスを提供することができる。

この場合には、利用者からサービス使用料を徴収したり、広告印刷企業からサービス量に応じた料金を徴収したりすることが可能である。

○ 上記実施形態では、出版会社は、各種要素を掲載した紙媒体５００を発行し、利用者に提供する。これに代えて、コンテンツデータベース２２に格納されたオリジナルデータ２２１に基づいて印刷を行ない、サービス提供企業が印刷物を利用者に提供するようにしてもよい。

○ 上記実施形態では、紙媒体５００として新聞を発行する場合を想定する。紙媒体５００は新聞に限定されるものではなく、広告、雑誌等を用いることも可能である。

○ 上記実施形態では、関連情報として、管理者が付加した情報や広告情報を用いる。関連情報はこれらに限定されるものではなく、例えば、懸賞情報を付加することも可能である。この場合には、各記事のリンク先に、「当たりくじ」や「はずれくじ」を記録しておく。これにより、紙面上では明示されていない情報を用いて、ゲーム感覚を利用して、サービスの利用促進を図ることができる。

○ 上記実施形態では、管理サーバ２０の制御部２１は、部分検索処理を実行する（ステップＳ２−２）。これに代えて、携帯電話端末１０において特徴抽出を行なうようにしてもよい。この場合には、携帯電話端末１０に特徴抽出手段を設け、携帯電話端末１０が算出した特徴量を管理サーバ２０に送信する。これにより、部分画像を送信する場合に比べて、携帯電話端末１０と管理サーバ２０との間の通信負荷を軽減することができる。

本発明の実施形態のシステム概略図。 データベースに記録されたデータの説明図であって、（ａ）はコンテンツデータベース、（ｂ）はインデックスデータベースに記録されたデータの説明図。 データベースに記録されたデータの説明図であって、（ａ）は入札管理データベース、（ｂ）は広告管理データベース、（ｃ）はユーザ管理データベースに記録されたデータの説明図。 本実施形態の処理手順の説明図。 本実施形態の処理手順の説明図。 ユーザに提供される各種情報の説明図。 他の実施形態の処理手順の説明図。

符号の説明

１０…携帯電話端末、２０…管理サーバ、２１…制御部、２１１…コンテンツ管理手段、２１２…インデックス生成手段、２１３…関連情報登録手段、２１４…広告管理手段、２１５…サービス管理手段、２１６…画像検索手段、２１７…関連情報提供手段、２２…コンテンツデータベース、２３…インデックスデータベース、２４…入札管理データベース、２５…広告管理データベース、２５…ユーザ管理データベース。

Claims (6)

1. 印刷物の画像を登録した画像データ記憶手段に接続される制御手段と、
   前記画像を検索するためのインデックスを登録したインデックス記憶手段とを備えた情報提供管理システムであって、
   前記制御手段が、
   前記画像データ記憶手段に記録された画像についての特徴量を抽出し、この特徴量に基づいて検索インデックスを生成し、印刷物の特定情報に関連づけて前記インデックス記憶手段に記録する手段と、
   利用者端末から印刷物の部分画像を取得した場合には、この部分画像の特徴量を抽出し、前記インデックス記憶手段を用いて印刷物を特定する手段と、
   前記印刷物に関する情報を前記利用者端末に提供する手段と
   を備えたことを特徴とする情報提供管理システム。
2. 前記印刷物は、複数の要素から構成されており、
   利用者端末から取得した部分画像の特徴量に基づいて、前記印刷物における部分画像の位置を特定し、この位置の要素を特定して、この要素に関する情報を前記利用者端末に提供することを特徴とする請求項１に記載の情報提供管理システム。
3. 印刷物に関する関連情報を記録した関連情報記憶手段を更に備え、前記利用者端末に関連情報を更に提供することを特徴とする請求項１又は２に記載の情報提供管理システム。
4. 前記画像データ記憶手段に記録された画像を公開し、
   前記画像に対して付加する関連情報について、入札金額を含めた入札を受け付け、
   前記入札金額が高い関連情報を特定して、前記利用者端末に提供することを特徴とする請求項３に記載の情報提供管理システム。
5. 印刷物の画像を登録した画像データ記憶手段に接続される制御手段と、
   前記画像を検索するためのインデックスを登録したインデックス記憶手段とを備えた情報提供管理システムを用いて、情報の提供を管理する方法であって、
   前記制御手段が、
   前記画像データ記憶手段に記録された画像についての特徴量を抽出し、この特徴量に基づいて検索インデックスを生成し、印刷物の特定情報に関連づけて前記インデックス記憶手段に記録する段階と、
   利用者端末から印刷物の部分画像を取得した場合には、この部分画像の特徴量を抽出し、前記インデックス記憶手段を用いて印刷物を特定する段階と、
   前記印刷物に関する情報を前記利用者端末に提供する段階と
   を実行することを特徴とする情報提供管理方法。
6. 印刷物の画像を登録した画像データ記憶手段に接続される制御手段と、
   前記画像を検索するためのインデックスを登録したインデックス記憶手段とを備えた情報提供管理システムを用いて、情報の提供を管理するプログラムであって、
   前記制御手段を、
   前記画像データ記憶手段に記録された画像についての特徴量を抽出し、この特徴量に基づいて検索インデックスを生成し、印刷物の特定情報に関連づけて前記インデックス記憶手段に記録する手段、
   利用者端末から印刷物の部分画像を取得した場合には、この部分画像の特徴量を抽出し、前記インデックス記憶手段を用いて印刷物を特定する手段、
   前記印刷物に関する情報を前記利用者端末に提供する手段
   として機能させることを特徴とする情報提供管理プログラム。

Images