JP2009265692A - ノート型情報処理装置、および、画像読取方法 - Google Patents

Abstract

【課題】最低限の装置重量および設置面積にて、画像を取り込む際の効率性や精度を向上させた、より可搬性および携帯性が高いスキャナ機能を備えたノート型情報処理装置および画像読取方法を提供することを課題とする。
【解決手段】本発明は、画像撮影部の撮影範囲内にキーボード部の少なくとも一部を撮影したライブビューを表示部に表示し、キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、表示部に表示されたライブビューから静止画像を取得し、取得された静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の原稿の変換画像を記憶部に格納する。
【選択図】 図２

Description

本発明は、ノート型情報処理装置および画像読取方法に関し、特に、キーボード部上に置かれた原稿等を撮影可能な画像撮影部を備えたノート型情報処理装置、および、その画像読取方法に関する。

従来のＰＤＡ端末やラップトップ型ＰＣ等のノート型情報処理装置においては、一例として、ビジネスマン等のユーザが、環境の整ったオフィスの自席ではなく、例えば、会議の席や顧客訪問先や出張先のホテルなどの状況で、書類等の原稿をスキャンしたい場合、携帯型のノート型情報処理装置に加え、携帯型スキャナもしくはデジタルカメラを別途持参する必要がある。

ここで、携帯型スキャナを別途持参する場合には、一般的な市販のノート型情報処理装置は約１〜２ｋｇ、携帯型スキャナは約１．４ｋｇであるので、約３ｋｇ前後の重量になり、ユーザが持参するには負担が重い。また、ユーザは、スキャン時に、ノート型情報処理装置とスキャナの両方の設置面積を確保する必要がある。

一方、携帯スキャナの代わりにデジタルカメラを用いる場合には、例えばコンパクトデジタルカメラは約０．１〜０．２ｋｇであるため、重量増加は抑えることができる。しかし、この場合、ノート型情報処理装置の設置面積と撮影するための書類等の原稿を置くスペースを確保する必要がある。また、三脚等を用いずに原稿を真正面から撮影することは困難であるため、デジタルカメラで撮影された原稿を真正面から撮影したように変換し、かつ、原稿を背景から切り出すクロッピングを行う必要がある。

そこで、近年、可搬型画像入力装置としてスキャナ機能を持ったノート型情報処理装置が開発されている。

例えば、特許文献１に記載のノートブック型パーソナルコンピュータでは、ディスプレイを具備した蓋部とキーボードを具備した本体部とから構成され、ＰＣカードスロットは蓋部側に設けられており、ＰＣカードカメラをＰＣカードスロットに装着して、ＰＣカードカメラによりパソコン操作者等を撮影している。

また、特許文献２に記載の資料提示装置付き情報処理機器では、情報処理機器であるラップトップパソコンに筐体の外形および大きさが変化しないように照明装置支持機構、電子カメラ、電子カメラ支持機構を付加し、これらを用いて提示資料を撮像してラップトップパソコンに取り込んでいる。

また、特許文献３に記載の携帯電子機器では、電荷結合素子カメラは携帯用パーソナルコンピュータの一方の翼部と一体化されており、ビジネスカード等の記録文書をもう一方の翼部にクリップもしくは透明なリボンによって固定され、電荷結合素子カメラにより記録文書を撮影している。

特開２０００−１３７５４４号公報 特開２０００−１９４４５０号公報 特開２００２−５３９５１６号公報

しかしながら、従来の可搬型画像入力装置（特許文献１〜３）においては、スキャナ機能を持ったノート型情報処理装置として機能できるものの、原稿等の設置面積をノート型情報処理装置の設置面積の他に必要としており、また、画像を取り込む際の効率性や精度において問題点を有していた。

具体的には、従来の可搬型画像入力装置においては、原稿を取り込む際に原稿用の設置面積を必要とし、画像を取り込む前に撮影範囲をリアルタイムで調整または確認することができないという問題点を有していた。また、従来の可搬型画像入力装置においては、取り込んだ画像に対して、正面方向から撮影され、かつ、原稿が背景から切り出された画像となるよう画像処理を行うことができないという問題点を有していた。すなわち、ユーザが希望する正面方向から撮影された原稿が背景から切り出された画像をリアルタイムで得ることが困難であるという問題点を有していた。

例えば、特許文献１の技術は、ＰＣカードスロットに差し込んだＰＣカードカメラ等が、パソコン操作の邪魔にならないよう、ディスプレイ（蓋部）にＰＣカードスロットを設けたものであるが、原稿を取り込む際の原稿の設置面積や撮影範囲の確認、正面方向から撮影された画像に変換する画像処理等を考慮していなかった。

また、特許文献２の技術は、照明装置や電子カメラを備える資料提示装置をラップトップパソコンに収納可能なよう構成し、ラップパソコンの背面または側面に原稿を取り込む際の設置面積を設けるものであり、原稿を取り込む際の撮影範囲の確認や、正面方向から撮影された画像に変換する画像処理等を考慮していなかった。

また、特許文献３の技術は、撮影対象の文書等を携帯用パーソナルコンピュータの一方の翼部にクリップ等で固定し、ユーザがイメージのピンぼけを低減させる最適な位置に合わせて、もう一方の翼部に一体化されたカメラで撮影対象を撮影するものであり、撮影対象となる原稿などの固定操作とカメラの最適な距離の位置合わせが必要となり、原稿を取り込む際の撮影範囲の確認や、正面方向から撮影された画像に変換する画像処理等を考慮していなかった。

すなわち、特許文献１〜３に記載の従来の可搬型画像入力装置技術においては、ユーザが希望する正面方向から撮影され原稿が切り出された画像を得るためには、ユーザ自身がカメラの撮影方向や焦点等の設定を手動で調整し、撮影後に画像を確認し、希望する画像が得られていない場合は再度取り直す必要があるといった、画像を取り込む際の効率性や精度において問題点を有していた。

本発明は、上記に鑑みてなされたもので、最低限の装置重量および設置面積にて、画像を取り込む際の効率性や精度を向上させた、より可搬性および携帯性が高いスキャナ機能を備えたノート型情報処理装置および画像読取方法を提供することを目的とする。

このような目的を達成するため、本発明のノート型情報処理装置は、画像撮影部と表示部とキーボード部と記憶部と制御部とを備えたノート型情報処理装置であって、上記制御部は、上記画像撮影部の撮影範囲内に上記キーボード部の少なくとも一部を撮影したライブビューを上記表示部に表示するライブビュー表示手段と、上記キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、上記ライブビュー表示手段により上記表示部に表示された上記ライブビューから上記静止画像を取得する静止画像取得手段と、上記静止画像取得手段により取得された上記静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、上記原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の上記原稿の変換画像を上記記憶部に格納する画像処理手段と、を備えたことを特徴とする。

また、本発明のノート型情報処理装置は、画像撮影部と表示部とキーボード部と記憶部と制御部とを備えたノート型情報処理装置であって、上記制御部は、上記画像撮影部の撮影範囲内に上記キーボード部の少なくとも一部を撮影したライブビューを取得し、取得された当該ライブビューに対して、正面方向から撮影されたライブビューとなるよう射影変換を行うことにより、射影変換後の上記ライブビューを上記表示部に表示するライブビュー表示手段と、上記キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、上記ライブビュー表示手段により上記表示部に表示された上記ライブビューから上記静止画像を取得する静止画像取得手段と、上記静止画像取得手段により取得された上記静止画像に対し、上記原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の上記原稿の変換画像を上記記憶部に格納する画像処理手段と、を備えたことを特徴とする。

また、本発明のノート型情報処理装置は、上記記載のノート型情報処理装置において、上記制御部は、上記画像撮影部により取得された、上記キーボード部上に上記原稿がない状態の第１の画像と、上記キーボード部上に上記原稿がある状態の第２の画像と、を比較することにより上記原稿の有無を判断し、上記原稿がある場合に上記撮影開始信号を生成し、上記静止画像取得手段に対して送信する撮影開始信号生成手段、を更に備えたことを特徴とする。

また、本発明のノート型情報処理装置は、上記記載のノート型情報処理装置において、上記制御部は、上記静止画像取得手段により上記静止画像を取得する際に、上記表示部の輝度を調整する輝度調整手段、を更に備えたことを特徴とする。

また、本発明のノート型情報処理装置は、上記記載のノート型情報処理装置において、上記画像処理手段における上記クロッピングは、上記画像撮影部により取得された、上記キーボード部上に上記原稿がない状態の第１の画像と、上記キーボード部上に上記原稿がある状態の第２の画像と、を比較することにより、上記原稿のコーナー検出を行うことを特徴とする。

また、本発明のノート型情報処理装置は、上記記載のノート型情報処理装置において、上記画像撮影部は、上記ノート型情報処理装置に取り外し可能に設置され、上記ノート型情報処理装置から電力が供給され、当該ノート型情報処理装置と通信可能に接続されたことを特徴とする。

また、本発明のノート型情報処理装置は、上記記載のノート型情報処理装置において、上記画像撮影部は、撮影方向を変更できるよう回転可能に上記ノート型情報処理装置に設置されることを特徴とする。

また、本発明のノート型情報処理装置は、上記記載のノート型情報処理装置において、上記ノート型情報処理装置は、上記画像撮影部の上記撮影方向を変更するよう回転させた場合に回転角度を検出する回転角度センサを更に備えたことを特徴とする。

また、本発明のノート型情報処理装置は、上記記載のノート型情報処理装置において、上記ノート型情報処理装置は、少なくとも上記画像撮影部が設置された蓋部と、少なくとも上記キーボード部が設置された本体部と、を備えて構成されており、上記本体部に対する上記蓋部のオープン角度を検出するオープン角度センサと、上記画像撮影部の回転角度を調整するモータと、を更に備え、上記制御部は、上記オープン角度センサにて検出された上記オープン角度に基づいて、上記画像撮影部の上記撮影方向を調整するよう上記モータの回転角度を調整する回転角度調整手段、を更に備えたことを特徴とする。

また、本発明の画像読取方法は、画像撮影部と表示部とキーボード部と記憶部と制御部とを備えたノート型情報処理装置において実行される画像読取方法であって、上記制御部において実行される、上記画像撮影部の撮影範囲内に上記キーボード部の少なくとも一部を撮影したライブビューを上記表示部に表示するライブビュー表示ステップと、上記キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、上記ライブビュー表示ステップにて上記表示部に表示された上記ライブビューから上記静止画像を取得する静止画像取得ステップと、上記静止画像取得ステップにて取得された上記静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、上記原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の上記原稿の変換画像を上記記憶部に格納する画像処理ステップと、を含むことを特徴とする。

また、本発明の画像読取方法は、画像撮影部と表示部とキーボード部と記憶部と制御部とを備えたノート型情報処理装置において実行される画像読取方法であって、上記制御部において実行される、上記画像撮影部の撮影範囲内に上記キーボード部の少なくとも一部を撮影したライブビューを取得し、取得された当該ライブビューに対して、正面方向から撮影されたライブビューとなるよう射影変換を行うことにより、射影変換後の上記ライブビューを上記表示部に表示するライブビュー表示ステップと、上記キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、上記ライブビュー表示ステップにて上記表示部に表示された上記ライブビューから上記静止画像を取得する静止画像取得ステップと、上記静止画像取得ステップにて取得された上記静止画像に対し、上記原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の上記原稿の変換画像を上記記憶部に格納する画像処理ステップと、を含むことを特徴とする。

また、本発明の画像読取方法は、上記記載の画像読取方法において、上記制御部において実行される、上記画像撮影部により取得された、上記キーボード部上に上記原稿がない状態の第１の画像と、上記キーボード部上に上記原稿がある状態の第２の画像と、を比較することにより上記原稿の有無を判断し、上記原稿がある場合に上記撮影開始信号を生成し、上記静止画像取得ステップに対して送信する撮影開始信号生成ステップ、
を更に含むことを特徴とする。

また、本発明の画像読取方法は、上記記載の画像読取方法において、上記制御部において実行される、上記静止画像取得ステップにて上記静止画像を取得する際に、上記表示部の輝度を調整する輝度調整ステップ、を更に含むことを特徴とする。

また、本発明の画像読取方法は、上記記載の画像読取方法において、上記画像処理ステップにおける上記クロッピングは、上記画像撮影部により取得された、上記キーボード部上に上記原稿がない状態の第１の画像と、上記キーボード部上に上記原稿がある状態の第２の画像と、を比較することにより、上記原稿のコーナー検出を行うことを特徴とする。

また、本発明の画像読取方法は、上記記載の画像読取方法において、上記画像撮影部は、上記ノート型情報処理装置に取り外し可能に設置され、上記ノート型情報処理装置から電力が供給され、当該ノート型情報処理装置と通信可能に接続されたことを特徴とする。

また、本発明の画像読取方法は、上記記載の画像読取方法において、上記画像撮影部は、撮影方向を変更できるよう回転可能に上記ノート型情報処理装置に設置されることを特徴とする。

また、本発明の画像読取方法は、上記記載の画像読取方法において、上記ノート型情報処理装置は、上記画像撮影部の上記撮影方向を変更するよう回転させた場合に回転角度を検出する回転角度センサを更に備えたことを特徴とする。

また、本発明の画像読取方法は、上記記載の画像読取方法において、上記ノート型情報処理装置は、少なくとも上記画像撮影部が設置された蓋部と、少なくとも上記キーボード部が設置された本体部と、を備えて構成されており、上記本体部に対する上記蓋部のオープン角度を検出するオープン角度センサと、上記画像撮影部の回転角度を調整するモータと、を更に備え、上記制御部において実行される、上記オープン角度センサにて検出された上記オープン角度に基づいて、上記画像撮影部の上記撮影方向を調整するよう上記モータの回転角度を調整する回転角度調整ステップ、を更に含むことを特徴とする。

この発明によれば、画像撮影部の撮影範囲内にキーボード部の少なくとも一部を撮影したライブビューを表示部に表示し、キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、表示部に表示されたライブビューから静止画像を取得し、取得された静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の原稿の変換画像を記憶部に格納するので、書類等の原稿をキーボード部上に置くため、撮影対象の原稿の設置面積としてノート型情報処理装置以上の面積を必要とせず、画像を取り込む前に撮影範囲を調整するためにリアルタイムで確認することができる。また、取り込んだ画像に対して、正面方向から撮影された原稿が背景から切り出された画像となるようリアルタイムに画像処理を行うことができる。これにより、最低限の装置重量および設置面積にて、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現できるという効果を奏する。

また、この発明によれば、画像撮影部の撮影範囲内にキーボード部の少なくとも一部を撮影したライブビューを取得し、取得された当該ライブビューに対して、正面方向から撮影されたライブビューとなるよう射影変換を行うことにより、射影変換後のライブビューを表示部に表示し、キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、表示部に表示されたライブビューから静止画像を取得し、取得された静止画像に対し、原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の原稿の変換画像を記憶部に格納するので、書類等の原稿をキーボード部上に置くため、撮影対象の原稿の設置面積としてノート型情報処理装置以上の面積を必要とせず、画像を取り込む前に撮影範囲を調整するためにリアルタイムで正面方向から撮影された原稿を確認することができる。また、取り込んだ画像に対して、原稿が背景から切り出された画像となるようリアルタイムに画像処理を行うことができる。これにより、最低限の装置重量および設置面積にて、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現できるという効果を奏する。

また、この発明によれば、画像撮影部により取得された、キーボード部上に原稿がない状態の第１の画像と、キーボード部上に原稿がある状態の第２の画像と、を比較することにより原稿の有無を判断し、原稿がある場合に撮影開始信号を生成し、静止画像取得処理に対して送信するので、原稿の有無を判断し、静止画像取得のためのトリガータイミングとしての撮影開始信号を得ることができる。特に、スキャンする原稿の枚数が多いときなどは、この繰り返しによって半自動的に静止画像取得作業が可能となる。これにより、本発明は、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現できるという効果を奏する。

また、この発明によれば、静止画像を取得する際に、表示部の輝度を調整するので、原稿の撮影時に表示部の輝度を一時的に変化させ、表示部の輝度を補助光源として用いることができる。これにより、本発明は、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現できるという効果を奏する。

また、この発明によれば、画像処理におけるクロッピングは、画像撮影部により取得された、キーボード部上に原稿がない状態の第１の画像と、キーボード部上に原稿がある状態の第２の画像と、を比較することにより、原稿のコーナー検出を行うので、クロッピング処理において重要な原稿の境界線のコーナー検出処理を正確かつ迅速に行うことができる。これにより、本発明は、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現できるという効果を奏する。

また、この発明によれば、画像撮影部は、ノート型情報処理装置に取り外し可能に設置され、ノート型情報処理装置から電力が供給され、当該ノート型情報処理装置と通信可能に接続されるので、例えば既存のデジタルカメラなどをＵＳＢ接続した既存のノート型情報処理装置等として構成することができ、モニタ部分等にも簡単に増設または設置することができる。これにより、本発明は、最低限の装置重量および設置面積にて、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現することができるという効果を奏する。

また、この発明によれば、画像撮影部は、撮影方向を変更できるよう回転可能にノート型情報処理装置に設置されるので、必要に応じて画像撮影部の撮影方向を適切に変更できる。これにより、本発明は、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現できるという効果を奏する。

また、この発明によれば、ノート型情報処理装置は、画像撮影部の撮影方向を変更するよう回転させた場合に回転角度を検出する回転角度センサを更に備えるので、ユーザ等を撮影するＷＥＢカメラとして機能する初期位置から画像撮影部の撮影方向を変更したことを自動的に検出することができる。また、撮影方向に変更したことが検出された際に自動的にスキャナソフトを立ち上げて、スキャナモードへ切り替える等の自動処理を行うことができる。これにより、本発明は、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現できるという効果を奏する。

また、この発明によれば、ノート型情報処理装置は、少なくとも画像撮影部が設置された蓋部と、少なくともキーボード部が設置された本体部と、を備えて構成されており、本体部に対する蓋部のオープン角度を検出するオープン角度センサと、画像撮影部の回転角度を調整するモータと、を更に備えており、オープン角度センサにて検出されたオープン角度に基づいて、画像撮影部の撮影方向を調整するようモータの回転角度を調整するので、ユーザが開いたノート型情報処理装置の開き具合に応じて、キーボード部上の置かれた原稿を撮影できるよう画像撮影部の撮影方向を自動的に調整することができる。これにより、本発明は、画像を取り込む際の効率性や精度を向上させたスキャナ機能を実現できるという効果を奏する。

以下に、本発明にかかるノート型情報処理装置、画像読取方法、およびプログラム並びに記録媒体の実施の形態を図面に基づいて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。

［本発明の概要］
以下、本発明の概要について説明し、その後、本発明の構成および処理等について図１および図２を参照して詳細に説明する。図１は、本ノート型情報処理装置１００の構成の一例を示す概要図であり、図２は、本発明の基本処理を示すフローチャートである。

本発明は、概略的に、以下の基本的特徴を有する。

まず、図１に示すように、本ノート型情報処理装置１００は、可搬性が高く、原稿等を取り込むための設置面積を要しないノート型情報処理装置１００とするため、画像撮影部１１６（ＷＥＢカメラ）を内蔵したノート型情報処理装置１００を仮想スキャナ装置として使用する。

ここで、図１において、画像撮影部１１６（ＷＥＢカメラ）は、スキャナ機能を有する画像入力部として機能する。また、蓋部１（ディスプレイ筐体）は、画像撮影部１１６を固定するカメラスタンドとして機能する。また、表示部１１４（ディスプレイ）は、後述するライブビューを表示するモニタ画面や補助光源や保存画像の再生等に用いられる。また、本体部２上のキーボード部１１２は、仮想スキャナ装置の原稿台として機能する。このように、ノート型情報処理装置１００を構成することにより、ノート型情報処理装置１００として最低限の装置重量および設置面積にてスキャナ機能を備えることを可能とする。

すなわち、本発明のノート型情報処理装置１００は、例えば、画像撮影部１１６と表示部１１４を少なくとも備えた蓋部１（ディスプレイ筐体）、および、キーボード部１１２と記憶部と制御部とを少なくとも備えた本体部２を備えて構成される。

ここで、本発明において、画像撮影部１１６は、ノート型情報処理装置１００に取り外し可能に設置されていてもよく、さらに、ノート型情報処理装置１００から電力が供給され、当該ノート型情報処理装置１００と通信可能に接続されていてもよい。また、画像撮影部１１６は、撮影方向を変更できるよう回転可能にノート型情報処理装置１００に設置されていてもよい。

また、ノート型情報処理装置１００は、当該画像撮影部１１６の撮影方向を変更するよう回転させた場合に回転角度を検出する回転角度センサを更に備えていてもよい。また、ノート型情報処理装置１００は、少なくとも画像撮影部１１６が設置された蓋部１と、少なくともキーボード部１１２が設置された本体部２と、を備えて構成されていてもよく、本体部２に対する蓋部１のオープン角度を検出するオープン角度センサと、画像撮影部１１６の回転角度を調整するモータと、を更に備えていてもよい。

また、ノート型情報処理装置１００の制御部は、オープン角度センサにて検出されたオープン角度に基づいて、画像撮影部１１６の撮影方向を調整するようモータの回転角度を調整してもよい。

そして、図２に示すように、ノート型情報処理装置１００の制御部は、画像撮影部１１６の撮影範囲内にキーボード部１１２の少なくとも一部を撮影したライブビューを表示部１１４に表示する（ステップＳＡ−１）。

ここで、「ライブビュー」とは、画像撮影部１１６の撮影範囲を調整するためにリアルタイムでユーザが確認することができるよう、表示部１１４に表示される画像撮影部１１６により撮影された動画像等や静止画像等をいう。

なお、ノート型情報処理装置１００の制御部は、画像撮影部１１６の撮影範囲内にキーボード部１１２の少なくとも一部を撮影したライブビューを取得し、取得された当該ライブビューに対して、正面方向から撮影されたライブビューとなるよう射影変換を行うことにより、射影変換後のライブビューを表示部１１４に表示してもよい。

そして、ノート型情報処理装置１００の制御部は、キーボード部１１２上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、表示部１１４に表示されたライブビューから静止画像を取得する（ステップＳＡ−２）。

ここで、「原稿」とは、画像撮影部１１６による静止画像の撮影対象（被写体）の意味で用いており、書類などの平面的なものに限らず、立体的なものも含む。

また、ノート型情報処理装置１００の制御部は、画像撮影部１１６により取得された、キーボード部１１２上に原稿がない状態の第１の画像と、キーボード部１１２上に原稿がある状態の第２の画像と、を比較することにより原稿の有無を判断し、原稿がある場合に撮影開始信号を生成し、送信してもよい。

また、ノート型情報処理装置１００の制御部は、静止画像取得処理（ステップＳＡ−２）において静止画像を取得する際に、表示部１１４の輝度を調整してもよい。すなわち、ノート型情報処理装置１００の制御部は、原稿の撮影時に表示部１１４の輝度を一時的に変化させ、表示部１１４を補助光源として用いる。

そして、ノート型情報処理装置１００の制御部は、取得された静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の原稿の変換画像を記憶部に格納する（ステップＳＡ−３）。ここで、ノート型情報処理装置１００の制御部は、ステップＳＡ−１にて、射影変換後のライブビューを表示部１１４に表示した場合、取得された静止画像に対し、原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の原稿の変換画像を記憶部に格納してもよい。

ここで、本発明は、画像処理（ステップＳＡ−３）におけるクロッピングでは、画像撮影部１１６により取得された、キーボード部１１２上に原稿がない状態の第１の画像と、キーボード部１１２上に原稿がある状態の第２の画像と、を比較することにより、原稿のコーナー検出を行ってもよい。以上で、本発明の概要の説明を終える。

［ノート型情報処理装置１００の構成］
まず、本ノート型情報処理装置１００の構成について、図３〜図９を参照して詳細に説明する。

ここで、図３は、本ノート型情報処理装置１００の構成の一例を示す論理構成ブロック図であり、該構成のうち本発明に関係する部分のみを概念的に示している。また、図４は、画像撮影部１１６をＷＥＢカメラとして使用した際の一例を示す図である。また、図５は、画像撮影部１１６をスキャナとして使用した際の一例を示す図である。また、図６は、本ノート型情報処理装置１００の更なる構成の一例を示す物理構成図である。また、図７および図８は、本実施の形態における射影変換の一例を示す図である。また、図９は、本実施の形態における射影変換とクロッピング処理後の画像の一例を示す図である。

図３に示すように、ノート型情報処理装置１００は、概略的に、画像撮影部１１６と表示部１１４とキーボード部１１２と記憶部１０６と制御部１０２と回転角度センサ１１８とオープン角度センサ１２０とモータ１２２と入出力制御インターフェース部１０８と通信制御インターフェース部１０４とを備えて構成される。

図３において、制御部１０２は、ノート型情報処理装置１００の全体を統括的に制御するＣＰＵ等である。また、通信制御インターフェース部１０４は、通信回線等に接続されるルータ等の通信装置（図示せず）に接続されるインターフェースであり、入出力制御インターフェース部１０８は、画像撮影部１１６と表示部１１４とキーボード部１１２と回転角度センサ１１８とオープン角度センサ１２０とモータ１２２とに接続されるインターフェースである。また、記憶部１０６は、各種のデータベースやテーブルなどを格納する装置である。これらノート型情報処理装置１００の各部は任意の通信路を介して通信可能に接続されている。更に、このノート型情報処理装置１００は、ルータ等の通信装置および専用線等の有線または無線の通信回線を介して、ネットワーク３００に通信可能に接続されている。

ここで、図３において、画像撮影部１１６は、撮影範囲内にキーボード部の少なくとも一部を撮影したライブビュー用の動画像を撮影する機能を備え、例えば、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）等の電荷結合素子等から構成されるビデオカメラおよびデジタルカメラ等である。画像撮影部１１６は、ノート型情報処理装置１００に内蔵されていてもよい。また、画像撮影部１１６は、ノート型情報処理装置１００に取り外し可能に設置されていてもよく、ノート型情報処理装置１００から電力が供給されていてもよく、当該ノート型情報処理装置１００と通信可能に接続されていてもよい（例えば、ＵＳＢ接続されたＷＥＢカメラやデジタルカメラ等を画像撮影部１１６としてもよい）。

また、画像撮影部１１６は、撮影方向を変更できるよう回転可能にノート型情報処理装置１００に設置されていてもよい。

ここで、図４および図５を参照して、画像撮影部１１６が、撮影方向を変更できるよう回転可能にノート型情報処理装置１００に設置される一例について説明する。

図４は、画像撮影部１１６をＷＥＢカメラとして使用する際の一例を示す。図４に示すように、画像撮影部１１６（ＷＥＢカメラ）は、通常、ノート型情報処理装置１００の蓋部１（ディスプレイ枠）の上部に内蔵されている。この画像撮影部１１６（ＷＥＢカメラ）の一般的な用途は、例えば、テレビ会議やビデオチャット等であり、ユーザであるＰＣ操作者を映すためのものである。また、ＰＣ操作者は、通常、表示部１１４（ディスプレイ）に正対しているので、表示部１１４（ディスプレイ）面と画像撮影部１１６（ＷＥＢカメラ）の光軸が垂直になるように（すなわち、ディスプレイ面とＷＥＢカメラのフォーカス面が平行になるように）して、蓋部１（ディスプレイ枠）の上部に設置すれば、ＷＥＢカメラとしてのテレビ会議やビデオチャット等の目的は達成される。このとき表示部１１４（ディスプレイ）面のオープン角度θは、通常、約９０度〜１３５度程度である。

そして、図５は、画像撮影部１１６をスキャナとしてとして使用する際（スキャナモード）の一例を示す。図５に示すように、このオープン角度θの状態で、画像撮影部１１６（ＷＥＢカメラユニット部）だけを回転させて、光軸をキーボード部１１２に向けられるような構造にする。これにより、ＰＣ操作者のみでなく、キーボード部１１２上に置いた書類等の原稿を撮影することが可能になる。

図３に戻り、ノート型情報処理装置１００は、画像撮影部１１６の撮影方向を変更するよう回転させた場合に回転角度を検出する回転角度センサ１１８を更に備えていてもよい。また、ノート型情報処理装置１００は、少なくとも画像撮影部１１６が設置された蓋部１と、少なくともキーボード部１１２が設置された本体部２と、を備えて構成されていてもよく、本体部２に対する蓋部１のオープン角度を検出するオープン角度センサ１２０と、画像撮影部１１６の回転角度を調整するモータ１２２と、を更に備えていてもよい。

ここで、図６を参照して、ノート型情報処理装置１００が、回転角度センサ１１８とオープン角度センサ１２０とモータ１２２とを更に備えた構成の一例について説明する。回転角度センサ１１８やオープン角度センサ１２０は、画像撮影部１１６の回転角度γやノート型情報処理装置１００のオープン角度θを検出する機能を有し、例えば、角速度や角度等を検出するジャイロセンサ等である。また、モータ１２２は、画像撮影部１１６を回転させる機能を有する。

図６に示すように、ユーザが回転可能にノート型情報処理装置１００に設置された画像撮影部１１６（ＷＥＢカメラ）をキーボード部１１２の面（原稿面）を撮影するように回転させた場合、回転角度センサ１１８は、画像撮影部１１６の回転角度γを検出する。そして、ノート型情報処理装置１００の制御部１０２は、自動的にスキャンソフトを立ち上げて、スキャナモードに変更してもよい。このとき、表示部１１４（ディスプレイ）上には画像撮影部１１６が撮影した映像がライブビューでリアルタイムに表示部１１４に表示されるため、ユーザは表示部１１４を見ながら画像撮影部１１６の角度を調整することができる。また、表示部１１４（ディスプレイ）のオープン角度θをエンコーダ等のオープン角度センサ１２０で検知した場合に、ノート型情報処理装置１００の制御部１０２は、そのオープン角度θに基づいて、画像撮影部１１６（ＷＥＢカメラ）がキーボード部１１２の面（原稿面）を写すのに必要な回転角度γを算出し、モータ１２２等で画像撮影部１１６（ＷＥＢカメラ）を回転させるように制御しても良い。ノート型情報処理装置１００の制御部１０２は、例えば、本実施形態において、オープン角度をθとすれば、γ＝（π−θ）／４として、回転角度γを算出してもよい。

図３において、記憶部１０６は、各種のデータベースやテーブル（画像データベース１０６ａ等）を格納し、固定ディスク装置等のストレージ手段である。例えば、記憶部１０６は、各種処理に用いる各種のプログラムやテーブルやファイルやデータベース等を格納する。

これら記憶部１０６の各構成要素のうち、画像データベース１０６ａは、各種の動画像や静止画像を格納する画像記憶手段であり、例えば、画像撮影部１１６が撮影したライブビューの動画像や静止画像の他、制御部１０２による各種の画像処理（例えば、射影変換、クロッピング等）した後の動画像や静止画像等を格納する。

また、通信制御インターフェース部１０４は、ノート型情報処理装置１００とネットワーク３００（またはルータ等の通信装置）との間における通信制御を行う。すなわち、通信制御インターフェース部１０４は、他の端末と通信回線を介してデータを通信する機能を有する。また、通信制御インターフェース部１０４は、ノート型情報処理装置１００に取り外し可能に接続された画像撮影部１１６と通信回線を介してデータを通信する機能を有していてもよい。

また、入出力制御インターフェース部１０８は、キーボート部１１２や表示部１１４や画像撮影部１１６や回転角度センサ１１８やオープン角度センサ１２０やモータ１２２の制御を行う。ここで、キーボード部１１２は、本体部２に設置されたキーボードに相当し、表示部１１４は、蓋部１に設置されたディスプレイ（モニタ）に相当する。

また、制御部１０２は、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）等の制御プログラムや、各種の処理手順等を規定したプログラム、および、所要データを格納するための内部メモリを有する。そして、制御部１０２は、これらのプログラム等により、種々の処理を実行するための情報処理を行う。制御部１０２は、機能概念的に、ライブビュー表示部１０２ａ、静止画像取得部１０２ｂ、画像処理部１０２ｃ、撮影開始信号生成部１０２ｄ、輝度調整部１０２ｅ、および、回転角度調整部１０２ｆを備えて構成されている。

このうち、ライブビュー表示部１０２ａは、画像撮影部１１６の撮影範囲内にキーボード部１１２の少なくとも一部を撮影したライブビューを表示部１１４に表示するライブビュー表示手段である。ここで、ライブビュー表示部１０２ａは、画像撮影部１１６の撮影範囲内にキーボード部１１２の少なくとも一部を撮影したライブビューを取得し、取得された当該ライブビューに対して、正面方向から撮影されたライブビューとなるよう射影変換を行うことにより、後述する射影変換後のライブビューを表示部１１４に表示してもよい。

また、静止画像取得部１０２ｂは、キーボード部１１２上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、ライブビュー表示部１０２ａにより表示部１１４に表示されたライブビューから静止画像を取得する静止画像取得手段である。

また、画像処理部１０２ｃは、静止画像取得部１０２ｂにより取得された静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の原稿の変換画像を画像データベース１０６ａに格納する画像処理手段である。ここで、画像処理部１０２ｃは、ライブビュー表示部１０２ａにより射影変換後のライブビューを表示部１１４に表示した場合、静止画像取得部１０２ｂにより取得された静止画像に対し、原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の原稿の変換画像を画像データベース１０６ａに格納してもよい。また、画像処理部１０２ｃは、クロッピングとして、画像撮影部１１６により取得された、キーボード部１１２上に原稿がない状態の第１の画像と、キーボード部上に原稿がある状態の第２の画像と、を比較することにより、原稿のコーナー検出を行ってもよい。

ここで、図７および図８を参照して、画像処理部１０２ｃやライブビュー表示部１０２ａで行う射影変換について説明する。

また、画像処理部１０２ｃやライブビュー表示部１０２ａで行う射影変換は、例えば、画像撮影部１１６で撮影した画像を射影の逆変換を用いて元の状態に復元することにより実行される。射影変換の一例について以下に説明する。まず、射影変換を行う際には、画像撮影部１１６で撮影した画像面である撮像面７０における画像の消失点を求める。例えば、撮像面７０における画像形状である撮像面形状７１が図７に示すような矩形の場合、消失点は、消失点Ｓ１と消失点Ｓ２との２ヶ所に求められる。なお、この消失点とは、所定の形状を射影した場合に、実際の形状では平行に形成される２つの直線の延長線同士が交わる点をいう。このように消失点を求めることにより、消失点に基づいて射影前の元の大きさや、射影変換を行う際のパラメータである射影変換パラメータを求め、下記の式（１）より射影変換を行う。つまり、式（１）によって、射影変換前の座標（ｘ，ｙ，１）から射影変換後の座標（ｕ，ｖ，１）を求めることにより、射影変換を行う。

このように、射影変換前の座標である撮像面形状７１の座標を射影変換することにより、射影変換後の座標を求めて図８に示すように射影変換後の形状である射影変換後形状７５を求めることができる。この射影変換後形状７５は、画像撮影部１１６で撮像した実物を正面方向から見た形状、即ち、撮像した面を垂直方向に見た場合における形状である実物形状７６と相似の形状になっている。

すなわち、本実施形態において、画像撮影部１１６は、書類等の原稿に対し正面方向からの撮影していないため、撮影された書類等の原稿の画像には歪みが生じている。この歪んだ画像に対して、画像処理部１０２ｃやライブビュー表示部１０２ａは、射影変換を行い歪みを補正し、さらにクロッピング（トリミング）を行い原稿を背景から切り出して記憶部１０６に格納する。その際、画像処理部１０２ｃは、画像処理後の変換画像を表示部１１４（ディスプレイ）上に表示してもよい。なお上述したように、この画像処理部１０２ｃによる射影変換は、静止画像取得部１０２ｂで行う画像取得後に後述のクロッピングと併せて画像処理してもよく、ライブビュー表示部１０２ａにより画像撮影部１１６（ＷＥＢカメラ）から転送されてくる画像を逐次射影変換処理しライブビューとして表示部１１４に表示してもよい。この場合、正面方向から撮影したかのような画像をユーザが見ることができるため、原稿セット等をより自然に行うことができる。なお射影変換は、上述した技術の他、各種の従来技術を用いることができる。

ここで、図９を参照して、画像処理部１０２ｃで行うクロッピングの一例について説明する。

図９に示すように、本実施形態において、画像処理部１０２ｃは、静止画像取得部１０２ｂが取得した静止画像を、表示部１１４（ディスプレイ）に表示し、書類等の原稿の４つのコーナーを、ユーザがマウス等の入力部（図示せず）を介して指定することにより、射影変換とクロッピング（トリミング）を実行してもよい。また、画像処理部１０２ｃは、静止画像から得られた輝度情報等から書類等の原稿とキーボード部１１２の面との境界線を抽出し、抽出したその境界線に対し直線補間等を行い、原稿の４つのコーナーを算出することにより、射影変換とクロッピング（トリミング）を実行してもよい。また、画像処理部１０２ｃは、予め原稿をキーボード部１１２にセットする前のキーボード部を画像撮影部１１６で撮影しておき、静止画像取得部１０２ｂが取得した静止画像との輝度情報等の差分がある一定のレベルになる領域を抽出し、抽出したその境界線に対し直線補間等を行い、原稿の４つのコーナーを算出することにより、射影変換とクロッピング（トリミング）を実行してもよい。なお、クロッピングは、上述した技術の他、各種の従来技術を用いることができる。

図３に戻り、撮影開始信号生成部１０２ｄは、キーボード部１１２上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を生成する撮影開始信号生成手段ある。

ここで、撮影開始信号生成部１０２ｄは、表示部１１４上に表示された、例えば「シャッター」等のアイコン等を、マウス等の入力部（図示せず）を介してユーザにクリックさせることにより撮影開始信号を生成し、静止画像取得部１０２ｂに対して送信してもよい。また、撮影開始信号生成部１０２ｄは、ノート型情報処理装置１００に内蔵されたマイク等の入力部（図示せず）を介してユーザにより入力された特定の音声を検出することにより、撮影開始信号を生成し、静止画像取得部１０２ｂに対して送信してもよい。

また、撮影開始信号生成部１０２ｄは、画像撮影部１１６により取得された、キーボード部１１２上に原稿がない状態の第１の画像と、キーボード部１１２上に原稿がある状態の第２の画像と、を比較することにより原稿の有無を判断し、原稿がある場合に撮影開始信号を生成し、静止画像取得部１０２ｂに対して送信してもよい。

また、輝度調整部１０２ｅは、静止画像取得部１０２ｂにより静止画像を取得する際に、表示部１１４の輝度を調整する輝度調整手段である。

ここで、本実施形態において、原稿が置かれたキーボード部１１２上を照射する照明は、オフィス等に設置された室内灯等などの環境光を用いることになるが、輝度調整部１０２ｅにより輝度が調整された表示部１１４（ディスプレイ）の光を補助照明として用いてもよい。すなわち、撮影開始信号生成部１０２ｄが生成した撮影開始信号（画像取得トリガー）を静止画像取得部１０２ｂが受信したタイミングにあわせて、輝度調整部１０２ｅは、表示部１１４の画面全体を一定の画像（例えば、輝度最大の全面白色画面）にすることにより、キーボード部１１２上の書類等の原稿を照射する。なお、例えば、表示部１１４（ディスプレイ）のオープン角度θが、例えば、９０度以上である場合は、表示部１１４（ディスプレイ）の光が、書類等の原稿に反射して写り込む（いわゆる、テカリとなる）ことがないため、輝度調整部１０２ｅにより輝度が調整された表示部１１４（ディスプレイ）の光を、良質な補助光源として用いることができる。

また、回転角度調整部１０２ｆは、オープン角度センサ１２０にて検出されたオープン角度θに基づいて、画像撮影部１１６の撮影方向を調整するようモータ１２２の回転角度γを調整する回転角度調整手段である。

なお、本実施形態において、画像撮影部１１６が撮影する画像の画質は、例えば、約５００万画素クラス以上の画像撮影部１１６（カメラ）であれば、ドキュメントスキャナとしては実用上問題ないレベルを得ることができる。また、本実施形態におけるノート型情報処理装置１００は、例えば、ビジネスマン等のユーザが、例えば、出張先のホテル等や顧客訪問先等など外出先等で利用することを想定しているが、オフィス等の自席に置いて用いても、設置面積や手軽な操作等の利点が失われるものではない。以上で、ノート型情報処理装置１００の構成の説明を終える。

［ノート型情報処理装置１００の処理］
次に、このように構成された本実施の形態における本ノート型情報処理装置１００の処理の画像読取処理の一例について、以下に図１０および図１１を参照して詳細に説明する。

［画像読取処理］
まず、画像読取処理の詳細について図１０を参照して説明する。図１０は、本実施の形態における本ノート型情報処理装置１００の画像読取処理の一例を示すフローチャートである。

図１０に示すように、回転可能にノート型情報処理装置１００に設置された画像撮影部１１６（カメラ）がキーボード部１１２の面（原稿面）の撮影方向へ回転されると、回転角度センサ１１８が画像撮影部１１６の回転を検出する。そして、制御部１０２は、自動的にスキャンアプリケーションを立ち上げて表示部１１４（モニタ）に表示し、キーボード部１１２の面（原稿面）を撮影するスキャナモードに変更する（ステップＳＢ−１）。

そして、ライブビュー表示部１０２ａの処理により、表示部１１４（ディスプレイ）上には画像撮影部１１６が撮影した映像がライブビューでリアルタイムに表示される。すなわち、ライブビュー表示部１０２ａは、画像撮影部１１６の撮影範囲内にキーボード部１１２の少なくとも一部を撮影したライブビューを表示部１１４に表示する。そして、ユーザは表示部１１４に表示されたライブビューを見ながら画像撮影部１１６の角度を調整する（ステップＳＢ−２）。ここで、ライブビュー表示部１０２ａは、画像撮影部１１６の撮影範囲内にキーボード部１１２の少なくとも一部を撮影したライブビューを取得し、取得された当該ライブビューに対して、正面方向から撮影されたライブビューとなるよう射影変換を行うことにより、後述する射影変換後のライブビューを表示部１１４に表示してもよい。

ここで、回転角度調整部１０２ｆは、オープン角度センサ１２０にて検出されたオープン角度θに基づいて、画像撮影部１１６の撮影方向を調整するようモータ１２２の回転角度γを調整してもよい。

そして、撮影開始信号生成部１０２ｄは、キーボード部１１２上に原稿がない状態の第１の画像と、キーボード部１１２上に原稿がある状態の第２の画像とをコンペア画像として取得して、原稿の有無を判断し、原稿がある場合に撮影開始信号を生成し、静止画像取得部１０２ｂに対して送信する（ステップＳＢ−３）。なお、撮影開始信号生成部１０２ｄによる撮影開始信号生成の詳細は後述する。

そして、静止画像取得部１０２ｂは、撮影開始信号生成部１０２ｄから、キーボード部１１２上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、表示部１１４に表示されたライブビューから静止画像を取得することにより、原稿の画像を取得する（ステップＳＢ−４）。

ここで、輝度調整部１０２ｅは、静止画像取得部１０２ｂにおいて静止画像を取得する際に、表示部１１４の輝度を調整してもよい。

そして、画像処理部１０２ｃは、静止画像取得部１０２ｂに処理により取得された静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、原稿を切り出すようクロッピングを行うように画像処理を実行する（ステップＳＢ−５）。そして、画像処理部１０２ｃは、当該画像処理後の原稿の変換画像を表示部１１４に表示し、画像データベース１０６ａに格納する（ステップＳＢ−６）。ここで、画像処理部１０２ｃは、ステップＳＢ−２にて、射影変換後のライブビューを表示部１１４に表示した場合、静止画像取得部１０２ｂに処理により取得された静止画像に対し、原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の原稿の変換画像を画像データベース１０６ａに格納してもよい。

ここで、画像処理部１０２ｃは、ステップＳＢ−４にて制御部１０２の処理により画像撮影部１１６を用いて取得された、キーボード部１１２上に原稿がない状態の第１の画像と、キーボード部１１２上に原稿がある状態の第２の画像と、を比較することにより、原稿のコーナー検出を行いクロッピングしてもよい。

そして、制御部１０２は、次の原稿がキーボード部１１２上にセットされているかを判断することにより、画像読取処理を終了するか否かを判断する（ステップＳＢ−７）。そして、制御部１０２が画像読取処理を終了しないと判断した場合（ステップＳＢ−７：Ｎｏ）、ステップＳＢ−４に戻り、次の原稿に対して画像読取処理を続行する。一方、制御部１０２が画像読取処理を終了すると判断した場合（ステップＳＢ−７：Ｙｅｓ）、画像読取処理を終了する。以上で、画像読取処理の説明を終える。

［撮影開始信号生成処理］
次に、撮影開始信号生成処理の詳細について図１１を参照して説明する。図１１は、本実施の形態における本ノート型情報処理装置１００の撮影開始信号生成処理の一例を示すフローチャートである。

まず、撮影開始信号生成部１０２ｄは、予め原稿をキーボード部１１２上にセットする前のキーボード部１１２の画像（第１の画像）を、画像撮影部１１６を用いて撮影することにより取得する（ステップＳＣ−１）。

そして、撮影開始信号生成部１０２ｄは、カウンタＢを「０」に初期化する（ステップＳＣ−２）。

そして、撮影開始信号生成部１０２ｄは、原稿がキーボード部１１２上にセットされた原稿を含む画像（第２の画像）を、画像撮影部１１６を用いて撮影することにより取得する（ステップＳＣ−３）。

そして、撮影開始信号生成部１０２ｄは、画像撮影部１１６（カメラ）を介して入力される撮影映像の輝度情報等を常時モニタリングし、制御部１０２の処理により、事前に取得したキーボード部１１２の画像（第１の画像）と、原稿がキーボード部１１２上にセットされた原稿を含む画像（第２の画像）との輝度値等における差分が、あるレベルに達するか否か（Σ（第１の画像の輝度値−第２の画像の輝度値）＞閾値Ａ？）を判断することにより、書類等の原稿がキーボード部上１１２にセットされ始めたかを判断する（ステップＳＣ−４）。そして、撮影開始信号生成部１０２ｄは、閾値Ａ以下であると判断され、書類等の原稿がキーボード部上１１２にセットされていないと判断された場合は（ステップＳＣ−４：Ｎｏ）、ステップＳＣ−２の処理へ戻る。一方、撮影開始信号生成部１０２ｄは、閾値Ａを超えると判断され、書類等の原稿がキーボード部上１１２にセットされ始めたと判断された場合は（ステップＳＣ−４：Ｙｅｓ）、次のステップＳＣ−５の処理へ進む。

そして、撮影開始信号生成部１０２ｄは、カウンタＢを「１」にカウントする（ステップＳＣ−５）。

そして、撮影開始信号生成部１０２ｄは、差分の変化が一定レベルに安定したか否か（Σ（第２の画像の輝度値−前回の第２の画像の輝度値）＜閾値Ｃ？）を判断することにより、原稿のセットが完了したか否かを判断する（ステップＳＣ−６）。そして、撮影開始信号生成部１０２ｄは、閾値Ｃ以上であると判断され、差分の変化が一定レベルに安定していないと判断された場合は（ステップＳＣ−６：Ｎｏ）、ステップＳＣ−２の処理へ戻る。一方、撮影開始信号生成部１０２ｄは、閾値Ｃより低いと判断され、差分の変化が一定レベルに安定したと判断された場合は（ステップＳＣ−６：Ｙｅｓ）、次のステップＳＣ−７の処理へ進む。

そして、撮影開始信号生成部１０２ｄは、所定の時間を経たか否か（カウンタＢ＞閾値Ｄ？）を判断する（ステップＳＣ−７）。そして、撮影開始信号生成部１０２ｄは、カウントＢが閾値以下であると判断され、所定の時間を経ていないと判断された場合は（ステップＳＣ−７：Ｎｏ）、ステップＳＣ−３の処理へ戻る。一方、撮影開始信号生成部１０２ｄは、カウントＢが閾値を超えると判断され、所定の時間を経た判断された場合は（ステップＳＣ−７：Ｙｅｓ）、次のステップＳＣ−８の処理へ進む。

そして、撮影開始信号生成部１０２ｄは、撮影開始信号（シャッタートリガー）を生成して静止画像取得部１０２ｂに対して送信する（ステップＳＣ−８）。

そして、静止画像取得部１０２ｂは、撮影開始信号生成部１０２ｄから、キーボード部１１２上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に（シャッタートリガーＯＮ）、表示部１１４に表示されたライブビューから静止画像を取得する。ここで、制御部１０２は、静止画像取得部１０２ｂの処理により静止画像が取得された後に、スピーカー等の出力部（図示せず）を介して音声や、表示部１１４（ディスプレイ）を介して静止画像の取得をユーザへ知らせてもよい。原稿のスキャン枚数が多いときには、この繰り返しによって半自動的に作業が可能になる。以上で、撮影開始信号生成処理の説明を終える。

［他の実施の形態］
さて、これまで本発明の実施の形態について説明したが、本発明は、上述した実施の形態以外にも、上記特許請求の範囲に記載した技術的思想の範囲内において種々の異なる実施の形態にて実施されてよいものである。

例えば、ノート型情報処理装置１００がスタンドアローンの形態で処理を行う場合を一例に説明したが、ノート型情報処理装置１００とは別筐体で構成されるクライアント端末からの要求に応じて処理を行い、その処理結果を当該クライアント端末に返却するように構成してもよい。

また、実施の形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。

このほか、上記文献中や図面中で示した処理手順、制御手順、具体的名称、各処理の登録データや検索条件等のパラメータを含む情報、画面例、データベース構成については、特記する場合を除いて任意に変更することができる。

また、ノート型情報処理装置１００に関して、図示の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。

例えば、ノート型情報処理装置１００の各装置が備える処理機能、特に制御部１０２にて行われる各処理機能については、その全部または任意の一部を、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）および当該ＣＰＵにて解釈実行されるプログラムにて実現してもよく、また、ワイヤードロジックによるハードウェアとして実現してもよい。尚、プログラムは、後述する記録媒体に記録されており、必要に応じてノート型情報処理装置１００に機械的に読み取られる。すなわち、ＲＯＭまたはＨＤなどの記憶部１０６などは、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）として協働してＣＰＵに命令を与え、各種処理を行うためのコンピュータプログラムが記録されている。このコンピュータプログラムは、ＲＡＭにロードされることによって実行され、ＣＰＵと協働して制御部１０２を構成する。

また、このコンピュータプログラムは、ノート型情報処理装置１００に対して任意のネットワーク３００を介して接続されたアプリケーションプログラムサーバに記憶されていてもよく、必要に応じてその全部または一部をダウンロードすることも可能である。

また、本発明に係るプログラムを、コンピュータ読み取り可能な記録媒体に格納することもできる。ここで、この「記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ等の任意の「可搬用の物理媒体」、あるいは、ＬＡＮ、ＷＡＮ、インターネットに代表されるネットワーク３００を介してプログラムを送信する場合の通信回線や搬送波のように、短期にプログラムを保持する「通信媒体」を含むものとする。

また、「プログラム」とは、任意の言語や記述方法にて記述されたデータ処理方法であり、ソースコードやバイナリコード等の形式を問わない。なお、「プログラム」は必ずしも単一的に構成されるものに限られず、複数のモジュールやライブラリとして分散構成されるものや、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）に代表される別個のプログラムと協働してその機能を達成するものをも含む。なお、実施の形態に示した各装置において記録媒体を読み取るための具体的な構成、読み取り手順、あるいは、読み取り後のインストール手順等については、周知の構成や手順を用いることができる。

記憶部１０６に格納される各種のデータベース等（画像データベース１０６ａ等）は、ＲＡＭ、ＲＯＭ等のメモリ装置、ハードディスク等の固定ディスク装置、フレキシブルディスク、光ディスク等のストレージ手段であり、各種処理に用いる各種のプログラムやテーブルやデータベースや等を格納する。

また、ノート型情報処理装置１００は、既知のパーソナルコンピュータ、ワークステーション等の情報処理装置を接続し、該情報処理装置に本発明の方法を実現させるソフトウェア（プログラム、データ等を含む）を実装することにより実現してもよい。

更に、装置の分散・統合の具体的形態は図示するものに限られず、その全部または一部を、各種の付加等に応じて、または、機能負荷に応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。

以上詳述に説明したように、本発明によれば、最低限の装置重量および設置面積にて、画像を取り込む際の効率性や精度を向上させた、より可搬性および携帯性が高いスキャナ機能を備えたノート型情報処理装置および画像読取方法を提供することができ、情報処理分野などの様々な分野において極めて有用である。

本ノート型情報処理装置１００の構成の一例を示す概要図である。 本発明の基本処理を示すフローチャートである。 本ノート型情報処理装置１００の構成の一例を示す論理構成ブロック図である。 画像撮影部１１６をＷＥＢカメラとして使用した際の一例を示す図である。 画像撮影部１１６をスキャナとして使用した際（スキャナモード）の一例を示す図である。 本ノート型情報処理装置１００の更なる構成の一例を示す物理構成図である。 本実施の形態における射影変換の一例を示す図である。 本実施の形態における射影変換の一例を示す図である。 本実施の形態における射影変換とクロッピング処理後の画像の一例を示す図である。 本実施の形態における本ノート型情報処理装置１００の画像読取処理の一例を示すフローチャートである。 本実施の形態における本ノート型情報処理装置１００の撮影開始信号生成処理の一例を示すフローチャートである。

符号の説明

１００ ノート型情報処理装置
１ 蓋部
２ 本体部
１０２ 制御部
１０２ａ ライブビュー表示部
１０２ｂ 静止画像取得部
１０２ｃ 画像処理部
１０２ｄ 撮影開始信号生成部
１０２ｅ 輝度調整部
１０２ｆ 回転角度調整部
１０４ 通信制御インターフェース部
１０６ 記憶部
１０６ａ 画像データベース
１０８ 入出力制御インターフェース部
１１２ キーボード部
１１４ 表示部
１１６ 画像撮影部
１１８ 回転角度センサ
１２０ オープン角度センサ
１２２ モータ
３００ ネットワーク

Claims (18)

1. 画像撮影部と表示部とキーボード部と記憶部と制御部とを備えたノート型情報処理装置であって、
   上記制御部は、
   上記画像撮影部の撮影範囲内に上記キーボード部の少なくとも一部を撮影したライブビューを上記表示部に表示するライブビュー表示手段と、
   上記キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、上記ライブビュー表示手段により上記表示部に表示された上記ライブビューから上記静止画像を取得する静止画像取得手段と、
   上記静止画像取得手段により取得された上記静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、上記原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の上記原稿の変換画像を上記記憶部に格納する画像処理手段と、
   を備えたことを特徴とする、ノート型情報処理装置。
2. 画像撮影部と表示部とキーボード部と記憶部と制御部とを備えたノート型情報処理装置であって、
   上記制御部は、
   上記画像撮影部の撮影範囲内に上記キーボード部の少なくとも一部を撮影したライブビューを取得し、取得された当該ライブビューに対して、正面方向から撮影されたライブビューとなるよう射影変換を行うことにより、射影変換後の上記ライブビューを上記表示部に表示するライブビュー表示手段と、
   上記キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、上記ライブビュー表示手段により上記表示部に表示された上記ライブビューから上記静止画像を取得する静止画像取得手段と、
   上記静止画像取得手段により取得された上記静止画像に対し、上記原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の上記原稿の変換画像を上記記憶部に格納する画像処理手段と、
   を備えたことを特徴とする、ノート型情報処理装置。
3. 請求項１または２に記載のノート型情報処理装置において、
   上記制御部は、
   上記画像撮影部により取得された、上記キーボード部上に上記原稿がない状態の第１の画像と、上記キーボード部上に上記原稿がある状態の第２の画像と、を比較することにより上記原稿の有無を判断し、上記原稿がある場合に上記撮影開始信号を生成し、上記静止画像取得手段に対して送信する撮影開始信号生成手段、
   を更に備えたことを特徴とする、ノート型情報処理装置。
4. 請求項１または２に記載のノート型情報処理装置において、
   上記制御部は、
   上記静止画像取得手段により上記静止画像を取得する際に、上記表示部の輝度を調整する輝度調整手段、
   を更に備えたことを特徴とする、ノート型情報処理装置。
5. 請求項１または２に記載のノート型情報処理装置において、
   上記画像処理手段における上記クロッピングは、
   上記画像撮影部により取得された、上記キーボード部上に上記原稿がない状態の第１の画像と、上記キーボード部上に上記原稿がある状態の第２の画像と、を比較することにより、上記原稿のコーナー検出を行うことを特徴とする、ノート型情報処理装置。
6. 請求項１または２に記載のノート型情報処理装置において、
   上記画像撮影部は、上記ノート型情報処理装置に取り外し可能に設置され、上記ノート型情報処理装置から電力が供給され、当該ノート型情報処理装置と通信可能に接続されたことを特徴とする、ノート型情報処理装置。
7. 請求項１または２に記載のノート型情報処理装置において、
   上記画像撮影部は、撮影方向を変更できるよう回転可能に上記ノート型情報処理装置に設置されることを特徴とする、ノート型情報処理装置。
8. 請求項７に記載のノート型情報処理装置において、
   上記ノート型情報処理装置は、上記画像撮影部の上記撮影方向を変更するよう回転させた場合に回転角度を検出する回転角度センサを更に備えたことを特徴とする、ノート型情報処理装置。
9. 請求項７に記載のノート型情報処理装置において、
   上記ノート型情報処理装置は、少なくとも上記画像撮影部が設置された蓋部と、少なくとも上記キーボード部が設置された本体部と、を備えて構成されており、上記本体部に対する上記蓋部のオープン角度を検出するオープン角度センサと、上記画像撮影部の回転角度を調整するモータと、を更に備え、
   上記制御部は、
   上記オープン角度センサにて検出された上記オープン角度に基づいて、上記画像撮影部の上記撮影方向を調整するよう上記モータの回転角度を調整する回転角度調整手段、
   を更に備えたことを特徴とする、ノート型情報処理装置。
10. 画像撮影部と表示部とキーボード部と記憶部と制御部とを備えたノート型情報処理装置において実行される画像読取方法であって、
    上記制御部において実行される、
    上記画像撮影部の撮影範囲内に上記キーボード部の少なくとも一部を撮影したライブビューを上記表示部に表示するライブビュー表示ステップと、
    上記キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、上記ライブビュー表示ステップにて上記表示部に表示された上記ライブビューから上記静止画像を取得する静止画像取得ステップと、
    上記静止画像取得ステップにて取得された上記静止画像に対し、正面方向から撮影された画像となるよう射影変換を行い、上記原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の上記原稿の変換画像を上記記憶部に格納する画像処理ステップと、
    を含むことを特徴とする、画像読取方法。
11. 画像撮影部と表示部とキーボード部と記憶部と制御部とを備えたノート型情報処理装置において実行される画像読取方法であって、
    上記制御部において実行される、
    上記画像撮影部の撮影範囲内に上記キーボード部の少なくとも一部を撮影したライブビューを取得し、取得された当該ライブビューに対して、正面方向から撮影されたライブビューとなるよう射影変換を行うことにより、射影変換後の上記ライブビューを上記表示部に表示するライブビュー表示ステップと、
    上記キーボード部上に置かれた原稿の静止画像の撮影を開始する撮影開始信号を受信した場合に、上記ライブビュー表示ステップにて上記表示部に表示された上記ライブビューから上記静止画像を取得する静止画像取得ステップと、
    上記静止画像取得ステップにて取得された上記静止画像に対し、上記原稿を切り出すようクロッピングを行うように画像処理を実行し、当該画像処理後の上記原稿の変換画像を上記記憶部に格納する画像処理ステップと、
    を含むことを特徴とする、画像読取方法。
12. 請求項１０または１１に記載の画像読取方法において、
    上記制御部において実行される、
    上記画像撮影部により取得された、上記キーボード部上に上記原稿がない状態の第１の画像と、上記キーボード部上に上記原稿がある状態の第２の画像と、を比較することにより上記原稿の有無を判断し、上記原稿がある場合に上記撮影開始信号を生成し、上記静止画像取得ステップに対して送信する撮影開始信号生成ステップ、
    を更に含むことを特徴とする、画像読取方法。
13. 請求項１０または１１に記載の画像読取方法において、
    上記制御部において実行される、
    上記静止画像取得ステップにて上記静止画像を取得する際に、上記表示部の輝度を調整する輝度調整ステップ、
    を更に含むことを特徴とする、画像読取方法。
14. 請求項１０または１１に記載の画像読取方法において、
    上記画像処理ステップにおける上記クロッピングは、
    上記画像撮影部により取得された、上記キーボード部上に上記原稿がない状態の第１の画像と、上記キーボード部上に上記原稿がある状態の第２の画像と、を比較することにより、上記原稿のコーナー検出を行うことを特徴とする、画像読取方法。
15. 請求項１０または１１に記載の画像読取方法において、
    上記画像撮影部は、上記ノート型情報処理装置に取り外し可能に設置され、上記ノート型情報処理装置から電力が供給され、当該ノート型情報処理装置と通信可能に接続されたことを特徴とする、画像読取方法。
16. 請求項１０または１１に記載の画像読取方法において、
    上記画像撮影部は、撮影方向を変更できるよう回転可能に上記ノート型情報処理装置に設置されることを特徴とする、画像読取方法。
17. 請求項１６に記載の画像読取方法において、
    上記ノート型情報処理装置は、上記画像撮影部の上記撮影方向を変更するよう回転させた場合に回転角度を検出する回転角度センサを更に備えたことを特徴とする、画像読取方法。
18. 請求項１６に記載の画像読取方法において、
    上記ノート型情報処理装置は、少なくとも上記画像撮影部が設置された蓋部と、少なくとも上記キーボード部が設置された本体部と、を備えて構成されており、上記本体部に対する上記蓋部のオープン角度を検出するオープン角度センサと、上記画像撮影部の回転角度を調整するモータと、を更に備え、
    上記制御部において実行される、
    上記オープン角度センサにて検出された上記オープン角度に基づいて、上記画像撮影部の上記撮影方向を調整するよう上記モータの回転角度を調整する回転角度調整ステップ、
    を更に含むことを特徴とする、画像読取方法。

Images