JP5730177B2 - 電子内視鏡システム - Google Patents

Description

本発明は、電子内視鏡システムに関する。

従来の電子内視鏡システムは一般的に、撮像部を有する電子内視鏡と、この電子内視鏡に設けたケーブル（ユニバーサルチューブ）を介して電子内視鏡と接続し、電子内視鏡に対して照明光を供給すると共に撮像部から送信された信号に基づいて画像データを生成するプロセッサと、このプロセッサが生成した画像データに基づく画像を表示するディスプレイと、を具備している。
しかしケーブルを介して電子内視鏡とプロセッサを接続しているので電子内視鏡の動作（例えば移動）が制限され易く（操作性が悪く）、しかもシステム全体が大掛かりになってしまう。

その一方で、自身の内部に光源を有する携帯型内視鏡は、プロセッサ等の外部機器と接続するためのケーブルが不要になるので、内視鏡の動作が制限されず（操作性が良好であり）、しかも全体構成がコンパクトである。
しかし携帯型内視鏡は操作部に設けた接眼レンズを通して患部の観察を行うため、患部を視認可能な観察者が一人（術者のみ）に限定されてしまう。さらに観察像を記録することも難しい。
なお、携帯型内視鏡の接眼レンズにデジタル式のアドオンカメラ（附属カメラ）を設ければ、術者以外の人も観察像を視認可能となる。しかし、アドオンカメラは別途モニタなどの外部機器との接続を要するため、携帯内視鏡のコンパクトさが失われてしまう。また、アドオンカメラを見るために術者は姿勢を変える必要があり動作に支障が生じる。さらに、画面の大きさと視野角の点から、現実的には術者以外の人には鮮明な画像を視認することが難しい。

さらに、従来から内視鏡に画像の観察機能（撮像機能）だけでなく、観察画像の保存機能を持たせたものは存在する。しかし保存した観察画像データに音声情報及び／又は文字情報を付加して患者の電子カルテデータを作成する機能を持たせた内視鏡は存在せず、従来は観察を終えた後に観察画像データを内視鏡から外部機器に転送して、この外部機器側で観察画像データに音声情報及び／又は文字情報を加えて電子カルテデータを作成しなければならなかった。

特開昭６０−４８０１１号公報 特開２００１−２８６４３９号公報 特開２００５−３３４６７８号公報

本発明は、以上の問題意識に基づいて完成されたものであり、操作性が良好かつコンパクトで、複数の観察者が同時に観察画像を視認するのが容易であり、しかも内視鏡術中に音声情報及び／又は文字情報を加えた電子カルテをリアルタイムで容易に作成できる電子内視鏡システムを得ることを目的とする。

本発明の電子内視鏡システムは、観察対象物の観察画像を撮像する撮像部を有する電子内視鏡と；前記電子内視鏡に対して音声情報及び／又は文字情報を入力可能な入力手段と；前記電子内視鏡とは別体で、表示部を有する外部機器と；を備え、前記電子内視鏡は、前記撮像部が撮像した観察画像と、前記入力手段が入力した音声情報及び／又は文字情報とを含む電子カルテデータを生成する生成部と；前記生成部が生成した電子カルテデータを保持する保持部と；前記保持部が保持する電子カルテデータを前記外部機器に無線送信する無線送信部と；を有することを特徴としている。

前記電子内視鏡は、前記外部機器からの電子カルテデータ更新指示信号を無線受信する無線受信部と、該無線受信部が無線受信した電子カルテデータ更新指示信号に従って前記保持部が保持する電子カルテデータを更新する更新部と、をさらに有することが好ましい。

前記入力手段は、前記電子内視鏡と前記外部機器の双方または一方に設けることができる。

前記外部機器は、電子内視鏡端末、ヘッドマウントディスプレイユニット、据え置き端末を含み、これら電子内視鏡端末、ヘッドマウントディスプレイユニット、据え置き端末に前記入力手段を設けてもよい。

前記電子カルテデータには、観察日時、患者情報、担当医情報、経過時間、整理番号、内視鏡特定情報（例えばシリアルナンバー）、内視鏡操作者、及び施設情報（例えば病院名や診療科名）の少なくとも１つを有するＩＤ情報を含ませることができる。

本発明の電子内視鏡システムは、前記入力手段が入力した音声情報を音声解析して文字情報に変換する音声解析手段をさらに有することが好ましい。

前記音声解析手段は、前記入力手段が入力した音声情報を分析して特徴パラメータを抽出する特徴パラメータ抽出部と、前記特徴パラメータの音響と発音記号との確率の対応を音響モデルとしてデータ化して保持する音響モデル保持部と、認識対象の単語をデータ化して保持する辞書と、単語の出現確率及び特定の単語の後につながる単語の出現確率を表す言語モデルと、単語の範囲を規定するルールグラマと、前記特徴パラメータ抽出部が抽出した特徴パラメータに基づいて、前記音響モデル保持部、辞書、言語モデル及びルールグラマが持つ音響情報及び言語情報に基づいて、前記入力手段が入力した音声情報を音声解析して文字情報に変換する認識デコーダと、を有するのが実際的である。

前記電子内視鏡は、該電子内視鏡の駆動電力を供給するバッテリユニットと、前記外部機器からの供給電圧によって前記バッテリユニットを充電する通信ソケットと、を有することができる。

前記電子内視鏡は、前記外部機器とは別の外部電源から該電子内視鏡への供給電圧を受け取るための外部電源ソケットをさらに有し、該外部電源ソケットが受け取った前記外部電源からの供給電圧と、前記通信ソケットによる前記外部機器からの供給電圧との双方によって前記バッテリユニットを充電することもできる。この場合、前記外部電源ソケットが受け取る前記外部電源からの供給電圧を、前記通信ソケットによる前記外部機器からの供給電圧よりも高くして、急速充電を行うようにしてもよい。

本発明の電子内視鏡システムは、前記電子内視鏡を挿通支持する挿通支持部と、該挿通支持部に前記電子内視鏡を挿通支持した状態で該電子内視鏡のバッテリユニットを無線充電する無線充電部とを備えた電子内視鏡ハンガーをさらに有していてもよい。

本発明の電子内視鏡システムは、前記観察対象物の３Ｄ画像を保持するサーバと、前記サーバが保持する前記観察対象物の３Ｄ画像からバーチャル内視鏡画像を生成するナビゲーション部とを有していてもよい。

本発明の電子内視鏡システムは、前記電子内視鏡の観察対象物の内部における位置情報を検出する位置情報検出手段をさらに有し、前記ナビゲーション部が、生成した前記バーチャル内視鏡画像に前記位置情報検出手段が検出した前記電子内視鏡の位置情報を合成して気管支診療計画を生成するようにしてもよい。

本発明によれば、操作性が良好かつコンパクトで、複数の観察者が同時に観察画像を視認するのが容易であり、しかも内視鏡術中に音声情報及び／又は文字情報を加えた電子カルテをリアルタイムで容易に作成できる電子内視鏡システムが得られる。

本発明の一実施形態に係る電子内視鏡システムの全体構成を示す図である。 電子内視鏡の内部構成を示す簡易ブロック図である。 電子カルテデータの一例を示す図である。 電子カルテデータの代表的な表示方法を示す図である。 電子カルテデータの検索領域を示す図である。 電子カルテデータの音声情報領域を示す図である。 音声変換手段及び音声解析手段の構成を示す図である。 音声解析手段の構成を示す図である。 音声解析手段による音声解析処理を示す第１の図である。 音声解析手段による音声解析処理を示す第２の図である。 図１１（Ａ）は把持操作部に防水キャップを嵌めていない状態を示す斜視図であり、図１１（Ｂ）は把持操作部に防水キャップを嵌めた状態を閉めず斜視図である。 図１２（Ａ）はバッテリユニットを内蔵した把持操作部を示す図であり、図１２（Ｂ）は電池パック式のバッテリユニットを着脱可能な把持操作部を示す図であり、図１２（Ｃ）は無線充電が可能なバッテリユニットを内蔵した把持操作部を示す図である。 バッテリユニットを充電するための充電回路ブロック図である。 バッテリユニットを充電するための別の実施形態を示す図である。 バッテリユニットを充電するための図１３に対応する充電回路ブロック図である。 電子内視鏡端末（外部機器）の外観構成を示す図である。 電子内視鏡端末（外部機器）の内部構成を示す簡易ブロック図である。 図１８（Ａ）は内蔵型又は取り外し可能な電池パック式のバッテリユニットの内部構成を示すブロック図であり、図１８（Ｂ）は無線充電式のバッテリユニットの内部構成を示すブロック図である。 ヘッドマウントディスプレイユニット（外部機器）の構成を示す図である。 据え置き端末（プロセッサ）の外観構成を示す図である。 据え置き端末（プロセッサ）の内部構成を示す簡易ブロック図である。 外部ディスプレイの構成を示す図である。 補助入力装置の構成を示す図である。 補助入力装置による操作画面の一例を示す図である。 図２５（Ａ）はボタンとジョイスティックを有する拡張コントローラ（入力手段）を装着した把持操作部を示す図であり、図２５（Ｂ）はタッチパネル式入力部を有する拡張コントローラ（入力手段）を装着した把持操作部を示す図である。 電子内視鏡ハンガーの構成を示す図である。 図２７（Ａ）は接合ピンを有する電子内視鏡の構成を示す斜視図であり、図２７（Ｂ）は電子内視鏡の接合ピンと電子内視鏡端末の接合部を接合した状態を示す斜視図である。 電力線通信を行うための電子内視鏡と電子内視鏡端末の内部構成を示すブロック図である。 電子内視鏡と電子内視鏡端末の接合部分の変形例を示す図である。 電子内視鏡の内部構成の変形例を示す簡易ブロック図である。 図１の電子内視鏡システムの全体構成の変形例を示す図である。 図１の電子内視鏡システムの全体構成の別の変形例を示す図である。 バーチャル内視鏡システムの全体構成を示す第１のブロック図である。 バーチャル内視鏡システムの全体構成を示す第２のブロック図である。 バーチャル内視鏡画像と気管支診療計画が表示された様子を示す図である。

図１ないし図３２を用いて、本発明の一実施形態に係る電子内視鏡システム１について説明する。図１に示すように、電子内視鏡システム１は、電子内視鏡１００、電子内視鏡端末（外部機器）２００、ヘッドマウントディスプレイユニット（外部機器）３００、据え置き端末（プロセッサ）４００、外部ディスプレイ５００、及び電子カルテシステム６００を備えている。電子内視鏡１００、電子内視鏡端末２００、ヘッドマウントディスプレイユニット３００及び据え置き端末４００は、各種の入力情報、保存データ、操作信号などを相互に無線通信可能である。本明細書で「無線通信」とは、伝送路を持たない電気通信を意味しており、電波通信のほか、光通信や音波通信を含む広い概念で使用する。

最初に電子内視鏡１００について説明する。図２は、電子内視鏡１００の内部構成を示す簡易ブロック図である。電子内視鏡１００は、操作者が把持する把持操作部１１０と、この把持操作部１１０から延出する可撓性のある挿入部１３０とを有する携帯型内視鏡である。電子内視鏡１００は、その把持操作部１１０の内部に、電子内視鏡１００の動作全般を制御する制御回路（生成部、更新部、タグ付与部）１１１を有している。

把持操作部１１０は、入力装置（入力手段）１１２と、通信ソケット１１３と、外部電源ソケット１１４と、バッテリユニット１１５と、表示灯１１６と、電子カルテデータ保持部（保持部）１１７と、通信アンテナ（無線送信部、無線受信部）１１８とを有している。
入力装置（入力手段）１１２は、把持操作部１１０のケースに設けられたボタン、ジョグダイヤル、ジョイスティック、十字キー、マイクなどで構成されており、操作者の入力操作により音声情報及び文字情報を入力する。入力装置１１２は、入力された音声情報及び文字情報を制御回路１１１に出力する。
通信ソケット１１３は、制御回路１１１を介して、電子内視鏡端末２００及びその他の外部機器との間で有線通信を行うための差込口（例えば、ＵＳＢコネクタ、メモリカードスロットなど）である。
外部電源ソケット１１４は、外部電源から供給電圧を受け取るための差込口であり、制御回路１１１を介して電子内視鏡１００の駆動電力を供給する。
バッテリユニット１１５は、制御回路１１１を介して、電子内視鏡１００の駆動電力を供給するものであり、内蔵バッテリ１１５ａと充電電流制御回路１１５ｂを有している。内蔵バッテリ１１５ａは、例えば、リチウムイオン電池やニッケル水素電池などの二次電池、キャパシタ、一次電池、燃料電池、あるいはこれらを併用したものである。充電電流制御回路１１５ｂは、制御回路１１１を介して内蔵バッテリ１１５ａの充電電流を制御する。バッテリユニット１１５には、内蔵バッテリ１１５ａの劣化を検出するために、ひずみゲージ、電圧モニタ、タイマ回路、温度センサなどが内蔵されている。バッテリユニット１１５は、把持操作部１１０の外部に取り外し可能に設けられていてもよい（ポータブル予備電源）。なお、内蔵バッテリ１１５ａの数は１個に限定されず、２個以上であってもよい。
表示灯１１６は、制御回路１１１による制御の下で、電子内視鏡１００への供給電圧（駆動電力）の減少、充電の状況（満充電や充電切れ）、バッテリユニット１１５の劣化などの情報を表示する。
電子カルテデータ保持部１１７は、制御回路１１１が生成又は更新した患者の診療録である電子カルテデータを保持する。
通信アンテナ１１８は、制御回路１１１の制御の下で、電子内視鏡端末２００、ヘッドマウントディスプレイユニット３００、及び据え置き端末４００との間で、電子カルテデータ保持部１１７が保持する電子カルテデータ及びその他の各種の操作信号（例えば、電子カルテデータ更新指示信号、フリーズやエンハンス等の画像処理指示信号）の無線通信を行う。

挿入部１３０は、その先端面に露出する対物レンズ１３１と、この対物レンズ１３１の後方に位置し、対物レンズ１３１を介して入射した被写体光束（観察画像）を撮像するＣＣＤユニット（撮像部）１３２とを有している。ＣＣＤユニット１３２は、撮像した観察画像データを制御回路１１１に伝送する。
挿入部１３０は、その先端面に露出する配光レンズ１３３と、この配光レンズ１３３の後方に位置するＬＥＤ１３４とを有している。ＬＥＤ１３４は制御回路１１１を介して供給された電力によって照明光を発し、この照明光は配光レンズ１３３によって電子内視鏡１００の外部に出射される。

制御回路（生成部）１１１は、ＣＣＤユニット１３２から伝送された観察画像データと、入力装置１１２から入力された音声情報及び文字情報とを合成した電子カルテデータを生成する。制御回路１１１は、生成した電子カルテデータを電子カルテデータ保持部１１７に保持させる。
制御回路（更新部）１１１は、通信アンテナ１１８を介して、電子内視鏡端末２００、ヘッドマウントディスプレイユニット３００又は据え置き端末４００から電子カルテデータ更新指示信号が入力すると、その電子カルテデータ更新指示信号に従って、電子カルテデータ保持部１１７が保持する電子カルテデータを更新する。

図３は電子カルテデータの一例を示している。この電子カルテデータは、ＩＤ情報ＥＣ１と、動画情報ＥＣ２と、音声情報ＥＣ３と、テキスト化情報ＥＣ４と、静止画情報ＥＣ５とで構成されている。これらの情報ＥＣ１−ＥＣ５は電子内視鏡端末２００の表示装置２０８（後述）やヘッドマウントディスプレイユニット３００の観察窓３０３（後述）に表示され、表示装置２０８上や観察窓３０３上で閲覧を希望するものに（入力装置１１２などを利用することにより）カーソルを合わせてクリックすることによりその情報を閲覧することができる。
ＩＤ情報ＥＣ１は、観察日時、患者情報、担当医（ＤＲ）情報、経過時間、整理番号、内視鏡特定情報（例えばシリアルナンバー）、内視鏡操作者、及び施設情報（例えば病院名や診療科名）などを含む。動画情報ＥＣ２と静止画情報ＥＣ５は、ＣＣＤユニット１３２から伝送された術中の撮影画像であり、そのヘッダーにはＩＤ情報ＥＣ１が組み込まれていてもよい。音声情報ＥＣ３は、入力装置１１２から入力された音声情報であり、例えば、内視鏡術中に音声入力された病変部についての所見を含む。テキスト化情報ＥＣ４は、入力装置１１２から入力された文字情報又は音声情報ＥＣ３を音声解析によりテキスト化した文字情報であり、例えば、内視鏡術中に音声入力又は文字入力された病変部についての所見を含む。

図４は電子カルテデータの代表的な表示方法を示している。この表示方法では、現在の内視鏡画像、電子カルテデータ及びその他のデータなどの複数のデータを同時に１画面上に表示している。図４の表示方法では、基本情報領域ＡＲ１と、内視鏡画像領域ＡＲ２と、サブ画面領域ＡＲ３と、検索領域ＡＲ４と、音声情報領域ＡＲ５とが同時に１画面上に表示されている。
基本情報領域ＡＲ１には、観察日時、患者情報、担当医（ＤＲ）情報、経過時間、整理番号などが表示される。内視鏡画像領域ＡＲ２には、ＣＣＤユニット１３２から伝送された術中の撮影画像の動画又は静止画が表示される。サブ画面領域ＡＲ３には通常時は何も表示されず、例えばフリーズ操作を行った時に、内視鏡画像領域ＡＲ２に静止画が表示され、サブ画面領域ＡＲ３に動画が表示される。あるいは、内視鏡画像領域ＡＲ２に術中に録画された動画やＸ線透視画像を表示させて、サブ画面領域ＡＲ３に現在の内視鏡画像を表示させる使用態様も可能である。内視鏡画像領域ＡＲ２、サブ画面領域ＡＲ３に表示させる画像が動画である場合には、早送り、巻き戻しも可能である。
また、サブ画面領域ＡＲ３にＸ線透視画像を表示させても良い。
検索領域ＡＲ４は、図５に示すように入力欄ＡＲ４−１と検索ボタンＡＲ４−２とで構成されている。入力装置１１２によって入力欄ＡＲ４−１に検索文字を入力し、検索ボタンＡＲ４−２にカーソルを合わせてクリックすることにより、電子カルテデータ中の検索文字に該当する部分を抽出することができる。例えば、入力装置１１２によって入力欄ＡＲ４−１に「病変部」と入力すると、電子カルテデータ中の観察画像データの中から、音声情報としての「ビョウヘンブ」又は文字情報としての「病変部」が入力された時点の前後に亘る所定時間（例えば１分、２分）の観察画像を抽出して内視鏡画像領域ＡＲ２で視認することができる。また、この所定時間に入力装置１１２から入力された文字情報を抽出して観察画像と一緒に内視鏡画像領域ＡＲ２で視認できるようにしてもよい。
音声情報領域ＡＲ５には、入力装置１１２から入力された音声情報を音声解析によりテキスト化した文字情報が表示される。その際、図６に示すように、検索領域ＡＲ４の操作によって抽出した所定時間に入力された音声情報が、シークバーＡＲ５−１と経過時間（タイムスタンプ）ＡＲ５−２とともに時系列的に文字情報に変換されて内容欄ＡＲ５−３に表示される。シークバーＡＲ５−１をポインタＡＲ５−４で操作することにより、過去の内容の電子カルテデータを閲覧することができる。キャレットＡＲ５−５の位置をポインタＡＲ５−４で合わせて入力装置１１２を操作することにより、内容欄ＡＲ５−３に表示された電子カルテデータの文字情報を編集することができる。入力中（あるいは編集中）の文字情報は、他の情報よりも大きなフォントで内容欄ＡＲ５−３に表示してもよい。内容欄ＡＲ５−３に表示される文字情報は、経過時間やその内容によって色を変えるようにしてもよい。例えば、文字情報の内容が正しい（誤変換ではない）ときは白色で表示し、文字情報の内容に誤りがある（誤変換である）ときは赤色で表示し、現在編集中で未確定であるときは黄色で表示してもよい。

図７は把持操作部１１０に設けた本実施形態の音声変換手段１１９及び音声解析手段１２０の構成を示している。この音声変換手段１１９及び音声解析手段１２０は、図２の簡易ブロック図における制御回路１１１の一部として設けられている。
音声変換手段１１９は、入力装置１１２から入力された音声情報に音声圧縮処理を施して制御回路１１１に出力する。
音声解析手段１２０は、入力装置１１２から入力された音声情報を音声解析によりテキスト化した文字情報に変換して制御回路１１１に出力する。音声解析手段１２０は入力手段１１２の操作によってオンオフの切り替えが可能である。

図８は音声解析手段１２０の構成を示している。音声解析手段１２０は、特徴パラメータ抽出部１２０ａと、音響モデル保持部１２０ｂと、辞書１２０ｃと、言語モデル１２０ｄと、ルールグラマ１２０ｅと、認識デコーダ１２０ｆとを有している。
特徴パラメータ抽出部１２０ａは、入力された音声情報を分析して「特徴パラメータ」を抽出する。音響モデル保持部１２０ｂは、「特徴パラメータ」の音響と発音記号との確率の対応を「音響モデル」としてデータ化して保持している。辞書１２０ｃは、認識対象の単語（本実施形態では電子内視鏡システムに関連する医療用語を広く含む）をデータ化して保持している。言語モデル１２０ｄは、単語自体の出現確率や特定の単語の後に来る（つながる）単語の出現確率を表したものである。ルールグラマ１２０ｅは、単語の範囲を規定するものである。認識デコーダ１２０ｆは、特徴パラメータ抽出部１２０ａが抽出した「特徴パラメータ」に基づいて、音響モデル保持部１２０ｂ、辞書１２０ｃ、言語モデル１２０ｄ及びルールグラマ１２０ｅが持つ音響情報及び言語情報を総合的に判断して、入力装置１１２から入力された音声情報を音声解析によりテキスト化した文字情報に変換する。具体的に認識デコーダ１２０ｆは、特徴パラメータ抽出部１２０ａで抽出した「特徴パラメータ」が、音響モデル保持部１２０ｂ、辞書１２０ｃ、言語モデル１２０ｄ及びルールグラマ１２０ｅが持つ音響情報及び言語情報と同じか又はある一定程度に近い場合に、その「特徴パラメータ」により決定される文字情報のステータスを自動で確定する。例えば、特徴パラメータ抽出部１２０ａが抽出した特徴パラメータが「ビョウヘンブ」、「ギョウヘンブ」又は「ビョウヘング」であれば、認識デコーダ１２０ｆは文字情報のステータスとして「ビョウヘンブ」に変換する。また認識デコーダ１２０ｆは、テキスト化した文字情報を漢字変換するときに、過去に確定された単語、文節から最も頻繁に確定された候補と、それ以外で確定された単語、文節の候補との間にある一定以上の差がある場合には、最も頻繁に確定された候補を選択して漢字変換する。

図９に示すように、音声解析手段１２０で変換された文字情報は、１つの経過時間もしくは所定の非入力期間（ブランク）に対して一文の文字情報が対応付けられて表示および保存される。一文の文字情報は文節ごとに区切られており、文節ごとに正誤情報受付状態（つまり、文節の内容が正しいときはその文節を確定し、文節の内容が誤っているときはその文節を修正できる状態）とすることができる。各経過時間における一文の文字情報は、正誤情報の入力が行われ又は正誤情報の入力が一定時間経っても行われないことで確定される。正誤情報の入力は、内視鏡術者が電子内視鏡１００の入力装置１１２を介してリアルタイムで行ってもよいし、あるいは補助者が専用の入力装置やフットスイッチなどの外部入力装置を介してリアルタイムで行ってもよい。

図９、図１０を用いて正誤情報受付状態における正誤入力処理を説明する。図９、図１０に示すように、音声解析手段１２０は、電子内視鏡１００の入力装置１１２（あるいは、いずれも後述の電子内視鏡端末２００の入力装置２０３、ヘッドマウントディスプレイユニット３００のマイク３０１、据え置き端末４００の入力装置４０２）から入力した音声情報を時系列的に文字情報に変換する（リアルタイムで文章が生成される）。変換された文字情報は、電子内視鏡端末２００の表示装置２０８やヘッドマウントディスプレイユニット３００の観察窓３０３に表示される。その際、最新の文節が自動的に正誤情報受付状態となり、その正誤情報受付状態の文節にキャレットの位置が合わせられ、又はその正誤情報受付状態の文節の文字情報が背景とは明暗を反転した状態で点滅させられることで強調表示される。そして電子内視鏡１００の入力装置１１２又は外部入力装置を操作することで、正誤情報受付状態の文節の正入力状態、誤入力状態、未確定状態を順次処理していく。つまり、正入力状態の文節はそのまま確定させ、誤入力状態又は未確定状態の文節に対しては、漢字の再変換、文字の追加入力、削除、文節あるいは文節中に含まれる任意の文字列や特定の単語（以下、「文節等」と呼ぶ）の区切りを変えるなどの再変換を行ってから確定させる。このとき、例えば、確定した文字情報の内容が正しい（誤変換ではない）ときはその文節が白色で表示され、確定した文字情報の内容に誤りがある（誤変換である）ときはその文節が赤色で表示され、文字情報を編集中で未確定であるときはその文節が黄色で表示される。

制御回路（タグ付与部）１１１は、図示しないタグ付与ボタンを操作することで、特定の時点（現在または過去）で入力された音声情報及びこの音声情報を変換した文字情報（文節等）、並びに特定の時点で撮影された画像情報（内視鏡画像やＸ線画像）に対して、時間軸上の識別マーク（タグ）を付与する。
例えば、制御回路（タグ付与部）１１１は、音声情報に対しては音量を大きくすることで識別マーク（タグ）を付与し、文字情報（文節等）に対しては下線（アンダーライン）を付与するような強調表示を行うことで識別マーク（タグ）を付与し、画像情報（内視鏡画像やＸ線画像）に対しては画像中に注意喚起を促すマークを含ませるような強調表示を行うことで識別マーク（タグ）を付与する。勿論、識別マーク（タグ）を付与する態様はこれに限定されない。
これにより、術者はリアルタイムで時間軸上の特定の時点（現在または過去）を選択して、その特定の時点における音声情報、文字情報（文節等）及び画像情報（内視鏡画像やＸ線画像）に対して一括して識別マークを付与することができる。
そして、検査後に、時間軸上を遡って識別マーク（タグ）を検索することで、識別マーク（タグ）を付与した特定の時点における音声情報、文字情報（文節等）及び画像情報（内視鏡画像やＸ線画像）を電子カルテデータから再生することができる。その際、一定の間隔、例えば、識別マーク（タグ）を付与した特定の時点を含む所定時間（例えば前後２０秒間）の音声情報、文字情報（文節等）及び画像情報（内視鏡画像やＸ線画像）を電子カルテデータから再生するようにしてもよい。

これに対し、術者が時間軸上の特定の時点を選択することなく、時間軸上の全てのタイムコード（現在及び過去のみならず未来のタイムコードも含む）に任意に識別マーク（タグ）を付与することで、そのタイムコードに対応する音声情報、文字情報（文節等）及び画像情報（内視鏡画像やＸ線画像）を自動的に連動させる態様も可能である。これにより、術者が何らの入力操作を伴うことなく時間軸上のタイムコードに識別マーク（タグ）を付与できるため、電子内視鏡システムの利便性を飛躍的に向上させることができる。また、時間軸上のタイムコードに付与された識別マーク（タグ）及びこれに連動する情報の確認は、タイムコードベースで一つ以上の情報を専用画面に表示して行うことができる。また、任意の情報にタグを付与し、同一のタイムコードを持つ他の情報と連動させることもできる。

制御回路１１１は、音声解析手段１２０が変換して確定した文字情報から識別マーク（タグ）を抽出する機能を備えていてもよい。また、この抽出機能は、あいまいな検索も可能であることが好ましい。この抽出機能により、文字情報における登録済みの文字列の頻出度がわかり、病変部等の疾患がどの程度存在するかの割合を把握することができる。

上記の識別マーク（タグ）は、１つのみならず、マークの形態を変更することで複数設定可能である。例えば、文字情報（文節等）に識別マーク（タグ）を付与するときには、下線を棒線、点線、波線、太線と変更することで複数の識別マーク（タグ）に対応することができる。

図１１に示すように、電子内視鏡１００の把持操作部１１０のケースには、図２に示した通信ソケット１１３、表示灯１１６及び通信アンテナ１１８の他に、アングルノブ１２２と、サクションバルブ１２３と、４つのリモートボタン１２４と、防水キャップ１２５とが設けられている。
アングルノブ１２２は、その回動操作に応じて挿入部１３０の先端付近の一部領域の湾曲状態を変化させる。サクションバルブ１２３には図示を省略した吸引手段を着脱可能であり、吸引手段を動作させると負圧が電子内視鏡１００の内部管路から挿入部１３０の先端部に設けた吸引ノズル（図示せず）に及び、被検者の体液等がこの吸引ノズルを通して吸引される。リモートボタン１２４は、電子画像処理用の制御ボタンであり、その押圧操作によってテレビモニタ上の画面を静止（フリーズ）させる操作、測光パターン（平均測光やピーク測光）の切換操作、画像処理の切替操作、ビデオや光磁気ディスク等の画像記録媒体に静止画像や動画を記録させる操作が行われる。防水キャップ１２５は把持操作部１１０のケースに対して着脱可能であり、ケースに対して装着されることにより通信ソケット１１３への水分の付着を防止する。防水キャップ１２５にはロックスイッチ１２５ａがスライド自在に設けられている（図１１（Ｂ））。このロックスイッチ１２５ａがロック位置に位置するときは把持操作部１１０の通信ソケット１１３の近傍に設けたロックピン１２５ｂ（図１１（Ａ））によって防水キャップ１２５のケースに対する装着状態が保持され、ロックスイッチ１２５ａをアンロック位置までスライドさせると、ロックピン１２５ｂによるロックが解除され防水キャップ１２５がケースから取り外し可能になる。

図１２（Ａ）−（Ｃ）は、把持操作部１１０とバッテリユニット１１５を示している。図１２（Ａ）に示すように、電子内視鏡１００の把持操作部１１０内には内蔵バッテリ１１５ａと充電電流制御回路１１５ｂを備えるバッテリユニット１１５が内蔵されている。バッテリユニット１１５は図１２（Ｂ）、図１２（Ｃ）の態様で実施することも可能である。図１２（Ｂ）は、電子内視鏡１００の把持操作部１１０に対して電池パック方式のバッテリユニット１１５を着脱可能に取り付けた例である。図１２（Ｃ）は、電子内視鏡１００の把持操作部１１０に対して、内蔵バッテリ１１５ａと充電電流制御回路１１５ｂに加えて無線充電を行うための電気伝送アンテナ１１５ｃを備えた電池パック方式のバッテリユニット１１５を着脱可能に取り付けた例である。

図１３は、図１２（Ａ）、（Ｂ）のバッテリユニット１１５を充電するための充電回路ブロック図である。図１３に示すように、バッテリユニット１１５の内蔵バッテリ１１５ａは、充電電流制御回路１１５ｂを介した通信ソケット１１３に接続された入力電源(1)１１３ａ（電子内視鏡端末２００及びその他の外部機器）からの供給電圧によって充電される。バッテリユニット１１５の充電状態は表示灯１１６で表示される。

図１４は、図１２（Ａ）のバッテリユニット１１５を充電するための別の実施形態を示している。この別の実施形態では、電子内視鏡１００の外部電源ソケット１１４に入力電源(2)１１４ａ（コンセント等の外部電源）に接続されたケーブルのプラグを接続して、この入力電源(2)１１４ａから電子内視鏡１００への供給電圧を受け取るようにしている。

図１５は、図１４のバッテリユニット１１５を充電するための充電回路ブロック図である。図１５に示すように、バッテリユニット１１５の内蔵バッテリ１１５ａは、通信ソケット１１３（及び充電電流制御回路１１５ｂ）を経由した入力電源(1)１１３ａからの供給電力と、外部電源ソケット１１４（及び充電電流制御回路１１５ｂ）を経由した入力電源(2)１１４ａからの供給電圧とによって充電される。バッテリユニット１１５の充電状態は表示灯１１６で表示される。
入力電源(1)１１３ａによる供給電圧と、入力電源(2)１１４ａから受け取る供給電圧との間には、所定の電圧差を設定してもよい。例えば、後者の供給電圧を前者の供給電圧よりも高くすることによって、バッテリユニット１１５の内蔵バッテリ１１５ａを急速充電することが可能になる。この急速充電時には、安全のため、電子内視鏡１００による観察画像の撮像を行えない（臨床使用できない）ようにすることが好ましい。

続いて電子内視鏡端末（外部機器）２００について説明する。図１６、図１７は、電子内視鏡端末２００の構成を示している。図１７に示すように、電子内視鏡端末２００は、電子内視鏡端末２００の動作全般を制御する制御回路２０１と、この制御回路２０１を介して電子内視鏡端末２００の駆動電力を供給するバッテリユニット２０２とを有している。バッテリユニット２０２は、内蔵型あるいは取り外し可能な電池パック方式にあっては、図１８（Ａ）に示すように、内蔵バッテリ２０２ａと充電電流制御回路２０２ｂを有している。バッテリユニット２０２は、無線充電型にあっては、図１８（Ｂ）に示すように、内蔵バッテリ２０２ａと充電電流制御回路２０２ｂに加えて、無線充電を行うための電気伝送アンテナ２０２ｃを有している。なお、内蔵バッテリ２０２ａの数は１個に限定されず、２個以上であってもよい。

図１６、図１７に示すように、電子内視鏡端末２００は、入力装置（入力手段）２０３と、通信ソケット２０４と、外部電源ソケット２０５と、表示灯２０６と、通信アンテナ（無線通信部、無線受信部）２０７と、表示装置（表示部）２０８とを有している。
入力装置２０３は、電子内視鏡端末２００の表面に設けられたボタン、ジョグダイヤル、十字キー、マイクなどで構成されており、操作者の入力操作により音声情報及び文字情報を入力する。入力装置２０３は、入力された音声情報及び文字情報を制御回路２０１に出力する。
通信ソケット２０４は、電子内視鏡１００及びその他の外部機器との間で有線通信を行うための差込口（例えば、ＵＳＢコネクタ、メモリカードスロットなど）である。
外部電源ソケット２０５は、外部電源から供給電圧を受け取るための差込口であり、電子内視鏡端末２００の駆動電力を供給する。外部電源ソケット２００５は、例えばＵＳＢコネクタの形状とすることで、通信ソケット２０４の機能を持たせることも可能である。
表示灯２０６は、制御回路２０１による制御の下で、電子内視鏡端末２００への供給電圧（駆動電力）の減少、充電の状況（満充電や充電切れ）、バッテリユニット２０２の劣化などの情報を表示する。
通信アンテナ２０７は、制御回路２０１の制御の下で、電子内視鏡１００、ヘッドマウントディスプレイユニット３００、及び据え置き端末４００との間で、各種データ及び操作信号（例えばフリーズやエンハンス等の画像処理指示信号）の無線通信を行う。具体的に通信アンテナ２０７は、電子内視鏡１００の通信アンテナ１１８を介して、電子内視鏡１００の電子カルテデータ保持部１１７が保持する電子カルテデータを無線受信したり、電子内視鏡１００の制御部（生成部）１１１に向けて入力装置２０３で入力した音声情報及び文字情報を無線送信したり、電子内視鏡１００の制御部（更新部）１１１に向けて電子カルテデータ更新指示信号を無線送信する。また通信アンテナ２０７は、制御回路２０１の制御の下で、無線受信した電子カルテデータをさらにヘッドマウントディスプレイユニット３００及び据え置き端末４００に無線通信する。
表示装置２０８は、例えば、液晶ディスプレイ、有機ＥＬディスプレイ、ＣＲＴディスプレイである。表示装置２０８をタッチパネル方式にすれば、表示装置２０８に入力装置２０３の機能を持たせることも可能である。表示装置２０８を１つではなく複数設けて、その出力先を選択できるようにしてもよい。

制御回路２０１は、通信アンテナ２０７を通じて電子内視鏡１００の電子カルテデータ保持部１１７が保持する電子カルテデータを無線受信すると、その電子カルテデータに含まれる観察画像データに画像処理を施して、表示装置２０８に表示させる。つまり、図３、図４に示したような電子カルテデータが実際に表示装置２０８に表示され、内視鏡術者と補助者の複数の観察者が同時に電子カルテデータを視認できる。なお、制御回路２０１は、バッテリユニット２０２、外部電源ソケット２０５に接続された外部電源のいずれから電源供給を受けてもよい。

続いてヘッドマウントディスプレイユニット（外部機器）３００について説明する。図１９は、ヘッドマウントディスプレイユニット３００の構成を示している。ヘッドマウントディスプレイユニット３００は、術者、補助者の頭部に装着するヘッドホンタイプのユニットである。ヘッドマウントディスプレイ３００は、マイク（入力手段）３０１と、通信アンテナ（無線送信部、無線受信部）３０２と、観察窓（表示部）３０３と、一対のイヤーパッド３０４とを有している。
マイク３０１は、ヘッドマウントディスプレイユニット３００を頭部に装着したときに装着者の口元付近に位置し、装着者が発生した音声情報を入力（受信）する。
通信アンテナ３０２は、電子内視鏡１００、電子内視鏡端末２００、及び据え置き端末４００との間で、各種データ及び操作信号（例えばフリーズやエンハンス等の画像処理指示信号）の無線通信を行う。具体的に通信アンテナ３０２は、電子内視鏡１００の通信アンテナ１１８を介して、電子内視鏡１００の電子カルテデータ保持部１１７が保持する電子カルテデータを無線受信したり、電子内視鏡１００の制御部（生成部）１１１に向けてマイク３０１で入力した音声情報を無線送信したり、電子内視鏡１００の制御部（更新部）１１１に向けて電子カルテデータ更新指示信号を無線送信する。また通信アンテナ３０２は、無線受信した電子カルテデータをさらに電子内視鏡端末２００及び据え置き端末４００に無線通信する。
観察窓３０３は、例えば、ヘッドマウントディスプレイユニット３００を頭部に装着したときに装着者の右目の直前に位置する表示手段、液晶ディスプレイ、有機ＥＬディスプレイ、ＣＲＴである。また観察窓３０３は、液晶プロジェクタなどの投影型表示装置とそのスクリーン（透過して観察窓の奥側が見えることが望ましい）であったり、網膜に直接投影するような網膜ディスプレイであっても良い。観察窓３０３は、通信アンテナ３０２が電子内視鏡１００の電子カルテデータ保持部１１７が保持する電子カルテデータを無線受信すると、その電子カルテデータを表示する。つまり、図３、図４に示したような電子カルテデータが実際に観察窓３０３に表示され、ヘッドマウントディスプレイユニット３００の装着者が電子カルテデータを視認できる。観察窓３０３の表示内容や動作（例えば上下動などの位置調整）は、電子内視鏡１００、電子内視鏡端末２００及び据え置き端末４００からの指示信号に従って制御される。また、観察窓３０３の上下動などの位置調整は、足元に設置した不図示のフットスイッチを押下げすることにより行ってもよい。これにより術中に術者の両手がふさがっている場合でも、容易に観察窓３０３を上下動させて術者の所望の位置に調整することができる。
イヤーパッド３０４は、ヘッドマウントディスプレイユニット３００を頭部に装着したときに装着者の左右の耳にあてがわれる。イヤーパッド３０４は、例えば電子内視鏡１００の入力装置１１２又は電子内視鏡端末２００の入力装置２０３から入力した音声情報を出力し、出力された音声情報を装着者が聴くことができる。

続いて据え置き端末（プロセッサ）４００について説明する。図２０、図２１は、据え置き端末４００の構成を示している。図２０、図２１に示すように、据え置き端末４００は、制御回路４０１と、入力装置（入力手段）４０２と、通信ソケット４０３と、外部電源ソケット４０４と、表示灯４０５と、通信アンテナ４０６と、通信／処理部４０７とを有している。
制御回路４０１は、据え置き端末４００の動作全般を制御する。
入力装置４０２は、据え置き端末４００の表面に設けられたタッチパネルやマイクであり（図２０）、操作者の入力操作により音声情報及び文字情報を入力する。入力装置４０２は、入力された音声情報及び文字情報を制御回路４０１に出力する。
通信ソケット４０３は、外部機器との間で有線通信を行うための差込口（例えば、ＵＳＢコネクタ、メモリカードスロットなど）であり、外部表示装置と直接接続したり、キーボードなどの外部入力装置を接続したり、外部記録装置を接続する。
外部電源ソケット４０４は、外部電源から供給電圧を受け取るための差込口であり、制御回路４０１を介して据え置き端末４００の駆動電力を供給する。
表示灯４０５は、制御回路４０１による制御の下で、据え置き端末４００への供給電圧（駆動電力）の減少などの情報を表示する。
通信アンテナ４０６は、制御回路４０１の制御の下で、電子内視鏡１００、電子内視鏡端末２００、及びヘッドマウントディスプレイユニット３００との間で、各種データ及び操作信号（例えばフリーズやエンハンス等の画像処理指示信号）の無線通信を行う。具体的に通信アンテナ４０６は、電子内視鏡１００の通信アンテナ１１８を介して、電子内視鏡１００の電子カルテデータ保持部１１７が保持する電子カルテデータを無線受信したり、電子内視鏡１００の制御部（生成部）１１１に向けて入力装置４０２で入力した音声情報及び文字情報を無線送信したり、電子内視鏡１００の制御部（更新部）１１１に向けて電子カルテデータ更新指示信号を無線送信する。また通信アンテナ４０６は、制御回路４０１の制御の下で、無線受信した電子カルテデータをさらに電子内視鏡端末２００及びヘッドマウントディスプレイユニット３００に無線通信する。
通信／処理部４０７は、据え置き端末４００に有線又は無線で接続された電子カルテシステム６００とのインターフェースとして機能する。また通信／処理部４０７は、画像処理における演算機能や外部機器との通信機能を備えている。

図１（図２０）に示す据え置き端末４００は、図２２に示す受信アダプタ５０１を介して外部ディスプレイ５００に接続されている。外部ディスプレイ５００は、例えば、液晶ディスプレイ、有機ＥＬディスプレイ、ＣＲＴディスプレイである。
据え置き端末４００の制御回路４０１は、通信アンテナ４０６により電子内視鏡１００の電子カルテデータ保持部１１７が保持する電子カルテデータを無線受信すると、その電子カルテデータに含まれる観察画像データに画像処理を施して、外部ディスプレイ５００に表示させる。つまり、図３、図４に示したような電子カルテデータが実際に外部ディスプレイ５００に表示され、内視鏡術者と補助者の複数の観察者が同時に電子カルテデータを視認できる。

ここで、図５−図１０に示したような電子カルテデータの検索処理、音声解析処理、正誤入力処理は、電子内視鏡１００の入力装置１１２のみならず、電子内視鏡端末２００の入力装置２０３（タッチパネル方式の表示装置２０８）、又は据え置き端末４００の入力装置４０２を用いて行うこともできる。いずれの場合も、電子内視鏡端末２００の表示装置２０８、ヘッドマウントディスプレイユニット３００の観察窓３０３又は外部ディスプレイ５００に表示された電子カルテデータを見ながら、電子内視鏡１００の入力装置１１２、電子内視鏡端末２００の入力装置２０３（タッチパネル方式の表示装置２０８）又は据え置き端末４００の入力装置４０２を操作して、検索処理、音声解析処理、正誤入力処理を行うことになる。

本発明の電子内視鏡システム１は、付加的な構成要素として、図２３に示すように、文字情報を入力可能な補助入力装置（入力手段）７００を備えている。この補助入力装置７００は、操作者が片手で握った状態で操作でき、回転可能かつ押込操作可能な２つのジョグダイヤル７０１と、多方向に回転可能なジョイスティック７０２と、４つのボタン７０３と、トリガ７０４と、通信アンテナ７０５とを有している。通信アンテナ７０５は、入力した文字情報を電子内視鏡１００、電子内視鏡端末２００、ヘッドマウントディスプレイユニット３００及び据え置き端末４００に無線送信する。なお、補助入力装置７００はマイクなどの音声入力手段を備えていてもよい。
補助入力装置７００を用いて文字情報を入力する場合、図２４に示すような画面が例えば電子内視鏡端末２００の表示装置２０８や外部ディスプレイ５００に表示され、「文字入力欄」にキャレットを合わせて２つのジョグダイヤル７０１を回すことによりかな文字を選択して単語を入力し、ジョグダイヤル７０１を押し込むことにより単語（かな文字）を確定する。図２４では、一方のジョグダイヤル７０１を回したときに選択対象のかな文字がシフトする方向（図中の上下方向）を「ＪＤ１」で示し、他方のジョグダイヤル７０１を回したときに選択対象のかな文字がシフトする方向（図中の左右方向）を「ＪＤ２」で示している。さらに単語を確定した後にジョイスティック７０２を倒して変換（漢字変換、カタカナ変換）することで「予測変換候補表示欄」に予測変換候補の単語を表示させ、ジョイスティック７０２を押し込んだりトリガ７０４を引くことで確定させる。このとき例えば、ジョイスティック７０２を上方に倒すと通常変換が行われ、下方に倒すと過去の変換履歴に基づいた予測変換が行われる。また、ジョイスティック７０２を左右に倒すことでキャレットを移動させることができる。ボタン７０３はバックスペースや文字種の変更に用いられる。

本発明の電子内視鏡システム１は、付加的な構成要素として、図２５に示すように、電子内視鏡１００の把持操作部１１０の通信ソケット１１３に装着され、文字情報を入力可能な拡張コントローラ（入力手段）７１０を備えている。図２５（Ａ）の拡張コントローラ７１０は、６つのボタン７１１と、ジョイスティック７１２とを有している。図２５（Ｂ）の拡張コントローラ７１０は、タッチパネル式入力部７１３を有している。拡張コントローラ７１０によって電子内視鏡端末２００、ヘッドマウントディスプレイユニット３００及び据え置き端末４００を操作可能としてもよい。

本発明の電子内視鏡システム１は、付加的な構成要素として、図２６に示すように、充電機能付きの電子内視鏡ハンガー７２０を備えている。この電子内視鏡ハンガー７２０は、鉛直方向に延びるポール７２１と、このポール７２１の下端部に接続された３本又は４本の脚部を持つキャスター板７２２と、このキャスター板７２２の脚部の下面にそれぞれ接続されたロック機構付きキャスター７２３とを備えている。図２６ではキャスター板７２２の２本の脚部と２つのキャスター７２３のみを描いている。電子内視鏡ハンガー７２０は、キャスター７２３によって自在に走行することができる。
ポール７２１の外周には、ポール７２１と同軸に短円筒形状の昇降ホルダー７２４が嵌められている。昇降ホルダー７２４は、ポール７２１に対して回転自在及び軸方向移動自在である。この昇降ホルダー７２４には、その半径方向に貫通するねじ穴に、ホルダー固定ねじ７２５が螺合されている。このホルダー固定ねじ７２５を締めると、ホルダー固定ねじ７２５の先端面がポール７２１に押し当てられるため、昇降ホルダー７２４はポール７２１に対して所望の位置及び方向に固定することができる。一方、ホルダー固定ねじ７２５を緩めると、ホルダー固定ねじ７２５の先端面がポール７２１から離れるので、昇降ホルダー７２４はポール７２１に対して回転及び軸方向移動可能となる。
昇降ホルダー７２４には内視鏡支持アーム７２６が結合されており、この内視鏡支持アーム７２６に電子内視鏡１００を挿通支持する挿通支持部７２７が設けられている。内視鏡支持アーム７２６の挿通支持部７２７の近傍には、電プラグ７２８に接続された電源回路（無線充電部）７２９と電気伝送アンテナ（無線充電部）７３０が設けられている。これにより、電子内視鏡１００を挿通支持部７２７に挿通支持して電子内視鏡ハンガー７２０に装着した状態で、電子内視鏡１００のバッテリユニット１１５を無線充電することができる。なお、電源回路７２９に内部時計を内蔵して毎日の使用時間を記録及び解析することで、使用頻度が低い時間帯に自動的に電子内視鏡１００のバッテリユニット１１５を無線充電する機能を備えていてもよい。

このように本実施形態の電子内視鏡システム１は、観察対象物の観察画像を撮像する撮像部１３２を有する電子内視鏡１００と、この電子内視鏡１００に対して音声情報及び／又は文字情報を入力可能な入力手段（１１２、２０３、３０１、４０２、７００、７１０）と、電子内視鏡１００とは別体で、表示部（２０８、３０３）を有する外部機器（２００、３００）と、を備え、電子内視鏡１００は、撮像部１３２が撮像した観察画像と、入力手段（１１２、２０３、３０１、４０２、７００、７１０）が入力した音声情報及び／又は文字情報とを含む電子カルテデータを生成する生成部１１１と、この生成部１１１が生成した電子カルテデータを保持する保持部１１７と、この保持部１１７が保持する電子カルテデータを外部機器（２００、３００）に無線送信する無線送信部１１８とを有している。
この構成によれば、電子内視鏡１００と外部機器（２００、３００）を接続するケーブル類を省略しているため、電子内視鏡１００の操作性が良好であり、電子内視鏡システム１の全体をコンパクトにすることができる。
また、電子内視鏡１００に、撮像部１３２が撮像した観察画像と、入力手段（１１２、２０３、３０１、４０２、７００、７１０）が入力した音声情報及び／又は文字情報とを含む電子カルテデータを生成する生成部１１１と、この生成部１１１が生成した電子カルテデータを保持する保持部１１７とを設けたので、内視鏡術中に電子内視鏡１００の側で電子カルテデータをリアルタイムで作成して保持することができる。これにより、内視鏡術中に電子カルテデータが完成するので時間の短縮化を図ることができ、後日の電子カルテデータの確認が容易になる。また、電子内視鏡１００で電子カルテデータのファイリングが可能なのでデータの取扱いが容易であり、とりわけ患者の自宅に往診して電子内視鏡１００を使用するような場合に便利である。
さらに、電子内視鏡１００の保持部１１７が保持する電子カルテデータを無線送信部１１８によって外部機器（２００、３００）に無線送信し、外部機器（２００、３００）の表示部（２０８、３０３）で電子カルテデータを表示するため、術者と補助者を含む複数の観察者が同時に電子カルテデータ（観察画像）を視認することができる。

図２７（Ａ）、（Ｂ）は、電子内視鏡１００と電子内視鏡端末２００を接合して有線通信を可能に構成した変形例を示している。この変形例では、電子内視鏡１００の把持操作部１１０に接合ピン１２６を設け、電子内視鏡端末２００に接合部２０９を設け、この接合ピン１２６と接合部２０９を回動可能に接合することで電子内視鏡１００と電子内視鏡端末２００を有線通信可能に接合している。接合ピン１２６の外周には帯状の端子部が形成されており、電子内視鏡１００と電子内視鏡端末２００が相対回動しても両者の有線通信が維持される。有線通信の形式は、例えばＵＳＢ接続形式やIEEE1394形式などのシリアル通信形式やその他の種々の形式を用いることができる。特に電力線に通信用高周波を重畳する電力線通信形式を採用することで、露出端子の数を少なくすることができ、構成部品を少なくすることができる。なお、この有線通信方式においては、有線通信の系統を複数にして通信量を増加させたり、電波の漏洩を防ぐシールドを設けたり、アース端子を設けたり、クリック感、位置決め、ずれ防止のためにボールプランジャを設けてもよい。

この電力線通信方式においては、図２８に示すように、電子内視鏡１００が、変復調回路１２７ａとコンバータ１２７ｂからなる電力線搬送逓信用回路１２７を備えており、電子内視鏡端末２００が、変復調回路２１０ａとコンバータ２１０ｂからなる電力線搬送逓信用回路２１０を備えている。電子内視鏡１００（電子内視鏡端末２００）のコンバータ１２７ｂ（２１０ｂ）には、制御回路１１１（２０１）から電力線を通じて駆動電力が供給される。電子内視鏡１００（電子内視鏡端末２００）の変復調回路１２７ａ（２１０ａ）には、制御回路１１１（２０１）から情報信号線を通じて、電子カルテデータや各種の操作信号などの情報が入力される。

図２９は、電子内視鏡１００と電子内視鏡端末２００の接合部分の変形例を示している。この変形例では、電子内視鏡端末２００に接合部を備えたマウント部２１１を設けて、このマウント部２１１に電子内視鏡１００の接合ピン１２６（図２７（Ａ）、（Ｂ））を回動可能に接合させることで、電子内視鏡１００と電子内視鏡端末２００を有線通信可能に接合している。マウント部２１１には、電子内視鏡１００と電子内視鏡端末２００の電源線と信号線を中継する通信コネクタと信号線が備えられている。

図３０は、図２の電子内視鏡１００において、把持操作部１１０と挿入部１３０を取り外し可能に構成した変形例を示している。この変形例では、ＣＣＤユニット１３２とＬＥＤ１３４が把持操作部１１０の内部に設けられており、挿入部１３０の内部に画像伝送ファイバ／画像伝送レンズアレイ１３５と導光ファイバ１３６が設けられている。そして、対物レンズ１３１とＣＣＤユニット１３２が画像伝送ファイバ／画像伝送レンズアレイ１３５を経由して接続されており、配光レンズ１３３とＬＥＤ１３４が導光ファイバ１３６を経由して接続されている。

図３１は、電子内視鏡システム１の全体構成の変形例を示している。この変形例では、同一構成のヘッドマウントディスプレイユニット（外部機器）３００を２つ設けており、この２つのヘッドマウントディスプレイユニット３００の間で電子カルテデータや各種の操作信号を無線通信可能としている。勿論、ヘッドマウントディスプレイユニット３００の数は２つに限定されず３つ以上設けてもよい。ヘッドマウントディスプレイユニット３００の数を増やすことで、術者及び補助者が大人数になった場合にも対応でき、電子内視鏡システム１の利便性を高めることができる。さらに、複数のヘッドマウントディスプレイユニット３００を使用する場合においては、音声情報が入力可能な人を制限できるようにしてもよい。例えば、術者と補助者がヘッドマウントディスプレイユニット３００を使用している場合に、この２人のうち、術者の音声のみを入力することができるようにしてもよい。これにより複数人（術者と補助者）の音声の中から特定の人（術者）だけの音声を記録することができ、音声情報の抽出がしやすくなる。なお、音声情報を入力可能な人を識別するための方法として、例えば、特定の人（術者）の声に基づく音響的特徴をあらかじめデータベースに記憶しておき、入力した音声情報をこのデータベースに照合させて識別する方法を使用することができる。

図３２は、電子内視鏡システム１の全体構成の別の変形例を示している。この変形例では、ヘッドマウントディスプレイユニット３００に代えて、専ら音声情報を取得して電子内視鏡１００及び電子内視鏡端末２００に出力するマイク（音声入力装置）７４０を設けることで、電子内視鏡システム１の構成を簡易化している。

最後に、図３３ないし図３５を用いて、本発明の電子内視鏡システム１の利便性を向上させるためのバーチャル電子内視鏡システム８００について説明する。このバーチャル電子内視鏡システム８００は、従来のプロセッサ機能に加え、他の画像機器、計測機器、電子診療録と連動して画像を表示させ、データをやり取りし、他の機器を操作するものである。

図３３のバーチャル電子内視鏡システム８００は、サーバ８１０が、ＬＡＮ８２０を介して、位置情報検出手段８３０、プロセッサ（内視鏡センター）８４０及びナビゲーション部８５０とそれぞれ接続されている。バーチャル電子内視鏡システム８００の操作は、プロセッサ８４０に接続したキーボード、マウス、タッチパッドなどの各種の入力装置、又は上述した電子内視鏡１００の入力装置１１２、電子内視鏡端末２００の入力装置２０３若しくは据え置き端末４００の入力装置４０２によって行うことができる。
サーバ８１０は、図示しないＣＴ装置、ＭＲＩ装置等で予め撮影した観察対象物の画像や、その観察対象物の画像から三次元的に再構成された３Ｄ画像を保持している。ナビゲーション部８５０は、サーバ８１０にアクセスして、サーバ８１０が保持する観察対象物の３Ｄ画像からバーチャル内視鏡画像を生成する。
位置情報検出手段８３０は、電子内視鏡１００の観察対象物の内部における位置情報を検出する。位置情報検出手段８３０は、第１の例では、電子内視鏡１００に取り付けた磁気コイルで発生させた磁界を体外のアンテナで受信し、電子内視鏡１００の形状、先端位置、姿勢を検出する構成である。位置情報検出手段８３０は、第２の例では、電子内視鏡１００の先端部に取り付けた３次元加速度センサから電子内視鏡１００の先端位置、姿勢を計算して検出する構成である。位置情報検出手段８３０は、第３の例では、フラットパネルディテクタ（ＦＰＤ：Flat Panel Detector）などによって、図示しないＸ線撮影装置やＣＴ撮影装置、ＭＲＩ装置から得られたＸ線画像やＣＴ撮影画像、ＭＲＩ撮影画像を解析して、電子内視鏡１００の形状、先端位置、姿勢を検出する構成である。位置情報検出手段８３０は、第４の例では、体外に設けたＭＲ装置で発生する磁場分布を電子内視鏡１００に取り付けたコイルでセンシングして、電子内視鏡１００の位置、姿勢を検出する構成である。
そしてナビゲーション部８５０は、自身が生成したバーチャル内視鏡画像と、位置情報検出手段８３０が検出した電子内視鏡１００の位置情報とを合成して気管支診療計画（経路計画）を生成する。この気管支診療計画によれば、内視鏡術中において気管支の分岐での進行方向を容易に知ることができる。

図３４はバーチャル電子内視鏡システム８００の変形例を示している。この変形例では、ＬＡＮ８２０を介してサーバ８１０をプロセッサ８４０に接続し、このプロセッサ８４０に位置情報検出手段８３０とナビゲーション部８５０をそれぞれ接続している。なお、これら各構成要素の接続形式は、イントラネット、ＬＡＮ（有線、無線を問わない）のネットワーク経由の形式、プロセッサ８４０に設けたソケットに直接接続する形式、又はこれらの形式の混在型などの種々の変更が可能である。

図３５に示すように、ナビゲーション部８５０が生成したバーチャル内視鏡画像と気管支診療計画は、例えば上述した外部ディスプレイ５００に表示される。図３５では、外部ディスプレイ５００の画面右下にバーチャル内視鏡画像８５１が表示され、画面右上にバーチャル内視鏡画像８５１上で目的地マークと電子内視鏡１００の現在位置が視認できる気管支診療計画８５２が表示されている。外部ディスプレイ５００にはさらに、電子内視鏡１００による観察画像（メイン画像）８５３と、術前Ｘ線画像８５４と、術中Ｘ線画像８５５と、バーチャル断層画像８５６とが表示されている。バーチャル断層画像８５６は、バーチャル内視鏡画像８５１の断層画像である。バーチャル断層画像８５６は、電子内視鏡１００の先端の動きに追従させてもよい。

以上の構成のバーチャル電子内視鏡システム８００は、観察対象物の３Ｄ画像を保持するサーバ８１０と、電子内視鏡１００の観察対象物の内部における位置情報を検出する位置情報検出手段８３０と、サーバ８１０が保持する観察対象物の３Ｄ画像からバーチャル内視鏡画像を生成したり、生成したバーチャル内視鏡画像に位置情報検出手段８３０が検出した電子内視鏡１００の位置情報を合成して気管支診療計画（経路計画）を生成したりするナビゲーション部８５０とを備えているので、より高度で正確な内視鏡術と所見記録を行うことができる。

１ 電子内視鏡システム
１００ 電子内視鏡
１１０ 把持操作部
１１１ 制御回路（生成部、更新部、タグ付与部）
１１２ 入力装置（入力手段）
１１３ 通信ソケット
１１３ａ 入力電源(1)
１１４ 外部電源ソケット
１１４ａ 入力電源(2)（充電プラグ）
１１５ バッテリユニット
１１５ａ 内蔵バッテリ
１１５ｂ 充電電流制御回路
１１５ｃ 電気伝送アンテナ
１１６ 表示灯
１１７ 電子カルテデータ保持部（保持部）
１１８ 通信アンテナ（無線送信部、無線受信部）
１１９ 音声変換手段
１２０ 音声解析手段
１２０ａ 特徴パラメータ抽出部
１２０ｂ 音響モデル保持部
１２０ｃ 辞書
１２０ｄ 言語モデル
１２０ｅ ルールグラマ
１２０ｆ 認識デコーダ
１２２ アングルノブ
１２３ サクションバルブ
１２４ リモートボタン
１２５ 防水キャップ
１２５ａ ロックスイッチ
１２５ｂ ロックピン
１２６ 接合ピン
１２７ 電力線搬送逓信用回路
１２７ａ 変復調回路
１２７ｂ コンバータ
１３０ 挿入部
１３１ 対物レンズ
１３２ ＣＣＤユニット（撮像部）
１３３ 配光レンズ
１３４ ＬＥＤ
１３５ 画像伝送ファイバ／画像伝送レンズアレイ
１３６ 導光ファイバ
２００ 電子内視鏡端末（外部機器）
２０１ 制御回路
２０２ バッテリユニット
２０２ａ 内蔵バッテリ
２０２ｂ 充電電流制御回路
２０２ｃ 電気伝送アンテナ
２０３ 入力装置（入力手段）
２０４ 通信ソケット
２０５ 外部電源ソケット
２０６ 表示灯
２０７ 通信アンテナ（無線送信部、無線受信部）
２０８ 表示装置（表示部）
２０９ 接合部
２１０ 電力線搬送逓信用回路
２１０ａ 変復調回路
２１０ｂ コンバータ
２１１ マウント部
３００ ヘッドマウントディスプレイユニット（外部機器）
３０１ マイク（入力手段）
３０２ 通信アンテナ（無線送信部、無線受信部）
３０３ 観察窓（表示部）
３０４ イヤーパッド
４００ 据え置き端末（プロセッサ）
４０１ 制御回路
４０２ 入力装置（入力手段）
４０３ 通信ソケット
４０４ 外部電源ソケット
４０５ 表示灯
４０６ 通信アンテナ（無線送信部、無線受信部）
４０７ 通信／処理部
５００ 外部ディスプレイ
５０１ 受信アダプタ
６００ 電子カルテシステム
７００ 補助入力装置（入力手段）
７０１ ジョグダイヤル
７０２ ジョイスティック
７０３ ボタン
７０４ トリガ
７０５ 通信アンテナ
７１０ 拡張コントローラ（入力手段）
７１１ ボタン
７１２ ジョイスティック
７１３ タッチパネル式入力部
７２０ 電子内視鏡ハンガー
７２１ ポール
７２２ キャスター板
７２３ キャスター
７２４ 昇降ホルダー
７２５ ホルダー固定ねじ
７２６ 内視鏡支持アーム
７２７ 挿通支持部
７２８ 電源プラグ
７２９ 電源回路（無線充電部）
７３０ 電気伝送アンテナ（無線充電部）
７４０ マイク（音声入力装置）
８００ バーチャル電子内視鏡システム
８１０ サーバ
８２０ ＬＡＮ
８３０ 位置情報検出手段
８４０ プロセッサ（内視鏡センター）
８５０ ナビゲーション部
８５１ バーチャル内視鏡画像
８５２ 気管支診療計画（経路計画）
８５３ 観察画像（メイン画像）
８５４ 術前Ｘ線画像
８５５ 術中Ｘ線画像
８５６ バーチャル断層画像

Claims (15)

1. 観察対象物の観察画像を撮像する撮像部を有する電子内視鏡と；
   前記電子内視鏡に対して音声情報及び／又は文字情報を入力可能な入力手段と；
   前記電子内視鏡とは別体で、表示部を有する外部機器と；を備え、
   前記電子内視鏡は、
   前記撮像部が撮像した観察画像と、前記入力手段が入力した音声情報及び／又は文字情報とを含む電子カルテデータを生成する生成部と；
   前記生成部が生成した電子カルテデータを保持する保持部と；
   前記保持部が保持する電子カルテデータを前記外部機器に無線送信する無線送信部と；
   を有することを特徴とする電子内視鏡システム。
2. 請求項１記載の電子内視鏡システムにおいて、
   前記電子内視鏡は、前記外部機器からの電子カルテデータ更新指示信号を無線受信する無線受信部と、該無線受信部が無線受信した電子カルテデータ更新指示信号に従って前記保持部が保持する電子カルテデータを更新する更新部と、をさらに有する電子内視鏡システム。
3. 請求項１または２記載の電子内視鏡システムにおいて、
   前記入力手段は、前記電子内視鏡と前記外部機器の双方または一方に設けられている電子内視鏡システム。
4. 請求項１ないし３のいずれか１項記載の電子内視鏡システムにおいて、
   前記外部機器は電子内視鏡端末を含み、該電子内視鏡端末に前記入力手段が設けられている電子内視鏡システム。
5. 請求項１ないし４のいずれか１項記載の電子内視鏡システムにおいて、
   前記外部機器はヘッドマウントディスプレイユニットを含み、該ヘッドマウントディスプレイユニットに前記入力手段が設けられている電子内視鏡システム。
6. 請求項１ないし５のいずれか１項記載の電子内視鏡システムにおいて、
   前記外部機器は据え置き端末を含み、該据え置き端末に前記入力手段が設けられている電子内視鏡システム。
7. 請求項１ないし６のいずれか１項記載の電子内視鏡システムにおいて、
   前記電子カルテデータは、観察日時、患者情報、担当医情報、経過時間、整理番号、内視鏡特定情報、内視鏡操作者、及び施設情報の少なくとも１つを有するＩＤ情報を含む電子内視鏡システム。
8. 請求項１ないし７のいずれか１項記載の電子内視鏡システムにおいて、
   前記入力手段が入力した音声情報を音声解析して文字情報に変換する音声解析手段をさらに有する電子内視鏡システム。
9. 請求項８記載の電子内視鏡システムにおいて、
   前記音声解析手段は、
   前記入力手段が入力した音声情報を分析して特徴パラメータを抽出する特徴パラメータ抽出部と、
   前記特徴パラメータの音響と発音記号との確率の対応を音響モデルとしてデータ化して保持する音響モデル保持部と、
   認識対象の単語をデータ化して保持する辞書と、
   単語の出現確率及び特定の単語の後につながる単語の出現確率を表す言語モデルと、
   単語の範囲を規定するルールグラマと、
   前記特徴パラメータ抽出部が抽出した特徴パラメータに基づいて、前記音響モデル保持部、辞書、言語モデル及びルールグラマが持つ音響情報及び言語情報に基づいて、前記入力手段が入力した音声情報を音声解析して文字情報に変換する認識デコーダと、
   を有する電子内視鏡システム。
10. 請求項１ないし９のいずれか１項記載の電子内視鏡システムにおいて、
    前記電子内視鏡は、
    該電子内視鏡の駆動電力を供給するバッテリユニットと、
    前記外部機器からの供給電圧によって前記バッテリユニットを充電する通信ソケットと、
    を有する電子内視鏡システム。
11. 請求項１０記載の電子内視鏡システムにおいて、
    前記電子内視鏡は、前記外部機器とは別の外部電源から該電子内視鏡への供給電圧を受け取るための外部電源ソケットをさらに有し、該外部電源ソケットが受け取った前記外部電源からの供給電圧と、前記通信ソケットによる前記外部機器からの供給電圧との双方によって前記バッテリユニットを充電する電子内視鏡システム。
12. 請求項１１記載の電子内視鏡システムにおいて、
    前記外部電源ソケットが受け取る前記外部電源からの供給電圧を、前記通信ソケットによる前記外部機器からの供給電圧よりも高くした電子内視鏡システム。
13. 請求項１ないし１２のいずれか１項記載の電子内視鏡システムにおいて、
    前記電子内視鏡を挿通支持する挿通支持部と、該挿通支持部に前記電子内視鏡を挿通支持した状態で該電子内視鏡のバッテリユニットを無線充電する無線充電部とを備えた電子内視鏡ハンガーをさらに有する電子内視鏡システム。
14. 請求項１ないし１３のいずれか１項記載の電子内視鏡システムにおいて、
    前記観察対象物の３Ｄ画像を保持するサーバと、
    前記サーバが保持する前記観察対象物の３Ｄ画像からバーチャル内視鏡画像を生成するナビゲーション部と、
    を有する電子内視鏡システム。
15. 請求項１４記載の電子内視鏡システムにおいて、
    前記電子内視鏡の観察対象物の内部における位置情報を検出する位置情報検出手段をさらに有し、
    前記ナビゲーション部は、生成した前記バーチャル内視鏡画像に前記位置情報検出手段が検出した前記電子内視鏡の位置情報を合成して気管支診療計画を生成する電子内視鏡システム。

Images