[go: up one dir, main page]

JP5308973B2 - 医用画像情報表示装置および方法並びにプログラム - Google Patents

医用画像情報表示装置および方法並びにプログラム Download PDF

Info

Publication number
JP5308973B2
JP5308973B2 JP2009214231A JP2009214231A JP5308973B2 JP 5308973 B2 JP5308973 B2 JP 5308973B2 JP 2009214231 A JP2009214231 A JP 2009214231A JP 2009214231 A JP2009214231 A JP 2009214231A JP 5308973 B2 JP5308973 B2 JP 5308973B2
Authority
JP
Japan
Prior art keywords
keyword
interpretation report
medical image
organ
common
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009214231A
Other languages
English (en)
Other versions
JP2011062283A (ja
Inventor
禎之 守屋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2009214231A priority Critical patent/JP5308973B2/ja
Priority to EP10176598A priority patent/EP2306355A3/en
Priority to US12/882,784 priority patent/US8423571B2/en
Publication of JP2011062283A publication Critical patent/JP2011062283A/ja
Application granted granted Critical
Publication of JP5308973B2 publication Critical patent/JP5308973B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本発明は、医用画像情報表示装置および方法並びにプログラムに関するものである。
近年、医療分野の画像診断においては、計算機支援画像診断（CAD；Computer Aided Diagnosis）により臓器の病変を自動的に検出する技術が発達し、正確にその病変領域あるいはその病変を有する臓器を把握して表示することが可能になった。特許文献１に示す技術では、肺野を表す医用画像から主要分岐構造を抽出することにより肺区域の解剖学的部位名称を決定する。特許文献２に示す技術では、被写体の断層画像の骨領域を抽出し、被写体の断層画像上に被写体の骨を投影した投影画像を重ねて表示することにより、病巣の位置と骨の位置関係から断層画像上の病巣の位置を正確に把握することができる。
そして、医師等の診断者は、このような抽出した臓器を表示した医用画像に基づいて診断を行い、診断結果を電子的な読影レポートに記載する。
特開２００９−４５２８６号公報 特開２００８−９３２５４号公報 特開２００５−３０１４５３号公報
しかし、これらの従来技術では、読影レポートの内容と医用画像の病変領域が関連付けて作成されていないため、医師等は、読影レポートに記載された病変を確認する際、対応する病変領域を医用画像から探す必要があった。また、逆に、医用画像上の病変から対応する読影レポートの記載を参照する際、読影レポートの対応する記載を探す必要があった。つまり、読影レポートと医用画像の対応関係を把握するために負荷が生じていた。
一方、特許文献３に示されるように、参照画像が読影レポートに記載された文字列にハイパーリンクによってリンク付けされた読影レポートが存在する。このような読影レポートでは、読影レポートと医用画像の対応関係を把握することが容易であるが、このような読影レポートを作成するには、作成される読影レポートに記載された文字列を多数の選択肢から選択して、そこに参照画像をドラッグアンドドロップするというリンク付け作業が必要となり、大きな負担となっていた。
そこで、本発明は、かかる課題に鑑み、読影レポートと医用画像とを容易に対応付けて、対応付けた情報を医用画像上に表示して、医用画像と読影レポートの対応関係を容易に把握できる医用画像情報表示装置を提供することを目的とする。
本発明による医用画像情報表示装置は、医用画像を取得して表示する医用画像表示手段と、前記医用画像に関する読影レポートを記憶する読影レポート記憶手段と、臓器または病変を表すキーワードの群からなる第一のキーワード群を記憶する第一のキーワード群記憶手段と、記憶された前記第一のキーワード群と一致する語句を前記読影レポートから検出し、検出した前記語句からなる第二のキーワード群を取得する第二のキーワード群取得手段と、記憶された前記第一のキーワード群が表す前記臓器または病変を前記医用画像から自動検出し、検出された前記臓器または病変に対応するキーワードからなる第三のキーワード群を取得する第三のキーワード群取得手段と、取得された前記第二のキーワード群と前記第三のキーワード群を比較して、両者が一致する共通キーワードを取得し、取得された該共通キーワードのそれぞれについて、該共通キーワードに対応する前記臓器または病変を対応付けたリンク情報を作成するリンク情報作成手段と、前記共通キーワードと、前記共通キーワードに対応する臓器または病変を表す指標を関連付けて表示するリンク情報表示手段とを備えたことを特徴とするものである。
本発明による医用画像情報表示方法は、医用画像を取得して表示し、前記医用画像に関する読影レポートを記憶し、臓器または病変を表すキーワードの群からなる第一のキーワード群を記憶し、記憶された前記第一のキーワード群と一致する語句を前記読影レポートから検出し、検出した前記語句からなる第二のキーワード群を取得し、記憶された前記第一のキーワード群が表す前記臓器または病変を前記医用画像から自動検出し、検出された前記臓器または病変に対応するキーワードからなる第三のキーワード群を取得し、取得された前記第二のキーワード群と前記第三のキーワード群を比較して、両者が一致する共通キーワードを取得し、取得された該共通キーワードのそれぞれについて、該共通キーワードに対応する前記臓器または病変を対応付けたリンク情報を作成し、前記共通キーワードと、前記共通キーワードに対応する臓器または病変を表す指標を関連付けて表示することを特徴とするものである。
本発明の医用読影画像情報表示プログラムは、コンピュータを、医用画像を取得して表示する医用画像表示手段と、前記医用画像に関する読影レポートを記憶する読影レポート記憶手段と、臓器または病変を表すキーワードの群からなる第一のキーワード群を記憶する第一のキーワード群記憶手段と、記憶された前記第一のキーワード群と一致する語句を前記読影レポートから検出し、検出した前記語句からなる第二のキーワード群を取得する第二のキーワード群取得手段と、記憶された前記第一のキーワード群が表す前記臓器または病変を前記医用画像から自動検出し、検出された前記臓器または病変に対応するキーワードからなる第三のキーワード群を取得する第三のキーワード群取得手段と、取得された前記第二のキーワード群と前記第三のキーワード群を比較して、両者が一致する共通キーワードを取得し、取得された該共通キーワードのそれぞれについて、前記共通キーワードに対応する前記臓器または病変を対応付けたリンク情報を作成するリンク情報作成手段と、該共通キーワードと、前記共通キーワードに対応する臓器または病変を表す指標を関連付けて表示するリンク情報表示手段として機能させることを特徴とするものである。
ここで、「臓器または病変を表すキーワード」における「臓器を表すキーワード」とは、臓器名、臓器名を表す別称または記号、もしくはそれらの略称のいずれかを含むものである。また、「病変を表すキーワード」とは、病名または病名を表す別称または記号、もしくはそれらの略称をいう。例えば、臓器を表すキーワードとして、肺、肝臓、骨、心臓を用いることができ、病変を表すキーワードとして、肺がん、肝細胞がん、肝のう胞、肝血管種、肝臓領域における出血、脳領域における出血、異常陰影、石灰化、血管異常、および、コンソリデーション、Ground-Glass Opacity(GGO)、Crazy-Paving、蜂巣状陰影、肺気腫陰影、粒状影等のびまん性肺疾患等を用いることができる。
ここで、「検出された臓器または病変」は、臓器または病変の位置を示す点として検出してもよいし、病変領域を示す領域として検出してもよい。
「自動検出」とは、計算機支援画像診断（CAD；Computer Aided Diagnosis）により画像処理によって医用画像から臓器または病変を検出することをいう。
前記リンク情報作成手段が、前記共通キーワードに加えて前記読影レポートに記載された前記共通キーワードの前後の語句を前記リンク情報にさらに対応付けるものであり、前記リンク情報表示手段が、前記共通キーワードに加えて前記前後の語句を表示するものであってもよい。
また、前記第三のキーワード群取得手段は、複数の前記キーワードに基づいて同じ臓器または病変が検出された場合に、前記複数のキーワードのうち最も下位の概念を表すキーワードを前記臓器または病変に対応するキーワードとするものであることが好ましい。
また、前記第二のキーワード群取得手段は、前記読影レポートから同じ臓器を表す複数の前記一致する語句が検出された場合、検出された前記複数の一致する語句のうち最も下位の概念を表す語句を検出した前記語句とするものであることが望ましい。
ここで「下位の概念を表す」とは、同じ臓器または病変を示すより小さい区分を差し、例えば、肺を表すキーワードであれば、「肺」、「右肺」、「右肺上葉」、「右肺上葉Ｓ１」の順に、より小さい区分で表されている。
さらに、前記読影レポートを表示する読影レポート表示手段と、前記共通キーワードを指定する共通キーワード指定手段をさらに備え、前記リンク情報作成手段は、前記リンク情報表示手段が表示した前記共通キーワードを、前記読影レポート内の共通キーワードとハイパーリンクによってリンク付けするものであり、前記読影レポート表示手段は、前記リンク情報表示手段が表示した前記共通キーワードの指定に応じて、前記読影レポートの全体を表示し、該読影レポート内の指定された前記共通キーワードを他の文章より強調表示するものであってもよい。
「強調表示」とは、指定された共通キーワードを、例えば、文字の着色または背景色の着色、下線、点滅、太字、書体、文字の大きさ、枠など周知の手法を用いて、指定されていない文字と識別できるように表示することをいう。
「共通キーワードの指定」とは、マウスやキーボードあるいはその他の入力装置によって共通キーワードを表す文字列が指定されることをいう。
また、本発明による医用画像情報表示装置は、複数の前記共通キーワードからなる共通キーワードリストを作成して表示するリスト表示手段をさらに備え、前記リンク情報表示手段は前記共通キーワードリストに表示された複数の共通キーワードのうちの一つの前記共通キーワードの指定に応じて、指定された該一つの共通キーワードに対応する前記臓器または病変を表す指標を表示するものであってもよい。
また、前記第二のキーワード群取得手段は、同一患者の複数の前記読影レポートから前記第二のキーワード群を検出するものであり、前記リンク情報作成手段は、前記リンク情報に、前記共通キーワードを含む読影レポートを特定する読影レポート特定情報をさらに対応付けてもよい。
「読影レポートを特定する読影レポート特定情報」とは、複数読影レポートがある場合に、どの読影レポートかを明示できる情報をいい、例えば、読影レポートのファイル名、読影レポートの作成日、などがある。
前記リンク情報作成手段は、前記複数の読影レポートに同じ共通キーワードに対応する語句を検出したとき、該複数のレポートのうち最新の読影レポートに記載された前記共通キーワードと、該最新の読影レポートを特定する読影レポート特定情報とを前記リンク情報に対応付けてもよい。
前記リンク情報生成手段は、複数の前記読影レポートに同じ共通キーワードに対応する語句を検出したとき、検出された前記複数の読影レポートを特定する読影レポート特定情報からなる読影レポートリストを作成し、作成された該読影レポートリストに記載された前記読影レポート特定情報と該読影レポート特定情報に対応する読影レポートに記載された前記同じ共通キーワードをそれぞれハイパーリンクでリンク付けするものであり、前記リスト表示手段は、前記読影レポートリストをさらに表示するものであってもよい。
また、前記第三のキーワード群取得手段は、前記第一のキーワード群に替えて、前記第二のキーワード群が表す前記臓器または病変を前記医用画像から自動検出するものであってもよい。
また、前記第三のキーワード群取得手段は、前記第一のキーワード群の一部のキーワードについて、該一部のキーワードが前記第二のキーワード群に含まれるキーワードと一致する場合にのみ、該キーワードが表す臓器または病変の検出を行うものであって
もよい。
本発明による画像情報表示装置および方法ならびにプログラムによれば、共通キーワードと、この共通キーワードに対応する臓器または病変を表す指標を関連付けて表示することにより、読影レポートに記載された臓器または病変を表すキーワードと医用画像から検出された臓器または病変を医用画像の情報を自動的に対応付けて表示することができるため、読影レポートに記載された臓器または病変を表す文字列と医用画像上の臓器または病変を、対応付ける作業を負担することなく容易に対応付けることができ、さらに、作成された読影レポートに記載された記載された臓器または病変を表す文字列と医用画像上の臓器または病変を対応付けて参照することが容易になるため効率よく読影できる。
前記リンク情報作成手段が、前記共通キーワードに加えて前記読影レポートに記載された前記共通キーワードの前後の語句を前記リンク情報にさらに対応付けるものであり、前記リンク情報表示手段が、前記共通キーワードに加えて前記前後の語句を表示するものである場合は、臓器または病変を表すキーワードだけでなく、前後の文字も表示されるため、読影レポートに記載された情報を医用画像上でより多く把握でき、正確に読影できる。
また、前記第三のキーワード群取得手段は、複数の前記キーワードに基づいて同じ臓器または病変が検出された場合に、前記複数のキーワードのうち最も下位の概念を表すキーワードを前記臓器または病変に対応するキーワードとするものである場合には、より下位の概念で臓器または病変に対応するキーワードを得られるため、医用画像上でより詳細な臓器または病変に対応する情報が得られる。
また、前記第二のキーワード群取得手段は、前記読影レポートから同じ臓器を表す複数の前記一致する語句が検出された場合、検出された前記複数の一致する語句のうち最も下位の概念を表す語句を前記検出した語句とする場合には、より下位の概念で臓器または病変に対応するキーワードを得られるため、医用画像上でより詳細な臓器または病変に対応する情報が得られる。
さらに、前記読影レポートを表示する読影レポート表示手段と、前記共通キーワードを指定する共通キーワード指定手段をさらに備え、前記リンク情報作成手段は、前記リンク情報表示手段が表示した前記共通キーワードを、前記読影レポート内の共通キーワードとハイパーリンクによってリンク付けするものであり、前記読影レポート表示手段は、前記リンク情報表示手段が表示した前記共通キーワードの指定に応じて、前記読影レポートの全体を表示し、該読影レポート内の指定された前記共通キーワードを他の文章より強調表示するものである場合には、指定された共通キーワードを識別できるため、容易に読影できる。
また、複数の前記共通キーワードからなる共通キーワードリストを作成して表示するリスト表示手段をさらに備え、前記リンク情報表示手段は前記共通キーワードリストに表示された複数の共通キーワードのうちの一つの前記共通キーワードの指定に応じて、指定された該一つの共通キーワードに対応する前記臓器または病変を表す指標を表示するものである場合には、共通キーワードに対応する臓器または病変を容易に参照できるため、効率よく読影できる。
また、前記第二のキーワード群取得手段は、同一患者の複数の前記読影レポートから前記第二のキーワード群を検出するものであり、前記リンク情報作成手段は、前記リンク情報に、前記共通キーワードを含む読影レポートを特定する読影レポート特定情報をさらに対応付ける場合には、複数の読影レポートから第二のキーワードを検出するため、より一つの読影レポートよりも多くの情報を検出でき、正確に読影できる。
前記リンク情報作成手段は、前記複数の読影レポートに同じ共通キーワードに対応する語句を検出したとき、該複数のレポートのうち最新の読影レポートに記載された前記共通キーワードと、該最新の読影レポートを特定する読影レポート特定情報とを前記リンク情報に対応付ける場合には、最新の読影レポートに記載された情報を検出できるため、正確に読影できる。
前記リンク情報生成手段は、複数の前記読影レポートに同じ共通キーワードに対応する語句を検出したとき、検出された前記複数の読影レポートを特定する読影レポート特定情報からなる読影レポートリストを作成し、作成された該読影レポートリストに記載された前記読影レポート特定情報と該読影レポート特定情報に対応する読影レポートに記載された前記同じ共通キーワードをそれぞれハイパーリンクでリンク付けするものであり、前記リスト表示手段は、前記読影レポートリストをさらに表示するものである場合には、共通キーワードに対応する複数の読影レポートを容易に参照できるため、効率よく読影できる。
また、前記第三のキーワード群取得手段は、前記第一のキーワード群に替えて、前記第二のキーワード群が表す前記臓器または病変を前記医用画像から自動検出するものである場合には、第一のキーワード群の全てに対応する臓器または病変を自動検出する必要がないため、臓器または病変の検出処理を効率化できる。
また、前記第三のキーワード群取得手段は、前記第一のキーワード群の一部のキーワードについて、該一部のキーワードが前記第二のキーワード群に含まれるキーワードと一致する場合にのみ、該キーワードが表す臓器または病変の検出を行うものである場合には、第一のキーワード群の全てに対応する臓器または病変を自動検出する必要がないため、臓器または病変の検出処理を効率化できる。
本発明の実施の形態となる画像情報表示装置の概略構成図 第一の実施形態の構成を示すブロック図 第一の実施形態の医用画像情報表示機能を示す機能ブロック図 第一の実施形態の医用画像情報表示処理の流れを説明するためのフロー図 第一の実施形態の医用画像情報表示機能により表示された読影レポートおよび医用画像の概念図 第一の実施形態の変形例の医用画像情報表示機能を示す機能ブロック図 第一の実施形態の変形例の医用画像情報表示機能により表示された読影レポートおよび医用画像の概念図 第二の実施形態の医用画像情報表示機能を示す機能ブロック図 第二の実施形態の医用画像情報表示処理の流れを説明するためのフロー図 第二の実施形態の共通キーワードリストの例を示す概念図 第三の実施形態の医用画像情報表示機能を示す機能ブロック図 第三の実施形態の医用画像情報表示処理の流れを説明するためのフロー図 第三の実施形態の読影レポートリストの例を示す概念図 第四の実施形態の医用画像情報表示機能を示す機能ブロック図 第四の実施形態の医用画像情報表示処理の流れを説明するためのフロー図 第五の実施形態の医用画像情報表示機能を示す機能ブロック図
図１は、本発明の医用画像情報表示装置の概要を示すハードウェア構成図である。図に示すように、このシステムでは、モダリティ１と、画像保管サーバ２と、画像処理ワークステーション３とが、ネットワーク９を経由して通信可能な状態で接続されている。
モダリティ１は、被検体を表す医用画像Ｖを取得するものであり、具体的には、ＣＴ装置、ＭＲＩ装置、ＰＥＴ、超音波診断装置等である。
画像保管サーバ２は、モダリティ１で取得された医用画像Ｖや画像処理ワークステーション３での画像処理によって生成された医用画像Ｖを画像データベースに保存・管理するコンピュータであり、大容量外部記録装置やデータベース管理ソフトウェア（たとえば、ＯＲＤＢ(Object Relational Database)管理ソフトウェア）を備えている。
画像処理ワークステーション３は、読影者からの要求に応じて、モダリティ１や画像保管サーバ２から取得した医用画像Ｖに対して画像処理を行い、生成された画像を表示するコンピュータである。
画像データの格納形式やネットワーク９経由での各装置間の通信は、ＤＩＣＯＭ（Digital Imaging and Communications in Medicine）等のプロトコルに基づいている。
次いで、本発明の実施形態の医用画像処理機能に関連する構成を説明する。
図２は画像処理ワークステーション３の構成を示す概略ブロック図である。図２に示すように、第１の実施形態による画像情報表示装置は、各種表示を行う液晶モニタ等の表示部３０１、各種入力を行うキーボードおよびマウス等からなる入力部３０３、本発明の医用画像情報表示プログラムを含む、本実施形態による画像情報表示装置を制御するための各種プログラムおよび画像データ等の各種データを保存するハードディスク３０５、各種プログラムを実行することにより本発明の実施形態による画像情報表示装置を制御するＣＰＵ３０７、プログラム実行時の作業領域となるメモリ３０９、バス３１３を介してネットワークと接続する通信インターフェース３１１を備えた画像処理ワークステーション３で構成されている。
なお、全ての実施例において、本発明の機能は、外部からインストールされるプログラムによって、コンピュータにより遂行される。そして、そのプログラムは、ＣＤ−ＲＯＭやフラッシュメモリやＦＤ等の記憶媒体により、あるいはネットワークを介して外部の記憶媒体から、プログラムを含む情報群を供給されてインストールされたものであってもよい。
図３は、本発明の第１の実施形態における医用画像情報表示機能に関連する部分を示す機能ブロック図である。図３に示すように、本発明の医用画像情報表示機能は、モダリティ１または画像保管サーバ２からの要求に応じて、ネットワーク９を介して医用画像Ｖを取得して表示する医用画像表示手段１０と、医用画像に関する読影レポートを記憶する読影レポート記憶手段３０と、臓器または病変（以下、「臓器または病変」を「臓器等」と記す）を表すキーワードの群からなる第一のキーワード群を記憶する第一のキーワード群記憶手段２０と、記憶された第一のキーワード群と一致する語句を前記読影レポートから検出し、検出した語句からなる第二のキーワード群を取得する第二のキーワード群取得手段５０と、第一のキーワード群が表す臓器等を医用画像から自動検出し、検出された臓器等に対応するキーワードからなる第三のキーワード群を取得する第三のキーワード群取得手段４０と、第二のキーワード群と第三のキーワード群を比較して、両者が一致する共通キーワードを取得し、取得された該共通キーワードのそれぞれについて、共通キーワードに対応する臓器等を対応付けたリンク情報を作成するリンク情報作成手段６０と、共通キーワードと、共通キーワードに対応する臓器等を表す指標を関連付けて表示するリンク情報表示手段７０とから構成されている。
医用画像表示手段１０は、主に医用画像Ｖをネットワーク９から取得する通信インターフェース３１１および取得した医用画像Ｖを表示するための表示部３０１を含み構成され、ネットワーク経由で取得した医用画像を表示部３０１に表示する。
第一のキーワード群記憶手段２０は、主にハードディスク３０５から構成され、臓器等を表すキーワードの群からなる臓器名データベースである。臓器等を表すキーワードの群については、予め登録される。臓器等のキーワード登録は、入力部３０３から入力されて登録されてもよいし、予め用意された臓器等のキーワードをネットワークまたは記憶媒体等を介して複写して作成してもよい。また、第一のキーワード群記憶手段２０には、病変を表すキーワードも登録されていてもよい。なお、登録される臓器を表すキーワードは、臓器名、臓器名を表す別称または記号、もしくはそれらの略称のいずれかを含むものである。また、「病変を表すキーワード」とは、病名または病名を表す別称または記号、もしくはそれらの略称をいう。具体的には、臓器を表すキーワードとして、肺野、肝臓、骨、心臓もしくは右肺、右上肺葉など各臓器の部分名を用いることができ、病変を表すキーワードとして異常陰影、石灰化、血管異常、肺がん、肝細胞がん、肝のう胞、肝血管種、肝臓領域における出血、脳領域における出血、および、コンソリデーション、Ground-Glass Opacity(GGO)、Crazy-Paving、蜂巣状陰影、肺気腫陰影、粒状影等のびまん性肺疾患など、病変名、または症状を表すキーワードを用いることができる。
読影レポート記憶手段３０は、主にハードディスク３０５を含み構成され、医用画像Ｖ上の病変領域の病変内容を表す病変文字を含む読影レポートを記憶する。
第二のキーワード群取得手段４０は、主にＣＰＵ３０７を含み構成され、読影レポート記憶手段３０に記憶された読影レポートから第一のキーワード群と一致するキーワードを検出する。
第三のキーワード群取得手段５０は、主にＣＰＵ３０７を含み構成され、第一のキーワード群に含まれるキーワードが表す臓器等を、計算機処理を用いて臓器等候補を自動的に検出するようにした計算機支援画像診断（CAD；Computer Aided Diagnosis）を行い、自動的に臓器等を検出する。そして、自動検出された臓器等を表すキーワードからなる第三のキーワード群を決定する。この自動的な臓器等の検出方法は、医用画像から自動的に臓器等を検出できる周知の方法を用いることができ、各臓器の抽出の具体例を挙げると、肺野について、特開２００１−１３７２３０号、特開２００８−２５３２９３号、肝臓抽出について特開２００１−２８３１９１号、特開２００２−３４５８０７号、骨について、特開２００８−４３５６４号、心臓について、特開２００４−１４１６１２号の技術が利用できる。
また、第三のキーワード群取得手段５０は、病変を自動検出するために、特開２００３−２２５２３１号、特開２００３−２７１９２４号、および、久保田等、「ヘリカルCT像を用いた肺がん計算機診断支援システムの評価」、電子情報通信学会、信学技報、pp. 41-46、MI2001-41(2001-09)に示す肺がんを検出する技術、脇田等、「びまん性肺疾患の知的CAD」、文部科学省科学研究費補助金特定領域研究"多次元医用画像の知的診断支援"、第４回シンポジウム論文集、pp.45-54、２００７に示すコンソリデーション、Ground-Glass Opacity (GGO)、Crazy-Paving、蜂巣状陰影、肺気腫陰影、粒状影等のびまん性肺疾患の検出技術、脇田等、「多時相腹部Ｘ線ＣＴ像の時相間濃度特徴計測に基づく肝臓がん検出」、コンピュータ支援画像診断学会論文誌、Vol.10、No.1、Mar ２００７に示す肝臓がん検出技術、「正常構造の理解に基づく知的CAD」、文部科学省科学研究費補助金特定領域研究"多次元医用画像の知的診断支援"、第４回シンポジウム論文集、pp.55-60、２００７に示す肝細胞がん、肝のう胞、肝血管種、肝臓での出血、脳領域での出血を検出する技術を利用することができる。また、特開２００４−３２９９２９号に示すような血管の異常を検出する技術、本出願人の出願である特開平１０−９７６２４号に示す異常陰影候補の検出技術、特開平８−２１５１８３号に示すような石灰化領域の検出技術を用いることもでき、その他の臓器または病変認識技術も臓器または病変を自動的に抽出できるものであれば利用可能である。
また、自動検出により、臓器等が発見された場合は、臓器等の位置と臓器等および臓器等を表すキーワードをリンク情報作成手段６０に入力する。この場合、臓器等は領域でもよく、その臓器等の重心など、臓器等領域の代表の位置を示す点でもよい。また、断層画像の群からなる医用画像の場合、全ての断層画像に対して臓器等を自動検出してもよいし、断層画像の一部について臓器等を自動検出してもよい。
臓器等を表すキーワードは、第一のキーワード群に含まれるキーワードと一致するキーワードであるが、第一のキーワード群に含まれるキーワードの類義語もキーワードとしても良い。
リンク情報作成手段６０は、主にＣＰＵ３０７を含み構成され、第二のキーワード群取得手段５０から得た第二のキーワード群と第三のキーワード群取得手段４０から得た第三のキーワード群を比較し、一致したキーワードからなる共通キーワードを取得し、取得された共通キーワードのそれぞれについて、共通キーワードと対応する臓器または病変を対応付けたリンク情報を作成する。
リンク情報表示手段７０は、主に表示部３０１を含み、共通キーワードと、対応付けられている臓器または病変を表す指標を関連付けて表示する。臓器等を表す指標は、図５に示す指標１３５Ｃのような領域の輪郭でもよいし、点、十字型、矢印、など、位置を示すことができる周知の指標を用いることができる。また、臓器等を表す指標は、円、矩形、矢印、閉曲面など、様々な手法で示された病変領域を示す場合、病変領域内の特定の点について表示してもよい。特定の点は、その領域の重心や中心もしくは病変の特徴を表す点などを適宜選択することができる。また、関連付けて表示するとは、共通キーワードと対応する臓器等を表す指標とを対応させて識別できるものであればよく、例えば、共通キーワードと対応する臓器等を表す指標とを、線、または矢印、若しくは、臓器等を表す指標から吹き出した吹き出しなどの図形からなる関連付け指標でつないで示してもよい。また、共通キーワードを対応する臓器等を表す指標の近傍に表示してもよい。また、特に関連付け指標の表示や、共通キーワードと臓器等を表す指標とを近傍に表示することをしていなくても、共通キーワードが一つと臓器等を表す指標が一つ表示されている場合など、共通キーワードと対応する臓器等を表す指標が判別できる場合であれば、「関連付けて表示」していることに含まれる。
図４および図５を用いて、本実施形態にかかる読影レポートに共通キーワードを挿入する動作を説明する。
図５は、第一の実施形態の医用画像情報表示機能により表示された医用画像およびリンク情報の概念図である。図５には、医用画像情報表示画面の一例として、医用画像表示画面１９０が示されている。
まず、図５に示す医用画像表示画面１９０の構成を説明する。図５に示す医用画像表示画面１９０は患者の情報を記す患者情報領域１０１を備える。患者情報領域１０１には、例えば、ＤＩＣＯＭのヘッダー情報から得られる患者名、患者ＩＤ、性別、年齢等が表示される。医用画像Ｖの情報を示す医用画像情報領域１０３には、撮影日、モダリティ、依頼科等が、マウスやキーボード等の入力部３０３、または、ＤＩＣＯＭのヘッダー情報から入力され、表示される。読影レポート領域１０４には、読影医名欄１０６、読影レポートである所見欄１０５、診断欄１０７が設けられる。読影医名欄１０６、所見欄１０５、診断欄１０７は医師等がオペレータとなって、マウスやキーボード等により入力、編集を行うことができる。また、所見欄１０５、診断欄１０７は、すでに作成された読影レポートである所見や診断情報が参照可能に表示される。また、所見欄１０５等には、読影レポートの記載量が多く、所見欄１０５に一度に表示できない場合は、カーソル１３９を移動させることで、所見の全内容を参照可能となっている。
さらに、医用画像表示画面１９０には、編集した読影レポートを保存、キャンセル等するための読影レポート編集ボタン１０９やその他必要に応じて様々な機能ボタンが適宜備えられてもよい。図５では、一時保存ボタン、確定ボタン、キャンセルボタン等を例として示した。
医用画像表示画面１９０には、過去レポート選択ボタン１１９Ａ、参照画像選択ボタン１１９Ｂなどの情報を参照するために必要なボタンが適宜用意され、本発明の実施形態におけるリンク入力を可能にするリンク入力選択ボタン１１１を備えている。このようなリンク入力選択ボタン１１１は、その目的を達成する範囲で、周知の様々は形態で備えられ得る。
過去レポート選択ボタン１１９Ａを選択すると、参照情報領域１１７に過去レポートが選択可能に表示される。参照画像選択ボタン１１９Ｂを選択すると、図５に示すように参照情報領域１１７に医用画像Ｖのサムネイルが選択可能に表示される。
また、医用画像表示画面１９０には、詳細画像表示領域１１３が備えられ、参照情報選択領域１１７には医用画像Ｖのサムネイルや過去レポート等の参照情報が適宜表示される。図５では、参照情報領域１１７において医用画像Ｖを示す複数のサムネイルのうちサムネイル１１７Ａが選択され、サムネイル１１７Ａに対応する医用画像１３３が詳細画像表示領域１１３に表示された様子を示している。
詳細画像表示領域１１３には、詳細画像表示領域１１３に表示された医用画像を加工、編集するための編集ボタン１１３Ａ、１１３Ｂ、１１３Ｃが適宜備えられる。また、図５では本実施形態によって得られるリンク情報の表示をＯＮ／ＯＦＦできるリンク表示ボタン１３１を備えている。リンク情報の表示をＯＮにした場合には、本発明によって作成されたリンク情報が表示され、リンク情報の表示をＯＦＦにした場合には、リンク情報が非表示になる。
次いで、図４に沿って、第１の実施形態にかかるリンク情報を表示する流れを説明する。図４は、第１の実施形態にかかる画像情報表示装置の動作を示すフローチャートである。
まず、読影レポートから第一のキーワード記憶手段２０に記憶されたキーワードと一致するキーワードを検出する（ＳＴ１０１）。この際、図５の医用画像表示画面１９０に示すように、リンク入力ボタン１１１を入力部３０３で選択し、リンク情報の取得を開始するボタンを設けてもよい。そして、キーワードが検出された場合には、検出されたキーワードを第二のキーワード群として取得する（ＳＴ１０２のＹ）。キーワードが検出されなかった場合には、リンク情報の表示処理を終了する（ＳＴ１０２のＮ）。
このとき第二のキーワード群取得手段５０は、第一のキーワード群に含まれるキーワードそれぞれに対応する類義語を記憶するものであり、読影レポートから第一のキーワード群に含まれるキーワードおよびその類義語を検索し、第一のキーワード群に含まれるキーワードの類義語と一致したキーワードを第二のキーワード群に含まれるキーワードとすることが望ましい。この場合、臓器等を表すキーワードの類似キーワードについても読影レポートから検索できるため、臓器等を表す情報の検索漏れを抑えることができる。
次に、第一のキーワード記憶手段２０に記憶されたキーワードが表す臓器等を自動認識技術によって検出する（ＳＴ１０３）。
臓器等が認識されると、認識された臓器等を含む医用画像１３３を特定する情報、および医用画像１３３上での臓器等の座標などの臓器等を表す臓器情報が第三のキーワード取得手段４０によって取得される。また、臓器等を含む医用画像１３３を特定する情報には、例えば、医用画像１３３が一連の断層画像からなる１つのシリーズを構成する医用画像であれば、医用画像のシリーズ番号と病変の位置を含む医用画像を特定する情報としてスライス番号等を組み合わせた番号があげられ、さらにＤＩＣＯＭのヘッダー情報から取得した、画像ＩＤなどの情報を含んでいても良い。また、臓器等が点として検出された場合は、医用画像１３３上での座標値として位置情報を取得でき、臓器等が直線や領域として検出された場合は、医用画像１３３上での直線の端点や領域を表す関数などを適宜臓器情報として取得できる。
次に、臓器等が検出されなかった場合は、リンク情報の表示処理を終了する（ＳＴ１０４のＮ）。本実施形態では、読影レポートからのキーワードの検索を行ってから、医用画像からの臓器等の認識を行っているが、この順番に限定されるものではなく、医用画像からの臓器等の認識を行ってから、読影レポートからのキーワードの検索を行ってもよく、医用画像からの臓器等の認識と、読影レポートからのキーワードの検索を同時に行ってもよい。
臓器等が検出された場合は（ＳＴ１０４のＹ）、検出された臓器等を表すキーワードを第三のキーワード群として取得し、第二のキーワード群のキーワードと第三のキーワード群のキーワードを比較する。両者の一致するキーワードが存在しない場合は、リンク情報の表示処理を終了する（ＳＴ１０５のＮ）。
両者の一致するキーワードが存在する場合（ＳＴ１０５のＹ）は、リンク情報作成手段６０は、第二のキーワード群と第三のキーワード群の一致するキーワードを共通キーワードとして取得する。すなわち、共通キーワードは、読影レポートに記載されたキーワードであり、医用画像から認識された臓器等を表すキーワードである。リンク情報作成手段６０は、共通キーワードと医用画像から認識された臓器等からなるリンク情報を作成する（ＳＴ１０６）。
リンク情報は、具体的には、（１）共通キーワード名、（２）臓器等が検出された医用画像を特定する情報（３）臓器等の位置を含み構成される。臓器等が検出された医用画像を特定する情報として、例えば、医用画像１３３が一連の断層画像からなる１つのシリーズを構成する医用画像であれば、医用画像のシリーズ番号と病変の位置を含む医用画像を特定する情報としてスライス番号等を組み合わせた番号があげられる。臓器等の位置とは、臓器等の領域または輪郭を示す座標値、臓器等の領域の特定の点の座標値などが上げられ第三のキーワード取得手段４０から取得される。特定の点は、その領域の重心や中心などを適宜選択することができる。なお、一つの共通キーワードに対応する読影レポート上のキーワードが複数箇所に記載されている場合や、共通キーワードに対応する医用画像上の臓器等に対応するキーワードが複数箇所に検出される場合も起こりうる。この場合には、一つの共通キーワードに、読影レポート上におけるキーワードの複数記載箇所、医用画像上の複数の臓器等の検出位置、医用画像上の複数の各臓器等を含む医用画像を特定する情報などを、リンク情報に含む。
次に、リンク情報表示手段７０は、医用画像上１３３にリンク情報作成手段６０からリンク情報を得て、臓器等の位置を表す指標１３５Ａと共通キーワード１３５Ｂを関連付けて表示する（ＳＴ１０７）。
図５では、第一のキーワード群に記載された「腎臓」というキーワードが読影レポートのキーワード１０５Ａとして検出され、医用画像１３３上で「腎臓」を表す領域１３５Ｂが検出され、共通キーワードである「腎臓」について「腎臓」を表す領域１３５Ｂを対応付けてリンク情報が作成され、医用画像１３３上に共通キーワード「腎臓」（１３５Ｂ）と「腎臓」を表す領域１３５Ａが表示されている。
図５では、共通キーワード１３５Ｂが臓器等の位置を表す指標１３５Ａの近傍に表示されることにより、両者が関連づけられていることが識別できる。また、図５の１３５Ｄに示すごとく、共通キーワード１３５Ｂ’に加えて読影レポート上の共通キーワードに対応するキーワードの前後の語句を併せて表示しても良い。（以降、「共通キーワードに加えて読影レポート上の共通キーワードに対応するキーワードの前後の語句を併せて表示した語句」を「共通キーワードを含むコメント」と記載する。）さらに、共通キーワード１３５Ｂ’あるいは共通キーワードを含むコメント１３５Ｄを関連付け指標１３５Ｃによって、臓器等の位置を表す指標１３５Ａと関連付けて表示してもよい。なお、説明のため、共通キーワード１３５Ｂと共通キーワード１３５Ｂ’と記したが、両者は同一の共通キーワードである。
図５では、共通キーワード１３５Ｂ’と臓器等の位置を表す指標１３５Ａと共通キーワードＢ’を含むコメント１３５Ｄが表示されているが、変形例としては、共通キーワード１３５Ｂ’および共通キーワードＢ’を含むコメント１３５Ｄのいずれか一つと臓器等の位置を表す指標１３５Ａだけが示されていてもよく、共通キーワード１３５Ｂ’および共通キーワードＢ’を含むコメント１３５Ｄのいずれか一つと臓器等の位置を表す指標１３５Ａと両者を関連付ける関連付け指標１３５Ｃが表示されていてもよい。
ここで、臓器等を表す指標として、検出された臓器等の輪郭が表示されることが望ましく、検出された臓器等の認識が容易になる他の指標で示されてもよい。例えば、臓器等の指標として、検出された臓器等の着色、臓器等を含む円などの図形の表示、臓器等の一部を示す部分に点や矩形等の図形の表示を行ってもよい。検出された臓器等の輪郭が表示された場合は、臓器等が明確に識別でき、正確に読影できる。
また、複数の断層像からなる医用画像について複数の臓器等が検出され、表示された断層画像１３３には複数の臓器等のうち一部の臓器等しか表示されていない場合は、表示されている臓器等に関連するリンク情報のみを表示する。例えば、複数の断層像からなる医用画像について、肝臓、腎臓、胆嚢が検出された場合に、表示された医用画面１１３では腎臓のみが表示されている場合には、図５に示す如く、リンク情報のうち腎臓を表す指標１３５Ａと関連する共通キーワード１３５Ｂ等のみが表示される。
なお、一つの共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが複数箇所に記載され、対応する共通キーワード１３５Ｂ’に対応する医用画像上の臓器等が一箇所検出された場合には、共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが記載された複数箇所に対して、それぞれ対応するコメントを作成して、そのコメント全てを共通キーワードに対応する臓器等と関連づけて表示してもよく、共通キーワード１３５Ｂ’のみを表示しても良い。
また、一つの共通キーワード１３５Ｂ’に対応する医用画像上の臓器等が複数箇所に検出され、対応する共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが一箇所に検出された場合には、一つの共通キーワード１３５Ｂ’に対応する複数箇所の臓器等全てについて、該臓器等を表す指標をそれぞれについて同時表示し、その全ての臓器等を表す指標にそれぞれ関連づけて、共通キーワード１３５Ｂ’または共通キーワード１３５Ｂ’のコメントを表示しても良い。
また、一つの共通キーワード１３５Ｂ’に対応する医用画像上の臓器等が複数箇所に検出され、対応する共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが複数箇所に検出された場合には、一つの共通キーワード１３５Ｂ’に対応する複数箇所の臓器等全てについて、該臓器等を表す指標をそれぞれについて同時表示し、その全ての臓器等を表す指標にそれぞれ関連づけて、共通キーワード１３５Ｂ’のみを表示しても良いし、共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが記載された複数箇所に対して、それぞれ対応するコメントを作成して、その作成された複数のコメント全てを、共通キーワード１３５Ｂ’に対応する複数箇所の臓器等を表す指標の全てに、それぞれ関連づけて表示してもよい。
第一の実施形態のように、読影レポートの共通キーワードと該共通キーワードに対応する臓器等を自動検出し、関連付けて表示することによって、読影レポートに医用画像をリンク付けする作業を行うことなく、容易にかかるリンク付けを行うことができ、医用画面から読影レポートに記載された臓器または病変を表すキーワードと対応する臓器等を関連付けて視認することができ、正確に読影できる。また、読影レポートに記載された臓器または病変を表すキーワードと対応する臓器等を関連付ける作業がないため、読影レポートに臓器等の位置を関連付けるための作業負荷が生じない。
また、共通キーワードの前後の語句を併せて医用画像上に表示した場合は、より詳細な臓器等を表す情報を医用画像上から得られるため、容易に読影を行うことができる。また、読影レポートの臓器等を表す文字の前後は、その臓器等に関する記載を行っている可能性が高いため、共通キーワードに対応する読影レポート上のキーワードの前後の語句を表示させると、臓器等の理解を助ける情報が表示される可能性が高いと考えられる。
また、関連付け指標を併せて医用画像上に表示した場合は、共通キーワードあるいは共通キーワードを含むコメントと臓器等を表す指標との対応関係が明確になるため、より正確に読影をすることができる。
また、第二のキーワード群検出手段は、第一のキーワード群のうち複数のキーワードが読影レポート上の一つのキーワードと一致するものとして検出されたとき、最も下位概念のキーワードを第二のキーワード群に検出することが好ましい。例えば、第一のキーワード群のキーワードのうち、「肺」、「右肺」、「右肺上葉」、「右肺上葉Ｓ１」と一致するものとして読影レポート上の「右肺上葉Ｓ１」が検出されている場合は、「右肺上葉Ｓ１」がキーワードとして検出される。より下位概念のキーワードを第二のキーワード群にキーワードとして検出した場合には、具体的な臓器等の把握が可能となるため、正確な読影ができる。
また、第三のキーワード群検出手段は、第一のキーワード群のうち複数のキーワードが表す臓器等が、医用画像上で一つの臓器等として検出されたとき、最も下位概念のキーワードを検出することが好ましい。例えば、第一のキーワード群のキーワードのうち、「肺」、「右肺」、「右肺上葉」、「右肺上葉Ｓ１」が表す臓器等として医用画像上の「右肺上葉Ｓ１」が検出されている場合は、「右肺上葉Ｓ１」がキーワードとして検出される。より下位概念のキーワードを第三のキーワード群にキーワードとして検出した場合には、具体的な臓器等の把握が可能となるため、正確な読影ができる。
図５，図６、図７を用いて、第一の実施例の変形例を示す。第一の実施形態の変形例では、リンク情報表示手段７０は、共通キーワード１３７Ｂ’に共通キーワード１３７Ｂ’に対応する読影レポートに記載されたキーワード１０５Ａをハイパーリンクによってリンク付けして表示する。図６は、第一の実施形態の変形例の医用画像情報表示機能を示す機能ブロック図である。同じ番号を付した部分は、図３と同じ構成であるため、説明を省略する。
読影レポート表示手段８０は、主に表示部３０１を含み、共通キーワード指定手段９０の指定に応じて、読影レポート記憶手段３０に記憶された読影レポートを表示する。
共通キーワード指定手段９０は、主に病変領域を入力するための入力部３０３を含み構成され、入力部３０３からオペレータによる共通キーワードまたは共通キーワードの指定に応じて、読影レポート表示手段７０に指定された共通キーワードを入力する。
図５において、共通キーワード指定手段９０の選択ツール１２３による共通キーワード１３５Ｂ’の指定に応じて、読影レポート表示手段８０は所見欄１０５に共通キーワード１３５Ｂ’に対応する読影レポート上のキーワード１０５Ａとキーワード１０５Ａを含む読影レポートの全体を表示する。所見欄１０５には、例として、読影レポートのキーワード１０５Ａの付近のみが表示され、カーソル１３９によって読影レポート全体を参照できるように表示されている。ここで、読影レポートの表示方法は、これに限定されるものでなく、読影レポートは、共通キーワード１３５Ｂ’の指定に応じて別ウィンドウで表示されてもよく、読影レポートの全体が表示されても良い。
また、共通キーワード指定手段９０の選択ツール１２３による共通キーワード１３５Ｂ’の指定に応じて、読影レポート上のキーワード１０５Ａは強調表示されることが望ましい。図５では、キーワード１０５Ａは下線と太字によって強調表示されているが、これに限定されるものでなく、文字の着色または背景色の着色、下線、点滅、太字、書体、文字の大きさ、枠など周知の手法を用いて、指定されていない文字と識別できるように表示してもよい。
なお、一つの共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが複数箇所に記載された場合には、共通キーワード１３５Ｂ’の指定に応じて、共通キーワード１３５Ｂ’に対応するキーワードのうち、読影レポートの最初に記載されたキーワードの付近を識別可能に、読影レポートの全体が参照可能に表示されるようにしても良く、共通キーワード１３５Ｂ’の指定に応じて、共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが記載された複数箇所について、記載された複数の記載箇所ごとに、読影レポート上の各キーワードと各キーワードの前後の文字列からなるコメント文字列を抽出し、該コメント文字列を別ウィンドウに選択可能にリスト表示して、コメント文字列中の共通キーワードの指定に応じて、選択された共通キーワードを含むコメント文字列に対応する読影レポート上の記載箇所を識別可能に、読影レポートの全体が参照可能に表示されるようにしても良い。
また、一つの共通キーワード１３５Ｂ’に対応する共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが複数箇所に検出され、対応する臓器等を表す指標に関連づけて、共通キーワード１３５Ｂ’に対応する読影レポート上のキーワードが記載された複数箇所に対して、それぞれ対応するコメントを作成して、その作成された複数のコメント全てを、共通キーワード１３５Ｂ’に対応する臓器等を表す指標の全てにそれぞれ関連づけて表示した場合には、コメント内の共通キーワード１３５Ｂ’の指定に応じて、読影レポート上の該コメントに対応する箇所のキーワードを識別可能に、読影レポートの全体を表示されるようにしても良い。
このように、共通キーワード１３５Ｂ’と対応する読影レポート上のキーワード１０５Ａがハイパーリンクでリンク付けされているため、画像上の共通キーワード１３５Ｂ’を指定するだけで、読影レポートの対応する詳細情報を容易に参照することができ、効率よく読影を行うことができる。
図７は、第一の実施形態のさらなる変形例の医用画像情報表示機能により表示された読影レポートおよび医用画像の概念図である。第一の実施形態のさらなる変形例では、医用画像表示手段１０は、第３のキーワード群取得手段４０によって検出された臓器等を含む医用画像１３３ではなく、該検出された臓器等を含む医用画像１３３を含んで再構成された医用画像１３３’を表示し、リンク情報表示手段７０は再構成された医用画像１３３’上にリンク情報を表示する。図７について、図５と同じ番号については、同じものであるため説明を省略する。
まず、リンク位置記憶手段３０は、病変記憶手段２０からスライス画像１１５上での病変の位置および対応する病変文字を取得する（ＳＴ３０１）。スライス画像１１５を含む複数のスライス画像を積み重ねて再構成された医用画像１３３上での座標を算出する（ＳＴ３０２）。再構成された医用画像として、代表的なものとして、ボリュームレンダリング法、レイサム（Ray Summation）法、ＭＩＰ（Maximum Intensity Projection）法、ＭＰＲ（Multi Planar Reformat）法で表された画像に適用可能である。
第二のキーワード群取得手段５０は、各断層画像において、第一のキーワードを表す臓器等を検出する。そして、３次元医用画像を再構成する際に、検出された臓器等の輪郭を結ぶ曲面を作成して、再構成された３次元医用画像上での臓器等を得る。また、再構成した投影像の場合は、再構成された３次元医用画像上での臓器等の輪郭を表す座標を、その投影像上に投影して臓器等を得る。
３次元画像は、多数のスライス画像すなわち所定の厚みでスライスされた多数の２次元画像から再構成されたものであるから、いずれかの２次元画像の上で指定された点の位置は、そのスライスの位置とその点の座標から、３次元画像上での座標が算出され、スライス画像での病変の位置の座標に対応する３次元画像上での座標位置が特定される。したがって、スライス画像上で指定した病変の位置を３次元画像上に示すことが可能になる。
臓器等を表す指標として、再構成された医用画像１３３’で臓器等の輪郭を表示することが望ましい。臓器等の輪郭を指標とした場合は、臓器等を識別しやすいため、より正確に読影できる。
図７では、臓器等を表す指標１３７Ａ，共通キーワード１３７Ｂ、１３７Ｂ’、共通キーワードを含むコメント１３７Ｄ、関連付け指標１３７Ｃがリンク情報として表示されている。
再構成された医用画像上に臓器等の指標１３７Ａを示すことにより、スライス画像の病変領域の位置を、別の医用画像で把握できるため、病変領域の位置をより正確な理解ができる。また、再構成された３次元医用画像１３３’で臓器等を表す指標１３７Ａを表示させた場合は、立体的に病変の位置を把握でき、その病変領域より正確な読影ができる。また、再構成された３次元医用画像１３３’が、回転、拡大縮小して参照できるものであり、臓器等を表す指標および共通キーワードをその回転、拡大縮小に連動して表示できるようにしてもよい。その場合、別の角度から大きさを変えて病変の位置を把握でき、より正確な読影ができる。
さらに、リンク情報が複数の共通キーワードを含む場合、再構成された医用画像上に臓器等の指標の全てを示すことにより、読影者に表示された医用画像に対して読影レポートに記載されたキーワードと対応する臓器等を一度に表示することができるため、読影レポートに記載された臓器等を表す情報の目安を与えることができ、より容易に読影レポートの作成を支援することができる。
また、ボリュームレンダリング法で示された再構成された医用画像において、医用画像表示手段１０は、臓器等単位で表示と非表示を選択できるようにしてもよく、臓器等単位の表示または非表示に応じてその臓器等に関するリンク情報も連動して表示または非表示されることが望ましい。臓器等単位で読影レポートに記載された臓器等の情報が参照できるため、効率よく診断することができる。また、検出された臓器等のみ表示色を変えて識別表示してもよい。
さらに、第一の実施形態のさらなる変形例においては、共通キーワード１３７Ｂ’と対応する読影レポート上のキーワード１０５Ｂが、検出された臓器等を含む医用画像１２１Ａとハイパーリンクでリンク付けされていることが望ましい。この場合、リンク情報作成手段６０は、共通キーワード１３７Ｂ’が検出されると、検出された共通キーワードに対応する読影レポート上のキーワード１０５Ｂと検出された臓器等を含む医用画像であるスライス画像１２１Ａをハイパーリンクによってリンク付けする。
すると、共通キーワード指定手段９０の選択ツール１２３による読影レポート上のキーワード１０５Ｂの指定に応じて、医用画像表示手段１０は、添付画像表示領域１２１に、第３のキーワード群取得手段４０によって検出された臓器等を含むスライス画像１２１Ａのサムネイルを表示する。また、キーワード１０５Ｂの指定に応じて、スライス画像１２１Ａ上にはリンク情報表示手段７０によって、図示しない病変の位置を示す指標１４７が表示される。ここで、病変領域の位置を含む医用画像の表示方法は、これに限定されるものでなく、スライス画像１２１Ａは、キーワード１０５Ｂの指定に応じて別ウィンドウで表示されても良く、サムネイル形式でなく詳細な医用画像を表示しても良い。なお、キーワード１０５Ｂに対応する一つの共通キーワードに対して、医用画像上に複数の対応する臓器等がある場合は、複数の対応する臓器等のそれぞれを含む画像の全てを表示してもよい。
このように、共通キーワード１３７Ｂ’と対応する読影レポート上のキーワード１０５Ｂは検出された臓器等を含む医用画像１２１Ａがハイパーリンクでリンク付けされているため、読影レポートのキーワード１０５Ｂを指定するだけで対応するスライス画像１２１Ａを容易に参照することができ、効率よく読影を行うことができる。第一の実施形態のさらなる変形例によれば、再構成された医用画像１３３’上の共通キーワード１３７Ｂ’から対応する読影レポート上のキーワード１０５Ｂを参照し、キーワード１０５Ｂから対応するスライス画像１２１Ａを参照できるため、対応する詳細な情報を得ることが非常に容易となるため、効率よく診断を行うことができる。
また、読影レポートのキーワード１０５Ｂに、オペレータによるリンク付け操作なしに検出した臓器等を含む医用画像１２１Ａへのハイパーリンクによるリンク付け操作がなされるため、医用画像上の臓器等と臓器等を表すキーワードをリンクにより関連付けた読影レポートを容易に作成することができる。
図８、９、１０を用いて、第二の実施形態について説明する。
第二の実施形態では、検出された複数の共通キーワードからなる共通キーワードリストを作成し、表示する。図８は、第二の実施形態の医用画像表示機能を示す機能ブロック図である。共通キーワード指定手段９０とリスト表示手段１００以外は図３と同様であり、共通キーワード指定手段９０については、図６と同様であるため、同じ名の部分については説明を省略する。
リスト表示手段１００は、主に表示部３０１を含み、共通キーワードリストをリンク情報作成手段６０から取得して表示部３０１に表示する。
図９は、本第二の実施形態に示す医用画像情報表示方法を示すフローチャートである。ＳＴ２０１からＳＴ２０５は、ＳＴ１０１からＳＴ１０５とそれぞれ同じであるため、図４と異なるＳＴ２０６以降のステップのみ説明する。
リンク情報作成手段６０は、検出された複数の共通キーワードからなる共通キーワードリスト１５０を作成する（ＳＴ２０６）。共通キーワードリスト１５０は、図１０に示す如く、共通キーワード１５０Ａ，１５０Ｂと、その共通キーワード１５０Ａ，１５０Ｂのそれぞれに対応する読影レポート上の語句、を対応付けたリストである。共通キーワードに対応する読影レポート上の語句は、共通キーワードに対応する読影レポート上のキーワードに、該キーワードの後に記載された語句を追加した語句が望ましく、共通キーワードに対応する読影レポート上のキーワードに該キーワードの前後に記載された語句を追加した語句でもよい。なお、一つの共通キーワード１５０Ａに対応するキーワードが読影レポート上の複数箇所に記載されている場合、または、一つの共通キーワード１５０Ａに対応する医用画像上の臓器等が検出されている場合は、一つの共有キーワード１５０Ａに対応する読影レポートのキーワードの記載数や記載場所などの情報、または一つの共通キーワード１５０Ａに対応する医用画像上の臓器等の数などを併せてリスト中に表示しても良い。
リンク情報作成手段６０は、図４のＳＴ１０６で作成したリンク情報にこの共通キーワードリストをさらに追加し、リンク情報表示手段７０は、リンク情報のうち共通キーワードリストだけを表示する。そして、共通キーワード指定手段９０の共通キーワードリスト１５０に記載された共通キーワードの指定に応じて、指定された共通キーワードを含むコメントと該共通キーワードに対応する臓器を表す指標を関連付けて表示する。具体的には、図１１の共通キーワードリスト１５０に記載された共通キーワード１５０Ａを指定すると、図７の臓器等を表す指標１３７Ａと共通キーワード１３７Ｂ、共通キーワード１３７Ｂ’を含むコメント１３７Ｄ、関連付け指標１３７Ｃ等のその他のリンク情報が表示される（ＳＴ２０８）。なお、一つの共通キーワード１５０Ａに対応する医用画像上の臓器等が検出されている場合は、臓器等を表す指標の全てを表示してもよい。また、一つの共通キーワード１５０Ａに対応する読影レポート上のキーワードが複数箇所に記載されている場合は、共通キーワード１５０Ａに対応する読影レポート上のキーワードが記載された複数箇所に対して、それぞれ対応するコメントを作成して、その作成された複数のコメント全てを、共通キーワード１５０Ａに対応する臓器等を表す指標の全てにそれぞれ関連づけて表示してもよい。
このように、検出された複数の共通キーワードからなる共通キーワードリストを作成し、表示した場合は、共通キーワードを一覧として把握でき、読影レポート上に記載されたキーワードに対する臓器等を容易に識別表示できるため、診断を効率化できる。
また、共通キーワードリスト１５０で、共通キーワード１５０Ａの指定に応じて、第一の実施形態の例に示したのと同様断層画像１３３上に共通キーワード１５０Ａを表す臓器等を表す指標を示してもよく、第一の実施形態のさらなる変形例に示したのと同様の再構成した医用画像１３３’上に共通キーワード１５０Ａを表す臓器等を表す指標を表示してもよい。断層画像１３３上に共通キーワード１５０Ａを表す臓器等を表す指標を表示する場合には、医用画像表示手段１０は、共通キーワード１５０Ａの指定に応じて、検出された臓器等の面積が最も大きい断層画像を表示してもよい。例えば、臓器等が病変の場合、病変の面積が最も大きい断層画像を表示されるため、病変の面積が最も大きい断層画像を医師が探す必要がなく、効率よく診断することができる。
図１１、１２、１３を用いて、第三の実施形態について説明する。
第三の実施形態では、同一の共通キーワードを含む複数の読影レポートを特定する情報からなる読影レポートリストを作成し、表示する。図１１は、第三の実施形態の医用画像表示機能を示す機能ブロック図である。読影レポート表示手段８０と共通キーワード指定手段９０とリスト表示手段１００を備えている以外は図３と同様であり、共通キーワード指定手段９０については、図６と同様であるため、同じ名の部分については説明を省略する。ただし、読影レポート記憶手段３０は、本第三の実施形態においては、同一患者の過去のレポートを含む複数の読影レポートを記憶しているものとする。
図１２は、本第三の実施形態に示す医用画像情報表示方法を示すフローチャートである。まず、複数の読影レポートから第一のキーワード記憶手段２０に記憶されたキーワードと一致するキーワードを検出する（ＳＴ３０１）。キーワードが検出された場合には、検出されたキーワードを第二のキーワード群として取得する（ＳＴ３０２のＹ）。この際、検出されたキーワードを含む読影レポートを特定する読影レポート特定情報を、検出されたキーワードに対応付けて取得する。読影レポートを特定する情報とは、例えば、読影レポートの作成日や読影レポートのファイル名などがある。キーワードが検出されなかった場合には、リンク情報の表示処理を終了する（ＳＴ３０２のＮ）。
次に、ＳＴ１０３と同様に、読影レポートから第一のキーワード記憶手段２０に記憶されたキーワードが表す臓器等を自動認識技術によって検出する（ＳＴ３０３）。
臓器等が認識されると、認識された臓器等を含む医用画像１３３を特定する情報、および医用画像１３３上での臓器等の座標などの臓器等を表す臓器情報をＳＴ１０３と同様に取得する。
臓器等が検出されなかった場合は、リンク情報の表示処理を終了する（ＳＴ３０４のＮ）。臓器等が検出された場合は（ＳＴ３０４のＹ）、検出された臓器等を表すキーワードを第三のキーワード群として取得し、第二のキーワード群のキーワードと第三のキーワード群のキーワードを比較する。両者の一致するキーワードが存在しない場合（ＳＴ３０５のＹ）は、リンク情報の表示処理を終了する（ＳＴ３０５のＮ）。両者の一致するキーワードが存在する場合（ＳＴ３０５のＹ）は、第二のキーワード群と第三のキーワード群の一致するキーワードをＳＴ１０６と同様、共通キーワードとして取得する。
この際、リンク情報作成手段６０は、複数の読影レポートから同一の共通キーワードが検出されている場合、読影レポートリスト１６０を作成する（ＳＴ３０６）。
図１３に示すように、読影レポートリスト１６０は、同一の共通キーワードと、該キーワードが検出された読影レポートの読影レポート特定情報を関連付けたものである。図１３においては、同一の共通キーワード「右肺上葉」に対して、読影レポート特定情報として、読影レポートの作成日１６０Ａを対応付けている。しかし、読影レポートリストの項目は、これに限られるものではなく、同一の共通キーワード１５０Ａに対して、読影レポート特定情報に加え、さらに、共通キーワードに対応する読影レポート上のキーワードとその前後の語句を抽出して対応付けてもよい。また、この読影レポートリストの読影レポート特定情報１６０Ａは、読影レポートの作成日の新しい順に表示されることが望ましい。
なお、一つの共通キーワードに対応するキーワードが一つの読影レポート上の複数箇所に記載されている場合、一つの共有キーワードに対応する読影レポートのキーワードの記載場所などの情報も、さらに、読影レポートリスト１６０に関連づけて表示することが望ましい。具体的には、１６０Ａを「右肺上葉（共通キーワード）：０９．０３．０３（共通キーワード特定情報）：１３０（最初から何番目の単語かを示す数）」のごとく示し、読影レポート上のキーワードの記載位置ごとに読影レポートリスト１６０上に選択可能に表示されることが望ましい。また、必要に応じて一つの共通キーワード１５０Ａに対応する医用画像上の臓器等の数などを併せてリスト中に表示しても良い。
リンク情報作成手段６０は、共通キーワードと医用画像から認識された臓器等からなるリンク情報を作成する（ＳＴ３０７）。この際に、読影レポートリストが作成されている共通キーワードについてのみ、リンク情報として、共通キーワードに読影レポートリストをさらに対応付ける。読影レポートリストが作成されていない共通キーワードについては図４に示すＳＴ１０６と同じようにリンク情報を作成する。
次に、リスト情報表示手段１００は、読影レポートリスト１６０が作成されていれば、医用画像上１３３にリンク情報作成手段６０から読影レポートリスト情報を得て、読影レポートリスト１６０を表示する（ＳＴ３０８）。リンク情報表示手段７０は、読影レポートリスト１６０が作成されている共通キーワードについては、臓器等を表す指標と対応する読影レポートリスト１６０を関連付けて表示する。この関連付けて表示するというのは、共通キーワードと対応する臓器を関連付けて表示する場合と同様に、共通キーワードと対応する臓器等を表す指標とを対応させて識別できるものであればよい。
読影レポートリスト１６０が作成されてない共通キーワードについては、ＳＴ１０７と同様に、共通キーワードと対応する臓器等の領域を表す指標を関連付けて表示する。また、リンク情報表示手段７０は、読影レポートリストに記載された読影レポート特定情報１６０Ａを、対応する読影レポート上の共通キーワードとハイパーリンクによってリンク付けして表示する。よって、読影レポートリストに記載された読影レポート特定情報１６０Ａを共通キーワード指定手段９０で指定することで、対応する読影レポート上の共通キーワードを容易に表示できる。ここで、本第三の実施形態を第二の実施形態に応用することも可能である。例えば、第二の実施形態のようにリンク情報表示手段７０が共通キーワードリスト１５０を表示する場合は、読影レポートリスト１６０が作成されていない共通キーワードリスト１５０上の共通キーワードについては、第二の実施形態に記載された表示を行い、読影レポートリスト１６０が作成された共通キーワードリスト１５０上の共通キーワードについては、かかる共通キーワードを指定することで読影レポートリスト１６０が表示されるようにしてもよい。
なお、一つの共通キーワードに対応する読影レポート上のキーワードが複数箇所に記載されている場合には、共通キーワードの指定に応じて、共通キーワードに対応するキーワードのうち、読影レポートの最初に記載されたキーワードの付近を識別可能に、読影レポートの全体が参照可能に表示されるようにしても良く、共通キーワードの指定に応じて、共通キーワードに対応する読影レポート上のキーワードが記載された複数箇所について、記載された複数の記載箇所ごとに、読影レポート上の各キーワードと各キーワードの前後の文字列からなるコメント文字列を抽出し、該コメント文字列を選択可能に別ウィンドウにリスト表示して、コメント文字列中の共通キーワードの指定に応じて、選択された共通キーワードを含むコメント文字列に対応する読影レポート上の記載箇所を識別可能に、読影レポートの全体が参照可能に表示されるようにしても良い。
このことにより、臓器等を表すキーワードが複数の読影レポートに記載されている場合、医用画像上からその複数の読影レポートを容易に参照することができ、診断を効率化できる。
また、読影レポート特定情報を読影レポートリスト上に表示した場合には、どの読影レポートに記載された情報であるかを特定して臓器等の経過を診断することが容易になる。例えば、レポートの作成日が医用画像上に表示された場合は、レポートの作成日からの時間の経過も考慮して診断することができ、正確に読影できる。また、読影レポートリストに記載される読影レポート特定情報を読影レポートの作成日の新しい順に並べて表示した場合には、時間の経過に従って同一の共通キーワードについての読影レポートの情報を容易に参照することができ、効率よく診断することができる。
読影レポートリスト上に、複数の読影レポート上のキーワードを含むコメントを併せて表示した場合には、より詳細な臓器等を表す情報を医用画像上から得られるため、容易に読影を行うことができる。また、読影レポートの臓器等を表す文字の前後は、その臓器等に関する記載を行っている可能性が高いため、共通キーワードに対応する読影レポート上のキーワードの前後の語句を表示させると、臓器等の理解を助ける情報が表示される可能性が高いと考えられる。
第三の実施形態の変形例として、リンク情報作成手段６０は、複数の読影レポートから同一の共通キーワードが検出されている場合、読影レポートリスト１６０を作成する（ＳＴ３０６）ことに替えて、共通キーワードに、対応する臓器等と、対応する最新の読影レポートを表す読影レポート特定情報を対応付ける。そして、リンク情報作成手段７０は、最新の読影レポート上のキーワードとハイパーリンクでリンク付けして共通キーワードを表示してもよい。この場合、医用画像上の共通キーワードを指定すると、最新の読影レポートに記載されたキーワードが表示されるため、最新の読影レポートに記載されたキーワードおよび最新の読影レポートの全体が容易に参照できる。同一の共通キーワードを含む読影レポートが複数ある場合、最新の読影レポート上の情報がもっとも現在の状態を正しく表している可能性が高いため、正確に診断することができる。
図１４、１５を用いて、第四の実施形態について説明する。図１４は、第四の実施形態の医用画像表示機能を示す機能ブロック図である。
第四の実施形態では、図１４に示す如く、第三のキーワード群取得手段４０は、第一のキーワード記憶手段に記憶されたキーワードに替えて、第二のキーワード群取得手段５０に取得されたキーワードを表す臓器等を検出する。図１４のその他の手段については、図３と同様であるため、説明を省略する。
図１５は、本第四の実施形態に示す医用画像情報表示方法を示すフローチャートである。ＳＴ４０１からＳＴ４０２は、ＳＴ１０１からＳＴ１０２とそれぞれ同じであるため、ＳＴ４０３以降のみ説明する。
第三のキーワード群取得手段４０は、第２のキーワード群取得手段５０に取得されたキーワードが表す臓器等を自動認識技術によって検出する（Ｓ４０３）。
臓器等が認識されると、認識された臓器等を含む医用画像１３３を特定する情報、および医用画像１３３上での臓器等の座標などの臓器等を表す臓器情報がＳＴ１０３と同様に取得される。
臓器等が検出されなかった場合は、リンク情報の表示処理を終了する（ＳＴ４０４のＮ）。臓器等が検出された場合は（ＳＴ４０４のＹ）、検出された臓器等を表すキーワードを共通キーワードとして取得する。リンク情報作成手段６０は、ＳＴ１０６と同様に、共通キーワードと医用画像から認識された臓器等からなるリンク情報を作成する（ＳＴ４０５）。次に、リンク情報表示手段７０は、ＳＴ１０７と同様に、医用画像上１３３にリンク情報作成手段６０からリンク情報を得て、臓器等の位置を表す指標１３５Ａと共通キーワード１３５Ｂ’を関連付けて表示する（ＳＴ４０６）。
第三のキーワード群検出手段４０が、第一のキーワード記憶手段２０に記憶されたキーワードの代わりに、第二のキーワード群取得手段５０に取得されたキーワードを表す臓器等を検出した場合は、臓器等を検出する回数を第二のキーワード群取得手段５０に取得されたキーワードの数だけに抑えることができ、第一のキーワード群の全てに対して臓器等を検出するよりも、処理効率がよい。
また、第四の実施形態の変形例を示す。第四の実施形態の変形例は、第一の実施形態と第四の実施形態とを併用するものであり、第三のキーワード群検出手段４０は、第一のキーワード群記憶手段２０に記憶されたキーワードのうち一部のキーワード１６１については、第一の実施形態と同様に、該一部のキーワード１６１を表す臓器等を検出する。そして、第一のキーワード群記憶手段２０に記憶されたキーワードのうち一部のキーワード１６１を除いた他のキーワード１６３については、第四の実施形態と同様に他のキーワード１６３が第二のキーワード群に含まれるキーワード１６５として検出された場合にのみ、キーワード１６５の表す臓器等を検出する。
この場合、第一のキーワードのうちの他のキーワード１６３については、読影レポートに記載されていた場合のみ臓器等を検出するため、第一のキーワード群の全てに対して臓器等を検出するよりも、処理効率がよい。また、一部のキーワード１６１として、臓器を表すキーワードを登録し、他のキーワード１６３として、病変を表すキーワードを登録すると、病変は臓器よりも種類が多く認識処理の負荷が高いため、病変を表すキーワードについては読影レポートに対応するキーワードが存在する場合にのみ自動認識処理を行うように設定でき、処理の負荷を効果的に抑えることができる。
第五の実施形態を説明する。図１６は、第五の実施形態の医用画像表示機能を示す機能ブロック図である。
第五の実施形態では、図１６に示す如く、第二のキーワード群取得手段５０は、第一のキーワード記憶手段に記憶されたキーワードに替えて、第三のキーワード群取得手段４０に検出された臓器等を表すキーワードと一致するキーワードを読影レポートから検出する。図１６のその他の手段については、図３と同様であるため、説明を省略する。この場合は、自動認識できた臓器等を表すキーワードについてのみ、読影レポート上のキーワードを検索して表示するため、第一のキーワード群の全てに対して読影レポート上のキーワードを検出するよりも、処理効率がよい。
以上の実施形態は、その本質を変容させることなく、他の実施形態にも適用できる。
１ モダリティ
２ 画像保管サーバ
３ 画像処理ワークステーション
９ ネットワーク
１０ 医用画像表示手段
２０ 第一のキーワード群記憶手段
３０ 読影レポート記憶手段
４０ 第二のキーワード群取得手段
５０ 第三のキーワード群取得手段
６０ リンク情報作成手段
７０ リンク情報表示手段
８０ 読影レポート表示手段
９０ 共通キーワード指定手段
１００ リスト表示手段
１９０ 医用画像表示画面
１０５ 所見欄
１０５Ａ 共通キーワード

Claims (13)

  1. 医用画像を取得して表示する医用画像表示手段と、
    前記医用画像に関する読影レポートを記憶する読影レポート記憶手段と、
    臓器または病変を表すキーワードの群からなる第一のキーワード群を記憶する第一のキーワード群記憶手段と、
    記憶された前記第一のキーワード群と一致する語句を前記読影レポートから検出し、検出した前記語句からなる第二のキーワード群を取得する第二のキーワード群取得手段と、
    記憶された前記第一のキーワード群が表す前記臓器または病変を前記医用画像から自動検出し、検出された前記臓器または病変に対応するキーワードからなる第三のキーワード群を取得する第三のキーワード群取得手段と、
    取得された前記第二のキーワード群と前記第三のキーワード群を比較して、両者が一致する共通キーワードを取得し、取得された該共通キーワードのそれぞれについて、該共通キーワードに対応する前記臓器または病変を対応付けたリンク情報を作成するリンク情報作成手段と、
    前記共通キーワードと、前記共通キーワードに対応する臓器または病変を表す指標を関連付けて表示するリンク情報表示手段とを備えた医用画像情報表示装置。
  2. 前記リンク情報作成手段が、前記共通キーワードに加えて前記読影レポートに記載された前記共通キーワードの前後の語句を前記リンク情報にさらに対応付けるものであり、
    前記リンク情報表示手段が、前記共通キーワードに加えて前記前後の語句を表示するものであることを特徴とする請求項１記載の医用画像情報表示装置。
  3. 前記第三のキーワード群取得手段は、複数の前記キーワードに基づいて同じ臓器または病変が検出された場合に、前記複数のキーワードのうち最も下位の概念を表すキーワードを前記臓器または病変に対応するキーワードとするものであることを特徴とする請求項１または２記載の医用画像情報表示装置。
  4. 前記第二のキーワード群取得手段は、前記読影レポートから同じ臓器を表す複数の前記一致する語句が検出された場合、検出された前記複数の一致する語句のうち最も下位の概念を表す語句を前記検出した語句とするものであることを特徴とする請求項１から３のいずれか１項記載の医用画像情報表示装置。
  5. 前記読影レポートを表示する読影レポート表示手段と、
    前記共通キーワードを指定する共通キーワード指定手段をさらに備え、
    前記リンク情報作成手段は、前記リンク情報表示手段が表示した前記共通キーワードを、前記読影レポート内の共通キーワードとハイパーリンクによってリンク付けするものであり、
    前記読影レポート表示手段は、前記リンク情報表示手段が表示した前記共通キーワードの指定に応じて、前記読影レポートの全体を表示し、該読影レポート内の指定された前記共通キーワードを他の文章より強調表示するものであることを特徴とする請求項１から４いずれか１項記載の医用画像情報表示装置。
  6. 複数の前記共通キーワードからなる共通キーワードリストを作成して表示するリスト表示手段をさらに備え、
    前記リンク情報表示手段は前記共通キーワードリストに表示された複数の共通キーワードのうちの一つの前記共通キーワードの指定に応じて、指定された該一つの共通キーワードに対応する前記臓器または病変を表す指標を表示するものであることを特徴とする請求項１から５いずれか１項記載の医用画像情報表示装置。
  7. 前記第二のキーワード群取得手段は、同一患者の複数の前記読影レポートから前記第二のキーワード群を検出するものであり、
    前記リンク情報作成手段は、前記リンク情報に、前記共通キーワードを含む読影レポートを特定する読影レポート特定情報をさらに対応付けることを特徴とする請求項１から５のいずれか１項記載の医用画像情報表示装置。
  8. 前記リンク情報作成手段は、前記複数の読影レポートに同じ共通キーワードに対応する前記語句を検出したとき、該複数のレポートのうち最新の読影レポートに記載された前記共通キーワードと、前記最新の読影レポートを特定する読影レポート特定情報とを前記リンク情報に対応付けるものであることを特徴とする請求項７記載の医用画像情報表示装置。
  9. 前記リンク情報作成手段は、複数の前記読影レポートに同じ共通キーワードに対応する前記語句を検出したとき、検出された前記複数の読影レポートを特定する読影レポート特定情報からなる読影レポートリストを作成し、作成された該読影レポートリストに記載された前記読影レポート特定情報と該読影レポート特定情報に対応する読影レポートに記載された前記同じ共通キーワードをそれぞれハイパーリンクでリンク付けするものであり、
    前記読影レポートリストをさらに表示するさらなるリスト表示手段をさらに備えたことを特徴とする請求項７記載の医用画像情報表示装置。
  10. 前記第三のキーワード群取得手段は、前記第一のキーワード群に替えて、前記第二のキーワード群が表す前記臓器または病変を前記医用画像から自動検出するものであることを特徴とする請求項１から９のいずれか１項記載の医用画像情報表示装置。
  11. 前記第三のキーワード群取得手段は、前記第一のキーワード群の一部のキーワードについて、該一部のキーワードが前記第二のキーワード群に含まれるキーワードと一致する場合にのみ、該キーワードが表す臓器または病変の検出を行うものであることを特徴とする請求項１から９のいずれか１項記載の医用画像情報表示装置。
  12. 医用画像を取得して表示し、
    前記医用画像に関する読影レポートを記憶し、
    臓器または病変を表すキーワードの群からなる第一のキーワード群を記憶し、
    記憶された前記第一のキーワード群と一致する語句を前記読影レポートから検出し、検出した前記語句からなる第二のキーワード群を取得し、
    記憶された前記第一のキーワード群が表す前記臓器または病変を前記医用画像から自動検出し、検出された前記臓器または病変に対応するキーワードからなる第三のキーワード群を取得し、
    取得された前記第二のキーワード群と前記第三のキーワード群を比較して、両者が一致する共通キーワードを取得し、取得された該共通キーワードのそれぞれについて、該共通キーワードに対応する前記臓器または病変を対応付けたリンク情報を作成し、
    前記共通キーワードと、前記共通キーワードに対応する臓器または病変を表す指標を関連付けて表示することを特徴とする医用画像情報表示方法。
  13. コンピュータを、
    医用画像を取得して表示する医用画像表示手段と、
    前記医用画像に関する読影レポートを記憶する読影レポート記憶手段と、
    臓器または病変を表すキーワードの群からなる第一のキーワード群を記憶する第一のキーワード群記憶手段と、
    記憶された前記第一のキーワード群と一致する語句を前記読影レポートから検出し、検出した前記語句からなる第二のキーワード群を取得する第二のキーワード群取得手段と、
    記憶された前記第一のキーワード群が表す前記臓器または病変を前記医用画像から自動検出し、検出された前記臓器または病変に対応するキーワードからなる第三のキーワード群を取得する第三のキーワード群取得手段と、
    取得された前記第二のキーワード群と前記第三のキーワード群を比較して、両者が一致する共通キーワードを取得し、取得された該共通キーワードのそれぞれについて、該共通キーワードに対応する前記臓器または病変を対応付けたリンク情報を作成するリンク情報作成手段と、
    前記共通キーワードと、前記共通キーワードに対応する臓器または病変を表す指標を関連付けて表示するリンク情報表示手段として機能させるための医用画像情報表示プログラム。
JP2009214231A 2009-09-16 2009-09-16 医用画像情報表示装置および方法並びにプログラム Active JP5308973B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2009214231A JP5308973B2 (ja) 2009-09-16 2009-09-16 医用画像情報表示装置および方法並びにプログラム
EP10176598A EP2306355A3 (en) 2009-09-16 2010-09-14 Medical image information display apparatus, medical image information display method, and recording medium on which medical image information display program is recorded
US12/882,784 US8423571B2 (en) 2009-09-16 2010-09-15 Medical image information display apparatus, medical image information display method, and recording medium on which medical image information display program is recorded

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009214231A JP5308973B2 (ja) 2009-09-16 2009-09-16 医用画像情報表示装置および方法並びにプログラム

Publications (2)

Publication Number Publication Date
JP2011062283A JP2011062283A (ja) 2011-03-31
JP5308973B2 true JP5308973B2 (ja) 2013-10-09

Family

ID=43303786

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009214231A Active JP5308973B2 (ja) 2009-09-16 2009-09-16 医用画像情報表示装置および方法並びにプログラム

Country Status (3)

Country Link
US (1) US8423571B2 (ja)
EP (1) EP2306355A3 (ja)
JP (1) JP5308973B2 (ja)

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8107701B2 (en) * 2006-03-29 2012-01-31 Hitachi Medical Corporation Medical image display system and medical image display program
JP5248157B2 (ja) * 2008-03-25 2013-07-31 株式会社東芝 レポート作成支援システム及びレポート作成装置
JP5455470B2 (ja) * 2009-07-02 2014-03-26 株式会社東芝 医用画像読影システム
JP5756363B2 (ja) * 2011-07-26 2015-07-29 株式会社ブルーオーシャンシステム プランニングシステム、サーバ、プランニング方法、コンピュータプログラム
WO2013072795A2 (en) * 2011-11-14 2013-05-23 Koninklijke Philips Electronics N.V. Processing a report
WO2013137280A1 (ja) * 2012-03-12 2013-09-19 株式会社 東芝 レポート作成支援装置及びレポート閲覧装置
CN103530491B (zh) * 2012-07-06 2017-06-30 佳能株式会社 用于生成检查报告的装置和方法
JP6076762B2 (ja) * 2013-02-01 2017-02-08 東芝メディカルシステムズ株式会社 レポート作成支援システム及びレポート作成支援プログラム
EP2967347B1 (en) 2013-03-15 2023-09-06 Synaptive Medical Inc. Intramodal synchronization of surgical data
US20140344701A1 (en) * 2013-05-17 2014-11-20 Algotec Systems Ltd. Method and system for image report interaction for medical image software
JP6407526B2 (ja) * 2013-12-17 2018-10-17 キヤノンメディカルシステムズ株式会社 医用情報処理システム、医用情報処理方法及び情報処理システム
JP6556426B2 (ja) * 2014-02-27 2019-08-07 キヤノンメディカルシステムズ株式会社 レポート作成装置
JP6396069B2 (ja) * 2014-04-23 2018-09-26 キヤノンメディカルシステムズ株式会社 医用レポート作成支援装置およびそのレポート表示制御方法
US10586618B2 (en) * 2014-05-07 2020-03-10 Lifetrack Medical Systems Private Ltd. Characterizing states of subject
JP6397277B2 (ja) * 2014-09-05 2018-09-26 キヤノン株式会社 読影レポート作成のための支援装置およびその制御方法
JP6657210B2 (ja) * 2014-11-03 2020-03-04 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． テキスト認識に基づくテキストイメージリンキングを伴うピクチャアーカイビングシステム
CN115376642A (zh) 2015-10-29 2022-11-22 佳能株式会社 医用图像处理装置及其控制方法和计算机可读介质
JP6797525B2 (ja) * 2015-10-29 2020-12-09 キヤノンメディカルシステムズ株式会社 医用画像処理装置、医用画像処理装置に搭載可能なプログラム、及び医用画像処理方法
JP6735080B2 (ja) * 2015-10-29 2020-08-05 キヤノンメディカルシステムズ株式会社 医用画像処理装置、医用画像処理装置に搭載可能なプログラム、及び医用画像処理方法
JP6337868B2 (ja) * 2015-10-29 2018-06-06 キヤノンマーケティングジャパン株式会社 医用画像処理装置、医用画像処理装置に搭載可能なプログラム、及び医用画像処理方法
JP6711678B2 (ja) * 2016-04-13 2020-06-17 キヤノン株式会社 情報処理システム、情報処理方法及びプログラム
US11416543B2 (en) * 2016-09-07 2022-08-16 International Business Machines Corporation Exam prefetching based on subject anatomy
US11189370B2 (en) 2016-09-07 2021-11-30 International Business Machines Corporation Exam prefetching based on subject anatomy
US10468128B2 (en) * 2017-04-11 2019-11-05 Canon Medical Systems Corporation Apparatus and method for presentation of medical data
EP3613053A1 (en) * 2017-04-18 2020-02-26 Koninklijke Philips N.V. Holistic patient radiology viewer
US20200058391A1 (en) * 2017-05-05 2020-02-20 Koninklijke Philips N.V. Dynamic system for delivering finding-based relevant clinical context in image interpretation environment
JP6719421B2 (ja) 2017-06-20 2020-07-08 富士フイルム株式会社 学習データ生成支援装置および学習データ生成支援方法並びに学習データ生成支援プログラム
US10803581B2 (en) * 2017-11-06 2020-10-13 Beijing Keya Medical Technology Co., Ltd. System and method for generating and editing diagnosis reports based on medical images
JP7565701B2 (ja) * 2019-04-05 2024-10-11 キヤノンメディカルシステムズ株式会社 医用情報処理装置及び医用情報処理方法
JP7420913B2 (ja) * 2020-02-20 2024-01-23 富士フイルム株式会社 情報処理装置、方法およびプログラム

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08215183A (ja) 1995-02-13 1996-08-27 Fuji Photo Film Co Ltd 石灰化検出方法および装置
JP3678378B2 (ja) 1996-09-20 2005-08-03 富士写真フイルム株式会社 異常陰影候補の検出方法および装置
JP4702971B2 (ja) 1999-11-10 2011-06-15 株式会社東芝 コンピュータ支援診断システム
JP4748843B2 (ja) 2000-01-25 2011-08-17 株式会社日立メディコ 臓器の特定領域抽出表示装置及び臓器の特定領域抽出表示方法をコンピュータに実行させるプログラムを記録した記録媒体
JP3486615B2 (ja) 2001-05-22 2004-01-13 畦元 将吾 医療用画像の領域抽出方法
US7058210B2 (en) 2001-11-20 2006-06-06 General Electric Company Method and system for lung disease detection
JP3934959B2 (ja) 2002-03-13 2007-06-20 株式会社日立製作所 医療画像処理システム
JP2003296451A (ja) * 2002-03-29 2003-10-17 Osaka Industrial Promotion Organization 診断レポート出力方法、診断レポート出力装置、診断レポート作成方法、診断レポート作成装置、コンピュータプログラム、及び記録媒体
JP2003298451A (ja) 2002-04-02 2003-10-17 Takuro Sato ダイレクトコンバージョン受信機の受信系に生じるｄｃオフセット（直流成分）のキャンセル回路
JP4352449B2 (ja) 2002-08-30 2009-10-28 株式会社日立メディコ 画像表示装置
DE10319546A1 (de) 2003-04-30 2004-11-25 Siemens Ag Verfahren und Vorrichtung zur automatischen Detektion von Anomalien in Gefäßstrukturen
JP4475625B2 (ja) * 2003-05-27 2010-06-09 キヤノン株式会社 画像処理装置及び画像処理方法
JP4719408B2 (ja) * 2003-07-09 2011-07-06 富士通株式会社 医療情報システム
JP4389011B2 (ja) * 2004-04-07 2009-12-24 国立大学法人名古屋大学 医用レポート作成装置、医用レポート作成方法及びそのプログラム
JP4574211B2 (ja) 2004-04-19 2010-11-04 キヤノン株式会社 光源装置、当該光源装置を有する露光装置
US7792778B2 (en) * 2006-07-31 2010-09-07 Siemens Medical Solutions Usa, Inc. Knowledge-based imaging CAD system
JP5279995B2 (ja) 2006-08-17 2013-09-04 富士フイルム株式会社 領域確定装置
JP5188693B2 (ja) 2006-10-13 2013-04-24 富士フイルム株式会社 画像処理装置
JP2008253293A (ja) 2007-03-30 2008-10-23 Fujifilm Corp Ｃｔ画像からの肺野領域抽出方法
JP5105997B2 (ja) 2007-08-21 2012-12-26 株式会社東芝 医用画像処理装置、医用画像診断装置、及びプログラム
JP2009082227A (ja) * 2007-09-27 2009-04-23 Fujifilm Corp 医用レポートシステム、医用レポート作成装置、及び医用レポート作成方法

Also Published As

Publication number Publication date
JP2011062283A (ja) 2011-03-31
EP2306355A3 (en) 2011-10-05
EP2306355A2 (en) 2011-04-06
US20110066635A1 (en) 2011-03-17
US8423571B2 (en) 2013-04-16

Similar Documents

Publication Publication Date Title
JP5308973B2 (ja) 医用画像情報表示装置および方法並びにプログラム
JP5349384B2 (ja) 医用画像表示装置および方法並びにプログラム
EP2478834B1 (en) Radiograph interpretation report creation device, method, and program
US8744149B2 (en) Medical image processing apparatus and method and computer-readable recording medium for image data from multiple viewpoints
JP5670079B2 (ja) 医用画像表示装置および方法、並びにプログラム
JP5405678B2 (ja) 医用レポート作成装置、医用レポート参照装置及びそのプログラム
CN102915400B (zh) 用于计算机支持地显示或分析医学检查数据的方法和装置
JP5263997B2 (ja) 医用レポート作成装置、医用レポート作成方法および医用レポート作成プログラム
US20160012319A1 (en) A context driven summary view of radiology findings
JP5242022B2 (ja) 医用レポート作成装置、医用レポート参照装置及びそのプログラム
JP2011092684A (ja) 病変領域抽出装置および方法並びにプログラム
JP2020518047A (ja) 全人的患者放射線医療ビューワ
US20210350908A1 (en) Annotation support apparatus, annotation support method, and annotation support program
JP2024009108A (ja) 文書作成支援装置、文書作成支援方法及びプログラム
US20230005580A1 (en) Document creation support apparatus, method, and program
US8515213B2 (en) System, method and computer instructions for aiding image analysis
JP7376674B2 (ja) 文書作成支援装置、文書作成支援方法及びプログラム
JP2008006187A (ja) 医用画像表示処理装置、及び、医用画像表示処理プログラム
WO2021107099A1 (ja) 文書作成支援装置、文書作成支援方法及びプログラム
Huang et al. Image-matching as a medical diagnostic support tool (DST) for brain diseases in children
WO2022220158A1 (ja) 作業支援装置、作業支援方法、及び作業支援プログラム
US20230281810A1 (en) Image display apparatus, method, and program
WO2023157957A1 (ja) 情報処理装置、情報処理方法及び情報処理プログラム

Legal Events

Date Code Title Description
RD15 Notification of revocation of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7435

Effective date: 20110524

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130430

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130523

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130625

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130701

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5308973

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250