[go: up one dir, main page]

JP2005095567A - Endoscope system - Google Patents

Endoscope system Download PDF

Info

Publication number
JP2005095567A
JP2005095567A JP2004118257A JP2004118257A JP2005095567A JP 2005095567 A JP2005095567 A JP 2005095567A JP 2004118257 A JP2004118257 A JP 2004118257A JP 2004118257 A JP2004118257 A JP 2004118257A JP 2005095567 A JP2005095567 A JP 2005095567A
Authority
JP
Japan
Prior art keywords
time information
communication
information
system controller
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004118257A
Other languages
Japanese (ja)
Other versions
JP2005095567A5 (en
Inventor
Masahide Yamaki
正英 八巻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2004118257A priority Critical patent/JP2005095567A/en
Priority to US11/104,886 priority patent/US8725525B2/en
Publication of JP2005095567A publication Critical patent/JP2005095567A/en
Publication of JP2005095567A5 publication Critical patent/JP2005095567A5/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • Endoscopes (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To faithfully reproduce treatment contents performed during an operation by preserving/reproducing correct medical information. <P>SOLUTION: A system controller 22 includes a control part 41 internally having time information (RTC: real-time clock); a multi-signal input/output processing part 45; a first communication I/F 40 for performing serial communication of RS-232C with a peripheral apparatus; a second communication I/F 46 for communication with a patient monitor system 4; and a storage part 50 for preserving image/sound information. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、複数の医療機器を制御する内視鏡システムに関する。   The present invention relates to an endoscope system that controls a plurality of medical devices.

従来、内視鏡手術において、術者は術中画像を記録装置(以下VTR)に録画しておき、手術後に、処置器具の動きや組織の状態などからどのような処置を行ったか確認していた。   Conventionally, in endoscopic surgery, an operator records an intraoperative image on a recording device (hereinafter referred to as a VTR), and after the operation, confirms what kind of treatment has been performed based on the movement of the treatment instrument and the state of the tissue. .

また、内視鏡システムにおいては、電気メスの設定・出力回数や気腹装置の送気量、患者の腹腔圧パラメータの変化を保存しておくことができ、確実に手術が行なわれたか確認することが出来た。   In addition, in the endoscope system, the setting and output frequency of the electric knife, the air supply volume of the pneumoperitoneum, and the changes in the patient's abdominal pressure parameters can be saved, and it is confirmed whether the operation has been performed reliably. I was able to.

どちらも、手術を行った証拠としては有効であるが、VTRだけであったり、パラメータの変化だけでは、どのように手術が行なわれたかがわかりづらい。   Both are effective as evidence that an operation has been performed, but it is difficult to understand how the operation was performed by using only a VTR or a change in parameters.

もし、その両方を関連つけることができれば、手術の行なわれた履歴を忠実に再現をすることができる。   If both can be related, the history of surgery can be faithfully reproduced.

そこで、例えば特開2003−76786号公報、特開2003−70748号公報等において、PCで内視鏡画像をディジタルデータとして取り込み、医療情報と一緒にネットワーク伝送にて配信し、送り先のPC上でそれぞれ同時に表示させようとする技術が提案されている。
特開2003−76786号公報 特開2003−70748号公報
Therefore, for example, in Japanese Patent Laid-Open No. 2003-76786 and Japanese Patent Laid-Open No. 2003-70748, an endoscope image is captured as digital data by a PC, distributed together with medical information by network transmission, and on the destination PC. Technologies that try to display each simultaneously are proposed.
JP 2003-76786 A JP 2003-70748 A

従来よりネットワーク伝送を用いる技術においては、一般的にはTCP/IP、UDP(User Datagram Protocol) 、RTP(Real-time Transport Protocol)などの通信方式がある。   2. Description of the Related Art Conventionally, techniques using network transmission generally include communication methods such as TCP / IP, UDP (User Datagram Protocol), and RTP (Real-time Transport Protocol).

しかしながら、これらの通信プロトコルは、P2P(Peer to Peer)、もしくは1対Nの伝送するためのものであり、例えば上記内視鏡システムのような、異なる通信プロトコルを持つ複数の医療装置からリアルタイムにパラメータを取得しようとする場合(N対1の伝送)は、患者もしくは機器パラメータの変化と画像の変化にずれが生じてしまう。   However, these communication protocols are for P2P (Peer to Peer) or 1-to-N transmission, and in real time from a plurality of medical devices having different communication protocols such as the above-described endoscope system. When trying to acquire parameters (N-to-one transmission), there is a difference between changes in patient or device parameters and changes in images.

その理由として、内視鏡画像の生成装置と、腹腔圧や血圧、そして、治療機の出力パラメータを生成する装置は各々異なるものであり、各装置のもつ時間情報にずれがあったり、通信によるディレイ時間があるため、内視鏡画像の動作と機器パラメータの変化が一致しないので正確な情報表示にならないからである。   The reason is that the endoscopic image generation device is different from the abdominal pressure and blood pressure, and the device that generates the output parameters of the treatment machine. This is because, since there is a delay time, the operation of the endoscopic image does not match the change in the device parameter, so that accurate information display cannot be performed.

手術中は通信によりパラメータを取得する機器が存在しているので、若干のディレイがあったとしても装置側の警告やパラメータ変化を見て確認することはできるが、保存/再生においては、各機器側の情報を見ることができないため不自然になる。   Since there are devices that acquire parameters by communication during surgery, even if there is a slight delay, it is possible to check by checking warnings and parameter changes on the device side. It becomes unnatural because the information on the side cannot be seen.

本発明は、上記事情に鑑みてなされたものであり、正確な医療情報の保存/再生し、手術中行なわれた処置内容を忠実に再現させることのできる内視鏡システムを提供することを目的としている。   The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an endoscope system that can accurately store / reproduce medical information and faithfully reproduce the contents of treatment performed during surgery. It is said.

本発明の内視鏡システムは、複数の周辺機器と通信可能な集中制御装置を有する内視鏡システムにおいて、前記集中制御装置が、前記複数の周辺機器から保有する第1の時間情報を取得する時間情報取得手段と、第2の時間情報を管理する時間情管理得手段と、前記第2の時間情報に基づき、前記複数の周辺機器が保有する前記第1の時間情報を補正する時間情報補正手段とを備えて構成される。   The endoscope system of the present invention is an endoscope system having a central control device capable of communicating with a plurality of peripheral devices, and the central control device acquires first time information held from the plurality of peripheral devices. Time information correction means for correcting the first time information held by the plurality of peripheral devices based on the second time information, time information acquisition means for managing time information acquisition means, time information management means for managing second time information Means.

本発明によれば、正確な医療情報の保存/再生し、手術中行なわれた処置内容を忠実に再現させることができるという効果がある。   According to the present invention, there is an effect that accurate medical information can be stored / reproduced and the contents of treatment performed during the operation can be faithfully reproduced.

以下、図面を参照しながら本発明の実施例について述べる。   Embodiments of the present invention will be described below with reference to the drawings.

図1ないし図7は本発明の実施例1に係わり、図1は内視鏡手術システムの構成を示す構成図、図2は図1のシステムコントローラの構成を示すブロック図、図3は図2の記憶部の記憶エリアの構成を示す図、図4は図1の表示装置における表示レイアウトの一例を示す図、図5は図1の電気メスの動作発生タイミングを示す図、図6は図2のシステムコントローラの作用を示すフローチャート、図7は図6の順次保存を行なう保存処理を示すフローチャートである。   1 to 7 relate to Embodiment 1 of the present invention, FIG. 1 is a block diagram showing the configuration of an endoscopic surgery system, FIG. 2 is a block diagram showing the configuration of the system controller of FIG. 1, and FIG. FIG. 4 is a diagram showing an example of a display layout in the display device of FIG. 1, FIG. 5 is a diagram showing operation generation timing of the electric knife of FIG. 1, and FIG. 7 is a flowchart showing the operation of the system controller shown in FIG. 7, and FIG.

まず、図1を用いて手術室2に配置される内視鏡手術システム3の全体構成を説明する。   First, the overall configuration of the endoscopic surgery system 3 arranged in the operating room 2 will be described with reference to FIG.

図1に示すように、手術室2内には、患者48が横たわる患者ベッド10と、内視鏡手術システム3が配置される。この内視鏡手術システム3は、第1カート11及び第2カート12を有している。   As shown in FIG. 1, a patient bed 10 on which a patient 48 lies and an endoscopic surgery system 3 are arranged in the operating room 2. The endoscopic surgery system 3 includes a first cart 11 and a second cart 12.

第1カート11には、被制御装置である医療機器として例えば電気メス装置13、気腹装置14、内視鏡用カメラ装置15、光源装置16及びビデオテープレコーダ(VTR)17等の装置類と、二酸化炭素等を充填したガスボンベ18が載置されている。内視鏡用カメラ装置15は、カメラケーブル31aを介して第1の内視鏡31に接続される。光源装置16は、ライトガイドケーブル31bを介して第1の内視鏡31に接続される。   The first cart 11 includes devices such as an electric scalpel device 13, an insufflation device 14, an endoscope camera device 15, a light source device 16, and a video tape recorder (VTR) 17 as medical devices that are controlled devices. A gas cylinder 18 filled with carbon dioxide or the like is placed. The endoscope camera device 15 is connected to the first endoscope 31 via a camera cable 31a. The light source device 16 is connected to the first endoscope 31 via the light guide cable 31b.

また、第1カート11には、表示装置19、第1の集中表示パネル20、操作パネル21等が載置されている。表示装置19は、内視鏡画像等を表示する、例えばTVモニタである。   In addition, a display device 19, a first central display panel 20, an operation panel 21, and the like are placed on the first cart 11. The display device 19 is, for example, a TV monitor that displays an endoscopic image or the like.

集中表示パネル20は、手術中のあらゆるデータを選択的に表示させることが可能な表示手段となっている。操作パネル21は、例えば液晶ディスプレイ等の表示部とこの表示部上に一体的に設けられた例えばタッチセンサにより構成され、非滅菌域にいる看護師等が操作する集中操作装置になっている。   The central display panel 20 is a display means that can selectively display all data during the operation. The operation panel 21 includes a display unit such as a liquid crystal display and a touch sensor provided integrally on the display unit, for example, and is a centralized operation device operated by a nurse or the like in a non-sterile area.

更に、第1カート11には、制御装置であるシステムコントローラ22が載置されている。このシステムコントローラ22には、上述の電気メス装置13と気腹装置14と内視鏡用カメラ装置15と光源装置16とVTR17とが、図示しない通信線を介して接続されている。システムコントローラ22には、ヘッドセット型のマイク33が接続できるようになっており、システムコントローラ22はマイク33から入力された音声を認識し、術者の音声により各機器を制御できるようになっている。   Furthermore, a system controller 22 as a control device is placed on the first cart 11. The system controller 22 is connected to the electrosurgical knife device 13, the pneumoperitoneum device 14, the endoscope camera device 15, the light source device 16, and the VTR 17 via a communication line (not shown). A headset-type microphone 33 can be connected to the system controller 22, and the system controller 22 can recognize the voice input from the microphone 33 and control each device by the operator's voice. Yes.

また、第1カート11には、第1の内視鏡31や、電気メス装置13の処置具などに埋め込まれているIDタグより、物の個別ID情報を無線にて読み取り/書き取りできるRFID(Radio Frequency Identification)端末35が設けられている。   In addition, the first cart 11 has an RFID (RFID) capable of wirelessly reading / writing individual ID information of an object from an ID tag embedded in the first endoscope 31 or a treatment tool of the electric scalpel device 13 or the like. Radio Frequency Identification) terminal 35 is provided.

一方、前記第2カート12には、被制御装置である内視鏡用カメラ装置23、光源装置24、画像処理装置25、表示装置26及び第2の集中表示パネル27とが載置されている。   On the other hand, an endoscope camera device 23, a light source device 24, an image processing device 25, a display device 26, and a second centralized display panel 27, which are controlled devices, are placed on the second cart 12. .

内視鏡用カメラ装置23はカメラケーブル32aを介して第2の内視鏡32に接続される。光源装置24はライトガイドケーブル32bを介して第2の内視鏡32に接続される。   The endoscope camera device 23 is connected to the second endoscope 32 via a camera cable 32a. The light source device 24 is connected to the second endoscope 32 via a light guide cable 32b.

表示装置26は、内視鏡用カメラ装置23でとらえた内視鏡画像等を表示する。第2の集中表示パネル27は、手術中のあらゆるデータを選択的に表示させることが可能になっている。   The display device 26 displays an endoscope image or the like captured by the endoscope camera device 23. The second central display panel 27 can selectively display any data during the operation.

これら内視鏡用カメラ装置23と光源装置24と画像処理装置25とは、第2カート12に載置された中継ユニット28に図示しない通信線を介して接続されている。そして、この中継ユニット28は、中継ケーブル29によって、上述の第1カート11に搭載されているシステムコントローラ22に接続されている。   The endoscope camera device 23, the light source device 24, and the image processing device 25 are connected to a relay unit 28 placed on the second cart 12 via a communication line (not shown). The relay unit 28 is connected to the system controller 22 mounted on the first cart 11 by a relay cable 29.

したがって、システムコントローラ22は、これらの第2カート12に搭載されているカメラ装置23、光源装置24及び画像処理装置25と、第1カート11に搭載されている電気メス装置13、気腹装置14、カメラ装置15、光源装置16及びVTR17とを集中制御するようになっている。このため、システムコントローラ22とこれらの装置との間で通信が行われている場合、システムコントローラ22は、上述の操作パネル21の液晶ディスプレイ上に、接続されている装置の設定状態や操作スイッチ等の設定画面を表示できるようになっている。さらに、システムコントローラ22は、所望の操作スイッチが触れられて所定領域のタッチセンサが操作されることによって設定値の変更等の操作入力が行えるようになっている。   Therefore, the system controller 22 includes the camera device 23, the light source device 24, and the image processing device 25 mounted on the second cart 12, the electric scalpel device 13 and the pneumoperitoneum device 14 mounted on the first cart 11. The camera device 15, the light source device 16 and the VTR 17 are centrally controlled. For this reason, when communication is performed between the system controller 22 and these devices, the system controller 22 sets the setting state of the devices connected to the above-described liquid crystal display of the operation panel 21, operation switches, and the like. The setting screen of can be displayed. Further, the system controller 22 can perform an operation input such as a change of a set value by touching a desired operation switch and operating a touch sensor in a predetermined area.

リモートコントローラ30は、滅菌域にいる執刀医等が操作する第2集中操作装置であり、通信が成立している他の装置を、システムコントローラ22を介して操作することができるようになっている。   The remote controller 30 is a second centralized operation device operated by a surgeon or the like in the sterilization area, and can operate other devices that have established communication via the system controller 22. .

このシステムコントローラ22は、ケーブル9により患者モニタシステム4に接続されており、後述するように、患者モニタシステム4から取得した生体情報を解析し、この解析結果を所要の表示装置に表示させることができる。   This system controller 22 is connected to the patient monitor system 4 by the cable 9 and, as will be described later, analyzes the biological information acquired from the patient monitor system 4 and displays the analysis result on a required display device. it can.

また、システムコントローラ22には、通信手段である赤外線通信ポート(図示せず)が取り付けられている。この赤外線通信ポートは、表示装置19の近傍等の赤外線が照射しやすい位置に設けられ、システムコントローラ22との間がケーブルで接続されている。   The system controller 22 is provided with an infrared communication port (not shown) which is a communication means. The infrared communication port is provided at a position where infrared rays are easily emitted, such as in the vicinity of the display device 19, and is connected to the system controller 22 with a cable.

システムコントローラ22は、図2に示すように、時間情報(RTC:リアルタイムクロック)を内部に有する時間情報補正手段である制御部41(一般的なマイコン機能として持つRTCを指す)と、内視鏡カメラ装置15と光源装置16と気腹装置14と電気メス装置13との間でRS−232Cのシリアル通信を行なう第1通信I/F4 0とを備えている。   As shown in FIG. 2, the system controller 22 includes a control unit 41 (pointing to an RTC having a general microcomputer function) that is time information correction means having time information (RTC: real time clock) therein, an endoscope, A first communication I / F 40 that performs RS-232C serial communication among the camera device 15, the light source device 16, the pneumoperitoneum device 14, and the electric knife device 13 is provided.

また、第1の内視鏡31や、電気メス装置13の処置具などに埋め込まれているIDタグより、物の個別ID情報を無線にて読み取り/書き取りできるRFID(Radio Frequency Identification)端末35からは、読み込んだスコープIDや処置具ID、または、薬品ID等の個別ID情報を読み取ることができる。読み込んだ個別ID情報をバイタルサインや機器パラメータ履歴、及び画像の時間軸と関連付けることで術者や看護師がどのような処置を行なったかを履歴として残せる。   Further, from an RFID (Radio Frequency Identification) terminal 35 capable of wirelessly reading / writing individual ID information of an object from an ID tag embedded in the first endoscope 31 or a treatment instrument of the electric scalpel device 13 or the like. Can read the individual ID information such as the read scope ID, treatment instrument ID, or medicine ID. By correlating the read individual ID information with the vital signs, device parameter history, and time axis of the image, it is possible to leave as a history what kind of treatment the surgeon or nurse performed.

本実施例では、各通信I/Fで通信を行う内視鏡カメラ装置15等にも、それぞれRTCが設けられており、を持っており、かつ共有I/Fが設けられている。   In the present embodiment, the endoscopic camera device 15 and the like that communicate with each communication I / F are each provided with an RTC, and are provided with a shared I / F.

なお、本実施例のシステムコントローラ22では、第1通信I/F4 0によりRS−232Cシリアル通信を行うとしているが、イーサネット(R)によるネットワーク通信、Bluetoothなどのような無線通信、赤外線通信で内視鏡カメラ装置15と光源装置16と気腹装置14と電気メス装置13との間の通信を行ってもよい。   In the system controller 22 of the present embodiment, RS-232C serial communication is performed by the first communication I / F 40. However, network communication using Ethernet (R), wireless communication such as Bluetooth, and infrared communication are used. Communication between the endoscope camera device 15, the light source device 16, the pneumoperitoneum device 14, and the electric knife device 13 may be performed.

またシステムコントローラ22には、前記内視鏡カメラ装置15で撮像された内視鏡画像取得処理(一般的なキャプチャ処理やA/D、D/A変換処理)、もしくはマイク33などから手術室内の会話の録音(圧縮・伸張処理)もしくは手術中の術者のコメントをテキスト化する処理(音声認識処理)を行なうマルチ信号入出力処理部45がある。   In addition, the system controller 22 receives an endoscopic image acquisition process (general capture process, A / D, D / A conversion process) captured by the endoscopic camera device 15 or a microphone 33 or the like in the operating room. There is a multi-signal input / output processing unit 45 that performs conversation recording (compression / decompression processing) or processing (speech recognition processing) for converting an operator's comment during surgery into text.

また、制御部41は第2通信通信I/F46を介して、患者モニタシステム4と通信ができる構成となっている。ここで、第2通信通信I/F46は、ローカルなIPアドレスが割り振られている機器との通信を行うI/Fである。   The control unit 41 is configured to be able to communicate with the patient monitor system 4 via the second communication communication I / F 46. Here, the second communication communication I / F 46 is an I / F that performs communication with a device to which a local IP address is assigned.

なお、この第2通信通信I/F46による通信は、TCP/IPプロトコルやUDPプロトコルのLANネットワーク通信でもUSBやRS−232Cのようなシリアル通信でも何でも良い。   The communication by the second communication communication I / F 46 may be any LAN network communication of TCP / IP protocol or UDP protocol, or serial communication such as USB or RS-232C.

また、制御部41は、インターネットや図示しない他の病院のPCと通信可能な第3通信I/F44に接続されている。ここで、第3通信通信I/F44は、グローバルなIPアドレスが割り振られている機器との通信を行うI/Fである。   The control unit 41 is connected to a third communication I / F 44 that can communicate with the Internet or a PC of another hospital (not shown). Here, the third communication communication I / F 44 is an I / F that performs communication with a device to which a global IP address is assigned.

さらに制御部41は、前述した各通信I/Fを介して取得した機器のパラメータや、画像/音声情報を取得する、例えばRAMのようなワークメモリで構成される時間情報取得手段であるパラメータ取得部49と、ある一定の期間の機器パラメータや、画像/音声情報を保存する保存手段である記憶部50とに接続されている。   Further, the control unit 41 acquires parameter of the device acquired through each communication I / F described above and parameter acquisition which is a time information acquisition unit configured by a work memory such as a RAM for acquiring image / audio information. The unit 49 is connected to a storage unit 50 which is a storage unit for storing device parameters and image / audio information for a certain period.

また、制御部41は、再生手段である表示I/F5 1 を介して、前記表示装置26に機器パラメータや画像/音声情報を表示することができるようになっている。   Further, the control unit 41 can display device parameters and image / audio information on the display device 26 via the display I / F 5 1 which is a reproducing means.

記憶部50は、図3に示すように、取得した情報を識別する識別情報(カテゴリ別に、機器情報、患者情報、個体識別情報)を記憶するヘッダー情報エリア200と、時間情報を記憶する時間情報エリア52と、例えばIDで管理したときの機器ID情報を記憶するIDエリア53と、設定値/測定値などのデータエリア54とで記憶エリアを構成している。   As shown in FIG. 3, the storage unit 50 includes a header information area 200 that stores identification information (device information, patient information, individual identification information for each category) that identifies acquired information, and time information that stores time information. A storage area is configured by the area 52, for example, an ID area 53 for storing device ID information when managed by ID, and a data area 54 for setting values / measurement values.

なお、識別情報は、患者データや、機器メンテナンス、処置具などの情報取得として、所望のデータ抽出時に使用される。   The identification information is used at the time of extracting desired data for acquiring information such as patient data, device maintenance, and treatment tools.

記憶部50は一般的なアドレス管理がなされており、電気的にリード/ライト可能なメモリであって、例えばフラッシュROM(スマートメディアやコンパクトフラッシュ(R)など)や、HDD等により構成される。   The storage unit 50 is generally address-managed, and is an electrically readable / writable memory, and includes, for example, a flash ROM (such as smart media and compact flash (R)), an HDD, and the like.

また、記憶部50では、図3のように音声データや画像データ、機器パラメータ、患者生体情報などが指定されたデータエリア54に格納でき、画像/音声再生する時は、特定のデータエリア54からデータを読み出し、前記表示装置26などに再生表示できる構成になっている。   In addition, the storage unit 50 can store voice data, image data, device parameters, patient biometric information, and the like as shown in FIG. 3 in a designated data area 54. The data can be read out and reproduced and displayed on the display device 26 or the like.

なお、音声データや画像データは、機器パラメータ、患者生体情報等と関連づけられて、データエリア54とは別の領域である、記憶部50の音声/画像データエリア(図示せず)に格納されている。   Note that the audio data and image data are stored in an audio / image data area (not shown) of the storage unit 50, which is associated with device parameters, patient biological information, and the like and is an area different from the data area 54. Yes.

本実施例では、保存手段がシステムコントローラ22内の記憶部50となっているが、USB、ATAカードタイプのように着脱自在の記憶手段で構成し、別のPC等で着脱自在の記憶手段がパラメータをリードし再生しても構わない。   In this embodiment, the storage means is the storage unit 50 in the system controller 22, but it is composed of a removable storage means such as a USB or ATA card type, and a removable storage means for another PC or the like. The parameters may be read and played back.

時間情報エリア52は、後述する計算により算出された実時間情報55と補正値56(後述する各パラメータ取得時の通信のずれと各機器のRTCのずれ時間を加算した)を格納するエリアからなる。   The time information area 52 includes an area for storing real time information 55 calculated by calculation described later and a correction value 56 (added a communication shift at the time of each parameter acquisition described later and an RTC shift time of each device). .

なお、符号63は各機器のRTCで取得した時間情報A、符号64はシステム初期化であらかじめ取得しておいた補正値を算出する為のRTCのずれ時間B、符号65は各機器の最新時間情報を取得したときのシステムコントローラ22のRTCで取得した時間情報Cである。   Reference numeral 63 is time information A acquired by the RTC of each device, reference numeral 64 is an RTC shift time B for calculating a correction value acquired in advance by system initialization, and reference numeral 65 is the latest time of each device. This is time information C acquired by the RTC of the system controller 22 when the information is acquired.

図4は前述した表示装置26で機器パラメータ、画像/音声データを再生するときのレイアウト例を示す。表示装置26は、CRT、LCD、PDPのようなディスプレイであり、図4では、内視鏡画像をPinP(ピクチャ・イン・ピクチャ)表示させる内視鏡画像動画/静止画再生エリア57と、医療情報をマルチ再生する医療情報マルチ再生エリア58と、各機器のパラメータを表示するパラメータ数値表示エリア59を持つレイアウト構成になっている。   FIG. 4 shows a layout example when device parameters and image / audio data are reproduced on the display device 26 described above. The display device 26 is a display such as a CRT, LCD, or PDP. In FIG. 4, an endoscope image moving image / still image reproduction area 57 for displaying an endoscope image in PinP (picture-in-picture), a medical device, and the like. The layout configuration includes a medical information multi-reproduction area 58 for multi-reproducing information and a parameter numerical value display area 59 for displaying parameters of each device.

図4に示すように、医療情報マルチ再生エリア58は、時間補正して保存されている、例えば患者モニタシステム4から取得するバイタルサインデータの時間変化及び各医療機器の操作設定値/測定値の時間変化を波形で表示ができ、取得した音声データをテキスト表示することが可能となっている。   As shown in FIG. 4, the medical information multi-reproduction area 58 stores time-corrected vital sign data acquired from, for example, the patient monitor system 4 and operation setting values / measurement values of each medical device. The time change can be displayed as a waveform, and the acquired voice data can be displayed as text.

なお、医療情報マルチ再生エリア58では、カーソル150を図示しないマウスやタッチパネル等のポインティングデバイスで時間軸を指定することで、関連付いている画像やパラメータをリンクさせて記憶部50に記憶させたり、内視鏡画像動画/静止画再生エリア57及びパラメータ数値表示エリア59において関連付いている画像やパラメータを再生/表示することができるようになっている。   In the medical information multi-reproduction area 58, the cursor 150 is designated by a pointing device such as a mouse or a touch panel (not shown) so that related images and parameters are linked and stored in the storage unit 50. In the endoscope image moving image / still image reproduction area 57 and the parameter numerical value display area 59, the associated images and parameters can be reproduced / displayed.

また、パラメータ数値表示エリア59は、システムコントローラ22が各機器と通信にて取得してきた操作情報からなる最新情報(パラメータ取得部51に格納)をリアルタイムで表示/更新するようになっている。   The parameter numerical value display area 59 displays / updates the latest information (stored in the parameter acquisition unit 51) including operation information acquired by the system controller 22 through communication with each device in real time.

図5は横軸を時間の流れとして示し、各々の動作発生タイミングの時間を説明している。図5の中の画像データは、術者が電気メスの出力を行なったタイミングにおける、内視鏡動画像てあって、画像データとしては、出力した電気メスが組織を切開している情報を表示していることになる。このときのタイミングを、各機器のRTCで取得した時間情報A63とする。   FIG. 5 shows the horizontal axis as a time flow, and explains the time of each operation occurrence timing. The image data in FIG. 5 is an endoscopic moving image at the timing when the operator outputs the electric scalpel, and the image data displays information that the output electric scalpel is incising the tissue. Will be. The timing at this time is time information A63 acquired by the RTC of each device.

次に、システムコントローラ22が通信経由で、切開出力を行なったというパラメータを取得する時間を、電気メス出力変化取得のタイミングとし、システムコントローラ22のRTCで取得した時間情報C65とする。時間情報A63と時間情報C65の間には、通信による遅延時間(ずれ)と、各機器ごとのRTC時間情報のずれ分B64が含まれている。   Next, the time when the system controller 22 acquires the parameter that the incision output has been performed via communication is set as the timing of acquiring the electric knife output change, and the time information C65 acquired by the RTC of the system controller 22 is used. Between the time information A63 and the time information C65, a delay time (deviation) due to communication and a deviation B64 of RTC time information for each device are included.

つまり、この2つのずれ分を補正することで、画像データと同期した実時間情報を得ることができる。   That is, by correcting these two deviations, real-time information synchronized with the image data can be obtained.

まず、内視鏡手術の準備を行なう。事前に看護師が患者48をベッド10に搬送し、麻酔の術者が麻酔をかける。術者は患者カルテ確認、手技確認を行なう。看護師は患者介助、麻酔介助、機器の設置、及び図示しない使用器具の準備、内視鏡、送気チューブなどの接続を行ない、図1の内視鏡システム図のように準備する。システムコントローラ22及び、各機器、患者モニタシステム4も起動する。   First, preparation for endoscopic surgery is performed. In advance, the nurse carries the patient 48 to the bed 10 and an anesthesia operator performs anesthesia. The surgeon confirms the patient chart and procedure. The nurse performs patient assistance, anesthesia assistance, equipment installation, preparation of use tools (not shown), an endoscope, an air supply tube, etc., and prepares as shown in the endoscope system diagram of FIG. The system controller 22, each device, and the patient monitor system 4 are also activated.

そして、図6に示すように、ステップS1にて、システムコントローラ22と通信可能な機器の間で通信確立を行い、各機器の時間情報を取得し、システムコントローラ22内の時間情報との差分を算出する。   Then, as shown in FIG. 6, in step S <b> 1, communication is established between devices that can communicate with the system controller 22, time information of each device is acquired, and a difference from the time information in the system controller 22 is obtained. calculate.

ステップS2において、各機器ごとの時間情報の差分(以下補正値を算出する為のRTCのずれ時間B64)を取得し、ステップS3において各機器のパラメータを取得する。   In step S2, a difference in time information for each device (hereinafter, RTC deviation time B64 for calculating a correction value) is acquired, and in step S3, parameters of each device are acquired.

ステップS4においてパラメータの更新があったら、ステップS5において表示装置26で表示されている数値を更新し、ステップS6において記憶部50にパラメータを順次保存しておく。   If the parameter is updated in step S4, the numerical value displayed on the display device 26 is updated in step S5, and the parameter is sequentially stored in the storage unit 50 in step S6.

ステップS7において通信が終了したならば、ステップS8で通信動作終了となり、そうでなければ順次各機器と通信を行なう。   If the communication is finished in step S7, the communication operation is finished in step S8. Otherwise, the communication is sequentially performed with each device.

次に図7を用いて順次保存を行なう保存処理(図6ステップS6の保存処理のサブルーチン)の動作説明を行なう。   Next, an explanation will be given of the operation of the saving process (the subroutine of the saving process in step S6 in FIG. 6) that sequentially saves with reference to FIG.

図7に示すように、ステップS11において各機器のRTCで取得した時間情報A63(後述の図9のパラメータ構造/パケット構造参照)を取得し、ステップS12においてシステム初期化(図6のステップS1)であらかじめ取得しておいた補正値を算出する為のRTCのずれ時間B64、並びに各機器の最新時間情報を取得したときのシステムコントローラ22のRTCで取得した時間情報C65を取得する.。   As shown in FIG. 7, the time information A63 (see the parameter structure / packet structure in FIG. 9 described later) acquired by the RTC of each device in step S11 is acquired, and the system is initialized in step S12 (step S1 in FIG. 6). The RTC deviation time B64 for calculating the correction value acquired in advance and the time information C65 acquired by the RTC of the system controller 22 when the latest time information of each device is acquired are acquired.

ただし、各機器のRTCで取得した時間情報A63はパラメータ更新の発生したタイミングでの時間情報を、各機器毎に関連つけているものである。   However, the time information A63 acquired by the RTC of each device associates the time information at the timing when the parameter update occurs for each device.

ステップS13において時間情報にずれが発生したとする場合(ここでいう”ずれ”とは通信にかかる時間をある時間tを確保していればリアルタイム更新しているものとし”ずれ”はなしとみなし、時間tを超える通信時間が発生したとき”ずれ”があるとみなす)にずれと認識する。   When it is assumed that there is a deviation in the time information in step S13 (here, “displacement” means that the time required for communication is updated in real time if a certain time t is secured, and there is no “displacement”. When a communication time exceeding the time t occurs, it is recognized that there is a “deviation”).

例えば、
ずれ時間(発生)=通信にかかった時間(時間情報C−時間情報A−時間情報B)>t
となる。
For example,
Deviation time (occurrence) = communication time (time information C-time information A-time information B)> t
It becomes.

もし、ずれが発生したと認識できれば、ステップS14において各々のタイミングで取得した時間情報の実時間情報を算出する。   If it can be recognized that a deviation has occurred, real-time information of the time information acquired at each timing is calculated in step S14.

例えば
各パラメータ取得時の補正値B56=(RTCのずれB+通信によるずれ)
実時間情報A55=時間情報C+補正値B(時間情報C−時間情報Aでも良い)
となる。
For example, correction value B56 at the time of acquiring each parameter = (RTC deviation B + communication deviation)
Real time information A55 = time information C + correction value B (time information C−time information A may be used)
It becomes.

次にステップS15において、各パラメータごと補正値と時間情報、取得したパラメータを保存する。   In step S15, the correction value and time information for each parameter and the acquired parameter are stored.

次に再生処理は、図3のように格納された画像データの実時間情報、音声データの実時間情報、各機器のパラメータの実時間情報を元に同期をとって再生させる。   Next, in the reproduction process, reproduction is performed in synchronization based on the real-time information of the image data, the real-time information of the audio data, and the real-time information of the parameters of each device stored as shown in FIG.

なお本実施例では、音声データ、画像データは通信ではなく、直に入力されているため、通信にかかるディレイ時間の補正を行なってないが、通信によって取得する場合や処理に時間がかかる場合は、各機器のパラメータと同様に補正処理を行なうことができる。   In this embodiment, since the audio data and image data are input directly rather than via communication, the delay time required for communication is not corrected. The correction process can be performed in the same manner as the parameters of each device.

このように本実施例では、異なる入力装置や異なる契機で発生した内視鏡画像、手術装置情報、患者情報等の医療処置情報がシステムコントローラ22に集積され、このシステムコントローラ22は、入力された情報の時間情報を補正したり、保存させたり、表示させたりすることができるので、医療処置情報の履歴として信頼性があがるという効果を得ることができる。   As described above, in this embodiment, medical procedure information such as endoscopic images, surgical device information, and patient information generated at different input devices and at different timings is accumulated in the system controller 22, and the system controller 22 is input. Since the time information of the information can be corrected, stored, or displayed, an effect that the reliability of the medical treatment information history is improved can be obtained.

図8ないし図10は本発明の実施例2に係わり、図8は内視鏡手術システムの構成を示す構成図、図9は図8の内視鏡手術システムでの通信データのデータ構造を示す図、図10は図8の第2のシステムコントローラの作用を説明するフローチャートである。   8 to 10 relate to the second embodiment of the present invention, FIG. 8 is a block diagram showing the configuration of the endoscopic surgery system, and FIG. 9 shows the data structure of communication data in the endoscopic surgery system of FIG. FIG. 10 and FIG. 10 are flowcharts for explaining the operation of the second system controller of FIG.

実施例2は、実施例1と異なる点のみ説明し、同一の構成には同じ符号をつけ説明は省略する。   In the second embodiment, only differences from the first embodiment will be described, and the same components are denoted by the same reference numerals and the description thereof will be omitted.

図8は前記実施例1の図2で説明したシステムコントローラ22がネットワーク通信100により、院内/院外の第2のシステムコントローラ101もしくは汎用のPC101aと通信を行い遠隔地へのパラメータ伝送や遠隔地からの操作/支援情報を通信させることができるシステムを示している。本実施例では、各種I/Fから取得可能な情報に時間情報がない場合を想定しており、システムコントローラ22内のRTCにて時間情報を各機器に付与することができるようになっている。なお、付与した時間情報を記憶部50に保存し、再生できることはいうまでもない。   In FIG. 8, the system controller 22 described in FIG. 2 of the first embodiment communicates with the second system controller 101 in the hospital / outside the hospital or the general-purpose PC 101a through the network communication 100 to transmit parameters to the remote location or from a remote location. 1 shows a system capable of communicating the operation / support information. In the present embodiment, it is assumed that there is no time information in the information obtainable from various I / Fs, and the time information can be given to each device by the RTC in the system controller 22. . Needless to say, the assigned time information can be stored in the storage unit 50 and reproduced.

さらに、本実施例では、図8に示すように、前記システムコントローラ22と各機器13〜16とがRS−232Cのシリアル通信により医療情報の送受を行うと共に、前記システムコントローラ22と患者モニタシステム4とがイーサネット(R)によるネットワーク通信により医療情報の送受を行う。   Furthermore, in the present embodiment, as shown in FIG. 8, the system controller 22 and each of the devices 13 to 16 transmit and receive medical information by RS-232C serial communication, and the system controller 22 and the patient monitor system 4 And send and receive medical information through network communication using Ethernet (R).

また、実施例1と同様に、システムコントローラ22は音声通信によりマイク33からの音声情報をアナログ/デジタル入力すると共に、画像通信により内視鏡用カメラ装置23からの画像情報をアナログ/デジタル入力し、無線通信によりRFID端末35からの個別ID情報を入力するようになっている。   Similarly to the first embodiment, the system controller 22 inputs the audio information from the microphone 33 in an analog / digital manner by voice communication, and also inputs the analog / digital input of the image information from the endoscope camera device 23 by image communication. Individual ID information from the RFID terminal 35 is input by wireless communication.

なお、以下、上記のRS−232Cのシリアル通信、イーサネット(R)によるネットワーク通信、音声通信、画像通信及び無線通信を院内通信102と記す。   Hereinafter, serial communication of RS-232C, network communication using Ethernet (R), voice communication, image communication, and wireless communication are referred to as in-hospital communication 102.

また、図8はシステムコントローラ22と、TCP/IPやUDPのようなプロトコルでネットワーク通信100が可能な院外システムコントローラ101もしくは汎用のPC101aとで構成される内視鏡手術システムを示している。   FIG. 8 shows an endoscopic surgery system including a system controller 22 and an out-of-hospital system controller 101 capable of network communication 100 using a protocol such as TCP / IP or UDP, or a general-purpose PC 101a.

ここで院内通信102は、実施例1で説明した直接入力される画像/音声データと通信により取得される各機器のパラメータ、バイタルサインデータの取得のやり取りを示している(通信データの構造は図9の院内通信を参照)。   Here, the in-hospital communication 102 indicates the exchange of the directly input image / sound data described in the first embodiment and the parameters and vital sign data of each device acquired by communication (the structure of the communication data is shown in FIG. (See 9 in-hospital communications).

ネットワーク通信100は、実施例1で説明した直接入力される画像/音声データと通信により取得される各機器で取得した、各々の情報をネットワークプロトコル(前述したTCP/IPやUDPをさす図9のネットワーク通信参照)で、1台、もしくは複数の装置(第2のシステムコントローラ101もしくは汎用のPC101a)に情報を伝送するのを示している。   The network communication 100 uses the network protocol (the above-mentioned TCP / IP and UDP shown in FIG. In network communication), information is transmitted to one device or a plurality of devices (second system controller 101 or general-purpose PC 101a).

図9は、図8の院内通信102、ネットワーク通信100における、システムコントローラ22と各機器との間で医療情報を取得するときのデータ構造の概念図を示し、特にネットワーク通信100をパケット化することで、ネットワーク通信100により付与した時間情報を基準に、画像、音声、ID、機器情報を配信することができる。   FIG. 9 shows a conceptual diagram of a data structure when acquiring medical information between the system controller 22 and each device in the in-hospital communication 102 and the network communication 100 of FIG. 8, and in particular, packetizing the network communication 100. Thus, the image, sound, ID, and device information can be distributed based on the time information given by the network communication 100.

図10は、図8で示した第2のシステムコントローラ101内の図示しない制御部の動作フローを示す。   FIG. 10 shows an operation flow of a control unit (not shown) in the second system controller 101 shown in FIG.

実施例1で説明したように、パラメータ通信を行なったとき、システムコントローラ22の時間情報を新たに追加し、システム初期化時に各システムと各装置との差分を基準値として取得しておく。   As described in the first embodiment, when parameter communication is performed, time information of the system controller 22 is newly added, and a difference between each system and each device is acquired as a reference value when the system is initialized.

システムコントローラ22は、図9の院内通信102のような形態で医療情報を取得する。このとき、システムコントローラ22と各機器との間に通信によるデータのやり取りが発生する場合は、各機器において取得した時間情報(パラメータの変化が発生したときの機器ごとの時間情報)を付与しておく。   The system controller 22 acquires medical information in a form like the in-hospital communication 102 of FIG. At this time, if data exchange occurs between the system controller 22 and each device, the time information acquired by each device (time information for each device when a parameter change occurs) is added. deep.

システムコントローラ22は、例えばRTPのようなプロトコルで通信を行なう場合、パケットのヘッダ情報として、システムコントローラ22から第2のシステムコントローラ101に送信するタイミングにおける時間情報(以下、タイムスタンプと記述し、各機器から取得されている時間情報と異なる)を付与し、パケットデータを送信する。   For example, when performing communication using a protocol such as RTP, the system controller 22 describes time information (hereinafter referred to as a time stamp) at the timing of transmission from the system controller 22 to the second system controller 101 as packet header information. And packet data is transmitted.

そして、第2のシステムコントローラ101では、図10のステップS21において、パケット受信を行い、ステップS22において、受信したパケットのデコード処理を行い、ステップS23においてタイムスタンプを取得する。   Then, the second system controller 101 receives a packet in step S21 of FIG. 10, decodes the received packet in step S22, and acquires a time stamp in step S23.

ここで、受信側の装置が第2のシステムコントローラ101であれば図示しない第2の表示装置上で、PC101aであればPC上の液晶モニタ上において、再生が可能である。   Here, reproduction is possible on a second display device (not shown) if the receiving device is the second system controller 101, or on a liquid crystal monitor on the PC if it is the PC 101a.

そのため、ステップS24において、リアルタイム再生を行なうかどうかを判断し、ステップS25においてタイムスタンプ情報を元に、順次再生を行なう。   Therefore, in step S24, it is determined whether or not to perform real-time reproduction. In step S25, reproduction is sequentially performed based on the time stamp information.

したがって、タイムスタンプは、ネットワーク通信100による画像/音声/機器パラメータのパケットデータが受信する順番が、送信した順番と異なるために必要であることを示す指標となる。   Therefore, the time stamp serves as an index indicating that the order in which the packet data of the image / sound / device parameters received by the network communication 100 is different from the order of transmission.

なお、ステップS24においてリアルタイム再生を行なうのではなく、データの保存として行なうのであれば、ステップS25においてヘッダに付与されているタイムスタンプと各機器において取得した時間情報、補正値の基準値、並びにシステムコントローラ22の時間情報を元に、実施例1で説明したように実時間情報を算出し、保存処理をおこなう。   If the data is not saved in step S24 but saved as data, the time stamp given to the header in step S25, the time information acquired in each device, the reference value of the correction value, and the system Based on the time information of the controller 22, the real time information is calculated as described in the first embodiment, and the storage process is performed.

このようにすることで、図8における、院内通信102における時間のずれとネットワーク通信100で発生するネットワーク通信の時間のずれを補正することができる。   By doing so, the time lag in the in-hospital communication 102 and the time lag in network communication occurring in the network communication 100 in FIG. 8 can be corrected.

ここで、ネットワーク通信100の受信側の装置が複数ある場合においては、図8のネットワーク通信100における時間情報のずれがさらに大きくなるが、受信側の各装置毎に補正処理を行なわせることで、ずれのない保存/再生処理が行なえる。   Here, when there are a plurality of devices on the reception side of the network communication 100, the time information shift in the network communication 100 of FIG. 8 is further increased, but by performing correction processing for each device on the reception side, Storage / playback processing without deviation can be performed.

このように本実施例では、実施例1の効果に加え、ネットワーク通信により医療情報を配信した場合でも受信機側で補正処理ができるような時間情報を付与させてデータ配信を行なえるので、各受信装置毎に信頼性の高い医療情報の履歴を残すことができる。   As described above, in this embodiment, in addition to the effects of the first embodiment, even when medical information is distributed by network communication, it is possible to perform data distribution by giving time information that can be corrected on the receiver side. A highly reliable medical information history can be kept for each receiving apparatus.

図11は本発明の実施例3に係る表示装置あるいはPC上の液晶モニタで再生したときの表示レイアウトの一例を示す図である。   FIG. 11 is a diagram showing an example of a display layout when reproduced on the display device according to the third embodiment of the present invention or a liquid crystal monitor on a PC.

実施例3は、実施例1あるいは2と異なる点のみ説明し、同一の構成には同じ符号をつけ説明は省略する。   In the third embodiment, only points different from the first or second embodiment will be described, and the same components are denoted by the same reference numerals and description thereof will be omitted.

図11は実施例1、もしくは実施例2で説明した表示装置26やPC101a上の液晶モニタで再生したときの第2のレイアウト例を示し、実施例3は内視鏡画像の再生エリアを多くとるために、医療情報をスーパーインポーズ処理にて表示させた実施例である。   FIG. 11 shows a second layout example when reproduction is performed on the liquid crystal monitor on the display device 26 or the PC 101a described in the first or second embodiment, and the third embodiment takes a large reproduction area of the endoscopic image. Therefore, this is an embodiment in which medical information is displayed by superimposing processing.

ここでは、気腹装置14の腹腔圧と患者モニタシステム4から取得可能な血圧と前記音声データ入力によって得られたテキストデータをドクターのコメントとして重畳している。   Here, the abdominal pressure of the pneumoperitoneum 14, the blood pressure obtainable from the patient monitor system 4, and the text data obtained by the voice data input are superimposed as a doctor's comment.

通常、スーパーインポーズというと、アナログ的には、画像データに上書きしてパラメータ情報を表示するが、実施例1のように、画像データ/音声データ/各機器パラメータのデータをそれぞれ保存させている構成になっており、選択手段である操作パネル21などでスーパーインポーズのON/OFFや重畳データの選択(設定値/測定値/エラー情報など)が可能な構成になっている。   In general, superimpose is to display parameter information in an analog manner by overwriting the image data. However, as in the first embodiment, image data / audio data / equipment parameter data are respectively stored. The configuration is such that superimpose ON / OFF and superimposition data selection (setting value / measurement value / error information, etc.) can be performed with the operation panel 21 or the like as selection means.

本実施例では、手術中においては術者は内視鏡画像を見ることに集中したいのでスーパーインポーズ処理をOFFしておき、例えば、各機器のエラーが発生したときだけ重畳するようにしておく。   In this embodiment, during the operation, the surgeon wants to concentrate on viewing the endoscopic image, so the superimpose processing is turned off, for example, only when an error occurs in each device. .

このとき、画像データ/音声データ/各機器のパラメータは図1の記憶部50のようにそれぞれの情報を実時間情報と一緒に保存しておく。   At this time, the image data / audio data / parameters of each device are stored together with the real-time information as in the storage unit 50 of FIG.

そのため、手術終了した後、保存された情報の再生は、内視鏡画像だけ再生させたり、スーパーインポーズをさせながら再生させたり、エラー情報の重畳をOFFさせた状態にしたりすることができる。   Therefore, after the operation is completed, the stored information can be reproduced by reproducing only the endoscopic image, while performing superimposition, or in a state where the superimposition of error information is turned off.

このように本実施例では、実施例1及び2の効果に加え、手術中に重要な内視鏡画像を小さくしたり、パラメータ重畳による欠けが発生したりしないので、ドクターの所望の状態で観察することが出来、手術後には、各機器パラメータの時間のずれがないように関連つけながら再生することができるようになる。   As described above, in this embodiment, in addition to the effects of Embodiments 1 and 2, an important endoscopic image is not reduced during the operation, and missing due to parameter superimposition does not occur. It is possible to perform reproduction after associating each device parameter so that there is no time lag.

図12は本発明の実施例4に係る内視鏡手術システムの構成を示す構成図である。   FIG. 12 is a configuration diagram showing the configuration of the endoscopic surgery system according to the fourth embodiment of the present invention.

実施例4は、実施例2と異なる点のみ説明し、同一の構成には同じ符号をつけ説明は省略する。   In the fourth embodiment, only differences from the second embodiment will be described. The same components are denoted by the same reference numerals, and description thereof will be omitted.

本実施例は、実施例2と異なり、院内通信102(シリアルでもネットワークでもどちらでも良い)から取得可能な情報に時間情報がある場合、システムコントローラ22内RTCを基準に時間情報を送信することができる実施例であって、図12は、システムコントローラ22のもつ時間情報を各周辺機器4、13〜16に送り、システムコントローラ22のRTC情報を基準としてデータのやり取りを行なうシステム構成となっている。   Unlike the second embodiment, this embodiment may transmit time information based on the RTC in the system controller 22 when there is time information in the information that can be acquired from the in-hospital communication 102 (either serial or network). FIG. 12 shows a system configuration in which the time information of the system controller 22 is sent to the peripheral devices 4 and 13 to 16 and data is exchanged based on the RTC information of the system controller 22. .

本実施例では、内視鏡手術システム3を起動し、各周辺機器と通信確立を行なうとき、システムコントローラ22からの時間情報を各周辺機器に送信させる。このとき各周辺機器ではパラメータの変化が起きたときにシステムコントローラ22から送付されてきた時間情報を基準としパラメータ変化を通信することができる。またシステムコントローラ22もしくはPC101aでは通信にて取得したパラメータの時間情報も実施例1同様に認識や保存できるので、各周辺機器間のRTCのずれや、通信によるずれに関係なく再生できる。   In this embodiment, when the endoscopic surgery system 3 is activated and communication is established with each peripheral device, time information from the system controller 22 is transmitted to each peripheral device. At this time, each peripheral device can communicate the parameter change based on the time information sent from the system controller 22 when the parameter change occurs. Further, since the system controller 22 or the PC 101a can recognize and save the parameter time information acquired by communication as in the first embodiment, it can be reproduced regardless of the RTC shift between the peripheral devices and the shift due to communication.

このように本実施例では、実施例2の効果に加え、システムコントローラ22の時間情報で通信相手に配信することで、簡単に各周辺機器のパラメータ変化と、内視鏡画像のデータのずれがなくすことが可能となる。   As described above, in this embodiment, in addition to the effects of the second embodiment, by distributing to the communication partner using the time information of the system controller 22, the parameter change of each peripheral device and the deviation of the data of the endoscope image can be easily performed. It can be eliminated.

図13及び図14は本発明の実施例5に係わり、図13は内視鏡手術システムの構成を示す構成図、図14は図13のローカルネットワークの構成例を示すブロック図である。   FIGS. 13 and 14 relate to Embodiment 5 of the present invention, FIG. 13 is a block diagram showing the configuration of the endoscopic surgery system, and FIG. 14 is a block diagram showing a configuration example of the local network of FIG.

実施例5は、実施例4と異なる点のみ説明し、同一の構成には同じ符号をつけ説明は省略する。   In the fifth embodiment, only differences from the fourth embodiment will be described. The same components are denoted by the same reference numerals, and the description thereof will be omitted.

本実施例は、図13に示すように、実施例4のように第1の通信I/F40と通信可能な機器4、13〜16がRTCをもち、かつイーサネット(R)通信が可能なローカルネットワーク501を持つ場合において、システムコントローラ22がPC101aに接続されたグローバルネットワーク502を介してNTP(Network Time Protocol)サーバ503から基準時間情報を取得する実施例である。   In this embodiment, as shown in FIG. 13, the devices 4 and 13 to 16 capable of communicating with the first communication I / F 40 as in the fourth embodiment have RTCs and are capable of Ethernet (R) communication. In this embodiment, the system controller 22 acquires reference time information from an NTP (Network Time Protocol) server 503 via the global network 502 connected to the PC 101a when the network 501 is provided.

なお、グローバルネットワーク502は、グローバルアドレスを持つネットワークで、例えばDHCPサーバなどからIPアドレスを振り分けられる。   Note that the global network 502 is a network having a global address, and an IP address is distributed from, for example, a DHCP server.

ローカルネットワーク500の実現構成については、図14のようなシリアル/イーサネット(R)通信アダプタ510及びスイッチングハブ511を用いても良い。   As for the realization configuration of the local network 500, a serial / Ethernet (R) communication adapter 510 and a switching hub 511 as shown in FIG. 14 may be used.

シリアル/イーサネット(R)通信アダプタ510の実現手段として、例えば、Lantronix社 XPortデバイスだと、ネットワークヘの接続機能を経済的にかつ短期に実現することができる。なお、Lantronix社 XPortデバイスは、14.5mm×34mm×18.25 mm程度の小さなパッケージで、CPU、メモリ、プロトコルすべての機能がRJ45イーサネット(R)コネクタの中に入っている。   As a means for realizing the serial / Ethernet (R) communication adapter 510, for example, a Lantronix XPort device can realize a connection function to a network economically and in a short period of time. The Lantronix XPort device is a small package of about 14.5 mm x 34 mm x 18.25 mm, and all functions of the CPU, memory, and protocol are contained in the RJ45 Ethernet (R) connector.

そのとき、本実施例では、ローカルアドレス用のIPアドレスを、各機器に割り当てる必要がある。システムコントローラ22は、IPアドレスを元に、スイッチングハブ511を経由して各機器4、13〜16からデータを取得する。   At this time, in this embodiment, it is necessary to assign an IP address for a local address to each device. The system controller 22 acquires data from the devices 4 and 13 to 16 via the switching hub 511 based on the IP address.

当然NTPプロトコルを使えば、通信データバケットに時間情報が付与されてくる。ネットワーク接続可能な機器のうち、グローバルネットワーク502に接続可能なPC101aはNTPサーバ503などからの時間情報を元に、内部で保有する時間情報を調整することができる。   Of course, if the NTP protocol is used, time information is given to the communication data bucket. Among the devices that can be connected to the network, the PC 101a that can be connected to the global network 502 can adjust the time information held internally based on the time information from the NTP server 503 or the like.

そのため、システムコントローラ22では、PC101aから調整された時間情報を取得し、ローカルなネットワーク通信可能な内視鏡カメラ装置15、光源装置16、気腹装置14、電気メス装置13などの機器に時間情報を配信し、調整することができる。   Therefore, the system controller 22 acquires time information adjusted from the PC 101a, and stores time information in devices such as the endoscopic camera device 15, the light source device 16, the pneumoperitoneum device 14, and the electric scalpel device 13 capable of local network communication. Can be delivered and adjusted.

時間情報のないマイク22からの音声情報、内視鏡カメラ装置15からの画像情報、RFID端末35からの個別ID情報に対しては、システムコントローラ22は、情報を取得した時点の時間情報を付与して、保存/再生することができる。   For the audio information from the microphone 22 without time information, the image information from the endoscope camera device 15, and the individual ID information from the RFID terminal 35, the system controller 22 gives time information at the time when the information is acquired. And can be saved / reproduced.

また、NTPではある一定周期で定期的に時間情報の調整をすることができるため、常にずれることがない。   In addition, since NTP can periodically adjust time information at a certain period, it does not always shift.

当然、第1の通信I/F40を持つシステムコントローラ22とネットワーク通信が不可能な機器の場合は、システムコントローラ22では、音声/画像のようなアナログ入力情報と同じように、各機器情報にも、NTPで取得した時間情報を付与し、保存再生すれば、本実施例と同様の効果を得ることができることは言うまでもない。   Of course, in the case of a device incapable of network communication with the system controller 22 having the first communication I / F 40, the system controller 22 also includes information on each device as well as analog input information such as voice / image. Needless to say, the same effect as in the present embodiment can be obtained if time information acquired by NTP is given and stored and reproduced.

本発明は、上述した実施例に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。   The present invention is not limited to the above-described embodiments, and various changes and modifications can be made without departing from the scope of the present invention.

本発明の実施例1に係る内視鏡手術システムの構成を示す構成図The block diagram which shows the structure of the endoscopic surgery system which concerns on Example 1 of this invention. 図1のシステムコントローラの構成を示すブロック図The block diagram which shows the structure of the system controller of FIG. 図2の記憶部の記憶エリアの構成を示す図The figure which shows the structure of the memory area of the memory | storage part of FIG. 図1の表示装置における表示レイアウトの一例を示す図The figure which shows an example of the display layout in the display apparatus of FIG. 図1の電気メスの動作発生タイミングを示す図The figure which shows the operation generation timing of the electric knife of FIG. 図2のシステムコントローラの作用を示すフローチャートThe flowchart which shows the effect | action of the system controller of FIG. 図6の順次保存を行なう保存処理を示すフローチャートThe flowchart which shows the preservation | save process which performs sequential preservation | save of FIG. 本発明の実施例2に係る図8は内視鏡手術システムの構成を示す構成図FIG. 8 which concerns on Example 2 of this invention is a block diagram which shows the structure of an endoscopic surgery system. 図8の内視鏡手術システムでの通信データのデータ構造を示す図The figure which shows the data structure of the communication data in the endoscopic surgery system of FIG. 図8の第2のシステムコントローラの作用を説明するフローチャートThe flowchart explaining the effect | action of the 2nd system controller of FIG. 本発明の実施例3に係る表示装置あるいはPC上の液晶モニタで再生したときの表示レイアウトの一例を示す図The figure which shows an example of the display layout when reproducing | regenerating on the liquid crystal monitor on the display apparatus or PC concerning Example 3 of this invention. 本発明の実施例4に係る内視鏡手術システムの構成を示す構成図The block diagram which shows the structure of the endoscopic surgery system which concerns on Example 4 of this invention. 本発明の実施例5に係る内視鏡手術システムの構成を示す構成図The block diagram which shows the structure of the endoscopic surgery system which concerns on Example 5 of this invention. 図13のローカルネットワークの構成例を示すブロック図The block diagram which shows the structural example of the local network of FIG.

符号の説明Explanation of symbols

2…手術室
3…内視鏡手術システム
4…患者モニタシステム
9…ケーブル
10…患者ベッド
11…第1のカート
12…第2のカート
13…電気メス
14…気腹装置
15…内視鏡用カメラ装置
16…光源装置
17…VTR
18…ガスボンベ
19…表示装置
20…集中表示パネル
21…操作パネル
22…システムコントローラ
23…内視鏡用カメラ装置
24…光源装置
25…画像処理装置
26…表示装置
27…集中表示パネル
28…中継ユニット
29…中継ケーブル
30…リモートコントローラ
33…マイク
40…第1通信I/F
41…制御部
44…第3通信I/F
45…マルチ信号入出力処理部
46…第2通信通信I/F
49…パラメータ取得部
50…記憶部
51…表示I/F
代理人 弁理士 伊藤 進
2 ... Operating room 3 ... Endoscopic surgery system 4 ... Patient monitor system 9 ... Cable 10 ... Patient bed 11 ... First cart 12 ... Second cart 13 ... Electric knife 14 ... Pneumo-abdominal device 15 ... For endoscope Camera device 16 ... light source device 17 ... VTR
18. Gas cylinder 19 ... Display device 20 ... Centralized display panel 21 ... Operation panel 22 ... System controller 23 ... Endoscope camera device 24 ... Light source device 25 ... Image processing device 26 ... Display device 27 ... Centralized display panel 28 ... Relay unit 29 ... Relay cable 30 ... Remote controller 33 ... Microphone 40 ... First communication I / F
41 ... Control unit 44 ... Third communication I / F
45 ... multi-signal input / output processing unit 46 ... second communication communication I / F
49 ... Parameter acquisition unit 50 ... Storage unit 51 ... Display I / F
Attorney Susumu Ito

Claims (4)

複数の周辺機器と通信可能な集中制御装置を有する内視鏡システムにおいて、
前記集中制御装置は、
前記複数の周辺機器から保有する第1の時間情報を取得する時間情報取得手段と、
第2の時間情報を管理する時間情管理得手段と、
前記第2の時間情報に基づき、前記複数の周辺機器が保有する前記第1の時間情報を補正する時間情報補正手段と
を備えたを特徴とする内視鏡システム。
In an endoscope system having a centralized control device capable of communicating with a plurality of peripheral devices,
The central control device is:
Time information acquisition means for acquiring first time information held from the plurality of peripheral devices;
Time information management means for managing the second time information;
An endoscope system comprising: time information correction means for correcting the first time information held by the plurality of peripheral devices based on the second time information.
前記集中制御装置は、
前記時間情報補正手段の補正結果を保存する保存手段と、
前記時間情報補正手段により前記補正された第1の時間情報に基づき、内視鏡画像及び/または前記複数の周辺機器の持つパラメータを含む医療情報を再生する再生手段と
を備えたを特徴とする請求項1に記載の内視鏡システム。
The central control device is:
Storage means for storing the correction result of the time information correction means;
Replaying means for replaying medical information including endoscopic images and / or parameters of the plurality of peripheral devices based on the first time information corrected by the time information correcting means. The endoscope system according to claim 1.
前記集中制御装置は、
前記周辺機器のパラメータを含む医療情報と前記内視鏡画像の画像情報を別々に保存させる保存手段と、
前記医療情報を再生するときに、前記医療情報を前記内視鏡画像に重畳させるか、重畳させないかを選択する選択手段と
を備えたを特徴とする請求項2に記載の内視鏡システム。
The central control device is:
Storage means for separately storing medical information including parameters of the peripheral device and image information of the endoscopic image;
The endoscope system according to claim 2, further comprising selection means for selecting whether or not to superimpose the medical information on the endoscopic image when reproducing the medical information.
複数の周辺機器と通信可能な集中制御装置を有する内視鏡システムにおいて、
前記複数の周辺機器は、
前記集中制御装置の第1の時間情報を取得する時間情報取得手段と、
第2の時間情報を管理する時間情管理得手段と、
前記集中制御装置が保有する第1の時間情報に基づき、前記第2の時間情報を補正する時間情報補正手段と
を備えたを特徴とする内視鏡システム。
In an endoscope system having a centralized control device capable of communicating with a plurality of peripheral devices,
The plurality of peripheral devices are:
Time information acquisition means for acquiring first time information of the centralized control device;
Time information management means for managing the second time information;
An endoscope system comprising: time information correction means for correcting the second time information based on the first time information held by the centralized control device.
JP2004118257A 2003-09-02 2004-04-13 Endoscope system Pending JP2005095567A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2004118257A JP2005095567A (en) 2003-09-02 2004-04-13 Endoscope system
US11/104,886 US8725525B2 (en) 2004-04-13 2005-04-13 Endoscope system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003310627 2003-09-02
JP2004118257A JP2005095567A (en) 2003-09-02 2004-04-13 Endoscope system

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2010293485A Division JP5259692B2 (en) 2003-09-02 2010-12-28 Endoscope system

Publications (2)

Publication Number Publication Date
JP2005095567A true JP2005095567A (en) 2005-04-14
JP2005095567A5 JP2005095567A5 (en) 2007-04-12

Family

ID=34467533

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004118257A Pending JP2005095567A (en) 2003-09-02 2004-04-13 Endoscope system

Country Status (1)

Country Link
JP (1) JP2005095567A (en)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006334169A (en) * 2005-06-02 2006-12-14 Fujifilm Holdings Corp Ultrasonic endoscope system and electronic endoscope system
DE102005029476A1 (en) * 2005-06-24 2007-02-08 Siemens Ag Device for carrying out intravascular examinations
JP2007074344A (en) * 2005-09-07 2007-03-22 Seiko Epson Corp Network system, communication system, interface device, cable set, plug, communication line holding plate, network system control method, communication system control method, program
JP2007202929A (en) * 2006-02-06 2007-08-16 Pentax Corp Endoscope device
US7706820B2 (en) 2006-03-14 2010-04-27 Olympus Medical Systems Corporation Conversion adapter, medical system and communication method
JP2010158303A (en) * 2009-01-06 2010-07-22 Tokyo Denki Univ System and method for acquiring and analyzing surgical information in endoscopic operation in real time
JP2010184087A (en) * 2009-02-13 2010-08-26 Terumo Corp Condition recorder
JP2011167301A (en) * 2010-02-17 2011-09-01 Asahikawa Medical College Surgery video image accumulating device, surgery video image accumulating method, and program
JP2012223460A (en) * 2011-04-21 2012-11-15 Fujifilm Corp Endoscopic device
WO2018138834A1 (en) * 2017-01-26 2018-08-02 オリンパス株式会社 Information recording system, information recording device, and information recording method
WO2018163600A1 (en) * 2017-03-07 2018-09-13 ソニー・オリンパスメディカルソリューションズ株式会社 Medical information management device, medical information management method, and medical information management system
JPWO2021166127A1 (en) * 2020-02-19 2021-08-26

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04266743A (en) * 1990-11-20 1992-09-22 Siemens Ag Medical diagnosing apparatus
WO2001088825A2 (en) * 2000-05-18 2001-11-22 Excel Tech Ltd. Distributed system for patient monitoring and patient data communication using time stamping
JP2002034907A (en) * 2000-07-25 2002-02-05 Olympus Optical Co Ltd Endoscope image recording device, and endoscope image managing system
JP2002238919A (en) * 2001-02-20 2002-08-27 Olympus Optical Co Ltd Control apparatus for medical care system and medical care system
JP2002369787A (en) * 2001-06-14 2002-12-24 Olympus Optical Co Ltd Medical treatment system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04266743A (en) * 1990-11-20 1992-09-22 Siemens Ag Medical diagnosing apparatus
WO2001088825A2 (en) * 2000-05-18 2001-11-22 Excel Tech Ltd. Distributed system for patient monitoring and patient data communication using time stamping
JP2002034907A (en) * 2000-07-25 2002-02-05 Olympus Optical Co Ltd Endoscope image recording device, and endoscope image managing system
JP2002238919A (en) * 2001-02-20 2002-08-27 Olympus Optical Co Ltd Control apparatus for medical care system and medical care system
JP2002369787A (en) * 2001-06-14 2002-12-24 Olympus Optical Co Ltd Medical treatment system

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4727302B2 (en) * 2005-06-02 2011-07-20 富士フイルム株式会社 Ultrasound endoscope system and electronic endoscope system
JP2006334169A (en) * 2005-06-02 2006-12-14 Fujifilm Holdings Corp Ultrasonic endoscope system and electronic endoscope system
DE102005029476A1 (en) * 2005-06-24 2007-02-08 Siemens Ag Device for carrying out intravascular examinations
JP2007074344A (en) * 2005-09-07 2007-03-22 Seiko Epson Corp Network system, communication system, interface device, cable set, plug, communication line holding plate, network system control method, communication system control method, program
JP4501819B2 (en) * 2005-09-07 2010-07-14 セイコーエプソン株式会社 Network system
JP2007202929A (en) * 2006-02-06 2007-08-16 Pentax Corp Endoscope device
US7706820B2 (en) 2006-03-14 2010-04-27 Olympus Medical Systems Corporation Conversion adapter, medical system and communication method
JP2010158303A (en) * 2009-01-06 2010-07-22 Tokyo Denki Univ System and method for acquiring and analyzing surgical information in endoscopic operation in real time
JP2010184087A (en) * 2009-02-13 2010-08-26 Terumo Corp Condition recorder
JP2011167301A (en) * 2010-02-17 2011-09-01 Asahikawa Medical College Surgery video image accumulating device, surgery video image accumulating method, and program
JP2012223460A (en) * 2011-04-21 2012-11-15 Fujifilm Corp Endoscopic device
WO2018138834A1 (en) * 2017-01-26 2018-08-02 オリンパス株式会社 Information recording system, information recording device, and information recording method
WO2018163600A1 (en) * 2017-03-07 2018-09-13 ソニー・オリンパスメディカルソリューションズ株式会社 Medical information management device, medical information management method, and medical information management system
JPWO2018163600A1 (en) * 2017-03-07 2019-12-26 ソニー・オリンパスメディカルソリューションズ株式会社 Medical information management device, medical information management method, and medical information management system
JPWO2021166127A1 (en) * 2020-02-19 2021-08-26
WO2021166127A1 (en) * 2020-02-19 2021-08-26 晴洋 井上 Endoscope system
JP7459225B2 (en) 2020-02-19 2024-04-01 晴洋 井上 Endoscope system and endoscopic image display control method

Similar Documents

Publication Publication Date Title
US11771502B2 (en) Computer-assisted surgery system and method
EP2666143B1 (en) Telerobotic system with a dual application screen presentation
JP2008000282A (en) Procedure image recording control system and operation system
US12108931B2 (en) Medical device imaging systems and methods
JP2005095567A (en) Endoscope system
US8725525B2 (en) Endoscope system
JP2005111085A (en) Operation supporting system
US8154589B2 (en) Medical operation system for verifying and analyzing a medical operation
JP2004181229A (en) System and method for supporting remote operation
JP2004267461A (en) Endoscopic surgery system
WO2003094768A1 (en) Medical cockpit system
JP2006000538A (en) Operating theater controlling system
JP5259692B2 (en) Endoscope system
JP2006198241A (en) Medical device controller
JP2005118232A (en) Surgery support system
US11483515B2 (en) Image recording and reproduction apparatus, image recording method, and endoscope system
WO2019123874A1 (en) Medical observation system, medical signal processing device, and method for driving medical signal processing device
CN117939073A (en) Digestion endoscope workstation system based on network and implementation method thereof
JP2002233535A (en) Endoscopic operation system
JP2006000537A (en) Endoscope system
US12027257B2 (en) Beacon-based systems and methods for generating medical facility metrics
JP2006218229A (en) Medical treatment supporting system
JP2007082630A (en) Integrated operating room control system
WO2019097804A1 (en) Image recording device and image recording method
CN115002390A (en) Medical intelligent trolley system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070222

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100906

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101228

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110216

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20110422