KR101418405B1 - 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치 - Google Patents
고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치 Download PDFInfo
- Publication number
- KR101418405B1 KR101418405B1 KR1020130045970A KR20130045970A KR101418405B1 KR 101418405 B1 KR101418405 B1 KR 101418405B1 KR 1020130045970 A KR1020130045970 A KR 1020130045970A KR 20130045970 A KR20130045970 A KR 20130045970A KR 101418405 B1 KR101418405 B1 KR 101418405B1
- Authority
- KR
- South Korea
- Prior art keywords
- surgical microscope
- microscope apparatus
- light
- photoacoustic
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 52
- 238000003325 tomography Methods 0.000 title claims description 5
- 238000000034 method Methods 0.000 claims description 16
- 230000003287 optical effect Effects 0.000 claims description 12
- 230000001678 irradiating effect Effects 0.000 claims description 3
- 238000001356 surgical procedure Methods 0.000 description 10
- 210000004204 blood vessel Anatomy 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 5
- 239000002872 contrast media Substances 0.000 description 3
- 210000001519 tissue Anatomy 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- XUMBMVFBXHLACL-UHFFFAOYSA-N Melanin Chemical compound O=C1C(=O)C(C2=CNC3=C(C(C(=O)C4=C32)=O)C)=C2C4=CNC2=C1C XUMBMVFBXHLACL-UHFFFAOYSA-N 0.000 description 2
- 239000006096 absorbing agent Substances 0.000 description 2
- 230000002490 cerebral effect Effects 0.000 description 2
- 238000002347 injection Methods 0.000 description 2
- 239000007924 injection Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000002792 vascular Effects 0.000 description 2
- 235000014653 Carica parviflora Nutrition 0.000 description 1
- 241000243321 Cnidaria Species 0.000 description 1
- 102000001554 Hemoglobins Human genes 0.000 description 1
- 108010054147 Hemoglobins Proteins 0.000 description 1
- 206010028980 Neoplasm Diseases 0.000 description 1
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- KPHWPUGNDIVLNH-UHFFFAOYSA-M diclofenac sodium Chemical compound [Na+].[O-]C(=O)CC1=CC=CC=C1NC1=C(Cl)C=CC=C1Cl KPHWPUGNDIVLNH-UHFFFAOYSA-M 0.000 description 1
- 239000000975 dye Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 210000001165 lymph node Anatomy 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012634 optical imaging Methods 0.000 description 1
- 229910052760 oxygen Inorganic materials 0.000 description 1
- 239000001301 oxygen Substances 0.000 description 1
- 108090000623 proteins and genes Proteins 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 238000012285 ultrasound imaging Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/20—Surgical microscopes characterised by non-optical aspects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B2090/364—Correlation of different images or relation of image positions in respect to the body
- A61B2090/365—Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Computer Graphics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Heart & Thoracic Surgery (AREA)
- Software Systems (AREA)
- Pathology (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Biomedical Technology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Microscoopes, Condenser (AREA)
Abstract
본 발명에 따르는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템은, 대상물에 광을 조사하고 그 대상물에 의해 반사된 광을 입사받아 확대하여 대상물에 대한 고배율 표면 이미지를 생성하여 출력하는 수술용 현미경 장치; 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 생성하여 출력하며, 광음향 신호를 제공받아 광음향 단층 이미지 정보를 생성하는 PAT/PAM 장치; 수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며, 상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며, 상기 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 상기 대상물로 전달하고, 상기 대상물에 입사된 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파에 의해 생성되는 광음향 신호를 획득하여 상기 PAT/PAM 장치로 제공하는 PAT/PAM 스캐너부; 및 상기 수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며, 상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며, 상기 광음향 단층 이미지 정보에 따른 빔을 생성하여 상기 수술용 현미경 장치의 광 입사면으로 제공하는 디스플레이부;를 포함하는 것을 특징으로 한다.
Description
본 발명은 수술용 현미경 장치에 관한 것으로, 더욱 상세하게는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치에 관한 것이다.
일반적으로 수술용 현미경은 도 1에 도시한 바와 같이 전원에 의해 광을 조사하는 광원(3)과, 상기 광원(3)의 광을 생체로 조사되도록 연결해주는 광케이블(4)과, 상기 생체에 의해 반사된 광을 확대하여 확대된 생체 이미지를 생성하는 대물렌즈(5)와, 상기 확대된 생체 이미지를 육안으로 확인하도록 한 접안렌즈(6)로 구성된다.
이러한 수술용 현미경은 광원(3)이 광케이블(4)을 따라 생체에 광을 제공하고, 그 생체에 의해 반사된 광을 대물렌즈(5)가 확대하여 접안렌즈(6)를 통해 출력하며, 시술자는 상기 접안렌즈(6)를 통해 출력되는 이미지를 토대로 생체를 관찰 및 수술한다.
상기한 수술용 현미경에 의해 획득된 이미지에는, 생체의 여러 층에서 발생하는 명암이 존재하며, 그 명암은 생체 조직을 용이하게 구분할 수 없게 하는 원인이 되었다.
이에 종래에는 수술용 현미경에 의해 획득된 이미지에 대해 다양한 부가정보참조 이미지를 제공하여 시술자가 생체 조직을 용이하게 파악할 수 있게 하는 기술의 개발이 절실하게 요망되었다.
본 발명은 수술용 현미경에 의해 획득된 고배율 표면 이미지내에 PAT/PAM 장치로부터의 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하여, 시술자가 시술중에 시선의 이동없이 현미경의 접안렌즈를 통해 고배율 표면 이미지 및 광음향 단층 이미지를 동시에 실시간으로 제공받을 수 있게 하는, 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치를 제공하는 것을 그 목적으로 한다.
또한 본 발명의 다른 목적은 증강 현실 이미지에 수술에 필요한 정보를 포함시켜, 시술자가 시술중에 시선의 이동없이 현미경의 접안렌즈를 통해 고배율 표면 이미지 및 광음향 단층 이미지는 물론이고 수술에 필요한 정보들까지 제공받을 수 있게 하는, 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치를 제공하는 것이다.
상기한 목적을 달성하기 위한 본 발명에 따르는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템은, 대상물에 광을 조사하고 그 대상물에 의해 반사된 광을 입사받아 확대하여 대상물에 대한 고배율 표면 이미지를 생성하여 출력하는 수술용 현미경 장치; 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 생성하여 출력하며, 광음향 신호를 제공받아 광음향 단층 이미지 정보를 생성하는 PAT/PAM 장치; 수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며, 상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며, 상기 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 상기 대상물로 전달하고, 상기 대상물에 입사된 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파에 의해 생성되는 광음향 신호를 획득하여 상기 PAT/PAM 장치로 제공하는 PAT/PAM 스캐너부; 및 상기 수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며, 상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며, 상기 광음향 단층 이미지 정보에 따른 빔을 생성하여 상기 수술용 현미경 장치의 광 입사면으로 제공하는 디스플레이부;를 포함하는 것을 특징으로 한다.
상기한 본 발명은 수술용 현미경에 의해 획득된 고배율 표면 이미지내에 PAT/PAM 장치로부터의 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하여, 시술자가 시술중에 시선의 이동없이 현미경의 접안렌즈를 통해 고배율 표면 이미지 및 광음향 단층 이미지를 동시에 실시간으로 제공받을 수 있게 하여 시술자의 편이를 도모할 수 있는 효과가 있다.
즉, 시술자는 수술용 현미경의 접안렌즈를 통해 고배율 표면 이미지와 PAT/PAM을 통한 혈관 분포 이미지 또는 외부 조영제를 통한 특정 물질의 고해상도 이미지를 비침습적이며 실시간으로 동시에 볼 수 있게 된다.
이에 본 발명은 혈관이나 뇌혈관 수술 등을 시술하는 시술자의 편이를 도모할 수 있다.
또한 본 발명은 증강 현실 이미지에 수술에 필요한 정보를 포함시켜, 시술자가 시술중에 시선의 이동없이 현미경의 접안렌즈를 통해 고배율 표면 이미지 및 광음향 단층 이미지는 물론이고 수술에 필요한 정보들까지도 제공받을 수 있게 하여, 시술자의 편이를 도모할 수 있는 효과가 있다.
도 1은 종래의 수술용 현미경의 개략적인 구조도.
도 2는 본 발명의 바람직한 제1실시예에 따른 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템의 구조도.
도 3은 본 발명의 바람직한 제1실시예에 따른 컴퓨팅 장치의 처리 절차도.
도 4 및 도 5는 본 발명의 바람직한 제1실시예에 따른 고배율 표면 이미지에 광음향 단층 이미지를 중첩시켜 표시한 예를 도시한 도면.
도 6은 본 발명의 바람직한 제2실시예에 따른 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템의 구조도.
도 2는 본 발명의 바람직한 제1실시예에 따른 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템의 구조도.
도 3은 본 발명의 바람직한 제1실시예에 따른 컴퓨팅 장치의 처리 절차도.
도 4 및 도 5는 본 발명의 바람직한 제1실시예에 따른 고배율 표면 이미지에 광음향 단층 이미지를 중첩시켜 표시한 예를 도시한 도면.
도 6은 본 발명의 바람직한 제2실시예에 따른 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템의 구조도.
본 발명의 바람직한 실시예들에 대한 설명에 앞서 PAT/PAM 장치에 대해 설명한다.
일반적으로 PAT/PAM 장치는 광의 흡수체들의 분포를 맵핑함으로써 미세혈관 이미징 및 혈중 산소 포화농도 등의 이미징이 가능하며, 이를 위해 펄스 레이저(Pulsed Laser)를 요구한다.
좀 더 설명하면, 상기 PAT/PAM 장치는 펄스 레이저를 생체에 입사했을 때에, 그 생체 내의 흡수체가 상기 펄스 레이저를 흡수하고, 그 흡수한 에너지가 열로, 다시 그 열이 다시 압력으로 변환될 때에 발생되는 광음향 신호를 트랜스듀서로 획득하여 이미징한다.
즉, PAT/PAM 장치는 광학 영상법과 초음파 영상법을 결합한 기술로써, 비침습성, 저렴함, 휴대성, 우수한 명암대조비 및 우수한 공간분해능을 두루 갖추고 있기에 차세대 고분해능 의료영상 기술로 많은 관심을 받고 있다.
그에 대한 응용으로는, 혈관 분포 및 산호 포화 농도 정보를 획득하여 조기 암진단 연구가 진행중이며, 안구내 혈관 분포 이미지까지 획득이 가능하여, 다양한 안구내 정보 획득에 관한 연구도 진행중이다.
또한 상기 PAT/PAM 장치는 혈색소, 멜라닌, DNA, 유기염료 및 색채를 띤 생성물을 방출하도록 조작된 유전자와 같은 외부 조영제들 덕분에, 다른 기술에서는 주변과 혼돈되어 판별이 쉽지 않았던 림프절과 같은 조직들도 이미징할 수 있다.
이에 본 발명은 수술용 현미경에 의해 획득된 고배율 표면 이미지내에 PAT/PAM 장치로부터의 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하여, 시술자가 시술중에 시선의 이동없이 현미경의 접안렌즈를 통해 고배율 표면 이미지 및 광음향 단층 이미지를 동시에 실시간으로 제공받을 수 있게 하여 시술자의 편이를 도모한다.
즉, 시술자는 수술용 현미경의 접안렌즈를 통해 고배율 표면 이미지와 PAT/PAM을 통해 획득한 혈관 분포 이미지 또는 외부 조영제를 통한 특정 물질의 고해상도 이미지를 비침습적이며 실시간으로 볼 수 있게 된다.
이에 본 발명은 혈관이나 뇌혈관 수술 등을 시술하는 시술자의 편이를 도모할 수 있다.
또한 본 발명은 증강 현실 이미지에 수술에 필요한 정보를 포함시켜, 시술자가 시술중에 시선의 이동없이 현미경의 접안렌즈를 통해 고배율 표면 이미지 및 광음향 단층 이미지는 물론이고 수술에 필요한 정보들까지도 제공받을 수 있게 하여, 시술자의 편이를 도모한다.
<제1실시예>
상기한 본 발명의 제1실시예에 따르는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템의 구조를 도 2를 참조하여 상세히 설명한다.
상기 수술용 현미경 시스템은 수술용 현미경 장치(100)와 PAT/PAM 장치(200)와 PAT/PAM 스캐닝부(300)와 디스플레이부(320)와 컴퓨팅 장치(400)로 구성된다.
상기 수술용 현미경 장치(100)는 광원과 광케이블, 접안렌즈, 대물렌즈 등으로 구성되며, 대상물(500)에 광을 조사하고, 대상물(500)에 의해 반사된 광을 확대하여 접안렌즈를 통해 출력한다.
상기 PAT/PAM 장치(200)는 광대역 파장 펄스 레이저를 생성하여 PAT/PAM 스캐닝부(300)에 제공함과 아울러, 상기 PAT/PAM 스캐닝부(300)가 제공하는 광음향 신호를 처리하여 광음향 단층 이미지 정보를 생성하여 컴퓨팅 장치(400)로 제공한다.
상기 PAT/PAM 스캐닝부(300)는 수술용 현미경 장치(100)로부터의 광은 대상물(500)에 제공되어 반사되어 다시 수술용 현미경 장치(100)로 전달되도록 통과시키고, 상기 PAT/PAM 장치(200)로부터의 광대역 파장 펄스 레이저는 2차원 또는 3차원 촬상을 위해 광경로를 변경하면서 대상물(500)에 제공하며, 그 대상물(500)에 의해 발생되는 광음향 정보를 수신하여 상기 PAT/PAM 장치(200)로 제공한다.
상기 PAT/PAM 스캐닝부(300)는 다이크로닉 미러(dicronic mirror)(310), 갈바노메터 스캐너(galvano scnner)(302), 오브젝티브 렌즈(objective lens)(308)와 초음파 트랜스듀서(ultrasonic transducer)(312)로 구성된다.
상기 다이크로닉 미러(310)는 특정 파장의 광에 대해서만 반사하는 소재로서, 대상물(500)과 수술용 현미경 장치(100)의 대물렌즈 사이에 위치하여, 수술용 현미경 장치(100)로부터의 광을 대상물(500)로 전달함과 아울러 대상물(500)에 의해 반사된 광은 수술용 현미경 장치(100)로 제공하며, 수술용 현미경 장치(100)로부터의 광 입사각과는 다른 입사각, 예를들어 90도로 제공되는 갈바노메터 스캐너(302)로부터의 광대역 파장 펄스 레이저는 반사시켜 대상물(500)로 제공한다.
또한 상기한 다이크로닉 미러(310) 대신 빔 스플리터 등이 사용될 수 있다.
상기 갈바노메터 스캐너(302)는 PAT/PAM 장치(200)로부터의 광대역 파장 펄스 레이저를 2차원 또는 3차원 이미지 획득을 위해 광경로를 X-Y 방향으로 변경하여 상기 다이크로닉 미러(310)로 제공한다.
또한 상기 갈바노메터 스캐너(302) 대신 회전다면경(polygon) 및 MEMS(microelectromechanical system) 등이 사용될 수 있다.
상기 오브젝티브 렌즈(308)는 상기 갈바노메터 스캐너(302)로부터의 광대역 파장 펄스 레이저를 대상물(500)에 포커싱한다.
상기 초음파 트랜스듀서(312)는 대상물(500)이 상기 광대역 파장 펄스 레이저를 흡수하고, 그 흡수한 에너지가 열로, 그 열이 다시 압력으로 변환될 때에 발생되는 광음향 신호를 획득하여 상기 PAT/PAM 장치(200)로 제공한다.
상기 컴퓨팅 장치(400)는 상기 PAT/PAM 장치(200)가 제공하는 광음향 단층 이미지 정보와 조작자에 의해 입력된 수술 관련 정보에 대한 이미지 정보를 중첩시킨 증강 현실 이미지 정보를 생성하고, 이 증강 현실 이미지 정보를 디스플레이부(320)로 제공한다.
상기 디스플레이부(320)는, 수술용 현미경 장치(100)로부터의 광은 대상물(500)에 제공되어 반사되어 다시 수술용 현미경 장치(100)로 전달되도록 통과시킴과 아울러, 상기 증강 현실 이미지 정보는 빔으로 변환하여 수술용 현미경 장치(100)의 광 입사경로로 중첩시켜 입사시킨다.
상기한 디스플레이부(320)는 빔 프로젝터(322)와 빔 스플리터(beam splitter)(324)로 구성된다.
상기 빔 프로젝터(322)는 상기 컴퓨팅 장치(400)로부터의 증강 현실 이미지 정보를 빔으로 변환하여 출사한다.
상기 빔 스플리터(324)는 상기 수술용 현미경 장치(100)의 광 출사 및 입사면의 일부 영역에 위치하여, 입사된 광을 특정 비율로 나누어 일부는 통과시키고 일부는 반사시키는 것으로, 상기 증강 현실 이미지 정보에 따른 빔을 제공받아 그 빔 중 일부를 상기 수술용 현미경 장치(100)의 광 입사경로로 제공한다.
이에따라 수술용 현미경 장치(100)의 접안 렌즈를 통해 출력되는 이미지는 수술용 현미경 장치(100)에 의해 획득된 고배율 표면 이미지와 상기 PAT/PAM 장치(200) 및 컴퓨팅 장치(400)로부터의 증강 현실 이미지를 포함하게 된다.
상기 컴퓨팅 장치(400)의 동작을 도 3의 흐름도를 참조하여 좀 더 설명한다.
상기 컴퓨팅 장치(400)는 PAT/PAM 장치(200)로부터 광음향 단층 이미지 정보가 수신됨과 아울러 조작자에 의해 수술 관련 정보가 입력되면(700,702단계), 광음향 단층 이미지 정보와 수술 관련 정보를 결합하여 증강 현실 이미지 정보를 생성하고, 이 생성된 증강 현실 이미지 정보를 디스플레이부(320)의 빔 프로젝터(322)로 제공한다(704단계). 이로서 수술용 현미경 장치(100)의 접안 렌즈로는 고배율 표면 이미지와 광음향 단층 이미지 정보 및 수술 관련 정보에 따른 증강 현실 이미지가 동시에 출력된다.
상기한 바와 달리 PAT/PAM 장치(200)로부터 광음향 단층 이미지 정보가 수신되는 상태에서 조작자에 의해 수술 관련 정보가 입력되지 않으면(700,702단계), 광음향 단층 이미지 정보에 따르는 증강 현실 이미지 정보를 생성하고, 이 생성된 증강 현실 이미지 정보를 디스플레이부(320)의 빔 프로젝터(322)로 제공한다(706단계). 이로서 수술용 현미경 장치(100)의 접안 렌즈로는 고배율 표면 이미지와 광음향 단층 이미지 정보에 따른 증강 현실 이미지가 동시에 출력된다.
상기한 본 발명의 바람직한 제1실시예에 따른 수술용 현미경 시스템의 수술용 현미경 장치(100)로 출력되는 이미지를 예시한 것이 도 4이다.
상기 도 4는 머리카락 4가닥(H1~H4)과 주사 바늘(N)을 배치한 팬텀을 본 발명의 바람직한 실시예에 따른 수술용 현미경 시스템으로 이미징한 것으로, 수술용 현미경 장치(100)의 접안렌즈로는 머리카락 4가닥(H1~H4)과 주사 바늘(N)이 고배율로 확대된 고배율 표면 이미지와 2차원 광음향 단층 이미지가 함께 표시된다.
상기 고배율 표면 이미지에는 주사기와 머리카락 사이의 높이 차이가 없는 것으로 나타나나, 2차원 광음향 단층 이미지에는 주사기와 머리카락의 높이 차이가 나타나게 표시된다. 상기 2차원 광음향 단층 이미지에는 도 5에 도시한 바와 같이 머리카락 4가닥(H1~H4)과 주사 바늘(N) 사이의 높이 차이가 명확하게 드러난다.
상기한 본 발명의 바람직한 제1실시예에서는 PAT/PAM 장치로부터의 광음향 단층 이미지 정보를 컴퓨팅 장치를 통해 빔 프로젝터에 제공하는 것만을 예시하였으나, 상기 PAT/PAM 장치로부터의 광음향 단층 이미지 정보를 빔 프로젝터로 직접 제공할 수도 있다.
또한 상기한 본 발명의 바람직한 제1실시예에서는 빔 프로젝터로부터의 빔을 수술용 현미경 장치의 광 입사면의 일부영역으로 제공하도록 구성되어 있으며, 그 영역의 크기 및 위치는 시술자의 편이를 도모하기 위해 변경될 수 있음은 본 발명에 의해 자명하다.
또한 상기한 본 발명의 바람직한 제1실시예에서는 수술용 현미경 장치와 PAT/PAM 장치와 PAT/PAM 스캐닝부와 디스플레이부와 컴퓨팅 장치가 결합되어 수술용 현미경 시스템을 구성한 것만을 예시하였으나, 상기 수술용 현미경 시스템은 기존의 수술용 현미경 장치에 PAT/PAM 장치와 PAT/PAM 스캐닝부와 디스플레이부와 컴퓨팅 장치를 결합하여 구성될 수도 있다. 이는 기존에 구비된 수술용 현미경 장치를 교체하지 않으면서도 본 발명에 따른 증강 현실 이미징을 제공받을 수 있게 한다. 상기 PAT/PAM 장치와 PAT/PAM 스캐닝부와 디스플레이부와 컴퓨팅 장치는 증강 현실 이미지 제공 장치로 명명한다.
또한 상기한 본 발명의 제1실시예에서는 광대역 파장 펄스 레이저를 이용하는 것만을 예시하였으나 펄스 레이저, 연속파 레이저(CW laser) 또는 펄스 마이크로파를 이용할 수도 있으며, 이는 본 발명에 의해 자명하다. 여기서, 상기 펄스 마이크로파는 1GHz에서 30GHz까지의 주파수를 가지는 전자기파이다.
또한 상기한 본 발명의 제1실시예에서는 2차원 광음향 단층 이미지를 고배율 표면 이미지에 중첩하여 표시하는 것만을 예시하였으나, PAT/PAM 장치를 통해 획득될 수 있는 3차원 광음향 이미지 또는 MAP(maximum amplitude projection) 이미지를 고배율 표면 이미지에 중첩하여 표시할 수도 있으며, 이는 본 발명에 의해 자명하다.
또한 상기한 본 발명의 바람직한 제1실시예에서는 광음향 신호 획득장치로서 젤이나 물 등과 같은 매개체를 통해 피부와 접촉하여 광음향 신호를 획득하는 접촉식 장치로서 초음파 트랜스듀서만을 개시하였으나, 피부와 비접촉하여 광음향 신호를 획득하는 광학적인 방식의 광음향 신호 획득장치가 채용될 수도 있으며, 이는 본 발명에 의해 자명하다.
<제2실시예>
본 발명의 바람직한 제2실시예에 따르는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템의 구조를 도 6을 참조하여 상세히 설명한다.
상기 수술용 현미경 시스템은 수술용 현미경 장치(900)와 PAT/PAM 장치(200)와 PAT/PAM 스캐닝부(300)와 디스플레이부(800)와 컴퓨팅 장치(400)로 구성된다. 상기 PAT/PAM 장치(200)와 PAT/PAM 스캐닝부(300)와 컴퓨팅 장치(400)의 구성 및 동작은 제1실시예와 동일하므로 그 상세한 설명은 생략한다.
상기 수술용 현미경 장치(900)는 접안렌즈(902)와 대물렌즈(904)를 구비하는 일반적인 현미경 구조를 가지나, 다만 상기 접안렌즈(902)의 상면 중 일부영역에 디스플레이 장치(800)를 내장한다. 여기서, 상기 접안렌즈(902)의 상면은 사용자의 눈과 맞닿아 사용자에게 이미지를 출력하는 면을 일컫는다.
상기 디스플레이 장치(800)는 소형 디스플레이 모듈(802)로 구성되며, 상기 소형 디스플레이 모듈(802)은 수술용 현미경 장치(900)의 접안렌즈(902)의 상면 중 미리 정해진 일부영역에 위치하여 컴퓨팅 장치(400)로부터 증강 현실 이미지 정보를 제공받아 표시한다.
이로서, 상기 수술용 현미경 장치(900)는 접안렌즈(902) 및 대물렌즈(904)에 의해 획득된 고배율 표면 이미지와 상기 소형 디스플레이 모듈(802)을 통해 표시되는 정보를 동시에 출력할 수 있다.
상기한 본 발명의 바람직한 실시예에서는 상기 소형 디스플레이 모듈(802)이 상기 컴퓨팅 장치(400)로부터 제공되는 증강 현실 이미지 정보를 표시하는 것만을 개시하였으나, 상기 컴퓨팅 장치(400)가 아닌 PAT/PAM 장치(200)로부터 광음향 단층 이미지 정보를 직접 제공받아 표시할 수도 있으며, 이는 본 발명에 의해 자명하다.
또한 상기 소형 디스플레이 모듈(802)의 설치위치는 가능한 사용자의 가시영역내이면서도 상기 접안렌즈(902)를 통해 출력되는 고배율 표면 이미지를 충분히 관찰할 수 있을 정도의 위치로 선택될 수 있으며, 이는 본 발명에 의해 자명하다.
100, 900 : 수술용 현미경 장치
200 : PAT/PAM 장치
300 : PAT/PAM 스캐닝부
320, 800 : 디스플레이부
400 : 컴퓨팅 장치
200 : PAT/PAM 장치
300 : PAT/PAM 스캐닝부
320, 800 : 디스플레이부
400 : 컴퓨팅 장치
Claims (12)
- 수술용 현미경 장치를 위한 증강 현실 이미지 제공 장치에 있어서,
펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 생성하여 출력하며, 광음향 신호를 제공받아 광음향 단층 이미지 정보를 생성하는 PAT/PAM 장치;
수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 상기 대상물로 전달하고,
상기 대상물에 입사된 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파에 의해 생성되는 광음향 신호를 획득하여 상기 PAT/PAM 장치로 제공하는 PAT/PAM 스캐너부;
상기 수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 광음향 단층 이미지 정보에 따른 빔을 생성하여 상기 수술용 현미경 장치의 광 입사면으로 제공하는 디스플레이부;
를 포함하는 것을 특징으로 하는 수술용 현미경 장치를 위한 증강 현실 이미지 제공 장치. - 수술용 현미경 장치를 위한 증강 현실 이미지 제공 장치에 있어서,
펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 생성하여 출력하며, 광음향 신호를 제공받아 광음향 단층 이미지 정보를 생성하는 PAT/PAM 장치;
수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 상기 대상물로 전달하고,
상기 대상물에 입사된 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파에 의해 생성되는 광음향 신호를 획득하여 상기 PAT/PAM 장치로 제공하는 PAT/PAM 스캐너부;
상기 광음향 단층 이미지 정보를 제공받아, 그 광음향 단층 이미지 정보를 포함하는 증강 현실 이미지 정보를 생성하여 출력하는 컴퓨팅 장치; 및
상기 수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 증강 현실 이미지 정보에 따른 빔을 생성하여 상기 수술용 현미경 장치의 광 입사면으로 제공하는 디스플레이부;
를 포함하는 것을 특징으로 하는 수술용 현미경 장치를 위한 증강 현실 이미지 제공 장치. - 제2항에 있어서,
상기 컴퓨팅 장치는,
조작자에 의해 입력된 수술 관련 정보를 상기 증강 현실 이미지 정보에 더 포함시킴을 특징으로 하는 수술용 현미경 장치를 위한 증강 현실 이미지 제공 장치. - 제1항 또는 제2항에 있어서,
상기 PAT/PAM 스캐닝부가,
상기 PAT/PAM 장치로부터의 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 제공받아 광 경로를 변경하는 갈바노메터 스캐너 또는 회전 다면경 또는 MEMS;
수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 수술용 현미경 장치의 광 입출사각과 상이한 각도로 입사되는 상기 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 반사시켜 상기 대상물로 전달하는 다이크로닉 미러 또는 빔 스플리터;
상기 갈바노메터 스캐너 또는 회전 다면경 또는 MEMS와 상기 다이크로닉 미러 또는 빔 스플리터 사이에 위치하여 포커싱을 이행하는 오브젝트 렌즈; 및
상기 대상물에 입사된 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파에 의해 생성되는 광음향 신호를 획득하여 상기 PAT/PAM 장치로 제공하는 광음향 신호 획득장치;
를 포함하며,
상기 광음향 신호 획득장치는 접촉식의 초음파 트랜스듀서 또는 비접촉식의 광학적인 방식의 광음향 신호 획득장치임을 특징으로 하는 수술용 현미경 장치를 위한 증강 현실 이미지 제공 장치. - 제1항 또는 제2항에 있어서,
상기 디스플레이부가,
외부로부터 제공되는 이미지 정보를 빔으로 변환하여 출력하는 빔 프로젝터; 및 상기 빔 프로젝터로부터의 빔을 상기 수술용 현미경 장치의 광 입사면으로 반사하여 전달하는 빔 스플리터;로 구성되거나,
상기 수술용 현미경 장치의 접안렌즈의 상면 중 미리 정해진 위치에 위치하며, 외부로부터 제공되는 이미지 정보를 광 입사면의 방향으로 표시하는 소형 디스플레이 모듈로 구성됨을 특징으로 하는 수술용 현미경 장치를 위한 증강 현실 이미지 제공장치. - 제1항 또는 제2항에 있어서,
광음향 단층 이미지는 2차원 광음향 이미지, 3차원 광음향 이미지 또는 MAP(maximum amplitude projection) 이미지임을 특징으로 하는 수술용 현미경 장치를 위한 증강 현실 이미지 제공장치. - 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템에 있어서,
대상물에 광을 조사하고 그 대상물에 의해 반사된 광을 입사받아 확대하여 대상물에 대한 고배율 표면 이미지를 생성하여 출력하는 수술용 현미경 장치;
펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 생성하여 출력하며, 광음향 신호를 제공받아 광음향 단층 이미지 정보를 생성하는 PAT/PAM 장치;
수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 상기 대상물로 전달하고,
상기 대상물에 입사된 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파에 의해 생성되는 광음향 신호를 획득하여 상기 PAT/PAM 장치로 제공하는 PAT/PAM 스캐너부; 및
상기 수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 광음향 단층 이미지 정보에 따른 빔을 생성하여 상기 수술용 현미경 장치의 광 입사면으로 제공하는 디스플레이부;
를 포함하는 것을 특징으로 하는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템. - 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템에 있어서,
대상물에 광을 조사하고 그 대상물에 의해 반사된 광을 입사받아 확대하여 대상물에 대한 고배율 표면 이미지를 생성하여 출력하는 수술용 현미경 장치;
펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 생성하여 출력하며, 광음향 신호를 제공받아 광음향 단층 이미지 정보를 생성하는 PAT/PAM 장치;
수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 상기 대상물로 전달하고,
상기 대상물에 입사된 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파에 의해 생성되는 광음향 신호를 획득하여 상기 PAT/PAM 장치로 제공하는 PAT/PAM 스캐너부;
상기 광음향 단층 이미지 정보를 제공받아, 그 광음향 단층 이미지 정보를 포함하는 증강 현실 이미지 정보를 생성하여 출력하는 컴퓨팅 장치; 및
상기 수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 증강 현실 이미지 정보에 따른 빔을 생성하여 상기 수술용 현미경 장치의 광 입사면으로 제공하는 디스플레이부;
를 포함하는 것을 특징으로 하는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템. - 제8항에 있어서,
상기 컴퓨팅 장치는,
조작자에 의해 입력된 수술 관련 정보를 상기 증강 현실 이미지 정보에 더 포함시킴을 특징으로 하는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템. - 제7항 또는 제8항에 있어서,
상기 PAT/PAM 스캐닝부가,
상기 PAT/PAM 장치로부터의 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 제공받아 광 경로를 변경하는 갈바노메터 스캐너 또는 회전 다면경 또는 MEMS;
수술용 현미경 장치의 대물렌즈와 대상물 사이에 위치하며,
상기 수술용 현미경 장치로부터의 광을 통과시켜 상기 대상물로 전달하고, 상기 대상물에 의해 반사된 광을 통과시켜 상기 수술용 현미경 장치로 제공하며,
상기 수술용 현미경 장치의 광 입출사각과 상이한 각도로 입사되는 상기 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파를 반사시켜 상기 대상물로 전달하는 다이크로닉 미러 또는 빔 스플리터;
상기 갈바노메터 스캐너 또는 회전 다면경 또는 MEMS와 상기 다이크로닉 미러 또는 빔 스플리터 사이에 위치하여 포커싱을 이행하는 오브젝트 렌즈; 및
상기 대상물에 입사된 펄스 레이저 또는 광대역 파장 펄스 레이저 또는 연속파 레이저 또는 펄스 마이크로파에 의해 생성되는 광음향 신호를 획득하여 상기 PAT/PAM 장치로 제공하는 상기 PAT/PAM 장치로 제공하는 광음향 신호 획득장치;
를 포함하며,
상기 광음향 신호 획득장치는 접촉식의 초음파 트랜스듀서 또는 비접촉식의 광학적인 방식의 광음향 신호 획득장치임을 특징으로 하는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템. - 제7항 또는 제8항에 있어서,
상기 디스플레이부가,
외부로부터 제공되는 이미지 정보를 빔으로 변환하여 출력하는 빔 프로젝터; 및 상기 빔 프로젝터로부터의 빔을 상기 수술용 현미경 장치의 광 입사면으로 반사하여 전달하는 빔 스플리터;로 구성되거나,
상기 수술용 현미경 장치의 접안렌즈의 상면 중 미리 정해진 위치에 위치하며, 외부로부터 제공되는 이미지 정보를 광 입사면의 방향으로 표시하는 소형 디스플레이 모듈로 구성됨을 특징으로 하는 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템. - 제7항 또는 제8항에 있어서,
상기 광음향 단층 이미지는 2차원 광음향 이미지, 3차원 광음향 이미지 또는 MAP(maximum amplitude projection) 이미지임을 특징으로 하는 수술용 현미경 시스템.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020130045970A KR101418405B1 (ko) | 2013-04-25 | 2013-04-25 | 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치 |
| PCT/KR2013/007735 WO2014175514A1 (ko) | 2013-04-25 | 2013-08-28 | 표면 이미지와 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020130045970A KR101418405B1 (ko) | 2013-04-25 | 2013-04-25 | 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR101418405B1 true KR101418405B1 (ko) | 2014-07-09 |
Family
ID=51741900
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020130045970A Active KR101418405B1 (ko) | 2013-04-25 | 2013-04-25 | 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치 |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR101418405B1 (ko) |
| WO (1) | WO2014175514A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101749602B1 (ko) * | 2016-04-05 | 2017-06-21 | 포항공과대학교 산학협력단 | 비전도성 유체를 이용한 광해상도 광음향 현미경, 및 이를 이용한 광음향 영상 획득 시스템 및 방법 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109102573B (zh) * | 2018-08-06 | 2023-05-02 | 百度在线网络技术（北京）有限公司 | 图像处理方法、装置和存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006242816A (ja) | 2005-03-04 | 2006-09-14 | Mitsui Eng & Shipbuild Co Ltd | 光音響顕微鏡装置 |
| JP4282120B2 (ja) * | 1998-01-06 | 2009-06-17 | オリンパス株式会社 | 手術用顕微鏡 |
| KR20090088909A (ko) * | 2006-12-19 | 2009-08-20 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 결합된 광음향 및 초음파 이미징 시스템 |
| KR20130014338A (ko) * | 2011-07-28 | 2013-02-07 | 한국전자통신연구원 | 엑스-선 영상 합성 장치와 광음향 영상 장치를 포함하는 영상 검사 장치 및 그것의 영상 검사 방법 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4406226B2 (ja) * | 2003-07-02 | 2010-01-27 | 株式会社東芝 | 生体情報映像装置 |
-
2013
- 2013-04-25 KR KR1020130045970A patent/KR101418405B1/ko active Active
- 2013-08-28 WO PCT/KR2013/007735 patent/WO2014175514A1/ko active Application Filing
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4282120B2 (ja) * | 1998-01-06 | 2009-06-17 | オリンパス株式会社 | 手術用顕微鏡 |
| JP2006242816A (ja) | 2005-03-04 | 2006-09-14 | Mitsui Eng & Shipbuild Co Ltd | 光音響顕微鏡装置 |
| KR20090088909A (ko) * | 2006-12-19 | 2009-08-20 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 결합된 광음향 및 초음파 이미징 시스템 |
| KR20130014338A (ko) * | 2011-07-28 | 2013-02-07 | 한국전자통신연구원 | 엑스-선 영상 합성 장치와 광음향 영상 장치를 포함하는 영상 검사 장치 및 그것의 영상 검사 방법 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101749602B1 (ko) * | 2016-04-05 | 2017-06-21 | 포항공과대학교 산학협력단 | 비전도성 유체를 이용한 광해상도 광음향 현미경, 및 이를 이용한 광음향 영상 획득 시스템 및 방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2014175514A1 (ko) | 2014-10-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Das et al. | Another decade of photoacoustic imaging | |
| US11323625B2 (en) | Subject information obtaining apparatus, display method, program, and processing apparatus | |
| JP5743957B2 (ja) | 光音響画像生成装置及び方法 | |
| Kang et al. | Real-time three-dimensional Fourier-domain optical coherence tomography video image guided microsurgeries | |
| US20110282192A1 (en) | Multimodal depth-resolving endoscope | |
| JP2017515560A (ja) | 物体の光音響画像化用のデバイス及び方法 | |
| JP2007029603A (ja) | 光診断治療装置 | |
| Jiang et al. | Photoacoustic imaging plus X: a review | |
| JP6576424B2 (ja) | 表示制御装置、画像表示方法、及びプログラム | |
| KR101610837B1 (ko) | 동물 안과 질병 진단을 위한 광음향 영상 시스템 | |
| KR101513032B1 (ko) | 현미경 시스템 및 현미경 시스템의 증강 현실 이미지 제공 방법 | |
| Lee et al. | Real-time near-infrared virtual intraoperative surgical photoacoustic microscopy | |
| KR101418405B1 (ko) | 고배율 표면 이미지에 광음향 단층 이미지를 포함하는 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치 | |
| JP6921782B2 (ja) | 表示制御装置、画像表示方法、及びプログラム | |
| US20200143534A1 (en) | Medical imaging system, method and computer program product | |
| US20180368696A1 (en) | Object information acquiring apparatus and object information acquiring method | |
| KR101296369B1 (ko) | 가시광 레이저빔을 이용한 표적 스캐닝 광단층 촬영 시스템 | |
| JP2020039809A (ja) | 被検体情報取得装置およびその制御方法 | |
| JP6821752B2 (ja) | 被検体情報取得装置、表示方法、プログラム、処理装置 | |
| Zhang et al. | Laser-scanning optical-resolution photoacoustic microscopy | |
| JP2018169246A (ja) | 光偏向器の出射光制御装置 | |
| Park et al. | Multimodal preclinical imaging system using transparent ultrasonic transducer | |
| JPH04135549A (ja) | 光断層像観察装置 | |
| JP2017042603A (ja) | 被検体情報取得装置 | |
| Lee et al. | Virtual intraoperative surgical photoacoustic microscopy |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20130425 |
|
| PA0201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20140418 Patent event code: PE09021S01D |
|
| E701 | Decision to grant or registration of patent right | ||
| PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20140620 |
|
| GRNT | Written decision to grant | ||
| PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20140704 Patent event code: PR07011E01D |
|
| PR1002 | Payment of registration fee |
Payment date: 20140704 End annual number: 3 Start annual number: 1 |
|
| PG1601 | Publication of registration | ||
| FPAY | Annual fee payment |
Payment date: 20170705 Year of fee payment: 4 |
|
| PR1001 | Payment of annual fee |
Payment date: 20170705 Start annual number: 4 End annual number: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20190705 Year of fee payment: 6 |
|
| PR1001 | Payment of annual fee |
Payment date: 20190705 Start annual number: 6 End annual number: 6 |
|
| PR1001 | Payment of annual fee |
Payment date: 20200630 Start annual number: 7 End annual number: 7 |
|
| PR1001 | Payment of annual fee |
Payment date: 20210702 Start annual number: 8 End annual number: 8 |
|
| PR1001 | Payment of annual fee |
Payment date: 20220713 Start annual number: 9 End annual number: 9 |