JP2006021016A - Three-dimensional tomographic image creation method and computer system - Google Patents
Three-dimensional tomographic image creation method and computer system Download PDFInfo
- Publication number
- JP2006021016A JP2006021016A JP2004242441A JP2004242441A JP2006021016A JP 2006021016 A JP2006021016 A JP 2006021016A JP 2004242441 A JP2004242441 A JP 2004242441A JP 2004242441 A JP2004242441 A JP 2004242441A JP 2006021016 A JP2006021016 A JP 2006021016A
- Authority
- JP
- Japan
- Prior art keywords
- dimensional
- image
- region
- oral
- dentition model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5258—Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise
Landscapes
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- High Energy & Nuclear Physics (AREA)
- Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Processing (AREA)
- Image Generation (AREA)
- Image Analysis (AREA)
Abstract
【課題】 金属修復物等に起因するアーチファクトを除去し、上下顎骨や上下歯列の正確な3次元CT像を得る。
【解決手段】 アーチファクト源を有する口腔領域の3次元断層撮影像を作成する方法が、口腔領域断層撮影データと歯列模型断層撮影データとを、入力手段を介してコンピュータに入力する工程と、口腔領域断層撮影データからマーカを含む3次元口腔領域像を作成して、表示手段に表示する工程と、歯列模型断層撮影データからマーカを含む3次元歯列模型像を作成して、表示手段に表示する工程と、演算手段が、3次元口腔領域像中のマーカと、3次元歯列模型像中のマーカとが略一致するように、3次元口腔領域像と3次元歯列模型像とを重ね合わせ、3次元歯列模型像をトリミングし、3次元口腔領域像に含まれるアーチファクトを削除し、3次元口腔領域像の一部を3次元歯列模型像で置き換えて合成した像を3次元断層撮影像とする工程とを含む。
【選択図】図6
PROBLEM TO BE SOLVED: To obtain an accurate three-dimensional CT image of upper and lower jaw bones and upper and lower dentitions by removing artifacts caused by a metal restoration or the like.
A method of creating a three-dimensional tomographic image of an oral cavity region having an artifact source includes a step of inputting oral region tomographic data and dentition model tomographic data to a computer via an input means; A step of creating a three-dimensional oral region image including a marker from the tomographic data and displaying it on the display means, and a step of creating a three-dimensional dental model image including the marker from the dentition model tomographic data, The displaying step and the calculation means are configured to display the three-dimensional oral region image and the three-dimensional dental model image so that the marker in the three-dimensional oral region image and the marker in the three-dimensional dental model image substantially coincide with each other. Overlay, trim 3D dentition model image, delete artifacts contained in 3D oral area image, replace 3D oral area image with 3D dentition model image, 3D image Tomographic images and Including the step of.
[Selection] Figure 6
Description
本発明は、3次元断層撮影像の作成方法および作成用コンピュータシステムに関し、特に、断層撮影像のアーチファクトを除去した上下顎骨や上下歯列の3次元断層撮影像の作成方法および作成用コンピュータシステムに関する。 The present invention relates to a method and computer system for creating a three-dimensional tomographic image, and more particularly, to a method and computer system for creating a three-dimensional tomographic image of the maxilla and mandibular bone and upper and lower dentition from which the artifact of the tomographic image has been removed. .
歯科における人工歯根インプラント手術等において、上下顎骨や上下歯列の形態を把握することは重要である。このため、従来は、口腔領域のCT(Computerized Tomography)像を撮影し、かかるCT像を基に、上下顎骨や上下歯列の3次元CT像を得ていた(例えば、非特許文献1、2)。
しかしながら、口腔内に歯科金属修復物がある場合、歯科金属修復物に起因するアーチファクト(映像障害)がCT像に発生した。このため、2次元のCT像を合成して作成した上下顎骨や上下歯列の3次元CT像が正確に表示されず、アーチファクトの除去が求められていた。 However, when there is a dental metal restoration in the oral cavity, artifacts (image defects) due to the dental metal restoration occurred in the CT image. For this reason, the three-dimensional CT images of the upper and lower jaw bones and upper and lower dentitions created by synthesizing the two-dimensional CT images are not accurately displayed, and the removal of artifacts has been demanded.
これに対して、2次元CT像の画像処理によりアーチファクトを消去する方法が試みられたが、アーチファクトが大きく、例えば歯列の大部分がアーチファクトで覆われるような場合には、アーチファクトだけを除去することは不可能であった。 On the other hand, an attempt has been made to erase artifacts by image processing of a two-dimensional CT image. However, when the artifacts are large and, for example, most of the dentition is covered with the artifacts, only the artifacts are removed. It was impossible.
一方、人工歯根インプラント手術等では、通常、石膏等で歯列模型が作製される。発明者らは、かかる歯列模型に着目し、歯列模型の形状データを用いて、患者の3次元CT像を修正することにより、アーチファクトを除去した3次元CT像が得られることを見出し、本発明を完成した。 On the other hand, in an artificial root implant operation or the like, a dentition model is usually made of plaster or the like. The inventors focused on such a dentition model and found that a three-dimensional CT image from which artifacts have been removed can be obtained by correcting the patient's three-dimensional CT image using the shape data of the dentition model. The present invention has been completed.
即ち、本発明は、金属修復物等に起因するアーチファクトを除去し、上下顎骨や上下歯列の正確な3次元断層撮影像を得ることを目的とする。 That is, an object of the present invention is to remove an artifact caused by a metal restoration or the like and obtain an accurate three-dimensional tomographic image of the maxilla and mandible or the upper and lower teeth.
本発明は、入力手段、表示手段、および演算手段を含むコンピュータを用いて、アーチファクト源を有する口腔領域の3次元断層撮影像を作成する方法であって、
(a)バイトとマーカとを含むインターフェイスのバイトを噛んだ状態で、患者の口腔領域を断層撮影した口腔領域断層撮影データを、入力手段を介してコンピュータに入力する工程と、
(b)患者の歯列模型がバイトを噛んだ状態を断層撮影した歯列模型断層撮影データを、入力手段を介してコンピュータに入力する工程と、
(c)口腔領域断層撮影データからマーカを含む3次元口腔領域像を作成して、表示手段に表示する工程と、
(d)歯列模型断層撮影データからマーカを含む3次元歯列模型像を作成して、表示手段に表示する工程と、
(e)演算手段が、
3次元口腔領域像中のマーカと、3次元歯列模型像中のマーカとが略一致するように、3次元口腔領域像と3次元歯列模型像とを重ね合わせ、
入力手段を介して選択された選択領域に基づいて、3次元歯列模型像をトリミングし、
入力手段を介して選択された選択領域に基づいて、3次元口腔領域像に含まれるアーチファクトを削除し、
3次元口腔領域像の一部を3次元歯列模型像で置き換えて合成した像を3次元断層撮影像とする工程と、を含むことを特徴とする3次元断層撮影像作成方法である。
The present invention is a method for creating a three-dimensional tomographic image of an oral cavity region having an artifact source using a computer including an input unit, a display unit, and a calculation unit,
(A) a step of inputting oral region tomography data obtained by tomographic imaging of a patient's oral region to a computer via an input means while biting an interface bite including a bite and a marker;
(B) inputting tomographic model tomographic data obtained by tomographic imaging of a state in which the patient's dental model bites the bite;
(C) creating a three-dimensional oral region image including a marker from oral region tomography data and displaying it on the display means;
(D) creating a three-dimensional dentition model image including a marker from the dentition model tomography data and displaying it on the display means;
(E) The computing means is
Superimposing the 3D oral region image and the 3D dentition model image so that the marker in the 3D oral region image and the marker in the 3D dentition model image substantially match,
Trimming the three-dimensional dentition model image based on the selected area selected via the input means,
Based on the selected area selected via the input means, the artifacts included in the 3D oral area image are deleted,
And a step of replacing a part of the three-dimensional oral region image with a three-dimensional dentition model image and combining the resultant image with the three-dimensional tomographic image.
また、本発明は、アーチファクト源を有する口腔領域の3次元断層撮影像を作成するためのコンピュータシステムであって、
患者の口腔領域断層撮影データと、患者の歯列模型の歯列模型断層撮影データとを入力する入力手段と、
口腔領域断層撮影データから作成された3次元口腔領域像と、歯列模型断層撮影データから作成された3次元歯列模型像とを表示する表示手段と、
3次元口腔領域像中の基準点と、3次元歯列模型像中の基準点とが略一致するように2つの像を重ねた位置で、3次元口腔領域像の一部を3次元歯列模型像で置き換えて画像合成する手段と、
入力手段を介して入力された選択領域に基づいて3次元歯列模型像をトリミングするトリミング手段と、
入力手段を介して入力された選択領域に基づいて3次元口腔領域像に含まれるアーチファクトを除去する除去手段とを含むことを特徴とするコンピュータシステムでもある。
The present invention also provides a computer system for creating a three-dimensional tomographic image of an oral cavity region having an artifact source,
Input means for inputting the oral region tomography data of the patient and the dentition model tomography data of the patient's dentition model;
Display means for displaying a three-dimensional oral region image created from oral region tomography data and a three-dimensional dental model image created from dental model tomography data;
At the position where the two images are superimposed so that the reference point in the three-dimensional oral region image and the reference point in the three-dimensional dental model image substantially coincide, a part of the three-dimensional oral region image is converted into the three-dimensional dental row Means to replace the model image and compose the image;
Trimming means for trimming a three-dimensional dentition model image based on a selection region input via the input means;
It is also a computer system characterized by including removal means for removing artifacts included in the three-dimensional oral cavity region image based on the selected region input via the input means.
本発明にかかる3次元断層撮影像作成方法および作成用コンピュータシステムを用いることにより、上下顎骨や上下歯列の正確な3次元断層撮影像を得ることができ、人工歯根インプラント手術等の臨床例への適用が可能となる。 By using the three-dimensional tomographic image creation method and creation computer system according to the present invention, accurate three-dimensional tomographic images of the maxilla and maxillary dentition can be obtained, leading to clinical examples such as artificial root implant surgery. Can be applied.
図1は、歯の金属修復物を有する患者の口腔内写真(下顎)である。このような金属修復物を有する患者に対して口腔領域のCT像を撮影し、3次元イメージに合成した3次元口腔領域像を図2に示す。3次元口腔領域像は、断層写真であるCT像を積み重ねて合成する。3次元口腔領域像の合成には、ハプティックデバイス(商品名:PHANToM)を用いる。 FIG. 1 is an intraoral photograph (mandible) of a patient having a dental metal restoration. FIG. 2 shows a three-dimensional oral region image obtained by taking a CT image of the oral region of a patient having such a metal restoration and synthesizing it into a three-dimensional image. The three-dimensional oral region image is synthesized by stacking CT images that are tomographic images. A haptic device (trade name: PHANToM) is used for the synthesis of the three-dimensional oral region image.
図2に示すように、患者が金属修復物を有する場合、金属修復物によるアーチファクト(映像障害)が発生し、歯列部分の正確な画像が得られない。例えば、上下顎骨のCT撮影に対しては、密度の高い金合金、銀合金、Ni−Cr合金、Co−Cr合金、ステンレス鋼等が、アーチファクトを発生させるアーチファクト源となる。 As shown in FIG. 2, when a patient has a metal restoration, an artifact (image failure) due to the metal restoration occurs, and an accurate image of the dentition portion cannot be obtained. For example, for CT imaging of the maxilla and mandible, high-density gold alloy, silver alloy, Ni—Cr alloy, Co—Cr alloy, stainless steel, etc. are artifact sources that generate artifacts.
一方、人工歯根インプラント手術や顎変形症手術を行う場合、通常は、石膏の歯列模型が作製される。歯列模型は、患者の歯列の型を取り作製されるため、その患者の歯列が正確に再現されている。 On the other hand, when an artificial root implant operation or jaw deformity operation is performed, a plaster dentition model is usually produced. Since the dentition model is made by taking a mold of the patient's dentition, the dentition of the patient is accurately reproduced.
本実施の形態では、かかる歯列模型から3次元歯列模型像をとり、かかる3次元歯列模型像を用いて3次元口腔領域像の一部を置き換えるものである。 In the present embodiment, a three-dimensional dentition model image is taken from the dentition model, and a part of the three-dimensional oral region image is replaced using the three-dimensional dentition model image.
図3は、患者の3次元口腔領域像の一部を、3次元歯列模型像で置き換える場合に、位置合わせの基準となるインターフェイスである。全体が10で表されるインターフェイスは、歯列バイト1と位置合わせ用マーカープレート2からなる。
歯列バイト1は、その患者の歯列に対応した形状となっている。また、歯列バイト1は、顎骨や歯列模型の撮影に用いられるCT値(400〜900)では撮影されない材料から形成される。かかる材料としては、例えば、ポリメチルメタクリレート(PMMA)のような高分子材料(即時重合レジン)、シリコーン、ウレタン、チオコールのようなゴム系材料がある。また、マーカープレート2は石膏から形成された板状体からなる。マーカープレート2の表面には、例えば、直径が4〜5mmの円状の凸部(又は凹部)が部分的に設けられている。後述する位置合わせの工程で、かかる凸部が重なるように位置合わせすることにより、位置合わせの精度が向上する。
FIG. 3 shows an interface serving as a reference for positioning when a part of a three-dimensional oral region image of a patient is replaced with a three-dimensional dentition model image. The interface represented as a whole by 10 is composed of a dentition bit 1 and an alignment marker plate 2.
The dentition bite 1 has a shape corresponding to the dentition of the patient. Further, the dentition bite 1 is formed of a material that is not photographed with CT values (400 to 900) used for photographing the jawbone and the dentition model. Examples of such materials include polymer materials (immediate polymerization resin) such as polymethyl methacrylate (PMMA), and rubber-based materials such as silicone, urethane, and thiocol. The marker plate 2 is made of a plate-like body made of gypsum. For example, a circular convex portion (or concave portion) having a diameter of 4 to 5 mm is partially provided on the surface of the marker plate 2. In the alignment process described later, the alignment accuracy is improved by aligning such convex portions.
ここでは、まず、図9のフローチャートを参照しながら、本実施の形態にかかる3次元断層撮影像作成方法について説明する。CT撮影は、顎骨や歯列模型の撮影に用いられるCT値を用いて行われる、顎骨や歯列模型の撮影とする。
かかる方法では、まず、患者の歯列模型20を、例えば石膏で作製する。この石膏模型は、一般的な歯科治療で用いられる模型である。
Here, first, a three-dimensional tomographic image creation method according to the present embodiment will be described with reference to the flowchart of FIG. CT imaging is imaging of the jawbone and dentition model, which is performed using CT values used for imaging of the jawbone and dentition model.
In this method, first, the patient's dentition model 20 is made of, for example, plaster. This plaster model is a model used in general dental treatment.
次に、図4(a)に示すように、歯列模型20にインターフェイス10を噛ませる。上述のように、インターフェイス10の歯列バイト1は、歯列模型20と噛み合うようにできている。 Next, as shown in FIG. 4A, the interface 10 is bitten by the dentition model 20. As described above, the dental cutting tool 1 of the interface 10 is configured to mesh with the dental model 20.
このように、歯列模型20にインターフェイス10を噛ませて固定した状態で、CT像(歯列模型断層撮影データ)を取得する。CT像の撮影には、16列マルチスライス・ヘリカルCT(SOMATOM Sensation 16、 Siemens製、スライス幅:0.31mm)が用いられる。CT像は、入力手段を介してコンピュータに入力され、DICOM方式のデータとして記憶手段に保存される(工程S11)。
更に、得られたCT像(歯列模型断層撮影データ)を用いて、3次元歯列模型像が構築される。3次元歯列模型像の構築は、例えば、VGStudio MAX1.1 (Volume Graphic製)を用いて行われ、DICOM方式のデータが、STL(Standard Template Library)形式の3次元データに変換されて、ディスプレイ等の表示手段に表示される(工程S12)。
In this way, a CT image (dental model tomography data) is acquired in a state where the interface 10 is engaged with the dental model 20 and fixed. A 16-row multi-slice helical CT (SOMATOM Sensation 16, manufactured by Siemens, slice width: 0.31 mm) is used for taking a CT image. The CT image is input to the computer via the input means and stored in the storage means as DICOM data (step S11).
Further, a three-dimensional dental model image is constructed using the obtained CT image (dental model tomography data). The construction of the three-dimensional dentition model image is performed using, for example, VGStudio MAX1.1 (manufactured by Volume Graphic), and DICOM data is converted into three-dimensional data in the STL (Standard Template Library) format and displayed. Or the like (step S12).
図4(b)は、表示手段に表示された、歯列模型20にインターフェイス10を噛ませた状態の3次元歯列模型像25である。上述のように、即時重合レジン等からなる歯列バイトは、CT像には写らない。 FIG. 4B shows a three-dimensional dentition model image 25 in a state where the interface 10 is bitten by the dentition model 20 displayed on the display means. As described above, a dental cutting tool made of an immediate polymerization resin or the like is not shown in a CT image.
次に、図5(a)に示すように、患者30にインターフェイス10を噛ませた状態で、口腔領域を撮影し、CT像(口腔領域断層撮影データ)を得る。かかるデータは、入力手段を介してコンピュータに入力され、記憶手段に保存される(工程S21)。 Next, as shown in FIG. 5A, the oral cavity region is imaged with the patient 10 biting the interface 10, and a CT image (oral region tomographic data) is obtained. Such data is input to the computer via the input means and stored in the storage means (step S21).
口腔領域断層撮影データは、3次元口腔領域像35に合成されて、表示手段に表示される(工程S22)。図5(b)は、患者30にインターフェイス10を噛ませた状態の3次元口腔領域像35である。図5(b)からわかるように、歯列近傍では、金属修復物の影響でアーチファクトが発生している。また、歯列バイトは、3次元口腔領域像35には写っていない。 Oral area tomography data is combined with the three-dimensional oral area image 35 and displayed on the display means (step S22). FIG. 5B is a three-dimensional oral region image 35 in a state where the patient 10 bites the interface 10. As can be seen from FIG. 5B, artifacts are generated near the dentition due to the influence of the metal restoration. Further, the dentition bite is not shown in the three-dimensional oral region image 35.
次に、図6に示すように、図4(b)の3次元歯列模型像25と、図5(b)の3次元口腔領域像35とを重ね合わせる。具体的には、図4(b)の3次元歯列模型像25を、図5(b)の3次元口腔領域像35の座標上に配置して位置合わせした後に、3次元歯列模型像25で3次元口腔領域像35の一部を置き換えて、3次元像を合成する(工程S3)。 Next, as shown in FIG. 6, the three-dimensional dentition model image 25 of FIG. 4B and the three-dimensional oral cavity region image 35 of FIG. Specifically, the three-dimensional dentition model image 25 in FIG. 4B is placed on the coordinates of the three-dimensional oral region image 35 in FIG. 25, a part of the three-dimensional oral region image 35 is replaced and a three-dimensional image is synthesized (step S3).
3次元像を置き換える際、双方の3次元像中のマーカープレート2が重なるように、位置合わせを行う。位置合わせには、Polygon Edition Tool (Konica-Minolta製) を用いる。マーカープレート2のような基準を用いてCT像を合成することにより、高い位置精度で、3次元歯列模型像25を、3次元口腔領域像35に取り込むことができる。 When replacing a three-dimensional image, alignment is performed so that the marker plates 2 in both three-dimensional images overlap. Use Polygon Edition Tool (Konica-Minolta) for alignment. By synthesizing the CT image using a reference such as the marker plate 2, the three-dimensional dental model image 25 can be taken into the three-dimensional oral region image 35 with high positional accuracy.
具体的には、まず、3次元歯列模型像25に含まれるマーカプレート2上の、基準点(3点)を抽出する。次に、3次元口腔領域像35に含まれるマーカプレート2に対しても、マーカプレート2上の同じ位置にある基準点(3点)を抽出する。
ここでは、同一のマーカプレート2が双方の3次元像で用いられているため、基準点の位置が正確に抽出される。また、マーカープレート2の表面に、凸部が設けられることにより、基準点の特定が容易かつ正確に行える。
なお、双方の3次元像において、異なったマーカを用いることも可能である。また、特定の歯や歯の傷などを基準点に用いて、位置合わせを行っても良い。
Specifically, first, reference points (three points) on the marker plate 2 included in the three-dimensional dentition model image 25 are extracted. Next, for the marker plate 2 included in the three-dimensional oral cavity region image 35, reference points (three points) at the same position on the marker plate 2 are extracted.
Here, since the same marker plate 2 is used in both three-dimensional images, the position of the reference point is accurately extracted. In addition, since the convex portion is provided on the surface of the marker plate 2, the reference point can be easily and accurately specified.
It is also possible to use different markers in both three-dimensional images. Further, alignment may be performed using a specific tooth or a tooth wound as a reference point.
次に、3次元口腔領域像35に含まれるマーカプレート2上で抽出された3点に、3次元歯列模型像25に含まれるマーカプレート2上で抽出された3点が重なるように、3次元口腔領域像35と3次元歯列模型像25とを重ねる。かかる工程で、3次元口腔領域像35と3次元歯列模型像25とが、概ね位置合わせされる。 Next, the three points extracted on the marker plate 2 included in the three-dimensional dental model image 25 overlap the three points extracted on the marker plate 2 included in the three-dimensional oral region image 35. The three-dimensional oral region image 35 and the three-dimensional dentition model image 25 are superimposed. In this process, the three-dimensional oral cavity region image 35 and the three-dimensional dentition model image 25 are approximately aligned.
続いて、3次元歯列模型像25に含まれるマーカプレート2と、3次元口腔領域像35に含まれるマーカプレート2に対して、例えば法線ベクトル法を適用して、更に、正確に位置合わせを行う。 Subsequently, for example, a normal vector method is applied to the marker plate 2 included in the three-dimensional dentition model image 25 and the marker plate 2 included in the three-dimensional oral cavity region image 35 to further accurately align. I do.
位置合わせが終了した状態で、3次元口腔領域像35の一部を3次元歯列模型像25で置き換える。これにより、図6に示すような3次元像が得られる。 In a state where the alignment is completed, a part of the three-dimensional oral region image 35 is replaced with the three-dimensional dental model image 25. Thereby, a three-dimensional image as shown in FIG. 6 is obtained.
図6では、3次元歯列模型像25がそのまま3次元口腔領域像35に合成されているため、必要に応じて3次元歯列模型像25をトリミングし、3次元歯列模型像25中の歯列以外の部分(主に歯肉部分)を削除し、歯列のみの像(3次元歯列像)とする(工程S4)。具体的には、表示手段に表示された3次元歯列模型像25を見ながら、カーソルやポインタ等の入力手段を介して所定の選択領域を指定し、かかる選択領域に含まれるデータを3次元歯列模型像25のデータから消去する。選択領域は、位置データとして、例えば座標で入力しても構わない。 In FIG. 6, since the three-dimensional dental model image 25 is directly synthesized with the three-dimensional oral region image 35, the three-dimensional dental model image 25 is trimmed as necessary. A part other than the dentition (mainly the gingival part) is deleted to obtain an image of only the dentition (three-dimensional dentition image) (step S4). Specifically, while looking at the three-dimensional dentition model image 25 displayed on the display means, a predetermined selection area is designated via an input means such as a cursor or a pointer, and the data included in the selection area is three-dimensionally displayed. It erases from the data of the dentition model image 25. The selection area may be input as position data, for example, in coordinates.
また、図6では、アーチファクト40が残っているが、必要に応じてこれも削除する(S5)。アーチファクト40の除去には、例えばハプティックデバイス(触力覚デバイス)であるPHANToM(米国、SensAble Technologies 社製)が用いられる。具体的には、表示手段に表示された3次元画像のアーチファクト40を見ながら、不要な領域をカーソルやポインタ等の入力手段を介して選択領域として指定し、かかる選択領域に含まれるデータを3次元口腔領域像35のデータから削除する。 In FIG. 6, the artifact 40 remains, but this is also deleted if necessary (S5). For example, PHANToM (manufactured by SensAble Technologies, USA), which is a haptic device (haptic device), is used to remove the artifact 40. Specifically, while looking at the artifact 40 of the three-dimensional image displayed on the display means, an unnecessary area is designated as a selection area via an input means such as a cursor or a pointer, and data included in the selection area is 3 Delete from the data of the three-dimensional oral region image 35.
なお、アーチファクトの除去は、トリミング後の歯列模型像をもとに行っても良い。即ち、アーチファクトは、例えば、図6に見られるように、金属修復物を有する歯列から外方に延びる。このため、トリミング後の歯列模型像を基準として、トリミング後の歯列模型像(歯列)の外部表面から外方に広がった領域を選択領域として入力し、かかる領域に含まれる3次元口腔領域像35のデータを削除することにより、アーチファクトの削除が可能となる。更にアーチファクトが部分的に残る場合には、上述の方法に従って、残ったアーチファクトを除去しても構わない。 Artifacts may be removed based on the dentition model image after trimming. That is, the artifact extends outwardly from the dentition with the metal restoration, for example as seen in FIG. For this reason, on the basis of the dentition model image after trimming, a region extending outward from the external surface of the dentition model image (dentition) after trimming is input as a selection region, and the three-dimensional oral cavity included in the region is input. By deleting the data of the area image 35, the artifact can be deleted. Further, when the artifact remains partially, the remaining artifact may be removed according to the above-described method.
以上の工程で、アーチファクト源を有する口腔領域の3次元断層撮影像が完了する。 With the above steps, a three-dimensional tomographic image of the oral cavity region having the artifact source is completed.
ここで、図9のフローチャートでは、3次元歯列模型像25を3次元口腔領域像35に合成(工程S3)してから3次元歯列模型像25のトリミング(工程S4)、アーチファクトの除去(工程S5)を行ったが、トリミング(工程S4)、アーチファクト除去(工程S5)を別々の画像で行った後に、双方の画像を合成(工程S3)することもできる。例えば、位置合わせした状態で、2つの画像を重ねて表示した後、それぞれの画像に対してトリミング(工程S4)とアーチファクトの除去(工程S5)を行い、最後に2つの画像を合成(工程S3)しても良い。 Here, in the flowchart of FIG. 9, the three-dimensional dental model image 25 is combined with the three-dimensional oral cavity region image 35 (step S3), and then the three-dimensional dental model image 25 is trimmed (step S4) and artifacts are removed (step S4). Although step S5) is performed, after performing trimming (step S4) and artifact removal (step S5) with separate images, both images can be combined (step S3). For example, after displaying two images in an aligned state, trimming (step S4) and artifact removal (step S5) are performed on each image, and finally the two images are combined (step S3). )
図7は、本実施の形態にかかる3次元断層撮影像(CT像)の作成方法を、インプラント手術を行う患者に適用した場合の3次元像である。図7(a)は、本方法適用前の3次元像であり、図7(b)は、本方法適用後の3次元像である。
図7からわかるように、本方法を適用することにより、アーチファクトにより不明瞭であった下顎の歯列が明確に表されるようになる。
FIG. 7 is a three-dimensional image when the method for creating a three-dimensional tomographic image (CT image) according to the present embodiment is applied to a patient performing an implant operation. FIG. 7A is a three-dimensional image before applying this method, and FIG. 7B is a three-dimensional image after applying this method.
As can be seen from FIG. 7, by applying this method, the dentition of the lower jaw, which was unclear due to the artifact, is clearly expressed.
また、図8は、本実施の形態にかかる3次元断層撮影像(CT像)の作成方法を、顎変形患者に適用した場合の3次元像である。図8(a)は、本方法適用前の3次元CT像であり、図8(b)、(c)は、本方法適用後の3次元CT像(正面、側面)である。
図8からわかるように、本方法を適用することにより、アーチファクトにより不明瞭であった上下の歯列が、正面、側面ともに明確に表されるようになる。
FIG. 8 is a three-dimensional image when the method for creating a three-dimensional tomographic image (CT image) according to the present embodiment is applied to a jaw deformity patient. FIG. 8A is a three-dimensional CT image before application of this method, and FIGS. 8B and 8C are three-dimensional CT images (front and side surfaces) after application of this method.
As can be seen from FIG. 8, by applying this method, the upper and lower dentitions that were obscured by the artifacts are clearly represented on both the front and side surfaces.
なお、本実施の形態では、CT像から得た3次元口腔領域像を、歯列模型をCT撮影して得た3次元歯列模型像を用いて修正したが、歯列模型の形状は、接触式3次元デジタイザ(商品名ATOS、ドイツGOM社製)やレーザ光測定装置、接触式の測定装置を用いて測定しても良い。 In the present embodiment, the three-dimensional oral region image obtained from the CT image is corrected using the three-dimensional dental model image obtained by CT imaging of the dental model, but the shape of the dental model is You may measure using a contact-type three-dimensional digitizer (brand name ATOS, German GOM company), a laser beam measuring device, and a contact-type measuring device.
また、本実施の形態では、3次元断層撮影像としてCT撮影で得られた像について説明したが、MRI(Magnetic Resonance Imaging;磁気共鳴映像)法を用いて得られた像に対しても適用できる。MRI法を用いて3次元断層撮影像を作成した場合は、Ni−Cr合金、Co−Cr合金、Ti等からなる金属修復物が、アーチファクト源となる。 In the present embodiment, an image obtained by CT imaging as a three-dimensional tomographic image has been described. However, the present invention can also be applied to an image obtained by using an MRI (Magnetic Resonance Imaging) method. . When a three-dimensional tomographic image is created using the MRI method, a metal restoration made of Ni—Cr alloy, Co—Cr alloy, Ti, or the like becomes an artifact source.
続いて、本実施の形態にかかる3次元断層撮影像を作成するためのコンピュータシステムについて、簡単に説明する。
図10は、全体が100で表されるコンピュータシステムの概略図である。コンピュータシステム100は、まず、口腔領域断層撮影データ/歯列模型断層撮影データ等を入力するための、入力部101を有する。口腔領域断層撮影データ/歯列模型断層撮影データは、例えばDICOMデータとして提供される。トリミングする領域、アーチファクトとして除去する領域等の選択領域も、かかる入力部を介して行われる。
Next, a computer system for creating a three-dimensional tomographic image according to this embodiment will be briefly described.
FIG. 10 is a schematic diagram of a computer system denoted as a whole by 100. First, the computer system 100 includes an input unit 101 for inputting oral region tomography data / dental model tomography data and the like. Oral region tomography data / dental model tomography data is provided, for example, as DICOM data. Selection regions such as a region to be trimmed and a region to be removed as an artifact are also performed via the input unit.
入力部101は、例えば、インターネットやCD−ROMによる供給等、一般的なコンピュータへのデータ供給手段のほか、ポインタやカーソルで、表示手段の所定領域を選択するような手段であっても良い。 The input unit 101 may be a means for selecting a predetermined area of the display means with a pointer or a cursor in addition to a data supply means to a general computer such as supply via the Internet or a CD-ROM.
コンピュータシステム100は、また、口腔領域断層撮影データ等を記憶する記憶部102を有する。記憶部102は、例えばハードディスク、フロッピー(登録商標)ディスク等の記憶媒体からなる。 The computer system 100 also includes a storage unit 102 that stores oral region tomography data and the like. The storage unit 102 includes a storage medium such as a hard disk or a floppy (registered trademark) disk.
コンピュータシステム100は、また、制御演算部103を有する。制御演算部103は、更に、口腔領域断層撮影データ/歯列模型断層撮影データから3次元像を作成する3次元像作成部105を含む。3次元像の作成には、例えば、VGStudio MAX1.1 (Volume Graphic製)が用いられ、DICOMデータが、STL(Standard Template Library)形式の3次元データに変換される。 The computer system 100 also has a control calculation unit 103. The control calculation unit 103 further includes a three-dimensional image creation unit 105 that creates a three-dimensional image from oral region tomography data / dental model tomography data. For example, VGStudio MAX1.1 (manufactured by Volume Graphic) is used to create a three-dimensional image, and DICOM data is converted into three-dimensional data in an STL (Standard Template Library) format.
制御演算部103は、また、3次元像合成部106を有する。3次元像合成部106では、3次元口腔領域像と3次元歯列模型像との位置合わせを行い、3次元口腔領域像の一部を3次元歯列模型像で置き換えて画像合成を行う。 The control calculation unit 103 also has a three-dimensional image synthesis unit 106. The three-dimensional image composition unit 106 aligns the three-dimensional oral region image and the three-dimensional dentition model image, and replaces a part of the three-dimensional oral region image with the three-dimensional dentition model image to perform image composition.
制御演算部103は、また、3次元歯列模型像をトリミングするトリミング部107を含む。トリミング部107には、例えば、Konica-Minolta製のPolygon Edition Toolなどが使用される。 The control calculation unit 103 also includes a trimming unit 107 that trims the three-dimensional dentition model image. For the trimming unit 107, for example, Konica-Minolta Polygon Edition Tool is used.
制御演算部103は、更に、3次元口腔領域像に含まれるアーチファクトを削除するアーチファクト除去部108を有する。かかる除去部としては、例えば、ハプティックデバイスであるPHANToM(米国、SensAble Technologies 社製)が用いられる。 The control calculation unit 103 further includes an artifact removal unit 108 that deletes the artifact included in the three-dimensional oral region image. As such a removal unit, for example, PHANToM (made by SensAble Technologies, USA), which is a haptic device, is used.
コンピュータシステム100は、更に、表示部104を有する。表示部104には、例えば、一般的なディスプレイが用いられる。 The computer system 100 further includes a display unit 104. For the display unit 104, for example, a general display is used.
なお、コンピュータシステム100は、必要に応じて、コンピュータシステムが一般的に備える他の手段を備えるものとする。 Note that the computer system 100 includes other means generally included in the computer system, as necessary.
1 歯列バイト
2 マーカプレート
10 インターフェイス
20 歯列模型
25 歯列模型の3次元CT像
30 患者
35 患者の3次元CT像
40 アーチファクト
100 コンピュータシステム
1 Dental Byte 2 Marker Plate 10 Interface 20 Dental Model 25 Dental Model 3D CT Image 30 Patient 35 Patient 3D CT Image 40 Artifact 100 Computer System
Claims (8)
(a)バイトとマーカとを含むインターフェイスの該バイトを噛んだ状態で、患者の口腔領域を断層撮影した口腔領域断層撮影データを、該入力手段を介して該コンピュータに入力する工程と、
(b)該患者の歯列模型が該バイトを噛んだ状態を断層撮影した歯列模型断層撮影データを、該入力手段を介して該コンピュータに入力する工程と、
(c)該口腔領域断層撮影データから該マーカを含む3次元口腔領域像を作成して、該表示手段に表示する工程と、
(d)該歯列模型断層撮影データから該マーカを含む3次元歯列模型像を作成して、該表示手段に表示する工程と、
(e)演算手段が、
該3次元口腔領域像中の該マーカと、該3次元歯列模型像中の該マーカとが略一致するように、該3次元口腔領域像と該3次元歯列模型像とを重ね合わせ、
該入力手段を介して選択された選択領域に基づいて、該3次元歯列模型像をトリミングし、
該入力手段を介して選択された選択領域に基づいて、該3次元口腔領域像に含まれるアーチファクトを削除し、
該3次元口腔領域像の一部を該3次元歯列模型像で置き換えて合成した像を3次元断層撮影像とする工程と、を含むことを特徴とする3次元断層撮影像作成方法。 A method for creating a three-dimensional tomographic image of an oral cavity region having an artifact source using a computer including an input means, a display means, and a computing means,
(A) inputting to the computer via the input means oral region tomography data obtained by tomographic imaging of the oral region of a patient while biting the bite of an interface including a bite and a marker;
(B) a step of inputting tomographic data through the input means tomographic model tomographic data obtained by tomography of a state in which the dental model of the patient bites the bite;
(C) creating a three-dimensional oral region image including the marker from the oral region tomography data and displaying it on the display means;
(D) creating a three-dimensional dentition model image including the marker from the dentition model tomography data, and displaying it on the display means;
(E) The computing means is
The three-dimensional oral region image and the three-dimensional dentition model image are overlaid so that the marker in the three-dimensional oral region image and the marker in the three-dimensional dentition model image substantially match,
Trimming the three-dimensional dentition model image based on the selected region selected via the input means;
Based on the selected region selected via the input means, the artifact included in the three-dimensional oral region image is deleted,
And a step of replacing a part of the three-dimensional oral cavity region image with the three-dimensional dentition model image to form a three-dimensional tomographic image.
(a)患者の口腔領域を断層撮影した口腔領域断層撮影データを、入力手段を介してコンピュータに入力する工程と、
(b)該患者の歯列模型の形状を表す歯列模型データを、該入力手段を介して該コンピュータに入力する工程と、
(c)該口腔領域断層撮影データから3次元口腔領域像を作成して、表示手段に表示する工程と
(d)該歯列模型データから3次元歯列模型像を作成して、該表示手段に表示する工程と
(e)演算手段が、
該3次元口腔領域像中の基準点と、該3次元歯列模型像中の基準点とが略一致するように、該3次元口腔領域像と該3次元歯列模型像とを重ね合わせ、
該3次元口腔領域像の一部を該3次元歯列模型像で置き換えて合成した像を3次元断層撮影像とする工程と、を含むことを特徴とする3次元断層撮影像作成方法。 A method for creating a three-dimensional tomographic image of an oral cavity region having an artifact source using a computer including an input means, a display means, and a computing means,
(A) a step of inputting oral region tomography data obtained by tomographic imaging of a patient's oral region to a computer via an input means;
(B) inputting dentition model data representing the shape of the dentition model of the patient into the computer via the input means;
(C) a step of creating a three-dimensional oral region image from the oral region tomography data and displaying it on a display means; and (d) creating a three-dimensional dental model image from the dental model data, And (e) a calculation means,
Superimposing the three-dimensional oral region image and the three-dimensional dental model image so that the reference point in the three-dimensional oral region image and the reference point in the three-dimensional dental model image substantially coincide with each other,
And a step of replacing a part of the three-dimensional oral cavity region image with the three-dimensional dentition model image to form a three-dimensional tomographic image.
上記歯列模型データが、マーカの位置データを含み、
上記工程(e)が、上記3次元口腔領域像中の該マーカと、上記3次元歯列模型像中の該マーカとを上記基準点に用いて、該3次元口腔領域像と該3次元歯列模型像とを重ね合わせる工程を含むことを特徴とする請求項2に記載の3次元断層撮影像作成方法。 The oral region tomography data includes marker position data,
The dentition model data includes marker position data,
The step (e) uses the marker in the three-dimensional oral region image and the marker in the three-dimensional dentition model image as the reference point, and uses the three-dimensional oral region image and the three-dimensional tooth. The method for creating a three-dimensional tomographic image according to claim 2, further comprising a step of superimposing the row model image.
患者の口腔領域断層撮影データと、該患者の歯列模型の歯列模型断層撮影データとを入力する入力手段と、
該口腔領域断層撮影データから作成された3次元口腔領域像と、該歯列模型断層撮影データから作成された3次元歯列模型像とを表示する表示手段と、
該3次元口腔領域像中の基準点と、該3次元歯列模型像中の基準点とが略一致するように2つの像を重ねた位置で、該3次元口腔領域像の一部を該3次元歯列模型像で置き換えて画像合成する手段と、
該入力手段を介して入力された選択領域に基づいて該3次元歯列模型像をトリミングするトリミング手段と、
該入力手段を介して入力された選択領域に基づいて該3次元口腔領域像に含まれるアーチファクトを除去する除去手段と、を含むことを特徴とするコンピュータシステム。 A computer system for creating a three-dimensional tomographic image of an oral cavity region having an artifact source,
Input means for inputting the oral region tomography data of the patient and the dentition model tomography data of the dentition model of the patient;
Display means for displaying a three-dimensional oral region image created from the oral region tomography data and a three-dimensional dental model image created from the dental model tomography data;
A part of the three-dimensional oral region image is placed at a position where the two images are overlapped so that the reference point in the three-dimensional oral region image and the reference point in the three-dimensional dentition model image substantially coincide with each other. Means for replacing the image with a three-dimensional dentition model image,
Trimming means for trimming the three-dimensional dentition model image based on the selected region input via the input means;
A computer system comprising: removal means for removing artifacts included in the three-dimensional oral cavity region image based on the selected region input via the input means.
The interface according to claim 7, wherein the bite is made of a material that is not captured by tomography of the oral cavity region and the dentition model.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004242441A JP4408067B2 (en) | 2004-06-11 | 2004-08-23 | Three-dimensional tomographic image creation method and computer system |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004174381 | 2004-06-11 | ||
JP2004242441A JP4408067B2 (en) | 2004-06-11 | 2004-08-23 | Three-dimensional tomographic image creation method and computer system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006021016A true JP2006021016A (en) | 2006-01-26 |
JP4408067B2 JP4408067B2 (en) | 2010-02-03 |
Family
ID=35794696
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004242441A Expired - Lifetime JP4408067B2 (en) | 2004-06-11 | 2004-08-23 | Three-dimensional tomographic image creation method and computer system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4408067B2 (en) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008072323A1 (en) * | 2006-12-13 | 2008-06-19 | Imagnosis Inc. | Medical imaging marker |
JP2009233294A (en) * | 2008-03-28 | 2009-10-15 | Bionic Co Ltd | Ct marker and generation method of three-dimensional tomographic image |
JP6238330B1 (en) * | 2017-06-26 | 2017-11-29 | 浩明 清水 | Reference marker for CT imaging and 3D tomographic image creation method |
JP2018516708A (en) * | 2015-06-09 | 2018-06-28 | ▲シャ▼承▲キン▼SHE, Chengxin | Maxillofacial surgery image calibration design system and method |
JP2018529399A (en) * | 2015-06-30 | 2018-10-11 | キヤノン ユーエスエイ, インコーポレイテッドCanon U.S.A., Inc | Registration fiducial markers, systems, and methods |
US10420626B2 (en) | 2015-06-30 | 2019-09-24 | Canon U.S.A., Inc. | Fiducial markers, systems, and methods of registration |
US11202652B2 (en) | 2017-08-11 | 2021-12-21 | Canon U.S.A., Inc. | Registration and motion compensation for patient-mounted needle guide |
US20240350230A1 (en) * | 2007-02-26 | 2024-10-24 | Align Technology, Inc. | Methods for generating dental models and appliances |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103690188B (en) * | 2013-12-09 | 2017-10-13 | 中国人民解放军第四军医大学 | The natural head posture bearing calibration of head front filming apparatus and three-dimensional head model |
-
2004
- 2004-08-23 JP JP2004242441A patent/JP4408067B2/en not_active Expired - Lifetime
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008072323A1 (en) * | 2006-12-13 | 2008-06-19 | Imagnosis Inc. | Medical imaging marker |
US20240350230A1 (en) * | 2007-02-26 | 2024-10-24 | Align Technology, Inc. | Methods for generating dental models and appliances |
JP2009233294A (en) * | 2008-03-28 | 2009-10-15 | Bionic Co Ltd | Ct marker and generation method of three-dimensional tomographic image |
JP2018516708A (en) * | 2015-06-09 | 2018-06-28 | ▲シャ▼承▲キン▼SHE, Chengxin | Maxillofacial surgery image calibration design system and method |
JP2018529399A (en) * | 2015-06-30 | 2018-10-11 | キヤノン ユーエスエイ, インコーポレイテッドCanon U.S.A., Inc | Registration fiducial markers, systems, and methods |
US10420626B2 (en) | 2015-06-30 | 2019-09-24 | Canon U.S.A., Inc. | Fiducial markers, systems, and methods of registration |
JP6238330B1 (en) * | 2017-06-26 | 2017-11-29 | 浩明 清水 | Reference marker for CT imaging and 3D tomographic image creation method |
WO2019003452A1 (en) * | 2017-06-26 | 2019-01-03 | 浩明 清水 | Ct imaging reference marker, three-dimensional tomogram creation method, matching method, and system therefor |
US11202652B2 (en) | 2017-08-11 | 2021-12-21 | Canon U.S.A., Inc. | Registration and motion compensation for patient-mounted needle guide |
Also Published As
Publication number | Publication date |
---|---|
JP4408067B2 (en) | 2010-02-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5283949B2 (en) | CT imaging marker and 3D tomographic image creation method | |
Mangano et al. | Combining intraoral scans, cone beam computed tomography and face scans: the virtual patient | |
US10166088B2 (en) | Unified three dimensional virtual craniofacial and dentition model and uses thereof | |
EP1759353B1 (en) | Method for deriving a treatment plan for orthognatic surgery and devices therefor | |
JP5233456B2 (en) | Crown design method and crown preparation method | |
Nasef et al. | Virtual techniques for designing and fabricating a retainer | |
JP5976730B2 (en) | Method for extracting shape information | |
JP5374382B2 (en) | Methods and systems for dental planning and production | |
JP4328621B2 (en) | Medical simulation equipment | |
KR102093325B1 (en) | A digital splint | |
KR101252277B1 (en) | Imaginary overlay apparatus and method for dental treatment | |
Pozzi et al. | The smiling scan technique: Facially driven guided surgery and prosthetics | |
US20080124681A1 (en) | Automatic tooth movement measuring method employing three dimensional reverse engineering technique | |
WO2015154125A9 (en) | Dental implant guide formation system | |
JP4408067B2 (en) | Three-dimensional tomographic image creation method and computer system | |
Tsuchida et al. | A technique for making a diagnostic and surgical template | |
Choi et al. | Impact of the number of registration points for replacement of three-dimensional computed tomography images in dental areas using three-dimensional light-scanned images of dental models | |
WO2014015459A1 (en) | Method for dental prosthodontic and prosthesis digital archiving and fabrication, and teaching and training thereof | |
RU88538U1 (en) | TECHNICAL COMPLEX FOR CREATING A MEDICAL PATTERN USED FOR SURGICAL OPERATIONS (OPTIONS) | |
EP2368498A1 (en) | Method for deriving shape information of a person's dentition | |
Sohmura et al. | Original computer aided support system for safe and accurate implant placement—Collaboration with an university originated venture company | |
TW201345491A (en) | Method of digital filing and fabrication for dental prosthodontics and prosthesis and teaching and training thereof | |
Ramachandran et al. | Diagnosis and treatment planning using rapid prototyping technology in surgical endodontics | |
Shin et al. | A case report of a surgical guide fabricated via intraoral scanning-based implant planning and wax-based rapid prototyping | |
Madhok | Computer Generated Surgical Templates: An Aid to Implant Planning |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060728 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20080123 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090630 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090826 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091006 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091105 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4408067 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121120 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121120 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20181120 Year of fee payment: 9 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |