JP5619348B2 - Mold sheet inspection system - Google Patents
Mold sheet inspection system Download PDFInfo
- Publication number
- JP5619348B2 JP5619348B2 JP2008298680A JP2008298680A JP5619348B2 JP 5619348 B2 JP5619348 B2 JP 5619348B2 JP 2008298680 A JP2008298680 A JP 2008298680A JP 2008298680 A JP2008298680 A JP 2008298680A JP 5619348 B2 JP5619348 B2 JP 5619348B2
- Authority
- JP
- Japan
- Prior art keywords
- defect
- point
- light source
- image data
- linear light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/89—Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles
- G01N21/892—Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles characterised by the flaw, defect or object feature examined
- G01N21/8921—Streaks
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/89—Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles
- G01N21/8901—Optical details; Scanning details
- G01N21/8903—Optical details; Scanning details using a multiple detector array
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/95—Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
- G01N2021/9511—Optical elements other than lenses, e.g. mirrors
Landscapes
- Engineering & Computer Science (AREA)
- Textile Engineering (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
Description
本発明は、偏光フィルムや位相差フィルム等の光学フィルム(特にウェブ状に巻いて保管・輸送される長尺の光学フィルム)等のような、成形シートの欠陥を検査する欠陥検査装置に関する。 The present invention relates to a defect inspection apparatus for inspecting a defect of a molded sheet such as an optical film such as a polarizing film or a retardation film (particularly, a long optical film wound and stored in a web shape).
旧来の成形シートの欠陥検査装置は、ラインセンサと呼ばれる1次元カメラを用い、成形シートを蛍光管等の線状光源で照明し、成形シート表面を成形シートの長手方向に沿って長手方向の一端から他端まで1次元カメラで走査して1枚の静止画像データを取得し、この1枚の静止画像データに基づいて成形シートの欠陥を検査するものである。この静止画像データには、通常、線状光源像が含まれる。線状光源像は、線状光源およびカメラと反射面との間に成形シートが配置されている場合には、線状光源から出射し成形シートによって正反射されてカメラに到達した光の像であり、線状光源とカメラとの間に成形シートが配置されている場合には、線状光源から出射し成形シートを透過してカメラに到達した光の像である。この欠陥検査装置では、成形シートの幅が広い場合、成形シートの幅方向全域を検査できるように、複数台のラインセンサを幅方向に並べて用いる。 Conventional molded sheet defect inspection devices use a one-dimensional camera called a line sensor, illuminate the molded sheet with a linear light source such as a fluorescent tube, and the longitudinal direction of the molded sheet along the longitudinal direction of the molded sheet. One still image data is acquired by scanning with a one-dimensional camera from the other end to the other end, and a defect of the molded sheet is inspected based on the one still image data. This still image data usually includes a linear light source image. A linear light source image is an image of light emitted from a linear light source and regularly reflected by the molding sheet and reaching the camera when a linear light source and a camera and a reflecting surface are arranged. In the case where a molding sheet is disposed between the linear light source and the camera, it is an image of light emitted from the linear light source and transmitted through the molding sheet to reach the camera. In this defect inspection apparatus, when the width of the formed sheet is wide, a plurality of line sensors are arranged in the width direction so that the entire width direction of the formed sheet can be inspected.
しかしながら、この旧来の欠陥検査装置では、成形シート全域についての1枚の静止画像データ(以下、単に「画像データ」と称する)に基づいて成形シートの欠陥を検査するものであるので、画像データにおける検査対象画素と線状光源像との位置関係は、1つの決まった位置関係となる。欠陥は、検査対象画素(注目画素)と線状光源像との位置関係が特定の位置関係にある場合にしか画像データ上に現れないことがある。例えば、欠陥の1種である気泡は、線状光源像の周縁または近傍にある場合にしか画像データ上に現れないことが多い。そのため、欠陥は、その位置によっては、検出されないことがある。したがって、上記旧来の欠陥検査装置は、限られた欠陥検出能力しか持っていない。 However, since this conventional defect inspection apparatus inspects defects of a molded sheet based on one still image data (hereinafter simply referred to as “image data”) for the entire molded sheet, The positional relationship between the inspection target pixel and the linear light source image is one predetermined positional relationship. The defect may appear on the image data only when the positional relationship between the pixel to be inspected (target pixel) and the linear light source image is in a specific positional relationship. For example, bubbles that are one type of defect often appear on the image data only when they are at or near the periphery of the linear light source image. Therefore, the defect may not be detected depending on the position. Therefore, the conventional defect inspection apparatus has only a limited defect detection capability.
そこで、本願の出願人は、上記旧来の欠陥検査装置に対して欠陥識別能力を向上させた成形シートの欠陥検査装置を出願している(特許文献1参照)。この欠陥検査装置では、成形シートを蛍光管等の線状光源で照明し、成形シートを所定方向に連続して搬送しながら、エリアセンサと呼ばれる2次元カメラを用いて動画データ(成形シート上での撮像位置が異なる複数枚の画像データ)を取得し、この動画データに基づいて成形シートの欠陥を検査するものである。この欠陥検査装置では、検査対象画素と線状光源像との位置関係が異なる複数枚の画像データに基づいて欠陥があるかを判定することができるので、旧来の欠陥検査装置よりも欠陥を確実に検出できる。したがって、この欠陥検査装置は、旧来の欠陥検査装置よりも欠陥検出能力が向上する。なお、この動画データを利用すれば、照明像に対して欠陥が動いていく様子を見ることもできる。
しかしながら、本願発明者の検討によれば、特許文献1に記載の欠陥検査装置も、欠陥検出能力に改善の余地があることが分かった。
However, according to the study of the present inventor, it has been found that the defect inspection apparatus described in
すなわち、特許文献1に記載の欠陥検査装置では、エリアセンサによって撮像された(多値の)複数枚の画像データの各々から、以下の画像処理によって欠陥を検出している(特許文献1の[0032]〜[0035]参照)。
That is, in the defect inspection apparatus described in
まず、多値の画像データを2値化し、白領域および黒領域をラベリングして検出対象とする。次いで、検出対象の白領域から、指定値(線状光源像の面積に見合った比較的大きい値;例えば2500画素)を超える面積(画素数)を持つ白領域を、線状光源像とみなして除外する。同様に、検出対象の黒領域から、指定値(背景領域の面積に見合った比較的大きい値)を超える面積を持つ黒領域を、背景領域(成形シートにおける欠陥がない領域の画像)とみなして除外する。さらに、検出対象の白領域および黒領域から、指定値(1画素に近い比較的小さい値;例えば9画素)未満の面積を持つ白領域および黒領域をノイズとみなして除外する。そして、検出対象の白領域および黒領域から除外されずに残った領域を欠陥として検出する。 First, the multivalued image data is binarized, and the white area and the black area are labeled as detection targets. Next, a white area having an area (number of pixels) exceeding a specified value (a relatively large value corresponding to the area of the linear light source image; for example, 2500 pixels) from the white area to be detected is regarded as a linear light source image. exclude. Similarly, a black area having an area exceeding a specified value (a relatively large value commensurate with the area of the background area) from the black area to be detected is regarded as a background area (an image of an area having no defect in the molded sheet). exclude. Further, the white area and the black area having an area smaller than a specified value (a relatively small value close to 1 pixel; for example, 9 pixels) are regarded as noise and excluded from the white area and black area to be detected. Then, the remaining area that is not excluded from the white area and black area to be detected is detected as a defect.
しかしながら、特許文献1に記載の欠陥検査装置は、明暗の反転に基づいて欠陥を検出するものであるため、画像データ上におけるコントラストが低い欠陥を検出できないことがある。
However, since the defect inspection apparatus described in
ここで、本願発明において検出対象とする種々の欠陥について説明する。本願発明は、主として、成形シート表面の微小な凹凸(特に数μm程度の高さの凹凸)を伴う欠陥(外観欠陥)を検出しようとするものである。微小な凹凸を伴う欠陥としては、例えば、気泡または異物に起因して成形シート表面に生じた微小な凹凸;打痕(点で押されて生じた押し痕);折り曲げられた痕(「クニック」と呼ばれる);成形シートの製造時に、搬送ロールで搬送される際に生じた搬送ロールによる押し痕(「スジ」と呼ばれる)などが挙げられる。これらの微小な凹凸を伴う欠陥は、旧来のラインセンサを用いた欠陥検査装置では非常に検出が難しい。本願発明は、主として、これらの種類の欠陥を検出することを目的としている。 Here, various defects to be detected in the present invention will be described. The present invention is mainly intended to detect defects (appearance defects) accompanied by minute irregularities (particularly, irregularities having a height of about several μm) on the surface of the molded sheet. Examples of defects with minute irregularities include, for example, minute irregularities generated on the surface of a molded sheet due to bubbles or foreign matters; dents (dents generated by being pressed at points); bent marks (“knic”) Indentation marks (referred to as “streaks”) generated by the transport roll generated when the molded sheet is transported by the transport roll. These defects with minute irregularities are very difficult to detect with a defect inspection apparatus using a conventional line sensor. The present invention is primarily aimed at detecting these types of defects.
本願明細書では、便宜上、微小凹凸が局所的に集中している(凸部の直径が1mm程度以下(撮像装置の分解能が200μm/画素の場合には数画素程度以下)である)欠陥、例えば、気泡、異物、打痕などを点欠陥と呼び、微小凹凸が線状に繋がって1mmを超える大きさとなったものを線欠陥と呼ぶ。スジ等のような典型的な線欠陥は、10mm程度を超える幅(撮像装置の分解能が200μm/画素の場合には数10画素程度を超える幅)を持ち、典型的には数十cm程度、場合によっては数十cmを超える幅を持つ。クニックは、10mm程度以下(撮像装置の分解能が200μm/画素の場合には数10画素程度以下)の幅、典型的には数mm程度の幅を持ち、点欠陥と典型的な線欠陥との中間的な性質をもつ。 In the present specification, for the sake of convenience, fine irregularities are locally concentrated (the diameter of the convex portion is about 1 mm or less (about several pixels or less when the resolution of the imaging device is 200 μm / pixel)), for example, Bubbles, foreign matter, dents, and the like are called point defects, and those in which minute irregularities are connected in a line and have a size exceeding 1 mm are called line defects. A typical line defect such as a streak has a width exceeding about 10 mm (a width exceeding about several tens of pixels when the resolution of the imaging device is 200 μm / pixel), typically about several tens of cm, In some cases, the width exceeds several tens of centimeters. The nick has a width of about 10 mm or less (about several tens of pixels or less when the resolution of the imaging apparatus is 200 μm / pixel), typically about a few mm, and has a point defect and a typical line defect. It has an intermediate property.
特許文献1に記載の欠陥検査装置の撮像部において撮像される欠陥画像(動画)の例は、特許文献1の図14〜図15に示されている通りである。特許文献1の図14〜図15では、動画を構成する連続した5枚のフレームを時間の早い順に(a)〜(e)として示している。この動画が通常のテレビジョン用動画であれば、フレーム間の時間間隔(フレームレート)は1/30秒である。フレーム間の時間間隔は、撮像部の特性に依存する。特許文献1の欠陥検査装置では、撮像部は、撮像部から成形シートの撮像領域(特許文献1の図1における成形シート表面に破線で示された矩形)の中心に向かう方向と成形シートの搬送方向とが鋭角をなすように、かつ、撮像領域の一部に照明像(線状光源の反射像)が含まれ、撮像領域における照明像の両側に照明像のない領域(背景領域)が存在するように配置されている。したがって、特許文献1の図14〜図15に示された動画における上方向は、成形シートの搬送方向と一致する。成形シートにおける撮像領域の中で、欠陥は成形シートの搬送方向に移動するので、特許文献1の図14〜図15に示された動画において、欠陥は下から上へと移動している(照明像は、白い帯状の領域として写っている)。
Examples of defect images (moving images) captured by the imaging unit of the defect inspection apparatus described in
特許文献1の図14は、撮像部によって撮像された気泡(点欠陥)を含む撮像領域(搬送方向に直交する方向のサイズ:5mm)の動画の例であり、気泡は明暗が反転した部分として見えている。この動画では、1つめのフレーム(a)では気泡が見えていないが、点欠陥が照明像に近づいた2つめのフレーム(b)では気泡が見え始め、気泡が照明像のエッジに位置する3つめのフレーム(c)では気泡が比較的良く見え、気泡が照明像の中に入った4つめおよび5つめのフレーム(d)(e)では、気泡が照明光に埋もれて見えなくなる。
FIG. 14 of
特許文献1の図15は、撮像部によって撮像されたクニックを含む撮像領域(搬送方向に直交する方向のサイズ:5mm)の動画の例であり、撮像部によって撮像されたクニックによる明暗の反転はなく、クニックが通過していくに従って、本来は矩形の白領域として写っているはずの照明像が時間と共に歪んでいっている。
FIG. 15 of
特許文献1の図15は、撮像部によって撮像されたスジ(線欠陥)を含む撮像領域(搬送方向に直交する方向のサイズ:200mm)の動画の例である。1〜3つめのフレーム(a)〜(c)では、照明像が多少弓状に歪んでいるが、この程度の弓状の歪みは、欠陥に起因するものではなく、成形シートを引っ張っているために生じるものである。一方、4つめのフレームでは、照明像が、S字状に、比較的大きく歪んでいる。照明像がこの程度以上歪むのは、歪んでいる位置にスジがあるためである。したがって、照明像がこの程度以上歪んだ部分を欠陥として検出することが望まれる。
FIG. 15 of
しかしながら、特許文献1の欠陥検査装置は、2値化処理において明領域(線状光源像および線状光源像内部の欠陥領域)と暗領域(背景領域および背景領域内部の欠陥領域)とを切り分ける閾値によっては、画像データ上におけるコントラストが低い欠陥を検出できないことがあることが分かった。
However, the defect inspection apparatus of
すなわち、特許文献1の欠陥検査装置において、欠陥が、画像データ上におけるコントラスト(欠陥による輝度変化)が比較的高いものである場合、図3の垂直方向(成形シート搬送方向)輝度プロファイルに示すように、欠陥による輝度変化が2値化処理の閾値をまたぐように観測される。より詳細に説明すると、線状光源像の中で暗領域として観測される欠陥に対応する極小点(図3における谷の部分)の輝度値より大きく、かつ、その極小点の両側にある極大点の輝度値より小さくなる。また、2値化処理の閾値は、線状光源像の外で明領域として観測される欠陥に対応する極大点(図3における山の部分)の輝度値より大きく、かつ、その極大点の両側にある極小点の輝度値より大きくなる。それゆえ、線状光源像の中で暗領域として観測される欠陥も、線状光源像の外で明領域として観測される欠陥も、検出される。したがって、特許文献1の欠陥検査装置は、コントラストが比較的高い欠陥を確実に検出できる。
That is, in the defect inspection apparatus of
一方、特許文献1の欠陥検査装置において、欠陥が、画像データ上におけるコントラストが低いものである場合、欠陥部分の垂直方向輝度プロファイルと2値化処理の閾値との関係が図4の垂直方向輝度プロファイルに示す関係、すなわち、欠陥による輝度変化が2値化処理の閾値をまたがない関係となる。目安として、次式
(欠陥による輝度変化量)<{(線状光源像領域の輝度レベル)
−(背景領域の輝度レベル)}/2 …(1)
を満たす場合に、図4に示す関係となることがある。図4に示す関係となった場合、欠陥を見逃すことになる。
On the other hand, in the defect inspection apparatus of
-(Luminance level of background area)} / 2 (1)
In the case of satisfying, the relationship shown in FIG. 4 may be obtained. In the case of the relationship shown in FIG. 4, the defect is missed.
ただし、画像データ上における欠陥のコントラストが低く、式(1)を満たす場合であっても、図5の垂直方向輝度プロファイルに示すように欠陥による輝度変化が2値化処理の閾値をまたぐように観測される場合については、欠陥を検出できる。したがって、特許文献1の欠陥検査装置は、式(1)を満たす場合であっても、欠陥による輝度変化と2値化処理の閾値との関係によっては、欠陥を検出できる。
However, even when the defect contrast on the image data is low and the expression (1) is satisfied, the luminance change due to the defect crosses the threshold of the binarization process as shown in the vertical luminance profile of FIG. For observed cases, defects can be detected. Therefore, the defect inspection apparatus of
さらに、特許文献1の欠陥検査装置は、動画像を用いており、動画像では、欠陥像が、1コマごとに線状光源像に接近し、線状光源像内を通過し、線状光源像から遠ざかるという動きが観測される。したがって、画像データ上における欠陥のコントラストが低く、式(1)を満たす場合であっても、動画像を構成する複数の画像の中に1つでも、欠陥による輝度変化と2値化処理の閾値との関係が図5に示す関係となる画像があれば、欠陥を検出できる。
Furthermore, the defect inspection apparatus of
以上のように、特許文献1の欠陥検査装置では、式(1)を境として、欠陥による輝度変化量が小さくなるにしたがって、欠陥を見逃す可能性が高くなっていく。したがって、特許文献1の欠陥検査装置は、コントラストが低い欠陥の検出の確実性については、改善の余地がある。
As described above, in the defect inspection apparatus disclosed in
本発明は、上記の問題点に鑑みてなされたものであり、その目的は、種々の欠陥をより確実に検出することができる、成形シートの欠陥検査装置を提供することにある。 The present invention has been made in view of the above problems, and an object of the present invention is to provide a molded sheet defect inspection apparatus that can detect various defects more reliably.
本発明に係る欠陥検査装置は、上記課題を解決するために、成形シートの欠陥を検出する欠陥検査装置であって、上記成形シートの2次元画像を複数回撮像して複数の2次元画像データを生成する撮像手段と、上記成形シートにおける撮像される領域の一部に線状光源の像が投影されるように、上記成形シートを照明するための線状光源と、上記成形シートにおける上記線状光源の像が投影されている位置が変化するように、上記成形シートおよび上記線状光源の少なくとも一方を、上記線状光源の長手方向と交差し、かつ上記成形シートの厚み方向に直交する方向に移動させる移動手段と、上記撮像手段で生成された複数の2次元画像データから線欠陥を検出する線欠陥検出手段とを備え、上記線欠陥検出手段は、上記2次元画像データにおける線状光源の像のエッジを関数曲線でフィッティングし、線状光源の像のエッジと関数曲線との距離が第1の閾値以上である箇所を線欠陥として検出する線欠陥検出アルゴリズム、または上記2次元画像データにおける線状光源の像のエッジについて、各画素の近傍領域における曲率を求め、曲率が第2の閾値以上である箇所を線欠陥として検出する線欠陥検出アルゴリズムによって線欠陥を検出するものであることを特徴としている。 A defect inspection apparatus according to the present invention is a defect inspection apparatus that detects a defect of a molded sheet in order to solve the above-described problem, and a plurality of two-dimensional image data obtained by capturing a two-dimensional image of the molded sheet a plurality of times. Imaging means for generating a linear light source for illuminating the molded sheet so that an image of the linear light source is projected onto a part of the imaged region of the molded sheet, and the line on the molded sheet At least one of the molded sheet and the linear light source intersects the longitudinal direction of the linear light source and is orthogonal to the thickness direction of the molded sheet so that the position at which the image of the linear light source is projected changes. Moving means for moving in a direction, and line defect detection means for detecting a line defect from a plurality of two-dimensional image data generated by the imaging means, wherein the line defect detection means adds the two-dimensional image data to the two-dimensional image data. A line defect detection algorithm for fitting an edge of an image of a linear light source with a function curve and detecting a point where the distance between the edge of the image of the linear light source and the function curve is equal to or greater than a first threshold as a line defect, or About the edge of the image of the linear light source in the two-dimensional image data, the curvature in the vicinity region of each pixel is obtained, and the line defect is detected by the line defect detection algorithm that detects the portion where the curvature is equal to or greater than the second threshold as the line defect. It is characterized by being.
上記の構成によれば、線欠陥をより確実に検出することができる。 According to said structure, a line defect can be detected more reliably.
上記欠陥検査装置は、上記撮像手段で生成された複数の2次元画像データから点欠陥を検出する点欠陥検出手段をさらに備えることが好ましい。これにより、線欠陥だけでなく点欠陥をも検出できる。 The defect inspection apparatus preferably further includes point defect detection means for detecting point defects from a plurality of two-dimensional image data generated by the imaging means. Thereby, not only a line defect but a point defect can be detected.
上記欠陥検査装置において、上記点欠陥検出手段は、上記2次元画像データにおける一直線上に沿った位置に依存した輝度の変化を輝度プロファイルとして表し、輝度プロファイルのプロット群をプロット間の移動時間が一定となるように移動する質点を想定し、注目プロットの直前2つのプロット間における上記質点の速度ベクトルと上記注目プロットの直前3つのプロット間における上記質点の加速度ベクトルとから上記注目プロットの輝度値を予測し、予測された輝度値と実際の輝度値との差が第3の閾値以上である箇所を点欠陥として検出する点欠陥検出アルゴリズム、または上記2次元画像データを平滑化し、平滑化された2次元画像データと元の2次元画像データとの差分を差分画像データとして求め、差分画像データにおける輝度値が第4の閾値以上である箇所および輝度値が第5の閾値(第5の閾値は第4の閾値より小さい)以下である箇所を点欠陥として検出する点欠陥検出アルゴリズムによって点欠陥を検出するものであることが好ましい。これにより、特許文献1の技術と比較して、コントラストの低い点欠陥(例えば、図4のような小さな輝度変化を示す欠陥)をより確実に検出することが可能になる。したがって、点欠陥および線欠陥の両方を確実に検出できる。
In the defect inspection apparatus, the point defect detection means represents a change in luminance depending on a position along a straight line in the two-dimensional image data as a luminance profile, and a moving time between plots of the luminance profile plot group is constant. The brightness value of the target plot is calculated from the velocity vector of the mass point between the two plots immediately before the target plot and the acceleration vector of the mass point between the three plots immediately before the target plot. A point defect detection algorithm for predicting and detecting a point defect where a difference between the predicted luminance value and the actual luminance value is equal to or greater than a third threshold is detected as a point defect, or the two-dimensional image data is smoothed and smoothed The difference between the two-dimensional image data and the original two-dimensional image data is obtained as difference image data. A point defect is detected by a point defect detection algorithm that detects a point where the degree value is equal to or greater than the fourth threshold value and a point where the luminance value is equal to or less than the fifth threshold value (the fifth threshold value is smaller than the fourth threshold value) as a point defect. It is preferable to detect. Thereby, compared with the technique of
本発明に係る欠陥検査装置は、上記課題を解決するために、成形シートの欠陥を検出する欠陥検査装置であって、上記成形シートの2次元画像を複数回撮像して複数の2次元画像データを生成する撮像手段と、上記成形シートにおける撮像される領域の一部に線状光源の像が投影されるように、上記成形シートを照明するための線状光源と、上記成形シートにおける上記線状光源の像が投影されている位置が変化するように、上記成形シートおよび上記線状光源の少なくとも一方を、上記線状光源の長手方向と交差し、かつ上記成形シートの厚み方向に直交する方向に移動させる移動手段と、上記撮像手段で生成された複数の2次元画像データから点欠陥を検出する点欠陥検出手段とを備え、上記点欠陥検出手段は、上記2次元画像データにおける一直線上に沿った位置に依存した輝度の変化を輝度プロファイルとして表し、輝度プロファイルのプロット群をプロット間の移動時間が一定となるように移動する質点を想定し、注目プロットの直前2つのプロット間における上記質点の速度ベクトルと上記注目プロットの直前3つのプロット間における上記質点の加速度ベクトルとから上記注目プロットの輝度値を予測し、予測された輝度値と実際の輝度値との差が第3の閾値以上である箇所を点欠陥として検出する点欠陥検出アルゴリズム、または上記2次元画像データを平滑化し、平滑化された2次元画像データと元の2次元画像データとの差分を差分画像データとして求め、差分画像データにおける輝度値が第4の閾値以上である箇所および輝度値が第5の閾値(第5の閾値は第4の閾値より小さい)以下である箇所を点欠陥として検出する点欠陥検出アルゴリズムによって点欠陥を検出するものであることを特徴としている。 A defect inspection apparatus according to the present invention is a defect inspection apparatus that detects a defect of a molded sheet in order to solve the above-described problem, and a plurality of two-dimensional image data obtained by capturing a two-dimensional image of the molded sheet a plurality of times. Imaging means for generating a linear light source for illuminating the molded sheet so that an image of the linear light source is projected onto a part of the imaged region of the molded sheet, and the line on the molded sheet At least one of the molded sheet and the linear light source intersects the longitudinal direction of the linear light source and is orthogonal to the thickness direction of the molded sheet so that the position at which the image of the linear light source is projected changes. Moving means for moving in the direction, and point defect detecting means for detecting point defects from a plurality of two-dimensional image data generated by the imaging means, and the point defect detecting means adds the two-dimensional image data to the two-dimensional image data. The change in luminance depending on the position along a straight line is represented as a luminance profile, and two plots immediately before the plot of interest are assumed, assuming a mass point that moves the plot group of luminance profiles so that the movement time between plots is constant. The luminance value of the target plot is predicted from the velocity vector of the mass point in between and the acceleration vector of the mass point between the three plots immediately before the target plot, and the difference between the predicted luminance value and the actual luminance value is A point defect detection algorithm for detecting a point defect equal to or greater than 3 as a point defect, or smoothing the two-dimensional image data, and calculating the difference between the smoothed two-dimensional image data and the original two-dimensional image data as difference image data Where the luminance value in the difference image data is greater than or equal to the fourth threshold and the luminance value is the fifth threshold (the fifth threshold is It is characterized in that in order to detect the point defect portion smaller than the threshold) is less than 4 by the defect detection algorithm that detects a point defect.
これにより、特許文献1の技術と比較して、コントラストの低い点欠陥(例えば、図4のような小さな輝度変化を示す欠陥)をより確実に検出することが可能になる。
Thereby, compared with the technique of
上記欠陥検査装置は、上記撮像手段で生成された複数の2次元画像データから線欠陥を検出する線欠陥検出手段をさらに備えることが好ましい。これにより、点欠陥だけでなく線欠陥をも検出できる。 It is preferable that the defect inspection apparatus further includes a line defect detection unit that detects a line defect from a plurality of two-dimensional image data generated by the imaging unit. As a result, not only point defects but also line defects can be detected.
以上のように、本発明は、種々の欠陥をより確実に検出することができる、成形シートの欠陥検査装置を提供できるという効果を奏する。 As described above, the present invention has an effect of providing a molded sheet defect inspection apparatus that can detect various defects more reliably.
〔実施の形態1〕
本発明の実施の一形態について、図面を参照しながら以下に説明する。
[Embodiment 1]
An embodiment of the present invention will be described below with reference to the drawings.
本実施形態に係る欠陥検査装置は、成形シートの欠陥を検出するものである。本実施形態に係る欠陥検査装置は、光透過性の成形シート、特に、熱可塑性樹脂等の樹脂からなる成形シートの検査に適している。樹脂からなる成形シートとしては、例えば、押出機から押し出された熱可塑性樹脂をロールの隙間に通して表面に平滑さや光沢を付与する処理が施され、引取ロールにより搬送ロール上を冷却されながら引き取ることにより成形されたものが挙げられる。本実施の形態に適用可能な熱可塑性樹脂は、例えば、メタクリル樹脂、メタクリル酸メチル−スチレン共重合体、ポリエチレンやポリプロピレン等のポリオレフィン、ポリカーボネート、ポリ塩化ビニル、ポリスチレン、ポリビニルアルコール、トリアセチルセルロール樹脂等である。成形シートは、これら熱可塑性樹脂のうちの1つのみからなっていてもよく、これら熱可塑性樹脂の複数種類を積層したもの(積層シート)であってもよい。また、本実施形態に係る欠陥検査装置は、偏光フィルムや位相差フィルム等の光学フィルム、特にウェブ状に巻いて保管・輸送される長尺の光学フィルムの検査に適している。また、成形シートは、どのような厚みを持つものであってもよく、一般にフィルムと呼ばれるような比較的薄い厚みを持つものであっても、一般に板と呼ばれるような比較的厚い厚みを持つものであってもよい。 The defect inspection apparatus according to the present embodiment detects a defect of a molded sheet. The defect inspection apparatus according to the present embodiment is suitable for inspection of a light-transmitting molded sheet, particularly a molded sheet made of a resin such as a thermoplastic resin. As the molded sheet made of resin, for example, the thermoplastic resin extruded from the extruder is passed through the gaps between the rolls to be treated to impart smoothness and gloss to the surface, and taken up while being cooled on the transport roll by the take-up roll. What was shape | molded by this is mentioned. Examples of the thermoplastic resin applicable to the present embodiment include methacrylic resin, methyl methacrylate-styrene copolymer, polyolefin such as polyethylene and polypropylene, polycarbonate, polyvinyl chloride, polystyrene, polyvinyl alcohol, and triacetyl cellulose resin. Etc. The molded sheet may be composed of only one of these thermoplastic resins, or may be a laminate (laminated sheet) obtained by laminating a plurality of types of these thermoplastic resins. Moreover, the defect inspection apparatus according to the present embodiment is suitable for inspection of optical films such as polarizing films and retardation films, in particular, long optical films that are wound and stored and transported in a web shape. Further, the molded sheet may have any thickness, and even if it has a relatively thin thickness generally called a film, it has a relatively thick thickness generally called a plate. It may be.
成形シートの欠陥の例としては、気泡(成形時に生じるもの等)、フィッシュアイ、異物、タイヤ跡、打痕、傷等の点欠陥;クニック、スジ(厚さの違いにより生じるもの等)等が挙げられる。 Examples of defects in the molded sheet include bubbles (such as those that occur during molding), fish eyes, foreign matter, tire marks, dents, scratches, and other point defects; nicks, streaks (such as those that occur due to differences in thickness), and the like. Can be mentioned.
本実施形態に係る欠陥検査装置1の構成について、図1および図2に基づいて以下に説明する。図1は、欠陥検査装置1の主要部の構成を示す機能ブロック図である。図2は、欠陥検査装置1の概観を示す模式図である。なお、図2においては、成形シートに重なった部材を識別し易いように成形シート表面の明暗を反転して示している。したがって、図2における成形シート表面の黒色領域は、実際には明領域であり、図2における成形シート表面の白色領域は、実際には暗領域である。
The configuration of the
欠陥検査装置1は、矩形の成形シート2を搬送装置(移動手段)3によって一定方向に搬送しながら、線状光源4により照明された成形シート2をn個(nは2以上の整数)の撮像部(撮像手段)51〜5nによって複数回撮像して撮像部51〜5nの各々で複数の2次元画像データを生成し、生成された複数の2次元画像データに基づいて解析装置6が成形シート2の欠陥を検出するものである。
The
欠陥検査装置1は、成形シート2を搬送する搬送装置(移動手段)3と、成形シート2における撮像領域(撮像部51〜5nによって撮像される領域;図2における成形シート2表面に破線で示された矩形)の一部に線状光源4の像が投影されるように成形シート2を照明するための線状光源4と、線状光源4の反射像(線状光源4からの直接光が成形シート2によって反射されて撮像部51〜5nに到達する結果として形成される線状光源4の像)および成形シート2の反射像(線状光源4からの散乱光が成形シート2によって反射されて撮像部51〜5nに到達する結果として形成される成形シート2の像)を含む2次元画像を複数回撮像する撮像部51〜5nと、複数の2次元画像データに基づいて、画像処理アルゴリズム(欠陥検出アルゴリズム)によって成形シート2の欠陥を検出する解析装置6とを備えている。
The
搬送装置3は、成形シート2における線状光源4の像が投影されている位置が変化するように、成形シート2を、その厚み方向に直交する方向、特にその長手方向に搬送するものである。搬送装置3は、例えば、成形シート2を一定の方向に搬送する送出ローラと受取ローラとを備え、ロータリーエンコーダ等により搬送速度を計測する。搬送速度は、例えば2m〜12m/分程度に設定される。搬送装置3における搬送速度は、図示しない情報処理装置等によって設定および制御される。
The conveying device 3 conveys the molded sheet 2 in a direction perpendicular to its thickness direction, particularly in its longitudinal direction so that the position on the molded sheet 2 where the image of the linear
線状光源4は、その長手方向が成形シート2の搬送方向と交差する方向(例えば成形シート2の搬送方向と直交する方向)となるように、かつ、線状光源4の反射像が成形シート2の撮像領域を横切り、撮像領域における線状光源4の反射像の両側に線状光源像のない領域(背景領域)が存在するように配置されている。線状光源4は、成形シート2の組成及び性質に影響を与えない光を発光するものであれば、特に限定されるものではなく、例えば、蛍光灯(特に高周波蛍光灯)、メタルハライドランプ、ハロゲン伝送ライトなどである。なお、線状光源4を、成形シート2を挟んで撮像部51〜5nに対向する位置に配置し、線状光源4の透過像(線状光源4からの直接光が成形シート2を透過して撮像部51〜5nに到達することによって形成される線状光源4の像)および成形シート2の透過像(線状光源4からの散乱光が成形シート2を透過して撮像部51〜5nに到達することによって形成される成形シート2の像)を含む2次元画像が撮像部51〜5nによって撮像されるようにしてもよい。
The linear
撮像部51〜5nの各々は、線状光源4の反射像および成形シート2の反射像を含む2次元画像を複数回撮像して、複数の2次元画像データを生成し出力する。撮像部51〜5nは、2次元画像を撮像するCCD(Charge Coupled Device)またはCMOS(Complementary Metal-Oxide Semiconductor)等の撮像素子で構成されるエリアセンサからなる。欠陥検査装置1によって検出される欠陥のサイズは、撮像部51〜5nの分解能に依存するので、検出したい欠陥のサイズに合わせて撮像部51〜5nの分解能を選定するとよい。なお、欠陥検査装置1によって検出される欠陥の立体形状(幅対高さの比)は、基本的には撮像部51〜5nの分解能に依存しないので、検出したい欠陥の種類によってカメラ分解能を選定する必要はない。
Each of the imaging units 5 1 to 5 n captures a two-dimensional image including a reflected image of the linear
撮像部51〜5nは、撮像部51〜5nから成形シート2の撮像領域の中心に向かう方向と成形シート2の搬送方向とが鋭角をなすように配置されている。撮像部51〜5nは、成形シート2の幅方向(成形シート2の搬送方向に直交し、かつ成形シート2の厚み方向に直交する方向)の全領域が撮像部51〜5nの少なくとも1つで撮像されるように、成形シート2の幅方向に沿って並べて配置されている。撮像部51〜5nによって成形シート2の幅方向の全領域を撮像することにより、成形シート2の全領域の欠陥を検査することができる。 The imaging units 5 1 to 5 n are arranged such that the direction from the imaging units 5 1 to 5 n toward the center of the imaging region of the molded sheet 2 and the conveying direction of the molded sheet 2 form an acute angle. The imaging units 5 1 to 5 n have the entire area in the width direction of the molded sheet 2 (the direction orthogonal to the conveying direction of the molded sheet 2 and the direction orthogonal to the thickness direction of the molded sheet 2) of the imaging units 5 1 to 5 n . It arrange | positions along with the width direction of the shaping | molding sheet 2 so that it may image with at least one. By imaging the entire region in the width direction of the molded sheet 2 by the imaging units 5 1 to 5 n , defects in the entire region of the molded sheet 2 can be inspected.
撮像部51〜5nの撮像間隔(フレームレート)は、固定されていてもよく、ユーザが撮像部51〜5n自体を操作することによって変更可能となっていてもよく、撮像部51〜5nに接続された情報処理装置(図示しない;省略可能)をユーザが操作することによって変更可能となっていてもよい。また、撮像部51〜5nの撮像間隔は、デジタルスチルカメラの連続撮影の時間間隔である数分の1秒などであってもよいが、検査の効率化を向上させるために、短い時間間隔、例えば一般的な動画データのフレームレートである1/30秒などであることが好ましい。 The imaging interval (frame rate) of the imaging units 5 1 to 5 n may be fixed, may be changed by the user operating the imaging units 5 1 to 5 n itself, and the imaging unit 5 1-5 an information processing device connected to n (not shown; optional) it may be made changeable by the user operating the. In addition, the imaging interval of the imaging units 5 1 to 5 n may be a fraction of a second, which is a time interval for continuous shooting by a digital still camera, but in order to improve inspection efficiency, The interval is preferably, for example, 1/30 second, which is a frame rate of general moving image data.
ここで、各撮像部51〜5nが1枚の2次元画像を撮像してから次の2次元画像を撮像するまでの期間に成形シート2が搬送される距離(搬送距離)は、成形シート2の搬送方向に沿った撮像領域の長さの少なくとも1/m(mは2以上)に設定されている。これによって、成形シート2の同一箇所を含む2次元画像がm回撮像される。mは2より十分大きいことが好ましい。成形シート2の同一箇所の撮像回数を増加させることにより、高精度に欠陥を検査することができる。 Here, the distance (conveyance distance) by which the molding sheet 2 is conveyed during the period from when each of the imaging units 5 1 to 5 n captures one two-dimensional image until the next two-dimensional image is captured is the molding It is set to at least 1 / m (m is 2 or more) of the length of the imaging region along the conveyance direction of the sheet 2. Thereby, a two-dimensional image including the same portion of the molded sheet 2 is captured m times. m is preferably sufficiently larger than 2. By increasing the number of times of imaging of the same location of the molded sheet 2, it is possible to inspect defects with high accuracy.
解析装置6は、図1に示すように、各撮像部51〜5nから出力された複数の2次元画像データを受け取り、複数の2次元画像データに基づいて欠陥を検出して検出結果(検査結果)を出力する線欠陥用画像解析部(線欠陥検出手段)611〜61nおよび点欠陥用画像解析部(点欠陥検出手段)621〜62nと、検出結果(検査結果)を表示する表示部64と、これらの各部を統括的に制御するコントロールCPU63とを備えている。
As shown in FIG. 1, the
各撮像部51〜5nで生成された複数の2次元画像データは、それぞれ線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nに入力される。
A plurality of two-dimensional image data generated by each of the imaging units 5 1 to 5 n is input to the line defect
線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nの各々は、線欠陥検出アルゴリズムによって、成形シート2上における線状光源像の位置が異なる複数の(複数フレームの)2次元画像データから欠陥を検出し、その結果を検査結果として出力する。点欠陥用画像解析部621〜62nの各々は、点欠陥検出アルゴリズムによって、成形シート2上における線状光源像の位置が異なる複数の(複数フレームの)2次元画像データから欠陥を検出し、その結果を検査結果として出力する。線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nは、成形シート2上における線状光源像の位置が異なる複数の2次元画像データに基づいて欠陥があるかを判定するので、旧来の欠陥検査装置よりも欠陥を確実に検出できる。
Each of the line defect
線欠陥検出アルゴリズムおよび点欠陥検出アルゴリズムについては、後段で説明する。線欠陥検出アルゴリズムおよび点欠陥検出アルゴリズムのパラメータは、固定されていてもよいが、線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nに接続された情報処理装置(図示しない;省略可能)をユーザが操作することによって変更可能となっていてもよい。
The line defect detection algorithm and the point defect detection algorithm will be described later. The parameters of the line defect detection algorithm and the point defect detection algorithm may be fixed, but information processing connected to the line defect
線欠陥用画像解析部611〜61nは、線欠陥検出アルゴリズムによって複数の2次元画像データのうちのL個(L≦m)以上から線欠陥が検出された場合に、線欠陥があるという結果を検査結果として出力し、他の場合に、線欠陥がないという結果を検査結果として出力するものであってもよく、線欠陥検出アルゴリズムによって複数の2次元画像データのうちのL個以上から線欠陥が検出された場合に、線欠陥位置の情報を検査結果として出力し、他の場合には検査結果を出力しないものであってもよい。2次元画像データの個数mが3以上であり、Lが2以上である場合には、線欠陥検出アルゴリズムによって線欠陥が検出された2次元画像データの個数が少ない場合には、その線欠陥検出結果が虚報(本来欠陥でないものが誤って欠陥として検出されたもの)とみなされて除外されることになる。これにより、虚報を低減できる。なお、線欠陥位置の情報を検査結果として出力する場合には、線欠陥位置を求めることができる線欠陥検出アルゴリズムを用いる必要がある。
The line defect
点欠陥用画像解析部621〜62nは、点欠陥検出アルゴリズムによって複数の2次元画像データのうちのL個(L≦m)以上から点欠陥が検出された場合に、点欠陥があるという結果を検査結果として出力し、他の場合に、点欠陥がないという結果を検査結果として出力するものであってもよく、点欠陥検出アルゴリズムによって複数の2次元画像データのうちのL個以上から点欠陥が検出された場合に、点欠陥位置の情報を検査結果として出力し、他の場合には検査結果を出力しないものであってもよい。2次元画像データの個数mが3以上であり、Lが2以上である場合には、点欠陥検出アルゴリズムによって点欠陥が検出された2次元画像データの個数が少ない場合には、その点欠陥検出結果が虚報(本来欠陥でないものが誤って欠陥として検出されたもの)とみなされて除外されることになる。これにより、虚報を低減できる。なお、点欠陥位置の情報を検査結果として出力する場合には、点欠陥位置を求めることができる点欠陥検出アルゴリズムを用いる必要がある。 The point defect image analysis units 62 1 to 62 n are said to have a point defect when a point defect is detected from L (L ≦ m) or more of a plurality of two-dimensional image data by a point defect detection algorithm. The result may be output as an inspection result, and in other cases, a result indicating that there is no point defect may be output as an inspection result. From a point defect detection algorithm, L or more of a plurality of two-dimensional image data may be output. When a point defect is detected, the point defect position information may be output as an inspection result, and in other cases, the inspection result may not be output. If the number m of 2D image data is 3 or more and L is 2 or more, if the number of 2D image data in which point defects are detected by the point defect detection algorithm is small, the point defect detection is performed. The result is regarded as false information (one that is not originally a defect is mistakenly detected as a defect) and is excluded. Thereby, false information can be reduced. In addition, when outputting the information of a point defect position as an inspection result, it is necessary to use the point defect detection algorithm which can obtain | require a point defect position.
コントロールCPU63は、線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nから出力された検査結果を統合して成形シート2の全領域に対応する検査結果情報を作成し、図示しない記憶装置に記憶させると共に、表示部64に表示させる。成形シート2の全領域に対応する検査結果情報としては、成形シート2の全領域に欠陥があるかないかを示す情報や、成形シート2の全領域の欠陥マップなどが挙げられる。成形シート2の全領域に対応する検査結果情報を作成する際には、線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nの少なくとも一方で欠陥が検出された場合に、欠陥が存在するものとして検査結果情報を作成する。
The
コントロールCPU63が、成形シート2の全領域に対応する検査結果情報として、成形シート2の全領域の欠陥マップを作成する場合には、線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nの各々は、2次元画像データ上の座標位置を成形シート2上の座標位置に変換して欠陥位置情報を生成し、この欠陥位置情報をコントロールCPU63に出力する。線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nの各々の座標変換処理としては、例えば、特許文献1の段落[0037]〜[0041]および[0050]〜[0053]に記載された処理を用いることができる。欠陥マップの情報をマーキング装置(図示しない)および情報処理装置(図示しない)に出力し、マーキング装置が欠陥マップに基づいて成形シート2に欠陥位置をマーキングするようにしてもよい。このマーキング装置は、例えば、成形シート2の幅方向に沿って設けられたアームと、ペン等を有するマーカヘッドとを有し、マーカヘッドがアーム上を成形シート2の幅方向に往復移動することによって成形シート2上の任意の位置にマーキングを行うことができる。このマーキングされた欠陥位置の情報は、例えば、成形シート2を所定サイズの枚葉品に断裁した後、枚葉品を正常品と欠陥品とに分ける処理等に利用することができる。
When the
なお、上記の実施の形態では、線状光源4を固定して成形シート2を搬送させていたが、成形シート2における線状光源4の像が投影されている位置が変化するようになってさえいればよい。したがって、成形シート2を固定して線状光源4を移動させてもよく、成形シート2および線状光源4の両方を異なる方向または異なる速度で移動させてもよい。成形シート2を固定して線状光源4を移動させる場合には、撮像部51〜5nを線状光源4と同じ方向に同じ速度で移動させることが好ましい。これにより、線状光源像を含む複数の2次元画像データを得ることができる。成形シート2を固定して線状光源4を移動させる方法は、成形シート2を搬送装置3で引っ張ることによって線状光源像が歪むことを避けることができるが、一度に検査できる成形シート2の長さが線状光源4の移動可能範囲に対応する長さに制限されるので、長尺の成形シート2を効率的に検査するためには、前記の実施の形態のように成形シート2を搬送することが好ましい。
In the above-described embodiment, the linear
また、上記の実施の形態では、線欠陥用画像解析部611〜61nと点欠陥用画像解析部621〜62nとは、同一の撮像部51〜5nから得られた2次元画像データに基づいて欠陥を検出していたが、線欠陥用画像解析部611〜61nと点欠陥用画像解析部621〜62nとが、異なる撮像部から得られた2次元画像データに基づいてそれぞれ欠陥を検出してもよい。これによって、撮像部51〜5nの撮像条件(成形シート2からの距離や、成形シート2の搬送方向と撮像方向とのなす角度など)を、検出しようとする欠陥に適した条件にすることが可能となる。線欠陥用画像解析部611〜61nで用いられる2次元画像データを撮像する撮像部は、点欠陥用画像解析部621〜62nで用いられる2次元画像データを撮像するための撮像部と比較して、成形シートからの距離を遠くし、成形シート2の搬送方向と撮像方向とのなす角度を狭くすることが好ましい。これにより、点欠陥および線欠陥の両方を最適な撮像条件で撮像できるので、点欠陥および線欠陥の両方をさらに精度良く検出できる。
In the above embodiment, the line defect
また、上記の実施の形態では、各撮像部51〜5nで撮像された2次元画像を線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nで分散して処理していたが、撮像部51〜5nで撮像された2次元画像間の相対位置に基づいて各撮像部51〜5nで撮像されたn枚の2次元画像から成形シート2の幅方向の全領域を含む1枚の全幅画像を合成し、全幅画像に基づいて1つの線欠陥用画像解析部および1つの点欠陥用画像解析部で欠陥を検出してもよい。n枚の2次元画像から1枚の全幅画像を合成する方法としては、例えば、特許文献1の段落[0050]に記載された方法を用いることができる。
Further, in the above embodiment, the dispersion in the imaging section 5 1-5 image for 2-dimensional image of the line defect captured by the n
次に、線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nで用いられる線欠陥検出アルゴリズムおよび点欠陥検出アルゴリズムについて説明する。線欠陥検出アルゴリズムおよび点欠陥検出アルゴリズムとしては、以下の7種類の欠陥検出アルゴリズムA〜Gを用いることができる。
Next, a line defect detection algorithm and a point defect detection algorithm used in the line defect
〔欠陥検出アルゴリズムA〕
欠陥検出アルゴリズムAについて、図6に基づいて以下に説明する。図6(a)は、撮像部51〜5nの1つで生成された多値の2次元画像データ(以下、原画像データと称する)の例であり、画像の上側が搬送方向下流側であり、画像の下側が搬送方向上流側である。図6(a)において、中央の横方向に伸びる帯状の白領域が線状光源像であり、線状光源像の内部に存在する暗領域、および線状光源像の近傍に存在する小さい白領域が、欠陥である。
[Defect detection algorithm A]
The defect detection algorithm A will be described below with reference to FIG. FIG. 6A is an example of multi-valued two-dimensional image data (hereinafter referred to as original image data) generated by one of the imaging units 5 1 to 5 n , and the upper side of the image is the downstream side in the transport direction. The lower side of the image is the upstream side in the transport direction. In FIG. 6A, a band-shaped white region extending in the center in the horizontal direction is a linear light source image, a dark region existing inside the linear light source image, and a small white region existing in the vicinity of the linear light source image. Is a defect.
この欠陥検出アルゴリズムAでは、撮像部51〜5nで生成された複数枚の原画像データの各々について、以下の処理を行う。 In this defect detection algorithm A, the following processing is performed for each of a plurality of original image data generated by the imaging units 5 1 to 5 n .
まず、原画像データを、縦方向(成形シート2の搬送方向)に沿った1行ずつの画素列のデータ(輝度値(画素値)および位置を表すデータ;輝度プロファイル;1次元画像データ)に分割する。 First, the original image data is converted into pixel column data (luminance value (pixel value) and position data; luminance profile; one-dimensional image data) for each row along the vertical direction (conveying direction of the molding sheet 2). To divide.
次に、各画素列のデータについて、以下のような一端(図6(a)の上端)から他端(図6(a)の下端)に向かってエッジを探していく第1のエッジ判定処理を行う。まず、画素列の一端側から2つめの画素を注目画素とし、注目画素に対して一端側に隣接する隣接画素の輝度値よりも注目画素の輝度値が閾値T1以上小さいかを判定する。隣接画素の輝度値よりも注目画素の輝度値が閾値T1以上小さいと判定された場合には、隣接画素が第1のエッジであると判定し、第1のエッジの位置を記録して、処理対象の画素列のデータの処理を終了し、それ以外の場合には、注目画素を他端に向かって1画素ずつ移動しながら、前記判定において隣接画素の輝度値よりも注目画素の輝度値が閾値T1以上小さいと判定されるまで前記判定を繰り返し、隣接画素の輝度値よりも注目画素の輝度値が閾値T1以上小さいと判定された場合には、隣接画素が第1のエッジであると判定し、第1のエッジの位置を記録して、処理対象の画素列のデータの処理を終了する。なお、閾値T1は、任意の自然数であり、輝度値の最小単位であってもよい。閾値T1が輝度値の最小単位である場合には、上記判定は、単に隣接画素の輝度値よりも注目画素の輝度値が閾値以上小さいかを判定することになる。 Next, for the data of each pixel column, first edge determination processing for searching for an edge from one end (the upper end in FIG. 6A) to the other end (the lower end in FIG. 6A) as described below. I do. First, the second pixel from the one end side of the pixel column is set as the target pixel, and it is determined whether the luminance value of the target pixel is smaller than the threshold value T1 by the luminance value of the adjacent pixel adjacent to the target pixel on the one end side. If it is determined that the luminance value of the pixel of interest is smaller than the threshold value T1 by the luminance value of the adjacent pixel, it is determined that the adjacent pixel is the first edge, and the position of the first edge is recorded and processed. In the other cases, the luminance value of the target pixel is higher than the luminance value of the adjacent pixel in the determination while moving the target pixel one pixel toward the other end. The above determination is repeated until it is determined that the threshold value is smaller than the threshold value T1, and when it is determined that the luminance value of the target pixel is smaller than the threshold value T1 by the threshold value, the adjacent pixel is determined to be the first edge. Then, the position of the first edge is recorded, and the processing of the data of the pixel row to be processed is finished. Note that the threshold value T1 is an arbitrary natural number and may be the minimum unit of luminance values. When the threshold value T1 is the minimum unit of the luminance value, the above determination simply determines whether the luminance value of the target pixel is smaller than the threshold value than the luminance value of the adjacent pixel.
次に、各画素列のデータについて、以下のような他端から一端に向かってエッジを探していく以下の第2のエッジ判定処理を行う。まず、他端側から2つめの画素を注目画素とし、注目画素に対して他端側に隣接する隣接画素の輝度値よりも注目画素の輝度値が閾値T2以上大きいかを判定する。隣接画素の輝度値よりも注目画素の輝度値が閾値T2以上大きいと判定された場合には、注目画素が第2のエッジであると判定し、第2のエッジの位置を記録して、処理対象の画素列のデータの処理を終了し、それ以外の場合には、注目画素を一端に向かって1画素ずつ移動しながら、前記判定において隣接画素の輝度値よりも注目画素の輝度値が閾値T2以上大きいと判定されるまで前記判定を繰り返し、隣接画素の輝度値よりも注目画素の輝度値が閾値T2以上大きいと判定された場合には、注目画素が第2のエッジであると判定し、第2のエッジの位置を記録して、処理対象の画素列のデータの処理を終了する。なお、閾値T2は、任意の自然数であり、輝度値の最小単位であってもよい。閾値T2が輝度値の最小単位である場合には、上記判定は、単に隣接画素の輝度値よりも注目画素の輝度値が閾値以上大きいかを判定することになる。 Next, the following second edge determination process for searching for an edge from the other end to the one end is performed on the data of each pixel column as follows. First, the second pixel from the other end side is set as the target pixel, and it is determined whether the luminance value of the target pixel is larger than the threshold value T2 by the luminance value of the adjacent pixel adjacent to the other end side with respect to the target pixel. If it is determined that the luminance value of the pixel of interest is greater than the threshold value T2 by the luminance value of the adjacent pixel, the pixel of interest is determined to be the second edge, the position of the second edge is recorded, and the process In other cases, the luminance value of the target pixel is set to a threshold value that is higher than the luminance value of the adjacent pixel in the determination while moving the target pixel one pixel toward the other end. The above determination is repeated until it is determined that the pixel is larger than T2, and when it is determined that the luminance value of the pixel of interest is larger than the threshold value T2 by the luminance value of the adjacent pixel, it is determined that the pixel of interest is the second edge. Then, the position of the second edge is recorded, and the processing of the data of the pixel row to be processed is finished. The threshold value T2 is an arbitrary natural number and may be the minimum unit of luminance values. When the threshold value T2 is the minimum unit of the luminance value, the above determination simply determines whether the luminance value of the target pixel is greater than the threshold value by the luminance value of the adjacent pixel.
これらの第1のエッジ判定処理によって検出された第1のエッジの例を図6(a)に「△」で示し、および第2のエッジ判定処理によって検出された第2のエッジの例を図6(a)に「○」で示す。図6(a)から分かるように、欠陥のない領域では、線状光源像のエッジ以外にエッジが存在しないので、第1のエッジおよび第2のエッジは、線状光源像における他端側のエッジ(図6(a)の例では下側のエッジ)に一致し、互いに一致する。一方、図6(a)から分かるように、欠陥のある領域(白領域および黒領域)では、第1のエッジおよび第2のエッジの少なくとも一方が、欠陥領域のエッジに一致し、線状光源像における他端側のエッジよりもエッジ探索開始側へずれるので、第1のエッジと第2のエッジとが離れた位置となる。 An example of the first edge detected by the first edge determination process is indicated by “Δ” in FIG. 6A, and an example of the second edge detected by the second edge determination process is shown in FIG. This is indicated by “◯” in FIG. As can be seen from FIG. 6A, since there is no edge other than the edge of the linear light source image in the defect-free region, the first edge and the second edge are on the other end side in the linear light source image. The edges coincide with each other (the lower edge in the example of FIG. 6A) and coincide with each other. On the other hand, as can be seen from FIG. 6A, in the defective area (white area and black area), at least one of the first edge and the second edge coincides with the edge of the defective area, and the linear light source Since the edge is shifted to the edge search start side from the edge on the other end side in the image, the first edge and the second edge are separated from each other.
そこで、次に、各画素列のデータについて、第1のエッジから第2のエッジまでの距離(画素数)をエッジ間距離として求める。求められたエッジ間距離を画素列の位置(横方向の座標)に対してプロットしたプロファイルを図6(b)に示す。そして、このエッジ間距離が閾値T3以上の画素列が存在すれば、欠陥があると判定する。なお、閾値T3は、任意の自然数であり、1画素であってもよい。閾値T3が1画素である場合には、エッジ間距離が0でない画素列が欠陥を含む画素列として判定されることになる。閾値T3は、許容される欠陥のサイズに応じて適宜決めればよいが、多値の2次元画像データが256階調(輝度値0〜255;8ビット)の2次元画像データである場合、例えば3であることが好ましい。
Therefore, next, for the data of each pixel column, the distance (number of pixels) from the first edge to the second edge is obtained as the distance between the edges. FIG. 6B shows a profile in which the obtained distance between the edges is plotted with respect to the position of the pixel row (lateral coordinate). Then, if there is a pixel row whose edge distance is greater than or equal to the threshold T3, it is determined that there is a defect. The threshold T3 is an arbitrary natural number and may be one pixel. When the threshold value T3 is one pixel, a pixel column whose edge distance is not 0 is determined as a pixel column including a defect. The threshold value T3 may be determined as appropriate according to the size of an allowable defect. When the multi-value two-dimensional image data is two-dimensional image data having 256 gradations (
なお、図6の例では上端を一端(第1のエッジ探索開始側)としていたが、画素列のいずれの端を一端とするかは任意であり、下端を一端としてもよい。その場合には、欠陥のない領域では、第1のエッジおよび第2のエッジは、線状光源像における上側のエッジに一致する。 In the example of FIG. 6, the upper end is set as one end (first edge search start side). However, it is arbitrary which end of the pixel column is set as one end, and the lower end may be set as one end. In that case, the first edge and the second edge coincide with the upper edge in the linear light source image in an area having no defect.
この欠陥検出アルゴリズムAは、種々の点欠陥をある程度の確実性をもって検出することができる。ただし、気泡やフィッシュアイ等のような微小な点欠陥の検出確実性は、あまり高くない。一方、この欠陥検出アルゴリズムAは、線欠陥の検出には不向きである。この欠陥検出アルゴリズムAを、以下、「エッジプロファイル法1」と呼ぶ。
This defect detection algorithm A can detect various point defects with a certain degree of certainty. However, the detection certainty of minute point defects such as bubbles and fish eyes is not so high. On the other hand, the defect detection algorithm A is not suitable for detecting line defects. This defect detection algorithm A is hereinafter referred to as “
〔欠陥検出アルゴリズムB〕
欠陥検出アルゴリズムBは、2次元画像データにおける線状光源の像のエッジを関数曲線でフィッティングし、線状光源の像のエッジと関数曲線との距離が閾値T5(第1の閾値)以上である箇所を欠陥として検出するものである。
[Defect detection algorithm B]
The defect detection algorithm B fits the edge of the image of the linear light source in the two-dimensional image data with a function curve, and the distance between the edge of the image of the linear light source and the function curve is equal to or greater than a threshold value T5 (first threshold value). A part is detected as a defect.
欠陥検出アルゴリズムBについて、図7に基づいて以下に説明する。図7(a)は、撮像部51〜5nの1つで生成された原画像データの例であり、画像の上側が搬送方向下流側であり、画像の下側が搬送方向上流側である。図7(a)において、中央の横方向に伸びる帯状の白領域が線状光源像であり、線状光源像の下側エッジの局所的に歪んでいる部分(滑らかでないところ)が欠陥である。 The defect detection algorithm B will be described below based on FIG. FIG. 7A is an example of original image data generated by one of the imaging units 5 1 to 5 n , and the upper side of the image is the downstream side in the transport direction, and the lower side of the image is the upstream side in the transport direction. . In FIG. 7A, a band-like white region extending in the center lateral direction is a linear light source image, and a locally distorted portion (not smooth) of the lower edge of the linear light source image is a defect. .
この欠陥検出アルゴリズムBでは、撮像部51〜5nで生成された複数枚の原画像データの各々について、以下の処理を行う。 In this defect detection algorithm B, the following processing is performed for each of a plurality of original image data generated by the imaging units 5 1 to 5 n .
まず、原画像データから、線状光源像のエッジの少なくとも一方を求める。求められた線状光源像のエッジの例を図7(a)に「○」で示す。図7の例では線状光源像の下側エッジを求めているが、線状光源像の上側エッジを求めてもよく、線状光源像の上側エッジおよび下側エッジの両方を求めてもよい。 First, at least one of the edges of the linear light source image is obtained from the original image data. An example of the edge of the obtained linear light source image is indicated by “◯” in FIG. Although the lower edge of the linear light source image is obtained in the example of FIG. 7, the upper edge of the linear light source image may be obtained, or both the upper edge and the lower edge of the linear light source image may be obtained. .
線状光源像のエッジを求める方法としては、公知のエッジ抽出フィルタ(例えばソーベルフィルタ)を用いてエッジを抽出し、強度の強いエッジを線状光源像のエッジとする方法、2次元画像データを1行ずつの画素列のデータに分割した上で各画素列のデータから強いエッジを求めて線状光源像のエッジとする方法、特許文献1の[0057]に記載された方法で線状光源像の領域を求める方法(2値化およびラベリングを行い、ラベリングされた領域の中から面積が所定値よりも大きい領域を線状光源像の領域として抽出する方法)などが挙げられる。ここでは、一例として、原画像データを1行ずつの画素列のデータに分割した上で各画素列のデータから強いエッジを求めて線状光源像のエッジとする方法について説明する。まず、原画像データを、縦方向(成形シート2の搬送方向)に沿った1行ずつの画素列のデータに分割する。次に、各画素列のデータについて、以下のような一端(図7(a)の上端)から他端(図7(a)の下端)に向かってエッジを探していく処理を行う。まず、一端側から2つめの画素を注目画素とし、注目画素に対して一端側に隣接する隣接画素の輝度値よりも注目画素の輝度値が閾値T4(T4は自然数)以上小さいかを判定する。強いエッジのみを検出するために、このときの閾値T4は比較的大きい値とする。隣接画素の輝度値よりも注目画素の輝度値が閾値T4以上小さいと判定された場合には、隣接画素が線状光源像のエッジであると判定し、線状光源像のエッジの位置を記録して、処理対象の画素列のデータの処理を終了し、それ以外の場合には、注目画素を他端に向かって1画素ずつ移動しながら、前記判定において隣接画素の輝度値よりも注目画素の輝度値が閾値T4以上小さいと判定されるまで前記判定を繰り返し、隣接画素の輝度値よりも注目画素の輝度値が閾値T4以上小さいと判定された場合には、隣接画素が線状光源像のエッジであると判定し、線状光源像のエッジの位置を記録して、処理対象の画素列のデータの処理を終了する。 As a method for obtaining an edge of a linear light source image, a method of extracting an edge using a known edge extraction filter (for example, a Sobel filter) and using a strong edge as an edge of the linear light source image, two-dimensional image data Is divided into pixel row data for each row and then a strong edge is obtained from the data of each pixel row to obtain an edge of a linear light source image. The method described in [0057] of Patent Document 1 A method of obtaining a light source image region (a method of performing binarization and labeling, and extracting a region having an area larger than a predetermined value from the labeled regions as a linear light source image region), and the like. Here, as an example, a method will be described in which original image data is divided into pixel row data for each row, and then a strong edge is obtained from the data of each pixel row to obtain an edge of a linear light source image. First, the original image data is divided into pixel column data for each row along the vertical direction (conveying direction of the molded sheet 2). Next, processing for searching for the edge from the one end (the upper end in FIG. 7A) toward the other end (the lower end in FIG. 7A) is performed on the data of each pixel column. First, the second pixel from the one end side is set as the target pixel, and it is determined whether the luminance value of the target pixel is smaller than the threshold value T4 (T4 is a natural number) than the luminance value of the adjacent pixel adjacent to the one end side with respect to the target pixel. . In order to detect only strong edges, the threshold value T4 at this time is set to a relatively large value. If it is determined that the luminance value of the target pixel is smaller than the threshold value T4 by the threshold value of the adjacent pixel, it is determined that the adjacent pixel is an edge of the linear light source image, and the edge position of the linear light source image is recorded. Then, the processing of the data of the pixel row to be processed is finished. In other cases, the pixel of interest is compared with the luminance value of the adjacent pixel in the determination while moving the pixel of interest one pixel toward the other end. The determination is repeated until it is determined that the luminance value of the pixel of interest is smaller than the threshold value T4. If the luminance value of the pixel of interest is determined to be smaller than the threshold value T4 by the luminance value of the adjacent pixel, the adjacent pixel is a linear light source image. The edge position of the linear light source image is recorded, and the processing of the pixel row to be processed is completed.
次に、求められた線状光源像のエッジの列を、関数で表現される滑らかな曲線にフィッティングさせ(関数曲線でフィッティングを行い)、フィッティングカーブ(関数曲線)を求める。フィッティングに用いる関数としては、n次関数(nは2以上)、ガウス関数、ローレンツ関数、フォークト関数、これらの関数の組み合わせなどが挙げられるが、nが比較的小さいn次関数、例えば4次関数が好ましい。また、フィッティングを行う際に用いるフィッティングの評価方法としては、例えば最小二乗法を用いることができる。 Next, the obtained sequence of edges of the linear light source image is fitted to a smooth curve represented by a function (fitting is performed using a function curve) to obtain a fitting curve (function curve). Examples of the function used for fitting include an n-order function (n is 2 or more), a Gaussian function, a Lorentz function, a Forked function, a combination of these functions, and the like. Is preferred. In addition, as a fitting evaluation method used for fitting, a least square method can be used, for example.
次に、2次元画像データを縦方向(成形シート2の搬送方向)に沿った1行ずつの画素列のデータに分割し、各画素列のデータについて、フィッティングカーブから線状光源像のエッジまでの距離(画素数)をフィッティング度として求める。求められたフィッティング度を画素列の位置(横方向(成形シート2の搬送方向に直交し、かつ成形シート2の厚み方向に直交する方向)の座標)に対してプロットしたプロファイルを図7(b)に示す。そして、このフィッティング度が閾値T5以上の画素列が存在すれば、その画素列における線状光源像のエッジの位置に欠陥があると判定する。これにより、欠陥の有無を判定することができ、また、欠陥の位置を求めることもできる。以上のようにして、線状光源像のエッジの局所的な歪み(エッジ近傍での微細な線状光源像の歪み)として現れる線欠陥を検出することができる。なお、上記判定に用いる閾値T5は、任意の自然数であり、1画素であってもよい。閾値T5が1画素である場合には、フィッティング度が0でない画素列が存在すれば、欠陥があると判定されることになる。閾値T5は、許容される欠陥のサイズに応じて適宜決めればよいが、多値の2次元画像データが256階調の2次元画像データである場合、4であることが好ましい。 Next, the two-dimensional image data is divided into pixel row data for each row along the vertical direction (conveying direction of the forming sheet 2), and for each pixel row data, from the fitting curve to the edge of the linear light source image. Is obtained as the fitting degree. FIG. 7B shows a profile in which the obtained fitting degree is plotted with respect to the position of the pixel row (coordinates in the horizontal direction (the direction perpendicular to the conveyance direction of the molded sheet 2 and the direction perpendicular to the thickness direction of the molded sheet 2)). ). If there is a pixel column having a fitting degree equal to or greater than the threshold value T5, it is determined that the edge position of the linear light source image in the pixel column is defective. Thereby, the presence or absence of a defect can be determined, and the position of the defect can also be obtained. As described above, it is possible to detect a line defect that appears as a local distortion of the edge of the linear light source image (a fine distortion of the linear light source image near the edge). The threshold T5 used for the determination is an arbitrary natural number and may be one pixel. In the case where the threshold value T5 is 1 pixel, if there is a pixel row whose fitting degree is not 0, it is determined that there is a defect. The threshold value T5 may be appropriately determined according to the size of an allowable defect, but is preferably 4 when the multi-valued two-dimensional image data is 256-gradation two-dimensional image data.
なお、この欠陥検出アルゴリズムBでは、欠陥の有無を判定するのに加えて、欠陥位置を求めてもよい。その場合には、フィッティング度が閾値T5以上の画素列を抽出し、抽出された画素列における線状光源像のエッジとフィッティングカーブとの間にある画素の位置を欠陥位置として求めればよい。 In this defect detection algorithm B, in addition to determining the presence or absence of a defect, a defect position may be obtained. In that case, a pixel column having a fitting degree equal to or greater than the threshold value T5 may be extracted, and a pixel position between the edge of the linear light source image and the fitting curve in the extracted pixel column may be obtained as a defect position.
この欠陥検出アルゴリズムBは、種々の線欠陥を高い確実性をもって検出することができる。一方、この欠陥検出アルゴリズムBは、点欠陥の検出には不向きである。この欠陥検出アルゴリズムBを、以下、「エッジプロファイル法2」と呼ぶ。 This defect detection algorithm B can detect various line defects with high certainty. On the other hand, this defect detection algorithm B is not suitable for detecting point defects. This defect detection algorithm B is hereinafter referred to as “edge profile method 2”.
〔欠陥検出アルゴリズムC〕
欠陥検出アルゴリズムCは、2次元画像データを平滑化し、平滑化された2次元画像データと元の2次元画像データとの差分を差分画像データとして求め、差分画像データにおける輝度値が閾値T6B(第4の閾値;T6Bは任意の正数)以上である箇所、および輝度値が閾値T6D(第5の閾値;T6DはT6Bより小さい任意の正数)以下である箇所を欠陥として検出するものである。
[Defect detection algorithm C]
The defect detection algorithm C smoothes the two-dimensional image data, obtains the difference between the smoothed two-dimensional image data and the original two-dimensional image data as difference image data, and the luminance value in the difference image data is the threshold value T6B (first 4 where the threshold value is 4 or higher; T6B is an arbitrary positive number) or higher, and the luminance value is lower than the threshold T6D (fifth threshold; T6D is an arbitrary positive number smaller than T6B) or lower. .
欠陥検出アルゴリズムCについて、以下にさらに詳細に説明する。この欠陥検出アルゴリズムCは、線状光源像の横方向(成形シート2の搬送方向に直交し、かつ成形シート2の厚み方向に直交する方向)の明暗変化と比較して欠陥による横方向の明暗変化の方が、空間周波数が高いことを利用し、原画像データの高周波成分を抽出し、高周波成分における輝度値が閾値T6B以上または閾値T6D以下である部分を欠陥として検出するものである。 The defect detection algorithm C will be described in further detail below. In this defect detection algorithm C, the contrast in the lateral direction of the linear light source image (the direction perpendicular to the conveying direction of the molded sheet 2 and the direction orthogonal to the thickness direction of the molded sheet 2) is compared with the brightness in the lateral direction due to the defect. Utilizing the fact that the change has a higher spatial frequency, a high frequency component of the original image data is extracted, and a portion whose luminance value in the high frequency component is equal to or higher than the threshold value T6B or lower than the threshold value T6D is detected as a defect.
(1)まず、1行n列(nは3以上の整数)の横方向平滑化フィルタ(行列)を用いて、原画像データを横方向に平滑化(スムージング)する。これにより、原画像データの横方向輝度変化の高周波領域が除去されて、横方向輝度変化については低周波成分だけが残る(横方向輝度変化の低周波成分および縦方向輝度変化が残る)。上記横方向平滑化フィルタとしては、ガウスフィルタ等の加重平均化フィルタ、平均化フィルタなどを用いることができる。なお、nは、3であることが好ましい。 (1) First, the original image data is smoothed (smoothed) in the horizontal direction using a horizontal smoothing filter (matrix) of 1 row and n columns (n is an integer of 3 or more). As a result, the high frequency region of the horizontal luminance change in the original image data is removed, and only the low frequency component remains for the horizontal luminance change (the low frequency component of the horizontal luminance change and the vertical luminance change remain). As the horizontal smoothing filter, a weighted averaging filter such as a Gaussian filter, an averaging filter, or the like can be used. Note that n is preferably 3.
(2)次に、原画像データから平滑化された画像データを減算する(各画素の輝度値を減算する)。これにより、原画像データにおける横方向輝度変化の高周波成分だけが残る。 (2) Next, the smoothed image data is subtracted from the original image data (the luminance value of each pixel is subtracted). Thereby, only the high frequency component of the horizontal luminance change in the original image data remains.
(3)次に、減算により得られた画像データに対して3×3画素の平滑化フィルタ(オペレータ)を用いた平滑化を行う。この平滑化により、ノイズが除去され、ノイズ以外の高周波成分が残る。上記平滑化フィルタとしては、バイラテラルフィルタやメディアンフィルタなどのような、エッジを保存した平滑化を行うものを用いることが好ましい。 (3) Next, the image data obtained by the subtraction is smoothed using a 3 × 3 pixel smoothing filter (operator). This smoothing removes noise and leaves high-frequency components other than noise. As the smoothing filter, it is preferable to use a smoothing filter that preserves edges, such as a bilateral filter or a median filter.
(4)次に、原画像データから、線状光源像における上側エッジ(搬送方向下流側のエッジ)および下側エッジ(搬送方向上流側のエッジ)を求める。線状光源像のエッジを求める方法は、欠陥検出アルゴリズムBに関して説明したものと同様であるので、説明を省略する。次いで、原画像データにおける成形シート2の搬送方向をX軸とし、上側エッジを構成する全画素のX座標値の中から最小値Minを求め、下側エッジを構成する全画素のX座標値の中から最大値Maxを求める。そして、最小値Minから最大値Maxを減算した値を線状光源像の幅Wとみなし、X座標値が最小値Minから最大値Maxまでの領域より幅Wだけ外側へ広げた領域を検査領域として定義する。すなわち、X座標値がMin−(Min−Max)以上であってMax+(Min−Max)以下である領域を検査領域として定義する。この処理は、検査対象領域を線状光源像およびその近傍領域だけに絞るためのものである。また、検査領域を、X座標値が最小値Minから最大値Maxまでの領域よりも外側へ広げているのは、線状光源像の多少の歪みを含めて検査領域とするためである。 (4) Next, from the original image data, an upper edge (an edge on the downstream side in the transport direction) and a lower edge (an edge on the upstream side in the transport direction) in the linear light source image are obtained. Since the method for obtaining the edge of the linear light source image is the same as that described with respect to the defect detection algorithm B, description thereof is omitted. Next, with the conveyance direction of the forming sheet 2 in the original image data as the X axis, the minimum value Min is obtained from the X coordinate values of all the pixels constituting the upper edge, and the X coordinate values of all the pixels constituting the lower edge are determined. The maximum value Max is obtained from the inside. Then, the value obtained by subtracting the maximum value Max from the minimum value Min is regarded as the width W of the linear light source image, and an area in which the X coordinate value is expanded outward by the width W from the area from the minimum value Min to the maximum value Max is inspected. Define as That is, an area where the X coordinate value is equal to or greater than Min− (Min−Max) and equal to or less than Max + (Min−Max) is defined as an inspection area. This process is for narrowing down the inspection target area to only the linear light source image and its vicinity area. In addition, the reason why the inspection area is expanded outside the area where the X coordinate value is from the minimum value Min to the maximum value Max is that the inspection area includes a slight distortion of the linear light source image.
(5)次に、上記(3)の平滑化が施された後の画像データ(ノイズ以外の高周波成分)における検査領域内の画素の輝度値から、次式によって、明(bright)側(輝度の高い側)の閾値T6Bおよび暗(dark)側(輝度の低い側)の閾値T6Dを決定する。 (5) Next, from the luminance value of the pixel in the inspection area in the image data (high-frequency component other than noise) after the smoothing of (3) above, the bright side (luminance Threshold T6B on the higher side) and threshold T6D on the dark side (lower luminance side).
T6B=(検査領域内の平均輝度値)+(検査領域内の輝度値の標準偏差)×k
T6D=(検査領域内の平均輝度値)−(検査領域内の輝度値の標準偏差)×k
(kは正数のパラメータを表す〉
なお、kの値は、許容される欠陥のサイズに応じて適宜決めればよいが、例えば、1.5、3、4.5などである。
T6B = (average luminance value in inspection area) + (standard deviation of luminance value in inspection area) × k
T6D = (average luminance value in the inspection area) − (standard deviation of luminance values in the inspection area) × k
(K represents a positive parameter)
Note that the value of k may be determined as appropriate according to the allowable defect size, and is, for example, 1.5, 3, 4.5, or the like.
(6)次に、上記(3)の平滑化が施された後の画像データにおける検査領域内の全画素について、その輝度値が閾値T6B以上または閾値T6D以下であるかを判定する処理(閾値処理)を行い、閾値T6B以上または閾値T6D以下の画素を、欠陥部位として抽出する。これにより、欠陥の有無を判定することができ、また、欠陥の位置を求めることもできる。 (6) Next, a process for determining whether the luminance value of all pixels in the inspection area in the image data subjected to the smoothing of (3) is equal to or higher than the threshold value T6B or lower than the threshold value T6D (threshold value). Process), and pixels having a threshold value T6B or more or a threshold value T6D or less are extracted as defective portions. Thereby, the presence or absence of a defect can be determined, and the position of the defect can also be obtained.
なお、撮像部51〜5nで生成される原画像データに含まれるノイズが少ない場合には、(3)の平滑化処理を省略してもよい。また、検査対象領域を線状光源像およびその近傍領域だけに絞る必要がない場合には、(4)の検査領域を定義する処理を省略し、(5)(6)の処理を画像データ全体に対して行ってもよい。 Incidentally, if the noise contained in the original image data generated by the imaging unit 5 1 to 5 n is small, it may be omitted smoothing process (3). If it is not necessary to limit the inspection target area to only the linear light source image and its neighboring area, the process of defining the inspection area in (4) is omitted, and the processes in (5) and (6) are performed on the entire image data. You may go to
この欠陥検出アルゴリズムCは、気泡やフィッシュアイ等のような微小欠陥を含むあらゆる点欠陥を高い確実性をもって検出することができる。一方、この欠陥検出アルゴリズムCは、線欠陥の検出には不向きである。ただし、処理時間については、この欠陥検出アルゴリズムCよりも他の欠陥検出アルゴリズムの方が短い(欠陥検出アルゴリズムCの処理時間は、例えば1フレームあたり40ms程度)。この欠陥検出アルゴリズムCを、以下、「ハイパスフィルタ法」と呼ぶ。 The defect detection algorithm C can detect all point defects including minute defects such as bubbles and fish eyes with high certainty. On the other hand, the defect detection algorithm C is not suitable for detecting line defects. However, regarding the processing time, the defect detection algorithm other than this defect detection algorithm C is shorter (the processing time of the defect detection algorithm C is, for example, about 40 ms per frame). This defect detection algorithm C is hereinafter referred to as “high-pass filter method”.
〔欠陥検出アルゴリズムD〕
欠陥検出アルゴリズムDについて、図8および図9に基づいて以下に説明する。図8は、撮像部51〜5nの1つで生成された原画像データの例であり、画像の上側が搬送方向下流側であり、画像の下側が搬送方向上流側である。図8において、中央の横方向に伸びる帯状の白領域が線状光源像であり、線状光源像の内部に存在する暗領域、および線状光源像の近傍に存在する小さい白領域が、欠陥である。図8において、線状光源像の上方および下方にある曲線は、検査対象領域の上限および下限を示す。
[Defect detection algorithm D]
The defect detection algorithm D will be described below with reference to FIGS. FIG. 8 is an example of original image data generated by one of the imaging units 5 1 to 5 n , and the upper side of the image is the downstream side in the transport direction, and the lower side of the image is the upstream side in the transport direction. In FIG. 8, a strip-like white region extending in the horizontal direction in the center is a linear light source image, and a dark region existing inside the linear light source image and a small white region existing in the vicinity of the linear light source image are defective. It is. In FIG. 8, the curves above and below the linear light source image indicate the upper and lower limits of the inspection target region.
この欠陥検出アルゴリズムDでは、撮像部51〜5nで生成された複数枚の原画像データの各々について、以下の処理を行う。 In the defect detection algorithm D, the following processing is performed for each of the plurality of original image data generated by the imaging units 5 1 to 5 n .
まず、原画像データを、縦方向(成形シート2の搬送方向)に沿った1行ずつの画素列のデータに分割し、各画素列における位置に依存した輝度値の変化を表すプロット列を垂直方向輝度プロファイルとして求める。求められた垂直方向輝度プロファイルの例を図9に示す。この例は、図8の矢印で示す位置の画素列に関する垂直方向輝度プロファイルであり、yは、下方向(図8の矢印で示す方向;成形シート2の搬送方向と逆の方向)をy軸としたときのy座標である。 First, the original image data is divided into pixel row data for each row along the vertical direction (conveying direction of the molding sheet 2), and a plot row representing a change in luminance value depending on the position in each pixel row is vertical. Obtained as a directional luminance profile. An example of the obtained vertical luminance profile is shown in FIG. This example is a vertical luminance profile related to the pixel row at the position indicated by the arrow in FIG. 8, and y indicates the downward direction (the direction indicated by the arrow in FIG. 8; the direction opposite to the conveying direction of the molded sheet 2). Y coordinate.
次に、各画素列の垂直方向輝度プロファイルについて、谷の部分の深さ(図8参照)を求める。すなわち、まず、各画素列の垂直方向輝度プロファイルについて、全ての極大点および極小点を求め、求められた全ての極小点について、その極小点の輝度値(極小値)と、その極小点に最も近い極大点の輝度値(極大値)との差を、谷の部分の深さとして求める。求められた谷の部分の深さが閾値T7(T7は正数)以上であれば、欠陥があると判定する。閾値T7は、許容される欠陥のサイズに応じて適宜決めればよいが、多値の2次元画像データが256階調の2次元画像データである場合、例えば0.25×255であることが好ましい。 Next, the depth of the valley portion (see FIG. 8) is obtained for the vertical luminance profile of each pixel column. That is, first, regarding the vertical luminance profile of each pixel row, all local maximum points and local minimum points are obtained, and for all the obtained local minimum points, the luminance value (local minimum value) of the local minimum point and the local minimum point are the most. The difference from the brightness value (maximum value) of the nearest local maximum point is obtained as the depth of the valley portion. If the depth of the obtained valley portion is equal to or greater than a threshold value T7 (T7 is a positive number), it is determined that there is a defect. The threshold value T7 may be determined as appropriate according to the allowable defect size, but is preferably 0.25 × 255, for example, when the multivalued two-dimensional image data is 256-gradation two-dimensional image data. .
この欠陥検出アルゴリズムDは、処理時間が比較的短い。この欠陥検出アルゴリズムDは、種々の点欠陥をある程度の確実性をもって検出することができる。特に、線状光源像のエッジ付近にある局所的な明暗反転を生じる点欠陥の検出に向いている。ただし、点欠陥およびその近傍を含む画像が高コントラストである必要であり、気泡やフィッシュアイ、タイヤ跡等のような微小な点欠陥の検出確実性は、あまり高くない。一方、この欠陥検出アルゴリズムDは、線欠陥の検出には不向きである。この欠陥検出アルゴリズムDを、以下、「ピーク法」と呼ぶ。 This defect detection algorithm D has a relatively short processing time. This defect detection algorithm D can detect various point defects with a certain degree of certainty. In particular, it is suitable for detecting a point defect that causes local light / dark reversal near the edge of a linear light source image. However, the image including the point defect and the vicinity thereof needs to have a high contrast, and the certainty of detecting a small point defect such as a bubble, fish eye, or a tire mark is not so high. On the other hand, this defect detection algorithm D is not suitable for detecting line defects. This defect detection algorithm D is hereinafter referred to as “peak method”.
〔欠陥検出アルゴリズムE〕
欠陥検出アルゴリズムEは、2次元画像データにおける一直線上に沿った位置に依存した輝度の変化を輝度プロファイルとして表し、輝度プロファイルのプロット群をプロット間の移動時間が一定となるように移動する質点を想定し、注目プロットの直前2つのプロット間における上記質点の速度ベクトルと上記注目プロットの直前3つのプロット間における上記質点の加速度ベクトルとから上記注目プロットの輝度値を予測し、予測された輝度値と実際の輝度値との差が閾値T8(第3の閾値;T8は自然数)以上である箇所を欠陥として検出するものである。
[Defect detection algorithm E]
The defect detection algorithm E represents a change in luminance depending on a position along a straight line in the two-dimensional image data as a luminance profile, and a plot point of the luminance profile is a mass point that moves so that the movement time between plots is constant. Assuming that the luminance value of the attention plot is predicted from the velocity vector of the mass point between the two plots immediately before the attention plot and the acceleration vector of the mass point between the three plots immediately before the attention plot, and the predicted luminance value And a difference between the actual luminance value and a threshold value T8 (third threshold value; T8 is a natural number) or more is detected as a defect.
欠陥検出アルゴリズムEについて、図10および図11に基づいて以下に説明する。この欠陥検出アルゴリズムEは、ピーク法の精度を向上させたものであり、谷の深さに代えて実測値と予測値との差に基づいて欠陥を検出する。 The defect detection algorithm E will be described below with reference to FIGS. This defect detection algorithm E improves the accuracy of the peak method, and detects a defect based on the difference between the actually measured value and the predicted value instead of the valley depth.
この欠陥検出アルゴリズムEでは、撮像部51〜5nで生成された複数枚の原画像データの各々について、以下の処理を行う。 In this defect detection algorithm E, the following processing is performed for each of a plurality of original image data generated by the imaging units 5 1 to 5 n .
まず、ピーク法と同様にして、各画素列の垂直方向輝度プロファイルを求める。求められた垂直方向輝度プロファイルの例を、輝度値をx軸として、図10に示す。この垂直方向輝度プロファイルにおける丸囲み部が、この欠陥検出アルゴリズムEで検出しようとする欠陥に対応するプロファイルである。 First, similarly to the peak method, the vertical luminance profile of each pixel column is obtained. An example of the obtained vertical luminance profile is shown in FIG. 10 with the luminance value as the x-axis. A circled portion in the vertical luminance profile is a profile corresponding to a defect to be detected by the defect detection algorithm E.
次に、各画素列の垂直方向輝度プロファイルについて、隣接するプロット間の移動時間がプロット間の距離にかかわらず一定となるように、プロット列の一端から他端に向かって移動する質点を想定する。そして、上記質点が、図11に示すように、プロットcからそれに隣接するプロットbへ、プロットbからそれに隣接するプロットaへ、プロットaからそれに隣接するプロットdへと移動していくとする。また、プロットdが注目画素に対応するプロットであるものとする。 Next, regarding the vertical luminance profile of each pixel column, a mass point moving from one end of the plot column to the other end is assumed so that the movement time between adjacent plots is constant regardless of the distance between plots. . Then, it is assumed that the mass point moves from the plot c to the adjacent plot b, from the plot b to the adjacent plot a, and from the plot a to the adjacent plot d as shown in FIG. Further, it is assumed that the plot d is a plot corresponding to the target pixel.
そして、プロットdの直前に質点が通過した3つのプロットa〜cにおける質点の速度ベクトルおよび加速度ベクトルを求める。すなわち、上記移動時間と、プロットdの直前に質点が通過した2つのプロットaおよびbの座標(x座標、y座標)とに基づいて、プロットbからプロットaまでの区間における上記質点の速度ベクトルを求める。さらに、上記移動時間と、プロットdの直前に質点が通過したプロットbおよびcの座標(x座標、y座標)とに基づいて、プロットcからプロットbまでの区間における上記質点の速度ベクトルを求め、プロットbからプロットaまでの区間における上記質点の速度ベクトルと、プロットcからプロットbまでの区間における上記質点の速度ベクトルとに基づいて、プロットcからプロットaまでの区間における上記質点の加速度ベクトルを求める。そして、プロットbからプロットaまでの区間における上記質点の速度ベクトルと、プロットcからプロットaまでの区間における上記質点の加速度ベクトルとから、プロットdの座標(位置)を予測する。 Then, the velocity vector and acceleration vector of the mass point in the three plots a to c where the mass point passed immediately before the plot d are obtained. That is, the velocity vector of the mass point in the section from plot b to plot a based on the travel time and the coordinates of the two plots a and b (x coordinate, y coordinate) that the mass point passed immediately before plot d. Ask for. Further, the velocity vector of the mass point in the section from the plot c to the plot b is obtained based on the moving time and the coordinates of the plots b and c (x coordinate, y coordinate) through which the mass point passed immediately before the plot d. Based on the velocity vector of the mass point in the interval from plot b to plot a and the velocity vector of the mass point in the interval from plot c to plot b, the acceleration vector of the mass point in the interval from plot c to plot a Ask for. Then, the coordinates (position) of the plot d are predicted from the velocity vector of the mass point in the section from the plot b to the plot a and the acceleration vector of the mass point in the section from the plot c to the plot a.
このようにして予測されたプロットdのx座標(輝度値)と、プロットdの実際(実測)のx座標(輝度値)との差を求め、これらの差が閾値T8以上であればプロットdに対応する画素を欠陥部位として抽出する。これにより、欠陥の有無を判定することができ、また、欠陥の位置を求めることもできる。閾値T8は、許容される欠陥のサイズに応じて適宜決めればよいが、多値の2次元画像データが256階調の2次元画像データである場合、例えば20であることが好ましい。 The difference between the x-coordinate (luminance value) of the plot d predicted in this way and the actual (actually measured) x-coordinate (luminance value) of the plot d is obtained, and if these differences are greater than or equal to the threshold T8, the plot d The pixel corresponding to is extracted as a defective part. Thereby, the presence or absence of a defect can be determined, and the position of the defect can also be obtained. The threshold value T8 may be determined as appropriate according to the allowable defect size, but is preferably 20 when the multi-valued two-dimensional image data is 256-gradation two-dimensional image data.
この欠陥検出アルゴリズムEは、種々の点欠陥を高い確実性をもって検出することができる。この欠陥検出アルゴリズムEを、以下、「ピーク法2」と呼ぶ。 This defect detection algorithm E can detect various point defects with high certainty. This defect detection algorithm E is hereinafter referred to as “peak method 2”.
〔欠陥検出アルゴリズムF〕
欠陥検出アルゴリズムFについて、図12に基づいて以下に説明する。図12(a)は、撮像部51〜5nの1つで生成された原画像データの例であり、画像の上側が搬送方向下流側であり、画像の下側が搬送方向上流側である。図12(a)において、中央の横方向に伸びる帯状の白領域が線状光源像であり、線状光源像の下側エッジの局所的に歪んでいる部分(水平線に対する傾きが大きいところ)が欠陥である。
[Defect detection algorithm F]
The defect detection algorithm F will be described below with reference to FIG. FIG. 12A is an example of original image data generated by one of the imaging units 5 1 to 5 n , and the upper side of the image is the downstream side in the transport direction, and the lower side of the image is the upstream side in the transport direction. . In FIG. 12A, a band-like white region extending in the horizontal direction at the center is a linear light source image, and a locally distorted portion (a place where the inclination with respect to the horizontal line is large) of the lower edge of the linear light source image. It is a defect.
この欠陥検出アルゴリズムFでは、撮像部51〜5nで生成された複数枚の原画像データの各々について、以下の処理を行う。 In the defect detection algorithm F, the following processing is performed for each of the plurality of original image data generated by the imaging units 5 1 to 5 n .
まず、原画像データから、線状光源像のエッジの少なくとも一方を求める。求められた線状光源像のエッジの例を図12(a)に「○」で示す。図12の例では線状光源像の下側エッジを求めているが、線状光源像の上側エッジを求めてもよく、線状光源像の上側エッジおよび下側エッジの両方を求めてもよい。線状光源像のエッジを求める方法は、欠陥検出アルゴリズムBに関して説明したものと同様であるので、説明を省略する。 First, at least one of the edges of the linear light source image is obtained from the original image data. An example of the edge of the obtained linear light source image is indicated by “◯” in FIG. Although the lower edge of the linear light source image is obtained in the example of FIG. 12, the upper edge of the linear light source image may be obtained, or both the upper edge and the lower edge of the linear light source image may be obtained. . Since the method for obtaining the edge of the linear light source image is the same as that described with respect to the defect detection algorithm B, description thereof is omitted.
次に、横方向をx軸、縦方向をy軸とし、線状光源像のエッジの曲線(エッジプロファイル)y=f(x)を、二次微分して二次微分プロファイルを求める。求められた二次微分プロファイルの例を図12(b)に示す。 Next, with the horizontal direction as the x-axis and the vertical direction as the y-axis, the curve of the edge of the linear light source image (edge profile) y = f (x) is second-order differentiated to obtain a second-order differential profile. An example of the obtained secondary differential profile is shown in FIG.
そして、線状光源像のエッジの各画素について、二次微分が閾値T9(T9は正数)以上であるかを判定し、二次微分が閾値T9以上である画素(高周波のところ)を欠陥部位と判定する。これにより、欠陥の有無を判定することができ、また、欠陥の位置を求めることもできる。閾値T9は、許容される欠陥のサイズに応じて適宜決めればよい。 Then, for each pixel at the edge of the linear light source image, it is determined whether the secondary differentiation is greater than or equal to a threshold T9 (T9 is a positive number), and a pixel (at a high frequency) whose secondary differentiation is greater than or equal to the threshold T9 is defective. Determined as a site. Thereby, the presence or absence of a defect can be determined, and the position of the defect can also be obtained. The threshold value T9 may be appropriately determined according to the allowable defect size.
この欠陥検出アルゴリズムFは、線状光源像のエッジの局所的な湾曲として現れる線欠陥の検出に向く。この欠陥検出アルゴリズムFは、欠陥検出能力はあまり高くない。この欠陥検出アルゴリズムFを、以下、「エッジカーブ法1」と呼ぶ。
This defect detection algorithm F is suitable for detecting a line defect that appears as a local curvature of an edge of a linear light source image. This defect detection algorithm F does not have a high defect detection capability. This defect detection algorithm F is hereinafter referred to as “
〔欠陥検出アルゴリズムG〕
欠陥検出アルゴリズムGは、2次元画像データにおける線状光源の像のエッジについて、各画素の近傍領域(近傍2n+1画素の範囲)における曲率を求め、曲率が閾値T10(第2の閾値;T10は正数)以上である箇所を欠陥として検出するものである。
[Defect detection algorithm G]
The defect detection algorithm G obtains the curvature in the vicinity region of each pixel (range of 2n + 1 pixels in the vicinity) for the edge of the image of the linear light source in the two-dimensional image data, and the curvature is a threshold T10 (second threshold; T10 is positive) (Number) or more are detected as defects.
欠陥検出アルゴリズムGについて、図13に基づいて以下に説明する。 The defect detection algorithm G will be described below with reference to FIG.
この欠陥検出アルゴリズムGでは、撮像部51〜5nで生成された複数枚の原画像データの各々について、以下の処理を行う。 In this defect detection algorithm G, the following processing is performed for each of a plurality of original image data generated by the imaging units 5 1 to 5 n .
まず、原画像データから、線状光源像のエッジの少なくとも一方を求める。求められた線状光源像のエッジの例を図13に示す。線状光源像のエッジを求める方法は、欠陥検出アルゴリズムBに関して説明したものと同様であるので、説明を省略する。 First, at least one of the edges of the linear light source image is obtained from the original image data. An example of the edge of the obtained linear light source image is shown in FIG. Since the method for obtaining the edge of the linear light source image is the same as that described with respect to the defect detection algorithm B, description thereof is omitted.
次に、線状光源像のエッジの曲線について、各点(各画素)での曲率を求める。曲率を求める方法は、特に限定されるものではなく、数学的に決まっている数式を用いて計算する方法であってもよいが、そのような方法では処理時間が長くなるので、以下の方法で曲率を近似的に求めることが好ましい。 Next, the curvature at each point (each pixel) is determined for the edge curve of the linear light source image. The method of obtaining the curvature is not particularly limited, and may be a method of calculating using mathematically determined mathematical formulas. However, in such a method, the processing time becomes long. It is preferable to obtain the curvature approximately.
(1)エッジ上における、注目画素(図13における黒い点)に対して左右(または前後)n画素(図13における白い点)と注目画素とからなる範囲(注目画素の近傍2n+1画素の範囲)を計算対象範囲とする(nは自然数)。nは、許容される欠陥のサイズに応じて適宜決めればよいが、例えば30であることが好ましい。図13の例は、nが3の場合である。 (1) A range consisting of n pixels (white dots in FIG. 13) left and right (or front and back) with respect to the target pixel (black point in FIG. 13) on the edge and a target pixel (range of 2n + 1 pixels in the vicinity of the target pixel) Is a calculation target range (n is a natural number). n may be appropriately determined according to the size of the allowable defect, but is preferably 30, for example. The example of FIG. 13 is a case where n is 3.
(2)次に、計算対象範囲の両端の画素を直線で結ぶ。 (2) Next, the pixels at both ends of the calculation target range are connected by a straight line.
(3)計算対象範囲の全画素にわたって、その直線から予測輝度値を求め、予測輝度値に対する実際の輝度値(エッジ曲線上の輝度値)の増分を求め、その増分またはその増分の絶対値を積算する。ここで得られる積算値によって、注目画素近傍2n+1画素の範囲における曲率を十分に近似できる(数学的に決まっている数式を用いて計算した曲率とほぼ同等の曲率値を得ることができる)。ここで、増分の積算値を用いた構成では、図13(c)のように計算対象範囲内で直線の上へ行ったり直線の下へ行ったりする微小な輝度値の変化が起こった場合に、これらの変化を相殺し無視して、曲率の近似値を求めることになる。一方、増分の絶対値の積算値を用いる構成では、そのような変化が起こった場合にも、そのような変化も含めて曲率の近似値を求めることになる。図13(c)のように計算対象範囲内で直線の上へ行ったり直線の下へ行ったりする微小な輝度値の変化を欠陥として検出したければ、増分の絶対値の積算値を用いる構成とすればよい。逆に、このような変化を許容して欠陥として検出したくない場合には、増分の積算値を用いる構成とすればよい。 (3) The predicted luminance value is obtained from the straight line over all pixels in the calculation target range, the increment of the actual luminance value (luminance value on the edge curve) with respect to the predicted luminance value is obtained, and the increment or the absolute value of the increment is calculated. Accumulate. With the integrated value obtained here, the curvature in the range of 2n + 1 pixels in the vicinity of the target pixel can be sufficiently approximated (a curvature value substantially equivalent to the curvature calculated using mathematical formulas can be obtained). Here, in the configuration using the incremental integrated value, when a slight change in luminance value occurs on the straight line or below the straight line within the calculation target range as shown in FIG. 13C. Therefore, the approximate value of the curvature is obtained by canceling and ignoring these changes. On the other hand, in the configuration using the integrated value of the absolute value of the increment, even when such a change occurs, an approximate value of the curvature including such a change is obtained. As shown in FIG. 13C, if a minute change in luminance value that goes up or down the straight line within the calculation target range is detected as a defect, a configuration using an integrated value of the absolute value of the increment is used. And it is sufficient. On the other hand, if such a change is allowed and it is not desired to detect it as a defect, an incremental integrated value may be used.
(4)注目画素を線状光源像におけるエッジの端から端まで1画素ずつ移動させながら、エッジ上の全ての画素について上記積算値を計算していく。これにより、曲率の近似値のプロプァイル(曲率プロファイル)が生成される。 (4) The integrated value is calculated for all the pixels on the edge while moving the pixel of interest one pixel at a time from the end of the edge in the linear light source image. Thereby, a profile (curvature profile) of an approximate value of curvature is generated.
次に、上記曲率プロファイルにおける線状光源像のエッジの各画素について、曲率が閾値T10以上であるかを判定し、求められた曲率が閾値T10以上である画素を欠陥部位(または欠陥候補)と判定する。これにより、欠陥の有無を判定することができ、また、欠陥の位置を求めることもできる。成形シート2が多少反っているために線状光源像のエッジは多少曲がっているので、線状光源像のエッジの曲率がある程度までであれば、欠陥ではないものとして許容すべきである。したがって、閾値T10は、比較的大きくするべきである。閾値T10は、許容される欠陥のサイズに応じて適宜決めればよいが、多値の2次元画像データが256階調の2次元画像データである場合、例えば110であることが好ましい。 Next, for each pixel at the edge of the linear light source image in the curvature profile, it is determined whether the curvature is equal to or greater than a threshold value T10, and a pixel having a calculated curvature equal to or greater than the threshold value T10 is defined as a defective portion (or defect candidate). judge. Thereby, the presence or absence of a defect can be determined, and the position of the defect can also be obtained. Since the edge of the linear light source image is slightly bent because the molded sheet 2 is somewhat warped, it should be allowed as a non-defect if the curvature of the edge of the linear light source image is up to a certain extent. Therefore, the threshold value T10 should be relatively large. The threshold value T10 may be determined as appropriate according to the allowable defect size, but is preferably 110, for example, when the multi-valued two-dimensional image data is 256-gradation two-dimensional image data.
この欠陥検出アルゴリズムGは、種々の線欠陥を高い確実性をもって検出することができる。この欠陥検出アルゴリズムGを、以下、「エッジカーブ法2」と呼ぶ。 This defect detection algorithm G can detect various line defects with high certainty. This defect detection algorithm G is hereinafter referred to as “edge curve method 2”.
本実施形態において、線欠陥用画像解析部611〜61nおよび点欠陥用画像解析部621〜62nでそれぞれ用いる線欠陥検出アルゴリズムおよび点欠陥検出アルゴリズムの組み合わせは、以下の何れかである。
In the present embodiment, the combination of the line defect detection algorithm and the point defect detection algorithm respectively used in the line defect
(A)線欠陥用画像解析部611〜61nで用いる線欠陥検出アルゴリズムがエッジプロファイル法2またはエッジカーブ法2であり、点欠陥用画像解析部621〜62nで用いる点欠陥検出アルゴリズムがハイパスフィルタ法またはピーク法2である。
(A) The line defect detection algorithm used in the
(B)線欠陥用画像解析部611〜61nで用いる線欠陥検出アルゴリズムがエッジプロファイル法2またはエッジカーブ法2であり、点欠陥用画像解析部621〜62nで用いる点欠陥検出アルゴリズムがハイパスフィルタ法またはピーク法2以外の欠陥検出アルゴリズムである。
(B) The line defect detection algorithm used in the line defect
(C)線欠陥用画像解析部611〜61nで用いる線欠陥検出アルゴリズムがエッジプロファイル法2またはエッジカーブ法2以外の欠陥検出アルゴリズムであり、点欠陥用画像解析部621〜62nで用いる点欠陥検出アルゴリズムがハイパスフィルタ法またはピーク法2である。
(C) The line defect detection algorithm used in the line defect
(A)〜(C)の組み合わせのうち、(A)の組み合わせが最も好ましい。(A)の組み合わせの場合、線欠陥および点欠陥の両方を確実に検出できる。(B)の組み合わせの場合、線欠陥を確実に検出できる。(C)の組み合わせの場合、点欠陥を確実に検出できる。 Of the combinations (A) to (C), the combination (A) is most preferable. In the case of the combination (A), both line defects and point defects can be reliably detected. In the case of the combination (B), the line defect can be detected reliably. In the case of the combination (C), the point defect can be reliably detected.
〔実施の形態2〕
本発明の他の実施の形態について図14に基づいて説明すれば、以下の通りである。なお、説明の便宜上、前記実施の形態1にて示した各部材と同一の機能を有する部材には、同一の符号を付記し、その説明を省略する。
[Embodiment 2]
The following will describe another embodiment of the present invention with reference to FIG. For convenience of explanation, members having the same functions as those shown in the first embodiment are denoted by the same reference numerals, and description thereof is omitted.
本実施形態に係る欠陥検査装置は、図1に示す解析装置6に代えて図14に示す解析装置6Aを備えている以外は、実施の形態1に係る欠陥検査装置1と同一の構成を備えている。解析装置6Aは、図14に示すように、図1に示す解析装置6から点欠陥用画像解析部621〜62nを省いたものである。
The defect inspection apparatus according to the present embodiment has the same configuration as the
本実施形態において、線欠陥用画像解析部611〜61nで用いる線欠陥検出アルゴリズムは、エッジプロファイル法2またはエッジカーブ法2である。本実施形態では、線欠陥を確実に検出できる。
In this embodiment, the line defect detection algorithm used in the line defect
なお、本実施形態の欠陥検査装置は、単独で用いてもよいが、点欠陥を検出可能な欠陥検査装置と組み合わせて用いることが好ましい。これにより、線欠陥だけでなく点欠陥も検査できる。本実施形態の欠陥検査装置と組み合わせられる、点欠陥を検出可能な欠陥検査装置は、公知の種々の欠陥検査装置であってもよいが、後述する実施の形態3の欠陥検査装置であることが好ましい。これにより、線欠陥および点欠陥の両方を確実に検査できる。 In addition, although the defect inspection apparatus of this embodiment may be used independently, it is preferable to use it combining with the defect inspection apparatus which can detect a point defect. As a result, not only line defects but also point defects can be inspected. The defect inspection apparatus capable of detecting point defects combined with the defect inspection apparatus of the present embodiment may be various known defect inspection apparatuses, but may be a defect inspection apparatus of the third embodiment described later. preferable. Thereby, both a line defect and a point defect can be inspected reliably.
〔実施の形態3〕
本発明の他の実施の形態について図15に基づいて説明すれば、以下の通りである。なお、説明の便宜上、前記実施の形態1にて示した各部材と同一の機能を有する部材には、同一の符号を付記し、その説明を省略する。
[Embodiment 3]
The following will describe another embodiment of the present invention with reference to FIG. For convenience of explanation, members having the same functions as those shown in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted.
本実施形態に係る欠陥検査装置は、図1に示す解析装置6に代えて図15に示す解析装置6Bを備えている以外は、実施の形態1に係る欠陥検査装置1と同一の構成を備えている。解析装置6Bは、図15に示すように、図1に示す解析装置6から線欠陥用画像解析部611〜61nを省いたものである。
The defect inspection apparatus according to the present embodiment has the same configuration as the
本実施形態において、点欠陥用画像解析部621〜62nで用いる点欠陥検出アルゴリズムは、ハイパスフィルタ法またはピーク法2である。本実施形態では、点欠陥を確実に検出できる。 In this embodiment, the point defect detection algorithm used in the point defect image analysis units 62 1 to 62 n is the high-pass filter method or the peak method 2. In this embodiment, a point defect can be reliably detected.
なお、本実施形態の欠陥検査装置は、単独で用いてもよいが、線欠陥を検出可能な欠陥検査装置と組み合わせて用いることが好ましい。これにより、点欠陥だけでなく線欠陥も検査できる。本実施形態の欠陥検査装置と組み合わせられる、線欠陥を検出可能な欠陥検査装置は、公知の種々の欠陥検査装置であってもよいが、実施の形態2の欠陥検査装置であることが好ましい。これにより、線欠陥および点欠陥の両方を確実に検査できる。 In addition, although the defect inspection apparatus of this embodiment may be used independently, it is preferable to use it combining with the defect inspection apparatus which can detect a line defect. As a result, not only point defects but also line defects can be inspected. The defect inspection apparatus capable of detecting line defects combined with the defect inspection apparatus of the present embodiment may be various known defect inspection apparatuses, but is preferably the defect inspection apparatus of the second embodiment. Thereby, both a line defect and a point defect can be inspected reliably.
〔実験例〕
次に、本願発明の効果を確認するために、上記実施の形態に係る欠陥検査装置に類似した14種類の実験用欠陥検査装置を用いて行った実験の結果を示す。
[Experimental example]
Next, in order to confirm the effect of the present invention, results of an experiment conducted using 14 types of experimental defect inspection apparatuses similar to the defect inspection apparatus according to the above embodiment will be shown.
第1〜7の実験用欠陥検査装置は、上記実施の形態3に係る欠陥検査装置から撮像部52〜5nを省き、搬送装置3として、搬送ロールに代えて、成形シート2をその表面に載せて搬送するコンベアを用いたものである。第1〜7の実験用欠陥検査装置は、点欠陥を含むサンプルから点欠陥を検出するためのものである。 In the first to seventh experimental defect inspection apparatuses, the imaging units 5 2 to 5 n are omitted from the defect inspection apparatus according to the third embodiment, and instead of the conveyance roll, the molding sheet 2 is used as the conveyance device 3 on the surface thereof. The conveyor which carries on board and uses is used. The first to seventh experimental defect inspection apparatuses are for detecting point defects from a sample including point defects.
第1の実験用欠陥検査装置はエッジプロファイル法1を用いた点欠陥用画像解析部621〜62nを備え、第2の実験用欠陥検査装置はエッジプロファイル法2を用いた点欠陥用画像解析部621〜62nを備え、第3の実験用欠陥検査装置はハイパスフィルタ法を用いた点欠陥用画像解析部621〜62nを備え、第4の実験用欠陥検査装置はピーク法を用いた点欠陥用画像解析部621〜62nを備え、第5の実験用欠陥検査装置はピーク法2を用いた点欠陥用画像解析部621〜62nを備え、第6の実験用欠陥検査装置はエッジカーブ法1を用いた点欠陥用画像解析部621〜62nを備え、第7の実験用欠陥検査装置はエッジカーブ法2(増分の積算値を用いる方法)を用いた点欠陥用画像解析部621〜62nを備えている。
The first experimental defect inspection apparatus includes point defect image analysis units 62 1 to 62 n using the
第8〜14の実験用欠陥検査装置は、上記実施の形態2に係る欠陥検査装置から撮像部52〜5nを省き、搬送装置3として、搬送ロールに代えて、成形シート2をその表面に載せて搬送するコンベアを用いたものである。第8〜14の実験用欠陥検査装置は、線欠陥を含むサンプルから線欠陥を検出するためのものである。 The eighth to fourteenth experimental defect inspection apparatuses omit the imaging units 5 2 to 5 n from the defect inspection apparatus according to the second embodiment, and serve as the conveyance device 3 in place of the conveyance roll and the molded sheet 2 on the surface thereof. The conveyor which carries on board and uses is used. The eighth to fourteenth experimental defect inspection apparatuses are for detecting a line defect from a sample including the line defect.
第8の実験用欠陥検査装置はエッジプロファイル法1を用いた線欠陥用画像解析部611〜61nを備え、第9の実験用欠陥検査装置はエッジプロファイル法2を用いた線欠陥用画像解析部611〜61nを備え、第10の実験用欠陥検査装置はハイパスフィルタ法を用いた線欠陥用画像解析部611〜61nを備え、第11の実験用欠陥検査装置はピーク法を用いた線欠陥用画像解析部611〜61nを備え、第12の実験用欠陥検査装置はピーク法2を用いた線欠陥用画像解析部611〜61nを備え、第13の実験用欠陥検査装置はエッジカーブ法1を用いた線欠陥用画像解析部611〜61nを備え、第14の実験用欠陥検査装置はエッジカーブ法2(増分の積算値を用いる方法)を用いた線欠陥用画像解析部611〜61nを備えている。
The eighth experimental defect inspection apparatus includes line defect
本実験例では、成形シート2として、異なる種類の点欠陥を含む10種類の偏光フィルムのサンプルと、異なる種類の線欠陥を含む6種類の偏光フィルムのサンプルとを用いた。点欠陥を含む10種類のサンプルは、気泡を含むサンプル01、フィッシュアイを含むサンプル02、第1の異物を含むサンプル03、第1の異物と異なる第2の異物を含むサンプル04、第1のタイヤ跡を含むサンプル06、第1のタイヤ跡と異なる第2のタイヤ跡を含むサンプル07、第1の打痕を含むサンプル08、第1の打痕と異なる第2の打痕を含むサンプル09、第1の傷を含むサンプル11、および第1の傷と異なる第2の傷を含むサンプル12である。線欠陥を含む6種類のサンプルは、クニック(線欠陥)を含むサンプル10、第1のクニックと異なる第2のクニック(線欠陥)を含むサンプル13、成形シート2の搬送方向に沿ったスジを含むサンプル51、成形シート2の搬送方向に直交する強いスジを含むサンプル52、成形シート2の搬送方向に直交する弱いスジを含むサンプル53、および、成形シート2の搬送方向に対して斜め方向のスジを含むサンプル53である。
In this experimental example, as the molded sheet 2, ten types of polarizing film samples containing different types of point defects and six types of polarizing film samples containing different types of line defects were used. The ten types of samples containing point defects are: a sample 01 containing bubbles, a sample 02 containing fish eyes, a sample 03 containing a first foreign material, a sample 04 containing a second foreign material different from the first foreign material, a first sample Sample 06 including tire marks, Sample 07 including second tire marks different from the first tire marks, Sample 08 including first dents, Sample 09 including second dents different from the first dents Sample 11 including the first wound and Sample 12 including the second wound different from the first wound. Six types of samples including line defects include a sample 10 including a nick (line defect), a sample 13 including a second nick (line defect) different from the first nick, and streaks along the conveyance direction of the molded sheet 2. A
また、第1〜14の実験用欠陥検査装置では、撮像部51として、二次元画像を撮像して、256階調の横512画素×縦480画素の二次元画像データを生成することができる、CCD素子を用いたプログレッシブスキャンエリアセンサを用いた。第1〜14の実験用欠陥検査装置では、線状光源4として、シャープエッジフード(線状光源像のエッジをシャープにするフード)を貼り付けた高周波蛍光灯を用いた。第1〜14の実験用欠陥検査装置では、コンベアによる成形シート2の搬送速度を20mm/sec(=1.2m/min)とした。また、コンベアの端(図2の手前側の端)から145mmの距離にある位置が撮像部51による撮像領域の中心となるようにした。また、この145mmを計るのに金尺を用い、金尺から欠陥までの距離が55mmとなるようにした。
Further, in the first 1-14 laboratory defect inspection apparatus, as the image pickup unit 5 1, by capturing a two-dimensional image, it is possible to generate a two-dimensional image data of horizontal 512 pixels × vertical 480 pixels 256 gradations A progressive scan area sensor using a CCD element was used. In the first to fourteenth defect inspection apparatuses, a high-frequency fluorescent lamp with a sharp edge hood (a hood that sharpens the edge of the linear light source image) was used as the linear
点欠陥を検出するための第1〜7の実験用欠陥検査装置では、成形シート2上の撮像領域(視野)が横(成形シート2の搬送方向に直交し、かつ成形シート2の厚み方向に直交する方向)51.2mm×縦(成形シート2の搬送方向)48mmとなるように、撮像部51の位置および角度を調整した。ただし、上記プログレッシブスキャンエリアセンサの512画素×480画素のうち、上から240番目の画素の位置(上下方向の中央位置)にある横方向に並ぶ512画素が成形シート2表面における横51.2mmの領域を撮影するように撮像部51の位置および角度を調整した。すなわち、成形シート2から撮像部51までの距離が190mmとなるように撮像部51の位置を調整し、また、撮像部51の撮像方向(撮像部51の集光レンズの中心から、撮像部51によって撮像される領域の中心に向かう方向)と成形シート2表面とのなす角度が40度となるように撮像部51の角度を調整した。この場合、撮像部51の解像度は、100μm/画素である。また、点欠陥を検出するための第1〜7の実験用欠陥検査装置では、プログレッシブスキャンエリアセンサとして、焦点距離が25mmであり、最小F値が1.4であり、レンズ先端ワークディスタンスが270mmであるCマウントのレンズをプログレッシブスキャンエリアセンサ本体に装着したものを用い、絞りを約11に調整した。
In the first to seventh experimental defect inspection apparatuses for detecting point defects, the imaging region (field of view) on the molded sheet 2 is lateral (perpendicular to the conveying direction of the molded sheet 2 and in the thickness direction of the molded sheet 2). orthogonal directions) 51.2 mm × vertical (so that the conveying direction) 48 mm of the forming sheet 2, adjusting the position and angle of the imaging unit 5 1. However, among the 512 pixels × 480 pixels of the progressive scan area sensor, 512 pixels arranged in the lateral direction at the position of the 240th pixel from the top (vertical center position) are 51.2 mm wide on the surface of the molding sheet 2. adjusting the position and angle of the imaging unit 5 1 so as to photograph the area. That is, the distance from the forming sheet 2 to the imaging unit 5 1 adjusts the position of the imaging unit 5 1 so that 190 mm, also from the center of the condenser lens of the imaging unit 5 first imaging direction (the
また、点欠陥を検出するための第1〜7の実験用欠陥検査装置では、線状光源4の長手方向が成形シート2の搬送方向と直交し、成形シート2から線状光源4までの距離が240mmとなり、かつ、成形シート2上の撮像領域の中心と線状光源4の中心とを結んだ直線が成形シート2表面に対して37度の角度をなすように、線状光源4を配置した。
Further, in the first to seventh experimental defect inspection apparatuses for detecting point defects, the longitudinal direction of the linear
線欠陥を検出するための第8〜14の実験用欠陥検査装置では、成形シート2上の撮像領域が横204.8mm×縦192mmとなるように、撮像部51の位置および角度を調整した。ただし、上記プログレッシブスキャンエリアセンサの512画素×480画素のうち、上から240番目の画素の位置(上下方向の中央位置)にある横方向に並ぶ512画素が成形シート2表面における横204.8mmの領域を撮影するように撮像部51の位置および角度を調整した。すなわち、成形シート2から撮像部51までの距離が400mmとなるように撮像部51の位置を調整し、また、撮像部51の撮像方向と成形シート2表面とのなす角度が15度となるように撮像部51の角度を調整した。この場合、撮像部51の解像度は、200μm/画素である。また、線欠陥を検出するための第8〜14の実験用欠陥検査装置では、プログレッシブスキャンエリアセンサとして、焦点距離が25mmであり、最小F値が1.4であり、レンズ先端ワークディスタンスが490mmであるCマウントのレンズをプログレッシブスキャンエリアセンサ本体に装着したものを用い、絞りを約5.6〜8に調整した。 In a 8-14 laboratory defect inspection apparatus for detecting a line defect, the imaging area on the molded sheet 2 so that the horizontal 204.8Mm × vertical 192 mm, to adjust the position and angle of the imaging unit 5 1 . However, among the 512 pixels × 480 pixels of the progressive scan area sensor, 512 pixels arranged in the lateral direction at the position of the 240th pixel from the top (vertical center position) are 204.8 mm wide on the surface of the molding sheet 2. adjusting the position and angle of the imaging unit 5 1 so as to photograph the area. That is, the distance from the forming sheet 2 to the imaging unit 5 1 adjusts the position of the imaging unit 5 1 so that 400 mm, also an angle of 15 degrees between the imaging direction of the imaging unit 5 1 a molded sheet 2 surface adjusting the angle of the imaging unit 5 1 so that. In this case, the imaging unit 5 1 resolution is 200 [mu] m / pixel. In the eighth to fourteenth defect inspection apparatuses for detecting line defects, as a progressive scan area sensor, the focal length is 25 mm, the minimum F value is 1.4, and the lens tip work distance is 490 mm. Using a C-mount lens mounted on a progressive scan area sensor body, the aperture was adjusted to about 5.6-8.
また、線欠陥を検出するための第8〜14の実験用欠陥検査装置では、線状光源4の長手方向が成形シート2の搬送方向に対して25度の角度をなすように、線状光源4を配置し、線状光源4のワークディスタンスを900mmとした。
In the eighth to fourteenth experimental defect inspection apparatuses for detecting a line defect, the linear light source is arranged such that the longitudinal direction of the linear
ここでは、直径が0.5mmの点欠陥を確実に検出できるように、欠陥検出アルゴリズムのパラメータを設定した。第1および第8の実験用欠陥検査装置では、エッジプロファイル法1における閾値T3を3に設定した。第2および第9の実験用欠陥検査装置では、エッジプロファイル法2における閾値T5を4に設定した。第3および第10の実験用欠陥検査装置では、エッジプロファイル法2におけるkを4.5に設定し、エッジプロファイル法2に用いる横方向平滑化フィルタを1行3列の平滑化フィルタとした。第4および第11の実験用欠陥検査装置では、ピーク法における閾値T7を最大輝度値の25%(255×0.25)に設定した。第5および第12の実験用欠陥検査装置では、ピーク法2における閾値を20に設定した。第6および第13の実験用欠陥検査装置では、エッジカーブ法1において用いるパラメータである距離を15に設定し、kを5に設定した。第7および第14の実験用欠陥検査装置では、エッジカーブ法2として前述した近似的に曲率を求める方法を用い、計算対象範囲を注目画素に対して前後30画素の範囲とした。
Here, parameters of the defect detection algorithm are set so that a point defect having a diameter of 0.5 mm can be reliably detected. In the first and eighth experimental defect inspection apparatuses, the threshold value T3 in the
そして、第1〜7の実験用欠陥検査装置を用いて、点欠陥を含む10種類のサンプルから点欠陥を検出できるかを調べ、第8〜14の実験用欠陥検査装置を用いて、線欠陥を含む6種類のサンプルから線欠陥を検出できるかを調べた。得られた結果を表1に示す。 And it is investigated whether a point defect can be detected from 10 types of samples containing a point defect using the 1st-7 experimental defect inspection apparatus, and a line defect is used using the 8-14 experimental defect inspection apparatus. It was investigated whether line defects could be detected from 6 types of samples including. The obtained results are shown in Table 1.
第1〜7の実験用欠陥検査装置では、撮像される成形シート2の動画の全フレーム数(全キャプチャ枚数)は150枚であるが、1つの欠陥検出対象点あるいは点欠陥が撮像部51の撮像領域に入って撮像部51の撮像領域から出て行くまでの期間内に、30フレームの動画が撮像部51で撮像される。すなわち、欠陥が常に見えているとすれば、撮像部51で撮像された2次元画像データのうちで、上記期間内に撮像された30枚(30フレーム)の2次元画像データに欠陥の画像が含まれることになる。表1の点欠陥の各行では、上記期間内に撮像された30フレームの2次元画像データのうちで、各実験用欠陥検査装置によって欠陥が検出されたフレーム(コマ)の数(欠陥が検出された回数)を「検出コマ数」のカラムに記載している。 In the first to seventh experimental defect inspection apparatus, the total number of frames of the moving image formed sheet 2 to be imaged (all capture number) is a 150 sheets, one defect detected points or point defects imaging unit 5 1 It enters the imaging area within a period of up to exiting from the imaging area of the imaging unit 5 1 a, 30 frames of moving image is captured by the imaging unit 5 1. That is, if a defect is always visible, among the 2-dimensional image data captured by the imaging unit 5 1, the defect in a two-dimensional image data of 30 frames captured in the period (30 frames) image Will be included. In each row of point defects in Table 1, the number of frames (frames) in which defects are detected by each experimental defect inspection apparatus (defects are detected) out of 30 frames of two-dimensional image data captured within the above period. In the column “Number of detected frames”.
第8〜14の実験用欠陥検査装置では、1つの欠陥検出対象点が撮像部51の撮像領域に入って撮像部51の撮像領域から出て行くまでの期間内に、300フレームの動画が撮像部51で撮像される。表1の線欠陥の各行では、上記期間内に撮像された300フレームの2次元画像データのうちで、各実験用欠陥検査装置によって欠陥が検出されたフレーム(コマ)の数を「検出コマ数」のカラムに記載している。 In the 8-14 laboratory defect inspection apparatus, within a period of up to one defect detected points leaves the imaging region of the imaging unit 5 1 enters the imaging area of the imaging unit 5 1, 300 frames of video There is imaged by the imaging unit 5 1. In each row of line defects in Table 1, the number of frames (frames) in which defects are detected by each experimental defect inspection apparatus among the 300 frames of two-dimensional image data captured within the above period is expressed as “number of detected frames”. ”Column.
表1において、検出コマ数が0であることは、欠陥が検出できなかったことを示し、検出コマ数の大小は、欠陥検出の精度あるいは確実性を示す。例えば検出コマ数が1〜2コマのような少ない数である場合には、欠陥検出の精度が低いと考えられる。表1では、欠陥検出の精度を、本願出願人が独自に決めた判定基準によって、「×」(検出コマ数が0コマ)、「△」(検出コマ数が1〜2コマ)、「○」(検出コマ数が3〜6コマ)、「◎」(検出コマ数が7コマ以上)の4段階に分類し、「判定」のカラムに記載している。 In Table 1, when the number of detected frames is 0, it indicates that a defect could not be detected, and the size of detected frames indicates the accuracy or certainty of defect detection. For example, when the number of detected frames is as small as 1 to 2 frames, it is considered that the accuracy of defect detection is low. In Table 1, the accuracy of defect detection is determined based on the determination criteria uniquely determined by the applicant of the present application, “×” (the number of detected frames is 0 frame), “Δ” (the number of detected frames is 1 to 2 frames), “ ”(Number of detected frames is 3 to 6 frames) and“ ◎ ”(number of detected frames is 7 frames or more), and are described in the“ judgment ”column.
また、表1において、「虚報」の行は、1800フレーム(コマ)中において何フレームで虚報が発生したかを示している。 Further, in Table 1, the row of “false information” indicates how many frames of false information have occurred in 1800 frames (frames).
表1の結果から、ハイパスフィルタ法およびピーク法2を用いた欠陥検査装置(第3および第5の実験用欠陥検査装置)によって、全ての種類の点欠陥を精度良く検出できることが分かる。すなわち、前記実施の形態に係る欠陥検査装置において、点欠陥用画像解析部621〜62nで用いる点欠陥検出アルゴリズムがハイパスフィルタ法またはピーク法2であれば、全ての種類の点欠陥を精度良く検出できることが分かる。 From the results in Table 1, it can be seen that all types of point defects can be detected with high accuracy by the defect inspection apparatus (third and fifth experimental defect inspection apparatuses) using the high-pass filter method and the peak method 2. That is, in the defect inspection apparatus according to the above embodiment, if the point defect detection algorithm used in the point defect image analysis units 62 1 to 62 n is the high-pass filter method or the peak method 2, all types of point defects are accurately detected. It can be seen that it can be detected well.
また、表1の結果から、エッジプロファイル法2およびエッジカーブ法2を用いた欠陥検査装置(第2および第7の実験用欠陥検査装置)によって、全ての種類の線欠陥を精度良く検出できることが分かる。すなわち、前記実施の形態に係る欠陥検査装置において、線欠陥用画像解析部611〜61nで用いる線欠陥検出アルゴリズムがエッジプロファイル法2またはエッジカーブ法2であれば、全ての種類の線欠陥を精度良く検出できることが分かる。
Further, from the results shown in Table 1, all types of line defects can be detected with high accuracy by the defect inspection apparatus (second and seventh experimental defect inspection apparatuses) using the edge profile method 2 and the edge curve method 2. I understand. That is, in the defect inspection apparatus according to the above-described embodiment, if the line defect detection algorithm used in the line defect
また、表1のほとんどの場合において、検出コマ数が最大値(点欠陥の場合には30、線欠陥の場合には300)より小さいことから、本実験例で欠陥の検出に用いた複数枚の2次元画像データ(動画データ)のうちの1枚の2次元画像データ(静止画像データ)のみに基づいて欠陥を検出する方法では、欠陥が検出できない可能性があることが分かる。例えば、本実験例で欠陥の検出に用いた複数枚の2次元画像データのうちの1枚の2次元画像データをランダムに選択し、その1枚の2次元画像データのみに基づいてサンプル13に含まれるクニックを検出しようとした場合、最も確実にクニックを検出できる欠陥検出アルゴリズム(エッジカーブ法2)を用いても、8/300という低い確率でしかクニックを検出できない。 In most cases shown in Table 1, the number of detected frames is smaller than the maximum value (30 for point defects and 300 for line defects). It can be seen that there is a possibility that the defect cannot be detected by the method of detecting the defect based only on one piece of the two-dimensional image data (moving image data). For example, one piece of two-dimensional image data is randomly selected from a plurality of pieces of two-dimensional image data used for defect detection in this experimental example, and the sample 13 is based on only one piece of the two-dimensional image data. When an attempt is made to detect the included nicks, the nicks can be detected only with a low probability of 8/300 even if a defect detection algorithm (edge curve method 2) that can detect the nicks most reliably is used.
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。 The present invention is not limited to the above-described embodiments, and various modifications are possible within the scope shown in the claims, and embodiments obtained by appropriately combining technical means disclosed in different embodiments. Is also included in the technical scope of the present invention.
1 欠陥検査装置
2 成形シート
3 搬送装置(移動手段)
4 線状光源
51〜5n 撮像部(撮像手段)
6 解析装置
6A 解析装置
6B 解析装置
611〜61n 線欠陥用画像解析部(線欠陥検出手段)
621〜62n 点欠陥用画像解析部(点欠陥検出手段)
DESCRIPTION OF
4 linear light sources 5 1 to 5 n imaging unit (imaging means)
6
62 1 to 62 n point defect image analysis unit (point defect detection means)
Claims (3)
上記成形シートの2次元画像を複数回撮像して複数の2次元画像データを生成する撮像手段と、
上記成形シートにおける撮像される領域の一部に線状光源の像が投影されるように、上記成形シートを照明するための線状光源と、
上記成形シートにおける上記線状光源の像が投影されている位置が変化するように、上記成形シートおよび上記線状光源の少なくとも一方を、上記線状光源の長手方向と交差し、かつ上記成形シートの厚み方向に直交する方向に移動させる移動手段と、
上記撮像手段で生成された複数の2次元画像データから線欠陥を検出する線欠陥検出手段とを備え、
上記線欠陥検出手段は、
上記2次元画像データにおける線状光源の像のエッジについて、各画素の近傍領域における曲率を求め、曲率が第2の閾値以上である箇所を線欠陥として検出する線欠陥検出アルゴリズムによって線欠陥を検出するものであり、
上記撮像手段で生成された複数の2次元画像データから点欠陥を検出する点欠陥検出手段をさらに備え、
上記点欠陥検出手段は、
上記2次元画像データにおける一直線上に沿った位置に依存した輝度の変化を輝度プロファイルとして表し、輝度プロファイルのプロット群をプロット間の移動時間が一定となるように移動する質点を想定し、注目プロットの直前2つのプロット間における上記質点の速度ベクトルと上記注目プロットの直前3つのプロット間における上記質点の加速度ベクトルとから上記注目プロットの輝度値を予測し、予測された輝度値と実際の輝度値との差が第3の閾値以上である箇所を点欠陥として検出する点欠陥検出アルゴリズム、または
上記2次元画像データを平滑化し、平滑化された2次元画像データと元の2次元画像データとの差分を差分画像データとして求め、差分画像データにおける輝度値が第4の閾値以上である箇所および輝度値が第5の閾値(第5の閾値は第4の閾値より小さい)以下である箇所を点欠陥として検出する点欠陥検出アルゴリズムによって点欠陥を検出するものであることを特徴とする欠陥検査装置。 A defect inspection device for detecting defects in a molded sheet,
Imaging means for imaging a two-dimensional image of the molded sheet a plurality of times to generate a plurality of two-dimensional image data;
A linear light source for illuminating the molded sheet so that an image of the linear light source is projected onto a part of the imaged region of the molded sheet;
At least one of the molded sheet and the linear light source intersects with the longitudinal direction of the linear light source so that the position of the image of the linear light source on the molded sheet changes, and the molded sheet Moving means for moving in a direction perpendicular to the thickness direction of
Line defect detection means for detecting a line defect from a plurality of two-dimensional image data generated by the imaging means,
The line defect detecting means is
With respect to the edge of the image of the linear light source in the two-dimensional image data, the curvature in the vicinity region of each pixel is obtained, and a line defect is detected by a line defect detection algorithm that detects a point where the curvature is equal to or greater than the second threshold as a line defect. Is what
Point defect detection means for detecting point defects from a plurality of two-dimensional image data generated by the imaging means ;
The point defect detecting means is
The change in luminance depending on the position along a straight line in the above two-dimensional image data is expressed as a luminance profile, and the plot of interest is assumed assuming a mass point that moves the plot group of luminance profiles so that the movement time between plots is constant. The luminance value of the attention plot is predicted from the velocity vector of the mass point between the two plots immediately before and the acceleration vector of the mass point between the three plots immediately before the attention plot, and the predicted luminance value and the actual luminance value are estimated. A point defect detection algorithm for detecting a point defect as a point defect that is equal to or greater than a third threshold, or
The two-dimensional image data is smoothed, a difference between the smoothed two-dimensional image data and the original two-dimensional image data is obtained as difference image data, and a luminance value in the difference image data is a fourth threshold value or more and A defect inspection characterized in that a point defect is detected by a point defect detection algorithm for detecting a point having a luminance value equal to or lower than a fifth threshold (the fifth threshold is smaller than the fourth threshold) as a point defect. apparatus.
上記成形シートの2次元画像を複数回撮像して複数の2次元画像データを生成する撮像手段と、
上記成形シートにおける撮像される領域の一部に線状光源の像が投影されるように、上記成形シートを照明するための線状光源と、
上記成形シートにおける上記線状光源の像が投影されている位置が変化するように、上記成形シートおよび上記線状光源の少なくとも一方を、上記線状光源の長手方向と交差し、かつ上記成形シートの厚み方向に直交する方向に移動させる移動手段と、
上記撮像手段で生成された複数の2次元画像データから点欠陥を検出する点欠陥検出手段とを備え、
上記点欠陥検出手段は、
上記2次元画像データにおける一直線上に沿った位置に依存した輝度の変化を輝度プロファイルとして表し、輝度プロファイルのプロット群をプロット間の移動時間が一定となるように移動する質点を想定し、注目プロットの直前2つのプロット間における上記質点の速度ベクトルと上記注目プロットの直前3つのプロット間における上記質点の加速度ベクトルとから上記注目プロットの輝度値を予測し、予測された輝度値と実際の輝度値との差が第3の閾値以上である箇所を点欠陥として検出する点欠陥検出アルゴリズムによって点欠陥を検出するものであることを特徴とする欠陥検査装置。 A defect inspection device for detecting defects in a molded sheet,
Imaging means for imaging a two-dimensional image of the molded sheet a plurality of times to generate a plurality of two-dimensional image data;
A linear light source for illuminating the molded sheet so that an image of the linear light source is projected onto a part of the imaged region of the molded sheet;
At least one of the molded sheet and the linear light source intersects with the longitudinal direction of the linear light source so that the position of the image of the linear light source on the molded sheet changes, and the molded sheet Moving means for moving in a direction perpendicular to the thickness direction of
Point defect detection means for detecting point defects from a plurality of two-dimensional image data generated by the imaging means,
The point defect detecting means is
The change in luminance depending on the position along a straight line in the above two-dimensional image data is expressed as a luminance profile, and the plot of interest is assumed assuming a mass point that moves the plot group of luminance profiles so that the movement time between plots is constant. The luminance value of the attention plot is predicted from the velocity vector of the mass point between the two plots immediately before and the acceleration vector of the mass point between the three plots immediately before the attention plot, and the predicted luminance value and the actual luminance value are estimated. A defect inspection apparatus, wherein a point defect is detected by a point defect detection algorithm for detecting, as a point defect, a portion having a difference between and a third threshold value or more.
The defect inspection apparatus according to claim 2 , further comprising a line defect detection unit that detects a line defect from a plurality of two-dimensional image data generated by the imaging unit.
Priority Applications (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008298680A JP5619348B2 (en) | 2008-11-21 | 2008-11-21 | Mold sheet inspection system |
PCT/JP2009/006163 WO2010058557A1 (en) | 2008-11-21 | 2009-11-17 | Device for examining defect of molded sheet |
KR1020117013650A KR20110095344A (en) | 2008-11-21 | 2009-11-17 | Device for examining defect of molded sheet |
PL396135A PL396135A1 (en) | 2008-11-21 | 2009-11-17 | Device for testing defects used for testing of a formed sheet |
CZ20110295A CZ2011295A3 (en) | 2008-11-21 | 2009-11-17 | Device for examining defects of molded sheet |
CN2009801464034A CN102224412A (en) | 2008-11-21 | 2009-11-17 | Device for examining defect of molded sheet |
SK5034-2011A SK50342011A3 (en) | 2008-11-21 | 2009-11-17 | Error detector for checking shaped foil |
TW098139122A TW201033602A (en) | 2008-11-21 | 2009-11-18 | Defect inspection device for formed sheet |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008298680A JP5619348B2 (en) | 2008-11-21 | 2008-11-21 | Mold sheet inspection system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010122192A JP2010122192A (en) | 2010-06-03 |
JP5619348B2 true JP5619348B2 (en) | 2014-11-05 |
Family
ID=42198000
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008298680A Expired - Fee Related JP5619348B2 (en) | 2008-11-21 | 2008-11-21 | Mold sheet inspection system |
Country Status (8)
Country | Link |
---|---|
JP (1) | JP5619348B2 (en) |
KR (1) | KR20110095344A (en) |
CN (1) | CN102224412A (en) |
CZ (1) | CZ2011295A3 (en) |
PL (1) | PL396135A1 (en) |
SK (1) | SK50342011A3 (en) |
TW (1) | TW201033602A (en) |
WO (1) | WO2010058557A1 (en) |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101939206B1 (en) * | 2010-12-23 | 2019-01-16 | 피렐리 타이어 소시에떼 퍼 아찌오니 | A Method and an Apparatus for Controlling Production and Feeding of Semifinished Products in a Tyre Building Process |
JP5643918B2 (en) * | 2012-08-28 | 2014-12-17 | 住友化学株式会社 | Defect inspection apparatus and defect inspection method |
CN102854193A (en) * | 2012-08-30 | 2013-01-02 | 苏州天准精密技术有限公司 | Detection method and detection system used for image defect detection |
WO2014112653A1 (en) * | 2013-01-16 | 2014-07-24 | 住友化学株式会社 | Image generation device, defect inspection device, and defect inspection method |
JP6191622B2 (en) * | 2013-01-16 | 2017-09-06 | 住友化学株式会社 | Image generating apparatus, defect inspection apparatus, and defect inspection method |
TWI608230B (en) * | 2013-01-30 | 2017-12-11 | 住友化學股份有限公司 | Image generation device, defect inspection apparatus and defect inspection method |
TWI451076B (en) * | 2013-02-08 | 2014-09-01 | Benq Materials Corp | A method of detecting stain on the optical lens |
JP6250317B2 (en) * | 2013-07-08 | 2017-12-20 | 住友化学株式会社 | Defect inspection method |
TWI493177B (en) * | 2013-10-15 | 2015-07-21 | Benq Materials Corp | Method of detecting defect on optical film with periodic structure and device thereof |
EP3066446A4 (en) * | 2013-11-05 | 2017-06-28 | Compagnie Générale des Etablissements Michelin | Method and apparatus for non-destructive detection of tire anomalies |
WO2016080401A1 (en) * | 2014-11-18 | 2016-05-26 | 三菱レイヨン株式会社 | Method for mending metallic plate and method for manufacturing mold |
JP6590653B2 (en) * | 2014-11-19 | 2019-10-16 | 首都高技術株式会社 | Point cloud data utilization system |
CN105785604A (en) * | 2014-12-24 | 2016-07-20 | 台湾动力检测科技股份有限公司 | Defect detection method for optical layer of display device |
CN107709628B (en) | 2015-06-26 | 2020-06-16 | 美泰乐科技(日本)股份有限公司 | Replacement preventing agent for electrolytic hard gold plating solution and electrolytic hard gold plating solution containing same |
JP6628185B2 (en) * | 2016-03-11 | 2020-01-08 | パナソニックIpマネジメント株式会社 | Inspection method for transparent objects |
JP2017211325A (en) * | 2016-05-27 | 2017-11-30 | 株式会社ニレコ | Defect inspection method and defect inspection device |
JP2017215277A (en) * | 2016-06-02 | 2017-12-07 | 住友化学株式会社 | Defect inspection system, film manufacturing device and defect inspection method |
JP2017217649A (en) * | 2016-06-02 | 2017-12-14 | 国立大学法人九州大学 | Detection device for breakage suspected portion of capping sheet, method for detection of breakage suspected portion of capping sheet, and computer program |
JP6622679B2 (en) * | 2016-10-26 | 2019-12-18 | 川崎重工業株式会社 | Circle scratch inspection device |
KR102438892B1 (en) * | 2017-03-03 | 2022-08-31 | 스미또모 가가꾸 가부시키가이샤 | Defect inspection system, film manufacturing apparatus, film manufacturing method, printing apparatus and printing method |
CN110998298B (en) * | 2017-08-24 | 2023-01-06 | 日本电气硝子株式会社 | Method for manufacturing plate-shaped glass |
JP7048342B2 (en) * | 2018-02-15 | 2022-04-05 | 株式会社島精機製作所 | Extension method and extension system |
JP7389321B2 (en) * | 2018-07-31 | 2023-11-30 | 住友金属鉱山株式会社 | Board inspection equipment, board inspection method |
CN110857920A (en) * | 2018-08-24 | 2020-03-03 | 东华大学 | Method for detecting poor forming defect of coiled filament |
KR20210073561A (en) * | 2018-10-15 | 2021-06-18 | 쓰리엠 이노베이티브 프로퍼티즈 컴파니 | Automated inspection of sheet parts of any shape from manufacturing film |
KR20210134934A (en) * | 2019-03-05 | 2021-11-11 | 필립모리스 프로덕츠 에스.에이. | Inspection station and method for inspecting sheet material |
JP2020190441A (en) * | 2019-05-20 | 2020-11-26 | セーレン株式会社 | Wrinkle inspection device, wrinkle determination device, and wrinkle inspection method |
JP2023032770A (en) * | 2021-08-27 | 2023-03-09 | 株式会社東芝 | Inspection system and inspection method for secondary battery |
CN116993719B (en) * | 2023-09-25 | 2024-10-29 | 惠州艺都宇正数码科技有限公司 | OCA optical film surface defect visual detection method and system |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09159622A (en) * | 1995-12-05 | 1997-06-20 | Kawasaki Steel Corp | Surface defect inspection equipment |
JP4507533B2 (en) * | 2003-08-29 | 2010-07-21 | 凸版印刷株式会社 | Method for inspecting streaky irregularities in periodic patterns |
JP4882204B2 (en) * | 2004-03-05 | 2012-02-22 | 凸版印刷株式会社 | Method for inspecting streaky irregularities in periodic patterns |
JP5006551B2 (en) * | 2006-02-14 | 2012-08-22 | 住友化学株式会社 | Defect inspection apparatus and defect inspection method |
JP5367292B2 (en) * | 2008-03-31 | 2013-12-11 | 古河電気工業株式会社 | Surface inspection apparatus and surface inspection method |
-
2008
- 2008-11-21 JP JP2008298680A patent/JP5619348B2/en not_active Expired - Fee Related
-
2009
- 2009-11-17 CN CN2009801464034A patent/CN102224412A/en active Pending
- 2009-11-17 SK SK5034-2011A patent/SK50342011A3/en not_active Application Discontinuation
- 2009-11-17 CZ CZ20110295A patent/CZ2011295A3/en unknown
- 2009-11-17 WO PCT/JP2009/006163 patent/WO2010058557A1/en active Application Filing
- 2009-11-17 KR KR1020117013650A patent/KR20110095344A/en not_active Application Discontinuation
- 2009-11-17 PL PL396135A patent/PL396135A1/en unknown
- 2009-11-18 TW TW098139122A patent/TW201033602A/en unknown
Also Published As
Publication number | Publication date |
---|---|
SK50342011A3 (en) | 2011-09-05 |
PL396135A1 (en) | 2011-12-05 |
KR20110095344A (en) | 2011-08-24 |
WO2010058557A1 (en) | 2010-05-27 |
TW201033602A (en) | 2010-09-16 |
CZ2011295A3 (en) | 2011-11-09 |
JP2010122192A (en) | 2010-06-03 |
CN102224412A (en) | 2011-10-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5619348B2 (en) | Mold sheet inspection system | |
KR102023231B1 (en) | Defect inspection apparatus, and defect inspection method | |
KR102168143B1 (en) | Image generating device, defect inspecting device, and defect inspecting method | |
JP5006551B2 (en) | Defect inspection apparatus and defect inspection method | |
JP2013140050A (en) | Defect inspection device and defect inspection method | |
JP6191622B2 (en) | Image generating apparatus, defect inspection apparatus, and defect inspection method | |
EP1990624A3 (en) | Apparatus and method for evaluating an optical system | |
JPWO2014057580A1 (en) | Shape measuring method and shape measuring apparatus | |
TWI512284B (en) | Bubble inspection system for glass | |
JP6191623B2 (en) | Image generating apparatus, defect inspection apparatus, and defect inspection method | |
JP6104745B2 (en) | Hole inspection device | |
JP2005083906A (en) | Defect detector | |
JP5087165B1 (en) | Adjustment device for outputting data for adjusting surface inspection device, adjustment data output method and program | |
JP2020046255A (en) | Transparent medium inspection device and transparent medium inspection method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111005 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121218 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131126 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140110 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140902 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140917 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5619348 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |