JP7254327B2 - PRESS PARTS INSPECTION DEVICE AND PRESS PARTS INSPECTION METHOD - Google Patents
PRESS PARTS INSPECTION DEVICE AND PRESS PARTS INSPECTION METHOD Download PDFInfo
- Publication number
- JP7254327B2 JP7254327B2 JP2018120131A JP2018120131A JP7254327B2 JP 7254327 B2 JP7254327 B2 JP 7254327B2 JP 2018120131 A JP2018120131 A JP 2018120131A JP 2018120131 A JP2018120131 A JP 2018120131A JP 7254327 B2 JP7254327 B2 JP 7254327B2
- Authority
- JP
- Japan
- Prior art keywords
- camera
- determination
- unit
- cameras
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
Description
ここに開示された技術は、プレス部品用検査装置及びプレス部品の検査方法に関する技術分野に属する。 The technology disclosed herein belongs to a technical field related to an inspection apparatus for pressed parts and an inspection method for pressed parts.
従来より、プレス成形部品の生産ラインには、成形後のプレス部品の成形状態の良否を検査するプレス部品用検査装置が知られている。 2. Description of the Related Art Conventionally, a press-formed part inspection apparatus for inspecting the quality of a formed state of a pressed part after forming is known in a production line for press-formed parts.
例えば、特許文献1に記載のプレス部品用検査装置は、プレス部品を搬送する搬送手段と、プレス部品を搬送方向と直交する方向から撮影するカメラと、該カメラの撮影領域に入ったプレス部品の平面部に対して垂直に光を照射する第1光源と、上記カメラの撮影領域に入ったプレス部品の平面部に対して斜めに光を照射する第2光源と、プレス部品の良否を判定する判定手段とを備える。判定手段は、カメラで撮影したプレス部品の画像を演算処理する演算部と、プレス部品の表面仕上がり状態の基準データが記憶された記憶部とを有している。判定手段は、演算部で処理されたプレス部品の演算データと基準データとを比較してプレス部品の良否を判定している。 For example, the inspection apparatus for pressed parts described in Patent Document 1 includes transport means for transporting pressed parts, a camera for photographing the pressed parts from a direction perpendicular to the conveying direction, and an image of the pressed parts entering the photographing area of the camera. A first light source that irradiates light perpendicularly to the flat portion and a second light source that irradiates light obliquely to the flat portion of the pressed part that has entered the photographing area of the camera to determine the quality of the pressed part. and determination means. The judging means has an arithmetic unit for arithmetically processing an image of the pressed part photographed by the camera, and a storage unit in which reference data of the surface finishing state of the pressed part is stored. The judging means judges whether the pressed part is good or bad by comparing the calculated data of the pressed part processed by the calculator with the reference data.
ところで、プレス部品が、平面部と、該平面部周縁に連続する側面部とを有しているときには、傷や亀裂などのプレス部品の欠陥は、平面部及び側面部のどちらにも発生し得る。特許文献1のような検査装置では、カメラはプレス部品の搬送方向と直交する方向からしか撮影しないため、側面部を撮影しにくい。このため、平面部に対する側面部の傾斜角度が大きいときには、プレス部品の欠陥が判定しにくくなる。よって、プレス部品の良否の判定精度を向上させるという観点からは改良の余地がある。 By the way, when a pressed part has a flat part and a side part continuous with the periphery of the flat part, defects in the pressed part such as scratches and cracks can occur in both the flat part and the side part. . In an inspection apparatus such as that disclosed in Patent Literature 1, the camera only photographs from a direction perpendicular to the conveying direction of the pressed part, so it is difficult to photograph the side portion. Therefore, when the inclination angle of the side surface portion with respect to the flat surface portion is large, it becomes difficult to determine whether the pressed part is defective. Therefore, there is room for improvement from the viewpoint of improving the accuracy of determining the quality of pressed parts.
ここに開示された技術は、斯かる点に鑑みてなされたものであり、その目的とするところは、プレス部品の良否の判定精度を向上させることにある。 The technology disclosed herein has been made in view of the above points, and the purpose thereof is to improve the accuracy of determining the quality of pressed parts.
上記課題を解決するために、ここに開示された技術の第1の態様は、平面部及び該平面部の周縁に連続する側面部からなるパネル状のプレス部品を検査するためのプレス部品用検査装置を対象として、上記プレス部品を上記平面部が搬送方向に沿う姿勢で搬送する搬送手段と、上記搬送手段により搬送される上記プレス部品を、上記搬送方向に直交する方向から撮影するための正対カメラと、上記正対カメラに隣接配置され、上記正対カメラの撮影角度と異なる撮影角度となるように上記搬送方向に対して傾斜して配置された傾斜カメラと、上記正対及び傾斜カメラでそれぞれ撮影された画像に基づいて上記プレス部品の成形状態を検査する検査手段とを備え、上記傾斜カメラは、上記搬送方向の反進行側を向く姿勢で配置された第1の傾斜カメラと、上記搬送方向の進行側を向く姿勢で配置された第2の傾斜カメラとを含み、上記正対カメラ、並びに、第1及び第2の傾斜カメラは、上記プレス部品を単位時間毎に連続して撮影するように構成され、上記検査手段は、撮影された画像を演算処理する演算部と、該演算部で演算処理された画像データに基づいて上記プレス部品の成形状態の良否を判定する複数の判定部とを有するカメラ処理部を、上記正対及び傾斜カメラ毎に有し、上記複数の判定部は、それぞれ独立して判定処理を実行するように構成されているとともに、上記各判定部の全てが判定処理を実行中である時に、新たに判定を行う必要があるときには、現時点で判定処理の実行時間が最も長い上記判定部の判定処理を中止して、当該判定部で新たな判定処理を実行するように構成されていることを特徴とする。 In order to solve the above problems, a first aspect of the technology disclosed herein is an inspection for pressed parts for inspecting a panel-shaped pressed part consisting of a flat portion and a side portion continuous to the peripheral edge of the flat portion. For an apparatus, a conveying means for conveying the press part with the flat portion in a posture along the conveying direction, and a corrector for photographing the press part conveyed by the conveying means from a direction orthogonal to the conveying direction. a pair of cameras, an oblique camera arranged adjacent to the front camera and inclined with respect to the conveying direction so as to have a photographing angle different from the photographing angle of the front camera, and the front and tilt cameras inspection means for inspecting the forming state of the pressed parts based on the images taken respectively in the first inclined camera arranged in a posture facing the counter-advancing side of the conveying direction; and a second tilting camera arranged in a posture facing the advancing side in the conveying direction, wherein the facing camera and the first and second tilting cameras continuously move the pressed part every unit time. The inspecting means comprises a computing section for performing arithmetic processing on the captured image, and a plurality of judging the quality of the formed state of the pressed part based on the image data computed by the computing section. a camera processing unit having a determination unit for each of the facing camera and the tilted camera, and the plurality of determination units are configured to execute determination processing independently; When it is necessary to make a new determination while all the determination processes are being executed, the determination process of the above determination section having the longest execution time of the determination process at the present time is stopped, and a new determination process is performed by the determination section. is configured to execute
ここに開示された技術の第2の態様は、上記第1の態様において、上記各カメラ処理部は、他の上記カメラ処理部に対して上記プレス部品の検出信号を送信する送信部と、他の上記カメラ処理部から送信された上記検出信号を受信する受信部と、対応する上記正対及び傾斜カメラで撮影されかつ上記演算部で演算処理された画像データを一時的に保存する一時保存部と、をそれぞれ有し、上記検査手段は、上記各カメラのうち一部のカメラをメインカメラとし、残りのカメラをサブカメラとして、該メインカメラが上記プレス部品を検出したときには、上記メインカメラの上記カメラ処理部であるメインカメラ処理部は、上記サブカメラの上記カメラ処理部であるサブカメラ処理部に上記検出信号を送信するとともに、上記メインカメラ処理部及び上記サブカメラ処理部は、上記検出信号を送信又は受信した後に、上記各判定部での判定処理をそれぞれ行うように構成されていることを特徴とする。 A second aspect of the technology disclosed herein is, in the first aspect, each of the camera processing units includes a transmission unit that transmits a detection signal of the pressed part to the other camera processing unit; a receiving unit that receives the detection signal transmitted from the camera processing unit of and a temporary storage unit that temporarily stores image data captured by the corresponding front and tilt cameras and processed by the computing unit. and, respectively, the inspection means uses some of the cameras as main cameras and the remaining cameras as sub cameras, and when the main cameras detect the pressed part, the inspection means detects the pressed parts. The main camera processing unit that is the camera processing unit transmits the detection signal to the sub camera processing unit that is the camera processing unit of the sub camera, and the main camera processing unit and the sub camera processing unit perform the detection It is characterized in that it is configured such that after transmitting or receiving a signal, each of the determination units described above performs determination processing.
ここに開示された技術の第3の態様は、上記第2の態様において、上記正対カメラ、並びに、第1及び第2の傾斜カメラは、上記プレス部品を単位時間毎に連続して撮影するように構成され、上記各カメラ処理部は、単位時間毎に連続して撮影されかつ上記演算部で演算処理された画像データを上記一時保存部に逐次保存しており、上記検査手段は、上記正対カメラを上記メインカメラとし、上記第1及び第2の傾斜カメラを上記サブカメラとして、上記メインカメラ処理部の上記判定部は、上記プレス部品を検出した直後の第1所定期間に撮影された画像の画像データを上記一時保存部から読み出して判定処理を行い、上記第1の傾斜カメラの上記サブカメラ処理部の上記判定部は、上記第1所定期間よりも前の第2所定期間に撮影された画像の画像データを上記一時保存部から読み出して判定処理を行い、上記第2の傾斜カメラの上記サブカメラ処理部の上記判定部は、上記第1所定期間よりも後の第3所定期間に撮影された画像の画像データを上記一時保存部から読み出して判定処理を行うように構成されていることを特徴とする。 A third aspect of the technology disclosed herein is the second aspect, wherein the front camera and the first and second tilt cameras continuously photograph the pressed part per unit time. each of the camera processing units sequentially stores image data captured continuously for each unit time and arithmetically processed by the arithmetic unit in the temporary storage unit; Using the front camera as the main camera and the first and second tilt cameras as the sub cameras, the determination unit of the main camera processing unit captures images during a first predetermined period immediately after detecting the pressed part. The image data of the captured image is read out from the temporary storage unit and subjected to determination processing, and the determination unit of the sub-camera processing unit of the first tilt camera performs the determination process during a second predetermined period prior to the first predetermined period. The image data of the captured image is read from the temporary storage unit and subjected to determination processing, and the determination unit of the sub-camera processing unit of the second tilt camera performs a third predetermined period after the first predetermined period. It is characterized in that the image data of the image shot during the period is read out from the temporary storage unit and the determination process is performed.
ここに開示された技術の第4の態様は、上記第2又は第3の態様において、上記メインカメラ及びサブカメラ処理部の上記演算部は、上記メインカメラで撮影された画像の各画素の色強度をそれぞれ算出し、上記プレス部品を検出する前に撮影された画像の各画素の色強度に対して、色強度が所定量以上変化した画素の数が所定数以上となったときに、上記プレス部品を検出したとして、上記検出信号を上記サブカメラ処理部に送信することを特徴とする。 A fourth aspect of the technology disclosed herein is that, in the second or third aspect, the computing units of the main camera and sub-camera processing unit determine the color of each pixel of the image captured by the main camera. Intensity is calculated for each pixel, and when the number of pixels whose color intensity has changed by a predetermined amount or more from the color intensity of each pixel of the image taken before the pressed part is detected is a predetermined number or more, the above It is characterized by transmitting the detection signal to the sub-camera processing section assuming that the pressed part is detected.
ここに開示された技術の第5の態様は、プレス部品の検査方法に関する技術である。具体的には、平面部及び該平面部の周縁に連続する側面部からなるパネル状のプレス部品の検査方法を対象として、上記プレス部品を、上記平面部が搬送方向に沿う姿勢で搬送させる搬送工程と、搬送される上記プレス部品を、搬送方向に直交する方向から撮影するための正対カメラと、該正対カメラに隣接配置され、該正対カメラの撮影角度と異なる撮影角度となるように上記搬送方向に対して傾斜して配置された傾斜カメラとにより撮影する撮影工程と、上記撮影工程で撮影された各画像を、上記正対カメラで撮影された画像と上記傾斜カメラで撮影された画像とに分けて、それぞれ独立して演算処理する演算工程と、上記各カメラのうち一部のカメラをメインカメラとし、残りのカメラをサブカメラとして、上記メインカメラで撮影された各画像の画像データに基づいて、上記プレス部品を検出する検出工程と、上記演算工程で演算処理された画像データに基づいて、上記プレス部品の成形状態の良否を判定する判定工程とを含み、上記傾斜カメラは、上記搬送方向の反進行側を向く姿勢で配置された第1の傾斜カメラと、上記搬送方向の進行側を向く姿勢で配置された第2の傾斜カメラとを含み、上記撮影工程は、上記正対カメラ、上記第1の傾斜カメラ、及び第2の傾斜カメラにより、上記プレス部品を単位時間毎に連続して撮影する工程であり、上記判定工程は、上記正対カメラで撮影された画像の画像データに基づく判定と、上記傾斜カメラで撮影された画像の画像データに基づく判定とを、それぞれ独立して実行するとともに、上記検出工程で上記プレス部品が検出された後に実行する工程であり、さらに上記判定工程は、複数の判定部がそれぞれ独立して判定処理を実行する工程であるとともに、上記各判定部の全てが判定処理を実行中である時に、新たに判定を行う必要があるときには、現時点で判定処理の実行時間が最も長い上記判定部の判定処理を中止して、当該判定部で新たな判定処理を実行する工程である。 A fifth aspect of the technology disclosed herein is a technology related to an inspection method for pressed parts. Specifically, a method for inspecting a panel-shaped pressed part consisting of a flat part and a side part continuous to the peripheral edge of the flat part is targeted, and the pressed part is conveyed in a posture in which the flat part is along the conveying direction. a process, a facing camera for photographing the conveyed pressed parts from a direction orthogonal to the conveying direction, and a facing camera arranged adjacent to the facing camera so as to have a photographing angle different from the photographing angle of the facing camera. a photographing step of photographing with an oblique camera disposed obliquely with respect to the conveying direction; A computing step in which each image is divided into an image and independently processed, and a part of the above cameras are used as main cameras and the remaining cameras are used as sub cameras, and each image captured by the main camera is processed. a detecting step of detecting the pressed part based on the image data; and a determining step of determining whether the pressed part is formed in a good or bad state based on the image data processed in the computing step. includes a first inclined camera arranged in a posture facing the counter-advancing side of the conveying direction and a second inclined camera arranged in a posture facing the advancing side in the conveying direction; It is a step of continuously photographing the pressed part per unit time by the front camera, the first tilt camera, and the second tilt camera, and the determination step is a step of photographing the photographed by the front camera. a step of independently executing determination based on the image data of the image and determination based on the image data of the image taken by the tilt camera, and performing the determination after the pressed part is detected in the detection step; Further, the determination step is a step in which a plurality of determination units execute determination processing independently, and when all of the determination units are executing determination processing, it is necessary to make a new determination. When there is, it is a step of stopping the determination processing of the determination unit having the longest execution time of the determination processing at the present time, and executing a new determination processing in the determination unit.
ここに開示された技術の第6の態様は、平面部及び該平面部の周縁に連続する側面部からなるパネル状のプレス部品を検査するためのプレス部品用検査装置を対象として、上記プレス部品を、上記平面部が搬送方向に沿いかつ上記側面部が該搬送方向と交差する方向に広がる姿勢で搬送する搬送手段と、上記搬送手段により搬送される上記プレス部品を、上記搬送方向に直交する方向から撮影するための正対カメラと、上記正対カメラに隣接配置され、上記正対カメラの撮影角度と異なる撮影角度となるように上記搬送方向に対して傾斜して配置された傾斜カメラと、上記正対及び傾斜カメラでそれぞれ撮影された画像に基づいて上記プレス部品の成形状態を検査する検査手段と、を備え、上記傾斜カメラは、上記搬送方向の進行側又は反進行側を向く姿勢で配置されており、上記正対カメラ及び上記傾斜カメラは、上記プレス部品を単位時間毎に連続して撮影するように構成され、上記検査手段は、撮影された画像を演算処理する演算部と、該演算部で演算処理された画像データに基づいて上記プレス部品の成形状態の良否を判定する複数の判定部と、を有するカメラ処理部を、上記正対及び傾斜カメラ毎に有し、上記複数の判定部は、それぞれ独立して判定処理を実行するように構成されているとともに、上記各判定部の全てが判定処理を実行中であるときに、新たに判定を行う必要があるときには、現時点で判定処理の実行時間が最も長い上記判定部の判定処理を中止して、当該判定部で新たな判定処理を実行するように構成されていることを特徴とする。 A sixth aspect of the technology disclosed herein is directed to a press part inspection apparatus for inspecting a panel-shaped pressed part consisting of a flat portion and a side portion continuous to the peripheral edge of the flat portion. a conveying means for conveying the part in a posture in which the flat portion extends along the conveying direction and the side portion spreads in a direction intersecting the conveying direction; and a tilting camera arranged adjacent to the front camera for photographing from the direction to which the camera is directed, and tilted with respect to the conveying direction so that the photographing angle is different from the photographing angle of the front camera. and an inspection means for inspecting the forming state of the pressed part based on the images taken by the facing and tilting cameras, respectively, wherein the tilting camera faces the advancing side or the counter-advancing side in the conveying direction. The facing camera and the inclined camera are configured to continuously photograph the pressed part per unit time, and the inspection means is an arithmetic unit that arithmetically processes the photographed images. and a plurality of judging units for judging whether the molded state of the pressed part is good or bad based on the image data calculated by the arithmetic unit, for each of the facing camera and the inclined camera, The plurality of determination units are configured to execute determination processing independently, and when it is necessary to make a new determination while all of the determination units are executing determination processing, and the determination processing of the determination unit having the longest determination processing execution time at the present time is stopped, and the determination unit executes new determination processing.
ここに開示された技術の第1の態様によると、正対カメラと傾斜カメラとを備えるため、プレス部品の平面部及び側面部をそれぞれ適切な撮影角度で撮影することができる。また、検査手段は、正対カメラ及び傾斜カメラのそれぞれに対してカメラ処理部を有している。例えば、プレス部品が平面部の幅が広く、側面部の幅が狭いようなときには、正対カメラと傾斜カメラとでは、良否の判定に必要な画像の数等が異なる。正対カメラと傾斜カメラのそれぞれに対してカメラ処理部を有しておけば、各カメラに対してそれぞれ適切な処理を行うことができる。したがって、プレス部品の良否の判定精度を向上させることができる。 According to the first aspect of the technique disclosed herein, since the front camera and the tilt camera are provided, it is possible to photograph the plane portion and the side portion of the pressed part at appropriate photographing angles. Also, the inspection means has a camera processing section for each of the front camera and the tilt camera. For example, when a pressed part has a wide flat portion and a narrow side portion, the number of images required for quality determination differs between the front camera and the oblique camera. If a camera processing unit is provided for each of the front camera and the tilt camera, appropriate processing can be performed for each camera. Therefore, it is possible to improve the accuracy of determining whether the pressed parts are good or bad.
また、正対カメラと傾斜カメラとを隣接配置させることにより、検査装置の設置スペースを出来る限りコンパクトにすることができる。 Also, by arranging the front camera and the tilt camera adjacent to each other, the installation space of the inspection apparatus can be made as compact as possible.
第2の態様によると、メインカメラのみがプレス部品を検出するため、サブカメラ処理部の負荷を小さくすることができる。これにより、サブカメラ処理部の判定部における、プレス部品の良否判定の判定時間を短くすることができるとともに、判定精度をより向上させることができる。また、カメラとセンサとを兼用させた状態となるため、別個にセンサを配置する場合と比較して、検査装置の設置スペースを小さくできるとともに、コストを削減することができる。 According to the second aspect, since only the main camera detects pressed parts, the load on the sub-camera processing section can be reduced. As a result, it is possible to shorten the judgment time of the quality judgment of the pressed part in the judging section of the sub-camera processing section, and to further improve the judgment accuracy. In addition, since the camera and the sensor are used together, the installation space of the inspection apparatus can be reduced and the cost can be reduced as compared with the case where the sensor is arranged separately.
第3の態様によると、第1の傾斜カメラは、搬送方向の反進行側に傾斜して配置されているため、プレス部品を正対カメラよりも早い段階で撮影することができる。一方で、第2の傾斜カメラは、搬送方向の進行側に傾斜して配置されているため、プレス部品を正対カメラよりも後の段階でなければ撮影することができない。このため、メインカメラとしての正対カメラがプレス部品を検出したときには、第1の傾斜カメラは、既に判定に必要な画像を撮影している一方、第2の傾斜カメラは、検出後、更に時間をおいてからでないと、判定に必要な画像を撮影できない。 According to the third aspect, since the first tilt camera is tilted toward the counter-advance side of the conveying direction, it is possible to photograph the pressed parts at an earlier stage than the front-facing camera. On the other hand, since the second tilt camera is arranged tilting toward the advancing side in the conveying direction, it is possible to photograph the pressed parts only at a later stage than the forward facing camera. Therefore, when the front-facing camera as the main camera detects a pressed part, the first tilt camera has already taken an image necessary for judgment, while the second tilt camera takes a further time after detection. The image required for judgment cannot be taken until after
これに対して、第3の態様では、メインカメラ処理部(正対カメラのカメラ処理部)は、プレス部品を検出した直後の第1所定期間に撮影された画像で判定処理を行う。第1の傾斜カメラのサブカメラ処理部は、第1所定期間よりも前の第2所定期間に撮影された画像で行う。第2の傾斜カメラのサブカメラ処理部は、第1所定期間よりも後の第3所定期間に撮影された画像で判定処理を行う。これらのことにより、メインカメラのみでプレス部品の検出を行いつつも、搬送されたプレス部品の良否判定を、適切なタイミングで撮影された画像を用いて行うことができる。この結果、プレス部品の良否の判定精度を更に向上させることができる。 On the other hand, in the third mode, the main camera processing section (the camera processing section of the front-facing camera) performs determination processing using images captured during the first predetermined period immediately after detecting the pressed part. The sub-camera processing unit of the first tilt camera performs processing on images captured during a second predetermined period before the first predetermined period. A sub-camera processing unit of the second tilt camera performs determination processing on an image captured during a third predetermined period after the first predetermined period. As a result, it is possible to determine the quality of the conveyed pressed parts using images taken at appropriate timings, while detecting the pressed parts only with the main camera. As a result, it is possible to further improve the accuracy of determining whether the pressed part is good or bad.
第4の態様によると、搬送手段の色及びプレス部品の色に応じて、搬送されるプレス部品を、メインカメラで適切に検出することができる。これにより、プレス部品の良否の判定精度を一層向上させることができる。 According to the fourth aspect, the conveyed pressed parts can be appropriately detected by the main camera according to the color of the conveying means and the color of the pressed parts. As a result, it is possible to further improve the accuracy of determining whether the pressed parts are good or bad.
第5の態様によると、例えば、正対カメラの画像データからプレス部品の平面部の判定を行い、傾斜カメラの画像データからプレス部品の側面部の判定のみを行うような処理が可能となる。これにより、プレス部品の形状に合わせた判定が可能となり、プレス部品の良否の判定精度を向上させることができる。またメインカメラのみがプレス部品を検出するようにすることにより、サブカメラで撮影された画像に基づく処理の負荷を小さくすることができる。これにより、プレス部品の良否の判定精度をより向上させることができる。 According to the fifth aspect, for example, it is possible to determine the flat portion of the pressed part from the image data of the front camera and only determine the side portion of the pressed part from the image data of the tilt camera. As a result, it is possible to make a judgment according to the shape of the pressed part, and to improve the judgment accuracy of the quality of the pressed part. Also, by allowing only the main camera to detect pressed parts, it is possible to reduce the processing load based on the images captured by the sub-camera. As a result, it is possible to further improve the accuracy of determining whether the pressed parts are good or bad.
以下、例示的な実施形態について、図面を参照しながら詳細に説明する。 Exemplary embodiments are described in detail below with reference to the drawings.
図1は、本実施形態に係るプレス部品用検査装置1を概略的に示す。この検査装置1は、所定の板材から、平面部11及び該平面部11の周縁に連続する2つの側面部12を有するようにプレス成形されたパネル状のプレス部品10の成形状態を検査する装置である。具体的には、検査装置1は、プレス部品10に生じる傷、亀裂、しわ等の有無を検査し、プレス部品10の成形状態の良否を判定する。検査装置1は、プレス部品10を成形する生産ラインに配置されている。
FIG. 1 schematically shows a pressed part inspection apparatus 1 according to this embodiment. This inspection apparatus 1 is an apparatus for inspecting the molding state of a panel-shaped pressed
検査装置1は、プレス部品10を平面部11が搬送方向に沿う姿勢で搬送するベルト式のコンベア2(搬送手段)を備えている。コンベア2は、例えば、0.3m/sの速度でプレス部品10を水平方向に搬送する。コンベア2には、プレス部品10が一定の間隔で断続的に搬送されている。以下の説明では、コンベア2の搬送方向のうち、プレス部品10が進む側を進行側、該進行側とは反対側を反進行側という。
The inspection apparatus 1 includes a belt-type conveyor 2 (conveying means) that conveys the pressed
検査装置1は、コンベア2で搬送されるプレス部品を撮影するための複数(本実施形態では18台)のカメラ3を備えている。複数のカメラ3は、コンベア2により搬送されるプレス部品10を上記搬送方向に直交する方向から撮影するための6台の正対カメラ30を含む。複数のカメラ3は、正対カメラ30に隣接配置されかつコンベア2により搬送されるプレス部品10を上記搬送方向の進行側から撮影するための6台の第1の傾斜カメラ31を含む。複数のカメラ3は、正対カメラ30に隣接配置されかつコンベア2により搬送されるプレス部品10を上記搬送方向の反進行側から撮影するための6台の第2の傾斜カメラ32を含む。第1及び第2の傾斜カメラ31,32は、図3に示すように、正対カメラ30の撮影角度とは異なる撮影角度となるようにそれぞれ配置されている。正対カメラ30は、主に、プレス部品10の平面部11を撮影するためのカメラである。第1の傾斜カメラ31は、主に、プレス部品10の上記搬送方向の進行側の側面部12(以下、第1の側面部12aという)周辺を撮影するためのカメラである。第2の傾斜カメラ32は、主に、プレス部品10の上記搬送方向の反進行側の側面部12(以下、第2の側面部12bという)周辺を撮影するためのカメラである。以下の説明では、正対カメラ30、並びに、第1及び第2の傾斜カメラ31,32を区別しないときには、単に、カメラ3という。
The inspection device 1 includes a plurality of cameras 3 (18 cameras in this embodiment) for photographing pressed parts conveyed by the
各カメラ3は、例えば、0.1msecの撮影速度で連続して撮影するCCDカメラで構成されている。各カメラ3は、図3に示すように、コンベア2の上方に下を向く姿勢でそれぞれ支持装置4に支持されている。具体的には、各正対カメラ30は、支持装置4の水平部40に、鉛直下側を向く姿勢でそれぞれ支持されている。各第1の傾斜カメラ31は、支持装置4の第1の傾斜部41に、上記搬送方向の反進行側を向く姿勢でそれぞれ支持されている。各第2の傾斜カメラ32は、支持装置4の第2の傾斜部42に、上記搬送方向の進行側を向く姿勢でそれぞれ支持されている。
Each
支持装置4の第1及び第2の傾斜部41,42は、図4に示すように、水平部40に対する傾斜角度を変更可能に構成されている。第1及び第2の傾斜部41,42の水平部40に対する傾斜角度は、コンベア2で搬送されるプレス部品10の形状に応じて変更される。例えば、プレス部品10において、側面部12の平面部11に対する傾斜角度が大きいときには、第1及び第2の傾斜部41,42の水平部40に対する傾斜角度を大きく、すなわち、水平部40に対して直角に近付くようにする。一方で、側面部12の平面部11に対する傾斜角度が小さいときには、第1及び第2の傾斜部41,42の水平部40に対する傾斜角度を小さく、すなわち、水平部40に対して水平に近付くようにする。これにより、第1及び第2の傾斜カメラ31,32を用いて、第1及び第2の側面部12a,12bがそれぞれ適切に撮影されるようになる。
As shown in FIG. 4, the first and second
各カメラ3は、プレス部品10が撮影領域に入っているか否かに関わらず、0.1msecの撮影速度で連続して撮影を行うように構成されている。
Each
検査装置1は、各正対カメラ30、並びに、各第1及び第2の傾斜カメラ31,32でそれぞれ撮影された画像に基づいてプレス部品10の成形状態を検査するコンピュータ5(検査手段)を備える。本実施形態では、コンピュータ5は2台あり、各コンピュータ5は、それぞれ9台のカメラ3に接続されている。具体的には、1つの正対カメラ30と、当該正対カメラ30に対して搬送方向に隣接する第1及び第2の傾斜カメラ31,32の1台ずつとで構成される複数(本実施形態では6つ)のカメラ群130のうち、3つのカメラ群130の各カメラ3が一方のコンピュータ5に接続され、残りの3つのカメラ群130の各カメラ3が他方のコンピュータ5に接続されている。
The inspection apparatus 1 includes a computer 5 (inspection means) for inspecting the molding state of the
本実施形態では、各カメラ群130を構成する3個のカメラ3のうち正対カメラ30がメインカメラをそれぞれ構成し、第1及び第2の傾斜カメラ31,32がサブカメラをそれぞれ構成する。本明細書でいう、メインカメラとは、プレス部品10の成形状態を判定するための判定用の画像を撮影する役割に加えて、プレス部品10が搬送されたことを検出する役割を有するカメラのことである。尚、各カメラ群130を構成する3個のカメラ3(正対カメラ30、第1の傾斜カメラ31及び第2の傾斜カメラ32)のうちどのカメラ3をメインカメラにするかは、ユーザーが設定可能である。
In this embodiment, of the three
コンピュータ5は、カメラ3毎にカメラ処理部50を有する。以下の説明では、正対カメラ30、すなわち、メインカメラと接続されたカメラ処理部50をメインカメラ処理部50aという一方、第1及び第2の傾斜カメラ31,32、すなわち、サブカメラと接続されたカメラ処理部50をサブカメラ処理部50bという。メインカメラ処理部50aとサブカメラ処理部50bとを区別しないときには、単に、カメラ処理部50という。尚、図2では、1つのカメラ群130を構成する各カメラ3の各カメラ処理部50のみを示しているが、実際には、コンピュータ5は、各カメラ3に対応するカメラ処理部50をそれぞれ有している。
The
各カメラ処理部50は、各カメラ3で撮影された画像を演算処理する演算部51をそれぞれ有する。各カメラ処理部50は、演算部51で演算処理された画像データに基づいてプレス部品10の成形状態の良否を判定する判定部52をそれぞれ有する。各カメラ処理部50は、カメラ3でプレス部品10が検出されたか否かを判断するための検出部53をそれぞれ有する。各カメラ処理部50は、他のカメラ処理部50に対してプレス部品10を検出したという検出信号を送信する送信部54をそれぞれ有する。各カメラ処理部50は、他のカメラ処理部50から送信された上記検出信号を受信する受信部55をそれぞれ有する。各カメラ処理部50は、対応するカメラ3で撮影されかつ演算部51で演算処理された画像を一時的に保存する一時保存部56をそれぞれ有する。また、各カメラ処理部50は、各種データを記憶する記憶部57をそれぞれ有する。図2に示すように、本実施形態では、各カメラ処理部50は、3つの判定部52をそれぞれ有する。
Each
演算部51は、各カメラ3で連続して撮影された各画像を逐次演算して、画像の明暗及び色差から画像データを生成する。具体的には、演算部51は、例えば、各画像の各画素の色強度(R値+G値+B値)を算出する。演算部51は、逐次、演算処理した画像データを検出部53及び一時保存部56にそれぞれ送る。
The
検出部53は、演算部51から送られた画像データに基づいて、プレス部品10が搬送されたことを検出する。具体的には、検出部53は、プレス部品10を検出する前に撮影された画像(以下、検出前画像という)の各画素の色強度に対して、色強度が所定量以上変化した画素の数が所定数以上となったときに、カメラ3でプレス部品10が検出されたと判断する。すなわち、上記検出前画像には、コンベア2が撮影されている。例えば、コンベア2の色が黒であった場合には、上記検出前画像では、ほとんどの画素の色強度が0に近い値になる。そこに、黒以外の色をしたプレス部品10が流れてくれば、該プレス部品10を撮影した画像では、多くの画素で色強度が大きくなる。一方で、例えば、コンベア2の色が白であった場合には、上記検出前画像では、ほとんどの画素の色強度が最大値に近い値になる。そこに、白以外の色をしたプレス部品10が流れてくれば、該プレス部品10を撮影した画像では、多くの画素で色強度が小さくなる。これらのことから、色強度が所定量以上変化した画素の数を算出することで、プレス部品10を適切に検出することができる。詳しくは後述するが、各カメラ処理部50はそれぞれ検出部53を有しているが、実際に作動するのは、メインカメラ処理部50aにおける検出部53のみである。尚、所定色強度とは、背景(例えば、コンベア2の色)とプレス部品10とを区別できる程度の色強度である。また、所定数とは、プレス部品10における上記搬送方向の進行側の一部が撮影領域に入ったことを認識できる程度の画素数である。
Based on the image data sent from the
送信部54は、検出部53からプレス部品10を検出したという信号を受信したときに、上記検出信号を他のカメラ処理部50に送信する。詳しくは後述するが、各カメラ処理部50はそれぞれ送信部54を有しているが、実際に作動するのは、検出部53のときと同様に、メインカメラ処理部50aにおける送信部54のみである。
When the
受信部55は、他のカメラ処理部50の送信部54から送信された上記検出信号を受信して、該検出を受信したことを各判定部52にそれぞれ伝達する。詳しくは後述するが、各カメラ処理部50はそれぞれ受信部55を有しているが、実際に作動するのは、サブカメラ処理部50bにおける受信部55のみである。
The receiving unit 55 receives the detection signal transmitted from the transmitting
一時保存部56では、演算部51から送られている画像データが逐次保存される。
The temporary storage unit 56 sequentially stores the image data sent from the
判定部52は、上記検出信号を送信部54が送信した後又は受信部55が受信した後に、判定処理をそれぞれ行う。具体的には、メインカメラ処理部50aの判定部52は、送信部54が上記検出信号を送信した後に判定処理を開始する一方、サブカメラ処理部50bの判定部52は、受信部55が上記検出信号を受信した後に判定処理を開始する。
The
各カメラ処理部50がそれぞれ有する3つの判定部52は、それぞれ独立して判定処理を行うことができる。本実施形態では、各カメラ処理部50では、上記検出信号を送信又は受信した後に、3つの判定部52のうち作動していない判定部52が選択されて、選択された判定部52により判定処理が行われる。各カメラ処理部50では、上記検出信号を送信又は受信した時に、3つの判定部52が全て判定処理中であった場合には、3つの判定部52のうち、現時点で判定処理の実行時間が最も長いもの(最も早い時期に判定処理を開始したもの)の判定処理が中止されて、新たな判定処理が実行される。
The three
記憶部57は、プレス部品10が良品時の成形状態の基準データを予め記憶している。判定部52は、一時保存部56から判定処理に必要な画像データを読み出して、該画像データを上記基準データと比較して上記プレス部品10の良否を判定する。判定部52は、例えば、撮影された画像に傷とみなすことができる箇所が1つでもあれば、該傷が検出されたプレス部品10を不良品であると判定する。
The storage unit 57 preliminarily stores reference data of the molding state when the
次に、コンベア2で搬送中のプレス部品10と各カメラ3の撮影領域との関係について説明する。
Next, the relationship between the pressed
図3(a)に示すように、プレス成形後のプレス部品10がコンベア2で搬送されてくると、まず、プレス部品10は第1の傾斜カメラ31の撮影領域に入る。このとき、プレス部品10は、正対カメラ30及び第2の傾斜カメラ32の撮影領域には入っていない。このため、第1の傾斜カメラ31では、メインカメラである正対カメラ30がプレス部品10を検出する前の段階から、プレス部品10が撮影される。
As shown in FIG. 3( a ), when the
プレス部品10が搬送されると、図3(b)に示すように、プレス部品10は正対カメラ30の撮影領域に入る。これにより、正対カメラ30はプレス部品10を検出する。このとき、プレス部品10は、第2の傾斜カメラ32の撮影領域には入っていない。正対カメラ30がプレス部品10を検出した後に、該正対カメラ30でプレス部品10が撮影される。
When the pressed
その後、プレス部品10が搬送されて、図3(c)に示すように、該プレス部品10が第2の傾斜カメラ32の撮影領域に入ると、第2の傾斜カメラ32でプレス部品10が撮影される。このように、第2の傾斜カメラ32では、正対カメラ30がプレス部品10を検出してから、更に時間をおいた後の段階でなければ、プレス部品10を撮影することができない。
After that, the pressed
上記のように、第1及び第2の傾斜カメラ31,32が搬送方向に対して傾斜して配置されていると、判定処理に必要なプレス部品10の画像を撮影するタイミングにずれが生じる。各カメラ30のそれぞれでプレス部品10の検出を行うことも可能であるが、これでは、各カメラ30の各カメラ処理部50がプレス部品10の検出処理とプレス部品10の良否判定とを同時に実行する必要があり、各カメラ処理部50の負荷が大きくなる。この結果、プレス部品10の良否判定に時間がかかってしまうとともに、判定精度が低下するおそれがある。
As described above, when the first and
そこで、本実施形態では、メインカメラ処理部50aのみがプレス部品10の検出処理を実行して、サブカメラ処理部50bは、メインカメラ処理部50aの送信部54から送信された上記検出信号を受信部55で受信した後で判定処理を実行するようにした。すなわち、本実施形態のコンピュータ5は、正対カメラ30がプレス部品10を検出したときには、正対カメラ30のカメラ処理部50であるメインカメラ処理部50aは、第1及び第2の傾斜カメラ31,32のカメラ処理部50であるサブカメラ処理部50bに上記検出信号を送信するように構成されている。
Therefore, in this embodiment, only the main
図5には、各カメラ処理部50でプレス部品10の良否判定に用いられる画像について模式的に示している。図5においてハッチングをしているものが、プレス部品10の良否判定に用いられる画像である。具体的には、メインカメラ処理部50aの判定部52は、正対カメラ30がプレス部品10を検出したときには、上記検出信号を送信した直後の第1所定期間に撮影された画像の画像データを一時保存部56から読み出して判定処理を行う。第1の傾斜カメラ31のサブカメラ処理部50bの判定部52は、正対カメラ30がプレス部品10を検出したときには、上記検出信号を受信する前の第2所定期間に撮影された画像の画像データを一時保存部56から読み出して判定処理を行う。第2の傾斜カメラ32のサブカメラ処理部50bの判定部52は、正対カメラ30がプレス部品10を検出したときには、上記検出信号を受信してから、予め設定された特定期間が経過した後の第3所定期間に撮影された画像の画像データを一時保存部56から読み出して判定処理を行う。尚、「上記検出信号を送信した直後」とは、上記検出信号の送信と同時を含む。
FIG. 5 schematically shows an image used by each
上記第1所定期間は、正対カメラ30がプレス部品10を検出してから、正対カメラ30の撮影領域に平面部11と第2の側面部12bとの間の角部が入るまでの期間を含む期間である。上記第2所定期間は、第1の傾斜カメラ31の撮影領域に第1の側面部12aの高さ方向の全体像が含まれる期間である。上記第3所定期間は、第2の傾斜カメラ32の撮影領域に第2の側面部12bの高さ方向の全体像が含まれる期間である。また、上記特定期間とは、正対カメラ30がプレス部品10を検出してから、第2の傾斜カメラ32の撮影領域に第2の側面部12bの高さ方向の全体像が含まれるまでの期間である。
The first predetermined period is a period from when the front-facing
上記第1~第3所定期間及び上記特定期間は、プレス部品10の形状、コンベア2の搬送速度、各カメラ3の撮影領域、及び、支持装置4における第1及び第2の傾斜部41,42の水平部40に対する傾斜角度等に基づいてカメラ3毎にそれぞれ設定されている。尚、上記第1~第3所定期間及び上記特定期間は、全てのカメラ群130で同じでもよく、カメラ群130毎に異なっていてもよい。
The first to third predetermined periods and the specific period include the shape of the
上記のように制御することで、各カメラ処理部50において、プレス部品10の良否判定を、適切なタイミングで撮影された画像を用いて行うことができる。この結果、プレス部品10の良否の判定精度を向上させることができる。また、プレス部品10の検出はメインカメラ(ここでは、正対カメラ30)のみで実行されるので、サブカメラ処理部50bの負荷を小さくすることができる。これにより、サブカメラ処理部50bの判定部52における、プレス部品10の良否判定の判定速度を早くすることができるとともに、該良否判定の判定精度も向上させることができる。
By controlling as described above, each
次に、コンピュータ5によるプレス部品10の検査時の処理動作を図6のフローチャートに基づいて説明する。尚、図6に示すフローチャートは、1つのカメラ群130の処理動作である。このフローチャートは、生産ラインが作動している間は繰り返し実行される。
Next, processing operations during inspection of the pressed
まず、ステップS1において、コンピュータ5は、各カメラ3での撮影を開始させる。
First, in step S1, the
次のステップS2では、コンピュータ5は、正対カメラ30でプレス部品10を検出したか否かを判定する。これは、メインカメラ処理部50aの検出部53でプレス部品10が検出されたと判断されたか否か基づいていて判定する。コンピュータ5は、メインカメラ処理部50aの検出部53でプレス部品10が検出されたと判断されたYESのときには、ステップS3に進む一方で、メインカメラ処理部50aの検出部53でプレス部品10が検出されたと判断されていないNOのときには、ステップS2に戻り、再び判定を行う。
In the next step S2, the
上記ステップS3では、コンピュータ5は、メインカメラ処理部50aの送信部54から、サブカメラ処理部50bに対して検出信号を送信させる。
In step S3, the
次のステップS4では、コンピュータ5は、上記第2所定期間が経過したか否かを判定する。上記第2所定期間が経過したYESであるときには、ステップS5に進む一方、未だ上記第2所定期間が経過していないNOであるときには、再びステップS4に戻り、再び判定を行う。
In the next step S4, the
上記ステップS5では、コンピュータ5は、第1の傾斜カメラ31のサブカメラ処理部50bでのプレス部品10の良否判定を開始する。この判定は、上述したように、一時保存部56から読み出した画像データと記憶部57に記憶されている上記基準データと比較することで行う。
In step S<b>5 , the
次のステップS6では、コンピュータ5は、上記第1所定期間が経過したか否かを判定する。上記第1所定期間が経過したYESであるときには、ステップS7に進む一方、未だ上記第1所定期間が経過していないNOであるときには、再びステップS6に戻り、再び判定を行う。
In the next step S6, the
上記ステップS7では、コンピュータ5は、メインカメラ処理部50aでのプレス部品10の良否判定を開始する。この判定の方法は、ステップS5と同様である。
At step S7, the
次のステップS8では、コンピュータ5は、上記第3所定期間が経過したか否かを判定する。上記第3所定期間が経過したYESであるときには、ステップS9に進む一方、未だ上記第3所定期間が経過していないNOであるときには、再びステップS8に戻り、再び判定を行う。尚、上記第3所定期間が経過したときには、必ず上記特定期間は経過している。
In the next step S8, the
上記ステップS9では、コンピュータ5は、第2の傾斜カメラ32のサブカメラ処理部50bでのプレス部品10の良否判定を開始する。この判定の方法は、ステップS5及びS7と同様である。ステップS9の後はリターンする。
In step S<b>9 , the
したがって、本実施形態によると、正対カメラ30と第1及び第2の傾斜カメラ31,32とを備えるため、プレス部品10の平面部11及び側面部12をそれぞれ適切な撮影角度で撮影することができる。また、コンピュータ5は、正対カメラ30、並びに、第1及び第2の傾斜カメラ31,32のそれぞれに対してカメラ処理部50を有しているため、各カメラ30~32に対してそれぞれ適切な処理を行うことができる。したがって、プレス部品10の良否の判定精度を向上させることができる。
Therefore, according to this embodiment, since the
また、正対カメラ30に対して、第1及び第2の傾斜カメラ31,32は隣接配置されているため、検査装置1の設置スペースを出来る限りコンパクトにすることができる。
Also, since the first and
さらに、本実施形態では、メインカメラとしての正対カメラ30のみがプレス部品10を検出するため、サブカメラ処理部50bの負荷を小さくすることができる。これにより、サブカメラ処理部50bの判定部52での、プレス部品10の良否判定の判定時間を短くすることができるとともに、判定精度をより向上させることができる。また、カメラ3とセンサとを兼用させた状態となるため、別個にセンサを配置する場合と比較して、検査装置1の設置スペースを小さくできるとともに、コストを削減することができる。
Furthermore, in the present embodiment, only the
また、本実施形態では、メインカメラ処理部50aは、上記検出信号を送信した直後の上記第1所定期間に撮影された画像で判定処理を行い、第1の傾斜カメラ31のサブカメラ処理部50bは、上記検出信号を受信する前の上記第2所定期間に撮影された画像で行い、第2の傾斜カメラ32のサブカメラ処理部50bは、上記検出信号を受信してから、予め設定された上記特定期間が経過した後の上記第3所定期間に撮影された画像で判定処理を行う。これらのことにより、プレス部品10の検出をメインカメラ(ここでは、正対カメラ30)のみで行いつつも、搬送されたプレス部品10の良否判定を、適切なタイミングで撮影された画像を用いて行うことができる。この結果、プレス部品の良否の判定精度を更に向上させることができる。
Further, in the present embodiment, the main
さらに、本実施形態では、メインカメラ処理部50aの検出部53は、撮影された画像の色強度(R値+G値+B値)と画素数とに基づいて、メインカメラがプレス部品10を検出したと判断するため、コンベア2の色及びプレス部品10の色に応じて、搬送されるプレス部品10を、メインカメラで適切に検出することができる。これにより、プレス部品10の良否の判定精度を一層向上させることができる。
Furthermore, in the present embodiment, the
また、本実施形態では、各カメラ3を支持する支持装置4における第1及び第2の傾斜部41,42は、水平部40に対する傾斜角度を変更可能に構成されているため、搬送されるプレス部品10の形状に応じて、第1及び第2の傾斜カメラ31,32の撮影角度を適切な角度に設定することができる。これにより、プレス部品10の良否の判定精度をより一層向上させることができる。
Further, in the present embodiment, the first and second
ここに開示された技術は、上述の実施形態に限られるものではなく、請求の範囲の主旨を逸脱しない範囲で代用が可能である。 The technology disclosed herein is not limited to the above-described embodiments, and substitutions are possible without departing from the scope of the claims.
例えば、上記実施形態では、サブカメラ処理部50bは、メインカメラ処理部50aからの検出信号を受信したときを基準にして、判定部52での判定に用いる画像を抽出していた。これに限らず、サブカメラ処理部50bが、メインカメラがプレス部品10を検出した画像が撮影された時刻を基準にして、判定部52での判定に用いる画像を抽出してもよい。すなわち、各カメラ3にタイムスタンプ機能を設け、各カメラ3で撮影した画像に対して、撮影時の時刻をタイムスタンプとして記録するようにする。メインカメラがプレス部品10を検出したときには、メインカメラ処理部50aの送信部54は、上記検出信号と共に、プレス部品10を検出した画像に付されたタイムスタンプの情報をサブカメラ処理部50bに送信する。そして、上記検出信号及び上記タイムスタンプの情報を取得したサブカメラ処理部50bは、上記タイムスタンプの情報から、メインカメラがプレス部品10を検出した画像が撮影された時刻を求める。その後、サブカメラ処理部50bは、対応するサブカメラで上記時刻に最も近い時刻に撮影された画像を基準にして、判定部52での判定に用いる画像を抽出する。この構成によると、例えば、プログラム並列処理の遅れや画像データ転送のバッファリングなどの遅れにより、上記検出信号の送信及び受信に遅れが生じたとしても、メインカメラ処理部50aとサブカメラ処理部50bとの同期を適切にとることができる。これにより、判定部52での判定精度の向上を図ることができる。
For example, in the above embodiment, the
また、上記実施形態では、各カメラ3は、常に一定の撮影速度で連続して撮影していたが、これに限らず、プレス部品10が確実に撮影領域に入らない期間は、撮影を中止させるようにしてもよい。すなわち、コンベア2ではプレス部品10が一定の間隔で断続的に搬送されているため、1つのプレス部品10を撮影した後、しばらくは、プレス部品10は撮影領域には入らない。このため、例えば、上記第3所定期間が経過した後、予め設定した設定期間の間、各カメラ3での撮影を中止してもよい。このことによると、演算部51での演算処理を少なくすることができるため、各カメラ処理部50の負荷を更に小さくすることができる。
Further, in the above-described embodiment, each
さらに、上記実施形態では、プレス部品10が、第1及び第2の側面部12a,12bを有しており、それに対応して、第1及び第2の傾斜カメラ31,32が設けられていたが、これに限らず、平面部11と1つの側面部12とで構成されるプレス部品10の生産ラインでは、正対カメラ30に加えて、第1の傾斜カメラ31又は第2の傾斜カメラ32のいずれか一方のみが設けられる構成であってもよい。さらに、平面部11と2つの側面部12とで構成されるプレス部品10と、平面部11と1つの側面部12とで構成されるプレス部品10とが混在して流れる生産ラインの場合には、前者のプレス部品10が搬送されるときには、全てのカメラ3を作動させる一方、後者のプレス部品10が搬送されるときには、第1の傾斜カメラ31又は第2の傾斜カメラ32のいずれか一方の作動を停止させるようにしてもよい。
Furthermore, in the above embodiment, the
また、上記実施形態では、各カメラ3は、CCDカメラであったがCMOSカメラであってもよい。また、各カメラ3の撮影速度は、約0.1msecであったが、プレス部品10の大きさやコンベア2の搬送速度等を考慮して、撮影速度を速くしたり、遅くしたりしてもよい。
Further, although each
さらに、上記実施形態では、検査手段としてのコンピュータ5は2つであったが、これに限らず、1つであってもよく、3つ以上であってもよい。ただし、コンピュータ5の負荷と検査装置1の設置スペースとを考慮して、2つ程度にすることが望ましい。
Furthermore, although there are two
また、上記実施形態では、1個の正対カメラ30と2個の傾斜カメラ31,32の3個のカメラ3でカメラ群130を構成していたが、これに限らず、例えば、3個の正対カメラ30と6個の傾斜カメラ31,32の9個のカメラ3でカメラ群を構成してもよい。この場合、9個のカメラ3のうち1個をメインカメラとして、残りのカメラ3(残り8個のカメラ3)をサブカメラとするような構成になる。また、全てのカメラ3(6個の正対カメラ30と12個の傾斜カメラ31,32の計18個のカメラ)でカメラ群を構成してもよい。この場合には、18個のカメラ3のうち1個をメインカメラとして、残りのカメラ3(残り17個のカメラ3)をサブカメラとするような構成になるとともに、コンピュータ5が1つの構成となる。
In the above-described embodiment, the
上述の実施形態は単なる例示に過ぎず、本開示の範囲を限定的に解釈してはならない。本開示の範囲は請求の範囲によって定義され、請求の範囲の均等範囲に属する変形や変更は、全て本開示の範囲内のものである。 The above-described embodiments are merely examples, and should not be construed as limiting the scope of the present disclosure. The scope of the present disclosure is defined by the claims, and all modifications and changes within the equivalent range of the claims are within the scope of the present disclosure.
ここに開示された技術は、平面部及び該平面部周縁に連続する側面部からなるパネル状のプレス部品を検査するためのプレス部品用検査装置として有用である。 The technique disclosed herein is useful as a press part inspection apparatus for inspecting a panel-shaped pressed part consisting of a flat portion and a side portion continuous to the periphery of the flat portion.
1 プレス部品用検査装置
2 コンベア(搬送手段)
3 カメラ
5 コンピュータ(検査手段)
10 プレス部品
11 平面部
12 側面部
30 正対カメラ
31 第1の傾斜カメラ
32 第2の傾斜カメラ
50 カメラ処理部
50a メインカメラ処理部
50b サブカメラ処理部
51 演算部
52 判定部
54 送信部
55 受信部
56 一時保存部
1 Inspection device for pressed
3
10
Claims (6)
上記プレス部品を上記平面部が搬送方向に沿う姿勢で搬送する搬送手段と、
上記搬送手段により搬送される上記プレス部品を、上記搬送方向に直交する方向から撮影するための正対カメラと、
上記正対カメラに隣接配置され、上記正対カメラの撮影角度と異なる撮影角度となるように上記搬送方向に対して傾斜して配置された傾斜カメラと、
上記正対及び傾斜カメラでそれぞれ撮影された画像に基づいて上記プレス部品の成形状態を検査する検査手段とを備え、
上記傾斜カメラは、上記搬送方向の反進行側を向く姿勢で配置された第1の傾斜カメラと、上記搬送方向の進行側を向く姿勢で配置された第2の傾斜カメラとを含み、
上記正対カメラ、並びに、第1及び第2の傾斜カメラは、上記プレス部品を単位時間毎に連続して撮影するように構成され、
上記検査手段は、撮影された画像を演算処理する演算部と、該演算部で演算処理された画像データに基づいて上記プレス部品の成形状態の良否を判定する複数の判定部とを有するカメラ処理部を、上記正対及び傾斜カメラ毎に有し、
上記複数の判定部は、それぞれ独立して判定処理を実行するように構成されているとともに、上記各判定部の全てが判定処理を実行中である時に、新たに判定を行う必要があるときには、現時点で判定処理の実行時間が最も長い上記判定部の判定処理を中止して、当該判定部で新たな判定処理を実行するように構成されていることを特徴とするプレス部品用検査装置。 A pressed part inspection device for inspecting a panel-shaped pressed part consisting of a flat portion and a side portion continuous to the peripheral edge of the flat portion,
a conveying means for conveying the press part in a posture in which the flat portion is along the conveying direction;
a facing camera for photographing the pressed part conveyed by the conveying means from a direction orthogonal to the conveying direction;
an inclined camera arranged adjacent to the front camera and arranged at an angle with respect to the conveying direction so as to have a photographing angle different from the photographing angle of the front camera;
inspection means for inspecting the molding state of the pressed part based on the images respectively captured by the facing and tilting cameras;
The tilt camera includes a first tilt camera arranged in a posture facing the counter-advancing side of the conveying direction, and a second tilt camera arranged in a posture facing the advancing side in the conveying direction,
The front-facing camera and the first and second tilt cameras are configured to continuously photograph the pressed part per unit time,
The inspection means has a camera processing unit that performs arithmetic processing on the photographed image, and a plurality of determination units that determine the quality of the molded state of the press part based on the image data that has been arithmetically processed by the arithmetic unit. a unit for each of the facing and tilting cameras ;
The plurality of determination units are configured to execute determination processing independently, and when it is necessary to make a new determination while all of the determination units are executing determination processing, An inspection apparatus for pressed parts, characterized in that the determination processing of the determination unit having the longest determination processing execution time at present is stopped, and a new determination processing is performed by the determination unit.
上記各カメラ処理部は、
他の上記カメラ処理部に対して上記プレス部品の検出信号を送信する送信部と、
他の上記カメラ処理部から送信された上記検出信号を受信する受信部と、
対応する上記正対及び傾斜カメラで撮影されかつ上記演算部で演算処理された画像データを一時的に保存する一時保存部と、
をそれぞれ有し、
上記検査手段は、上記各カメラのうち一部のカメラをメインカメラとし、残りのカメラをサブカメラとして、該メインカメラが上記プレス部品を検出したときには、上記メインカメラの上記カメラ処理部であるメインカメラ処理部は、上記サブカメラの上記カメラ処理部であるサブカメラ処理部に上記検出信号を送信するとともに、上記メインカメラ処理部及び上記サブカメラ処理部は、上記検出信号を送信又は受信した後に、上記各判定部での判定処理をそれぞれ行うように構成されていることを特徴とするプレス部品用検査装置。 In the inspection apparatus for pressed parts according to claim 1,
Each of the above camera processing units
a transmission unit that transmits a detection signal of the pressed part to the other camera processing unit;
a receiving unit that receives the detection signal transmitted from the other camera processing unit;
a temporary storage unit that temporarily stores image data captured by the corresponding front and tilt cameras and processed by the computation unit;
each having
The inspection means uses some of the cameras as main cameras and the remaining cameras as sub cameras. The camera processing section transmits the detection signal to the sub-camera processing section that is the camera processing section of the sub-camera, and the main camera processing section and the sub-camera processing section transmit or receive the detection signal. , an inspection apparatus for pressed parts, characterized in that it is configured so that each of the determination units performs determination processing.
上記各カメラ処理部は、単位時間毎に連続して撮影されかつ上記演算部で演算処理された画像データを上記一時保存部に逐次保存しており、
上記検査手段は、上記正対カメラを上記メインカメラとし、上記第1及び第2の傾斜カメラを上記サブカメラとして、
上記メインカメラ処理部の上記判定部は、上記プレス部品を検出した直後の第1所定期間に撮影された画像の画像データを上記一時保存部から読み出して判定処理を行い、
上記第1の傾斜カメラの上記サブカメラ処理部の上記判定部は、上記第1所定期間よりも前の第2所定期間に撮影された画像の画像データを上記一時保存部から読み出して判定処理を行い、
上記第2の傾斜カメラの上記サブカメラ処理部の上記判定部は、上記第1所定期間よりも後の第3所定期間に撮影された画像の画像データを上記一時保存部から読み出して判定処理を行うように構成されていることを特徴とするプレス部品用検査装置。 In the inspection apparatus for pressed parts according to claim 2,
each of the camera processing units sequentially stores in the temporary storage unit the image data that is continuously shot for each unit time and has been arithmetically processed by the arithmetic unit;
The inspection means uses the front camera as the main camera and the first and second inclined cameras as the sub cameras,
The determination unit of the main camera processing unit reads image data of an image captured in a first predetermined period immediately after the detection of the pressed part from the temporary storage unit and performs determination processing,
The determination unit of the sub-camera processing unit of the first tilt camera reads image data of an image captured during a second predetermined period before the first predetermined period from the temporary storage unit and performs determination processing. do,
The determination unit of the sub-camera processing unit of the second tilt camera reads image data of an image captured during a third predetermined period after the first predetermined period from the temporary storage unit and performs determination processing. An inspection apparatus for pressed parts, characterized in that it is configured to:
上記メインカメラ処理部の上記演算部は、上記メインカメラで撮影された画像の各画素の色強度をそれぞれ算出し、
上記メインカメラ処理部は、上記プレス部品を検出する前に撮影された画像の各画素の色強度に対して、色強度が所定量以上変化した画素の数が所定数以上となったときに、上記プレス部品を検出したとして、上記検出信号を上記サブカメラ処理部に送信することを特徴とするプレス部品用検査装置。 In the inspection apparatus for pressed parts according to claim 2 or 3,
The calculation unit of the main camera processing unit calculates the color intensity of each pixel of the image captured by the main camera,
When the number of pixels whose color intensity has changed by a predetermined amount or more with respect to the color intensity of each pixel of the image captured before the pressed part is detected, the main camera processing unit A press part inspection apparatus, wherein the detection signal is transmitted to the sub-camera processing unit when the press part is detected.
上記プレス部品を上記平面部が搬送方向に沿う姿勢で搬送させる搬送工程と、
搬送される上記プレス部品を、搬送方向に直交する方向から撮影するための正対カメラと、該正対カメラに隣接配置され、該正対カメラの撮影角度と異なる撮影角度となるように上記搬送方向に対して傾斜して配置された傾斜カメラとにより撮影する撮影工程と、
上記撮影工程で撮影された各画像を、上記正対カメラで撮影された画像と上記傾斜カメラで撮影された画像とに分けて、それぞれ独立して演算処理する演算工程と、
上記各カメラのうち一部のカメラをメインカメラとし、残りのカメラをサブカメラとして、上記メインカメラで撮影された各画像の画像データに基づいて、上記プレス部品を検出する検出工程と、
上記演算工程で演算処理された画像データに基づいて、上記プレス部品の成形状態の良否を判定する判定工程とを含み、
上記傾斜カメラは、上記搬送方向の反進行側を向く姿勢で配置された第1の傾斜カメラと、上記搬送方向の進行側を向く姿勢で配置された第2の傾斜カメラとを含み、
上記撮影工程は、上記正対カメラ、上記第1の傾斜カメラ、及び第2の傾斜カメラにより、上記プレス部品を単位時間毎に連続して撮影する工程であり、
上記判定工程は、上記正対カメラで撮影された画像の画像データに基づく判定と、上記傾斜カメラで撮影された画像の画像データに基づく判定とを、それぞれ独立して実行するとともに、上記検出工程で上記プレス部品が検出された後に実行する工程であり、
さらに上記判定工程は、複数の判定部がそれぞれ独立して判定処理を実行する工程であるとともに、上記各判定部の全てが判定処理を実行中である時に、新たに判定を行う必要があるときには、現時点で判定処理の実行時間が最も長い上記判定部の判定処理を中止して、当該判定部で新たな判定処理を実行する工程であることを特徴とするプレス部品の検査方法。 A method for inspecting a panel-shaped pressed part comprising a flat portion and a side portion continuous to the periphery of the flat portion, comprising:
A conveying step of conveying the pressed part in a posture in which the flat portion is along the conveying direction;
a facing camera for photographing the conveyed pressed parts from a direction perpendicular to the conveying direction; a photographing step of photographing with an oblique camera arranged obliquely with respect to a direction;
a computing step of dividing each image captured in the photographing step into an image captured by the front-facing camera and an image captured by the tilted camera, and subjecting each image to independent computation;
a detection step of detecting the pressed parts based on image data of each image taken by the main cameras, with some of the cameras being used as main cameras and the remaining cameras being used as sub cameras;
a judgment step of judging whether the molded state of the pressed part is good or bad based on the image data that has been arithmetically processed in the arithmetic step;
The tilt camera includes a first tilt camera arranged in a posture facing the counter-advancing side of the conveying direction, and a second tilt camera arranged in a posture facing the advancing side in the conveying direction,
The photographing step is a step of continuously photographing the pressed part per unit time with the front camera, the first tilt camera, and the second tilt camera,
In the determination step, determination based on image data of the image taken by the straight camera and determination based on image data of the image taken by the inclined camera are performed independently of each other, and the detection step is a step to be executed after the press part is detected in
Further, the determination step is a step in which a plurality of determination units execute determination processing independently, and when it is necessary to make a new determination while all of the determination units are executing determination processing, A method for inspecting pressed parts, characterized in that the step of stopping the determination processing of the determination unit having the longest execution time of the determination processing at the present time and executing a new determination processing in the determination unit.
上記プレス部品を、上記平面部が搬送方向に沿いかつ上記側面部が該搬送方向と交差する方向に広がる姿勢で搬送する搬送手段と、
上記搬送手段により搬送される上記プレス部品を、上記搬送方向に直交する方向から撮影するための正対カメラと、
上記正対カメラに隣接配置され、上記正対カメラの撮影角度と異なる撮影角度となるように上記搬送方向に対して傾斜して配置された傾斜カメラと、
上記正対及び傾斜カメラでそれぞれ撮影された画像に基づいて上記プレス部品の成形状態を検査する検査手段と、を備え、
上記傾斜カメラは、上記搬送方向の進行側又は反進行側を向く姿勢で配置されており、
上記正対カメラ及び上記傾斜カメラは、上記プレス部品を単位時間毎に連続して撮影するように構成され、
上記検査手段は、撮影された画像を演算処理する演算部と、該演算部で演算処理された画像データに基づいて上記プレス部品の成形状態の良否を判定する複数の判定部と、を有するカメラ処理部を、上記正対及び傾斜カメラ毎に有し、
上記複数の判定部は、それぞれ独立して判定処理を実行するように構成されているとともに、上記各判定部の全てが判定処理を実行中である時に、新たに判定を行う必要があるときには、現時点で判定処理の実行時間が最も長い上記判定部の判定処理を中止して、当該判定部で新たな判定処理を実行するように構成されていることを特徴とするプレス部品用検査装置。 A pressed part inspection device for inspecting a panel-shaped pressed part consisting of a flat portion and a side portion continuous to the peripheral edge of the flat portion,
a conveying means for conveying the pressed part in a posture in which the flat portion extends along the conveying direction and the side portion extends in a direction intersecting the conveying direction;
a facing camera for photographing the pressed part conveyed by the conveying means from a direction orthogonal to the conveying direction;
an inclined camera arranged adjacent to the front camera and arranged at an angle with respect to the conveying direction so as to have a photographing angle different from the photographing angle of the front camera;
inspection means for inspecting the molding state of the pressed part based on the images respectively captured by the facing and tilting cameras;
The tilt camera is arranged in a posture facing the advancing side or the counter-advancing side in the conveying direction,
The front camera and the tilt camera are configured to continuously photograph the pressed part per unit time,
The inspection means is a camera having a calculation unit for performing arithmetic processing on a photographed image, and a plurality of determination units for determining the quality of the molded state of the press part based on the image data calculated by the calculation unit. a processing unit for each of the facing and tilting cameras;
The plurality of determination units are configured to execute determination processing independently, and when it is necessary to make a new determination while all of the determination units are executing determination processing, An inspection apparatus for pressed parts, characterized in that the determination processing of the determination unit having the longest determination processing execution time at present is stopped, and a new determination processing is performed by the determination unit.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018120131A JP7254327B2 (en) | 2018-06-25 | 2018-06-25 | PRESS PARTS INSPECTION DEVICE AND PRESS PARTS INSPECTION METHOD |
JP2022200328A JP7466229B2 (en) | 2018-06-25 | 2022-12-15 | Pressed part inspection device and press part inspection method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018120131A JP7254327B2 (en) | 2018-06-25 | 2018-06-25 | PRESS PARTS INSPECTION DEVICE AND PRESS PARTS INSPECTION METHOD |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022200328A Division JP7466229B2 (en) | 2018-06-25 | 2022-12-15 | Pressed part inspection device and press part inspection method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020003228A JP2020003228A (en) | 2020-01-09 |
JP7254327B2 true JP7254327B2 (en) | 2023-04-10 |
Family
ID=69099601
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018120131A Active JP7254327B2 (en) | 2018-06-25 | 2018-06-25 | PRESS PARTS INSPECTION DEVICE AND PRESS PARTS INSPECTION METHOD |
JP2022200328A Active JP7466229B2 (en) | 2018-06-25 | 2022-12-15 | Pressed part inspection device and press part inspection method |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022200328A Active JP7466229B2 (en) | 2018-06-25 | 2022-12-15 | Pressed part inspection device and press part inspection method |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7254327B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6857266B1 (en) * | 2020-02-13 | 2021-04-14 | Ckd株式会社 | Inspection equipment and packaging sheet manufacturing equipment and inspection method |
JP2022042695A (en) * | 2020-09-03 | 2022-03-15 | 株式会社Screenホールディングス | Information processing device, information processing method and program |
CN114713522A (en) * | 2022-06-06 | 2022-07-08 | 裕钦精密拉深技术(苏州)有限公司 | Stamping part detection system |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002365223A (en) | 2001-06-08 | 2002-12-18 | Nissan Motor Co Ltd | Surface detect-inspecting apparatus |
JP2005291845A (en) | 2004-03-31 | 2005-10-20 | Daihatsu Motor Co Ltd | Surface flaw inspection device |
JP2006153605A (en) | 2004-11-29 | 2006-06-15 | Dainippon Printing Co Ltd | Inspection method and inspection device |
JP2014167408A (en) | 2013-02-28 | 2014-09-11 | Molex Inc | Appearance inspection device and appearance inspection method |
JP2017062188A (en) | 2015-09-25 | 2017-03-30 | 富士重工業株式会社 | Quality inspection method and quality inspection apparatus for inspection target product |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3826598B2 (en) | 1999-01-29 | 2006-09-27 | 株式会社日立製作所 | Image monitoring apparatus and recording medium |
DE102004007828B4 (en) * | 2004-02-18 | 2006-05-11 | Isra Vision Systems Ag | Method and system for inspecting surfaces |
JP4746991B2 (en) * | 2006-01-17 | 2011-08-10 | 株式会社サキコーポレーション | Inspection device for inspection object |
JP5218177B2 (en) * | 2009-03-13 | 2013-06-26 | オムロン株式会社 | Image processing apparatus and method |
JP5565936B2 (en) | 2009-12-03 | 2014-08-06 | シブヤ精機株式会社 | Inspection equipment |
JP6146276B2 (en) | 2013-11-27 | 2017-06-14 | 東芝三菱電機産業システム株式会社 | Planar shape measuring device |
-
2018
- 2018-06-25 JP JP2018120131A patent/JP7254327B2/en active Active
-
2022
- 2022-12-15 JP JP2022200328A patent/JP7466229B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002365223A (en) | 2001-06-08 | 2002-12-18 | Nissan Motor Co Ltd | Surface detect-inspecting apparatus |
JP2005291845A (en) | 2004-03-31 | 2005-10-20 | Daihatsu Motor Co Ltd | Surface flaw inspection device |
JP2006153605A (en) | 2004-11-29 | 2006-06-15 | Dainippon Printing Co Ltd | Inspection method and inspection device |
JP2014167408A (en) | 2013-02-28 | 2014-09-11 | Molex Inc | Appearance inspection device and appearance inspection method |
JP2017062188A (en) | 2015-09-25 | 2017-03-30 | 富士重工業株式会社 | Quality inspection method and quality inspection apparatus for inspection target product |
Also Published As
Publication number | Publication date |
---|---|
JP2023021359A (en) | 2023-02-10 |
JP2020003228A (en) | 2020-01-09 |
JP7466229B2 (en) | 2024-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2023021359A (en) | Press component inspection device and press component inspection method | |
JP6666046B2 (en) | Image processing apparatus and image processing method | |
CN110596139A (en) | Screen defect detection method and system | |
CN106846294B (en) | Visual detection method, device and equipment | |
CN104919306B (en) | Video generation device, flaw detection apparatus and defect detecting method | |
KR101328204B1 (en) | Apparatus for detecting scratch of hot slab and method using thereof | |
JPWO2007052360A1 (en) | Lamination state inspection device, lamination state inspection method, and lamination state detection program | |
JPH02194307A (en) | Curvature shape measuring instrument for plate-like body | |
WO2020007804A1 (en) | Detecting surface characteristics of food objects | |
CN115359034A (en) | Defect detection method, device, equipment and storage medium | |
JP2009216647A (en) | Defect inspection method and defect inspection device | |
JP2009168615A (en) | Visual inspection apparatus and visual inspection method | |
JP4884540B2 (en) | Substrate inspection apparatus and substrate inspection method | |
JPH10289315A (en) | Parallax calculation device and method, and distance calculation device and method | |
JP2006226950A (en) | Timber inspection method and device | |
JPH10289316A (en) | Parallax calculator, distance calculator and method for the same | |
JP2012058030A (en) | Test device | |
CN109870293A (en) | Display panel detection method and detection device | |
JP7543345B2 (en) | Surface inspection device and detection processing method using the same | |
CN218766691U (en) | Diffuser plate defect detection device and diffuser plate defect detection system | |
TW201915481A (en) | Damage inspection method of optical display panel | |
TWI451752B (en) | Method for determining if lens and sensing element of image pickup device are parallel | |
JP4138943B2 (en) | Plate shape recognition device | |
JP2019049919A (en) | Template extraction device, template extraction method, and program | |
CN117291876A (en) | Board edge length detection method and device for board image and electronic equipment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210322 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220204 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220621 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220722 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20221101 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221215 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20221215 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20221222 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20230110 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230307 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230322 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7254327 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |