[go: up one dir, main page]

JP2024056561A - 検査条件決定システム - Google Patents

検査条件決定システム Download PDF

Info

Publication number
JP2024056561A
JP2024056561A JP2022163558A JP2022163558A JP2024056561A JP 2024056561 A JP2024056561 A JP 2024056561A JP 2022163558 A JP2022163558 A JP 2022163558A JP 2022163558 A JP2022163558 A JP 2022163558A JP 2024056561 A JP2024056561 A JP 2024056561A
Authority
JP
Japan
Prior art keywords
inspection
conditions
image
evaluation index
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022163558A
Other languages
English (en)
Other versions
JP2024056561A5 (ja
Inventor
啓晃 笠井
Hiroaki Kasai
敦 宮本
Atsushi Miyamoto
真由香 大崎
Mayuka Osaki
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2022163558A priority Critical patent/JP2024056561A/ja
Priority to CN202380065239.4A priority patent/CN119856045A/zh
Priority to PCT/JP2023/034056 priority patent/WO2024080087A1/ja
Publication of JP2024056561A publication Critical patent/JP2024056561A/ja
Publication of JP2024056561A5 publication Critical patent/JP2024056561A5/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination

Landscapes

  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Analysis (AREA)

Abstract

【課題】検査システムにおける検査条件を適切に決定できるようにする。
【解決手段】プロセッサ202を備え、検査対象についての検査システムの検査条件を決定する計算機200において、プロセッサ202は、検査システムにおける検査についての、検査正解率、虚報率、検査時間、検査再現性、学習時間、装置コスト、運用コスト、装置ロバスト性、検査汎用性、寿命、組立容易さ、必要な組立精度、環境に対するロバスト性、メンテナンスの容易さ、認識処理の判断根拠の明瞭性、検出箇所の認識容易さ、のうちの少なくとも2つ以上の要素評価指標及び前記要素評価指標の目標に関するユーザ要求の入力を受け付け、ユーザ要求に基づいて、検査システムにおける検査についての複数の要素評価指標に基づく評価指標を作成し、複数の検査条件における検査結果について評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定するように構成する。
【選択図】図2

Description

本発明は、検査対象を検査する検査システムにおける検査条件を決定する技術に関する。
例えば、製造工程において製造された製品等を対象として外観検査する検査システムが知られている。
検査システムにおける検査条件を設定する方法としては、特許文献1には、対象が撮像される際の照明条件を規定する照明パラメータを変更できる光源によって前記対象を照明し、複数の照明パラメータでイメージセンサによって前記対象を撮像し、前記複数の照明パラメータに対応する撮像画像を取得し、前記対象は既知のラベルデータを有することと、前記撮像画像と、前記撮像画像に対応する前記照明パラメータを関連付けることによっ て得られた画像データセットに基づいて、可変照明パラメータで前記対象が照明されるときの前記対象の推定画像を生成することと、前記対象の前記可変照明パラメータに対応する前記推定画像と対応する前記ラベルデータを、前記機械学習モデルの学習に適用し、前記機械学習モデルの推定結果と前記対象の前記ラベルデータの比較結果に基づいて、前記照明パラメータと検査アルゴリズムパラメータの両方を同時に最適化することで、前記機械学習モデルの前記照明条件と前記検査アルゴリズムパラメータの両方を設定することと、を含むことを特徴とする対象を検査する際の照明条件を設定する方法が開示されている。
国際公開第2019/171121号
特許文献1に記載の技術では、検査正解率のみを考慮して、照明パラメータと検査アルゴリズムのパラメータの両方を同時に最適化することができる。
しかしながら、検査システムにおいては、検査正解率を考慮するだけで条件を決定することが好ましいとは限らない。
本発明は、上記事情に鑑みなされたものであり、その目的は、検査システムにおける検査条件を適切に決定することのできる技術を提供することにある。
上記目的を達成するため、一観点に係る検査条件決定システムは、プロセッサを備え、所定の検査対象についての検査システムの検査における検査条件を決定する検査条件決定システムであって、前記プロセッサは、前記検査システムにおける検査についての、検査正解率、虚報率、検査時間、検査再現性、学習時間、装置コスト、運用コスト、装置ロバスト性、検査汎用性、寿命、組立容易さ、必要な組立精度、環境に対するロバスト性、メンテナンスの容易さ、認識処理の判断根拠の明瞭性、検出箇所の認識容易さ、のうちの少なくとも2つ以上の要素評価指標及び前記要素評価指標の目標に関するユーザ要求の入力を受け付け、前記ユーザ要求に基づいて、前記検査システムにおける検査についての複数の要素評価指標に基づく評価指標を作成し、複数の検査条件における検査結果について前記評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定する。
本発明によれば、検査システムにおける検査条件を適切に決定することができる。
図1は、一実施形態に係る検査システムの全体構成図である。 図2は、一実施形態に係る検査条件を決定する計算機の構成図である。 図3は、一実施形態に係る検査条件を説明する図である。 図4は、一実施形態に係る第1の検査条件最適化処理のフローチャートである。 図5は、一実施形態に係る第2の検査条件最適化処理のフローチャートである。 図6は、一実施形態に係る光学モデル校正処理のフローチャートである。 図7は、一実施形態に係るGUI画面を示す図である。 図8は、一実施形態に係る検査領域分割時の検査条件を説明する図である。 図9は、一実施形態に係る検査画像の変化を説明する図である。 図10は、一実施形態に係る検査条件再決定処理のフローチャートである。 図11は、一実施形態に係る製造工程を説明する図である。
実施形態について、図面を参照して説明する。なお、以下に説明する実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態の中で説明されている諸要素及びその組み合わせの全てが発明の解決手段に必須であるとは限らない。
図1は、第1実施形態に係る検査システムの全体構成図である。
検査システム100は、照明110と、撮像センサ120と、ハンドリング機構140と、計算機150とを含む。照明110と計算機150とは、通信回線111を介して接続され、撮像センサ120と計算機150とは、通信回線121を介して接続され、ハンドリング機構140と計算機150とは、通信線141を介して接続されている。
照明110は、検査用の光を照射する。照明110により検査対象130に光が照射されると、検査対象130に存在する欠陥を顕在化することができる。
撮像センサ120は、検査対象130の画像(デジタル画像)を撮像する2次元カメラ等である。撮像センサ120は、検査対象130に存在する欠陥を撮像することができる。
ハンドリング機構140は、照明110及び撮像センサ120と、検査対象130との相対的な位置を変更する。ハンドリング機構140は、照明110及び撮像センサ120、又は、検査対象130との少なくとも一方を移動可能である。
計算機150は、メモリ151と、プロセッサ152と、入力装置153と、表示装置154とを備える。
メモリ151は、各種情報を記憶する記憶装置である。メモリ151は、例えばRAM(Random Access Memory)やROM(Read Only Memory)などの不揮発性あるいは揮発性のメモリ媒体であってもよい。また、メモリ151は、例えばフラッシュメモリ、ハードディスク、又はSSD(Solid State Drive)などの書き換え可能な記憶媒体であってもよく、USB(Universal Serial Bus)メモリ、メモリカードなどであってもよい。
メモリ151は、認識プログラム161と、制御プログラム162とを格納する。認識プログラム161は、プロセッサ152に実行されることにより、撮像センサ120により撮像された画像(デジタルデータ)から欠陥を認識するため処理(認識処理)を行う。本実施形態では、認識プログラム161は、認識処理を実行する認識エンジンと、認識処理に使用するパラメータとの少なくとも一部を変更可能である。制御プログラム162は、プロセッサ152に実行されることにより、照明110、撮像センサ120、及びハンドリング機構140を検査条件に従って制御する。
プロセッサ152は、メモリ151に格納されているプログラムに従って各種処理を実行する。プロセッサ152は、例えば、マイクロプロセッサ、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、FPGA(Field Programmable Gate Array)、量子プロセッサ、又はその他の演算可能な半導体デバイスであってもよい。
入力装置153は、例えば、マウス、キーボード等であり、ユーザによる情報の入力を受け付ける。表示装置154は、例えば、ディスプレイであり、各種情報を含むユーザインターフェースを表示出力する。
検査システム100においては、検査条件として、照明110による照明に関する条件(照明条件)、撮像センサ120による撮像に関する条件(撮像条件)、ハンドリング機構140による動作に関する条件(ハンドリング条件)の少なくとも一部の条件を変更可能である。照明条件は、例えば、照明種類、照明配置、照明強度、照明時間、点灯周期の少なくとも1つを含む。撮像条件は、撮像センサ種類、撮像センサ配置、絞り量、撮像時間、撮像周期の少なくとも1つを含む。ハンドリング条件は、ハンドリング機構の種類、位置姿勢、目標位置姿勢に至る軌道の少なくとも1つを含む。
次に、検査システム100における最適な検査条件を決定する処理を行う計算機200について説明する。
図2は、第1実施形態に係る検査条件を決定する計算機の構成図である。
計算機200は、検査条件決定システムの一例であり、メモリ201と、プロセッサ202と、入力装置203と、表示装置204とを備える。計算機200は、通信路を介してナレッジデータベース220に接続されている。本実施形態の計算機200は、計算機150から検査画像を取得することができ、また、計算機150へ検査条件を送信することができる。
メモリ201は、各種情報を記憶する記憶装置である。メモリ201は、例えばRAMやROMなどの不揮発性あるいは揮発性のメモリ媒体であってもよい。また、メモリ201は、例えばフラッシュメモリ、ハードディスク、又はSSDなどの書き換え可能な記憶媒体であってもよく、USBメモリ、メモリカードなどであってもよい。
メモリ201は、認識プログラム211と、検査条件最適化プログラム212と、光学シミュレーションプログラム213と、光学モデル校正プログラム214と、検査画像変化検知プログラム215と、複数台検査条件最適化プログラム216と、を格納する。
認識プログラム211は、プロセッサ202に実行されることにより、検査画像から欠陥を認識するため処理を行う。検査条件最適化プログラム212は、プロセッサ202に実行されることにより、ユーザ(顧客)から検査に対する要求(顧客要求:ユーザ要求)を受け付けて、顧客要求を満たす最適な検査条件を検出する処理(検査条件最適化処理)を行う。光学シミュレーションプログラム213は、プロセッサ202に実行されることにより、検査システム100における検査対象に対する検査状態を再現可能な光学モデルを用いて、検査のシミュレーションを実行する。光学モデル校正プログラム214は、プロセッサ202に実行されることにより、光学モデルを校正する処理(光学モデル校正処理)を実行する。検査画像変化検知プログラム215は、プロセッサ202に実行されることにより、検査画像の変化を検知する処理を行う。複数台検査条件最適化プログラム216は、プロセッサ202に実行されることにより、複数台の検査システムを用いた製造工程における最適な検査条件を決定する処理を実行する。
プロセッサ202は、メモリ201に格納されているプログラムに従って各種処理を実行する。プロセッサ202は、例えば、マイクロプロセッサ、CPU、GPU、FPGA、量子プロセッサ、又はその他の演算可能な半導体デバイスであってもよい。
入力装置203は、例えば、マウス、キーボード等であり、ユーザによる情報の入力を受け付ける。表示装置204は、例えば、ディスプレイであり、各種情報を含むユーザインターフェースを表示出力する。
ナレッジデータベース220は、検査システム100で検査した事例についての情報、例えば、検査対象の画像(検査画像)と、その時の検査条件との情報等を管理する。なお、ナレッジデータベース220を計算機200の外部に設けているが、本発明はこれに限られず、計算機200内に設けるようにしてもよい。
次に、検査条件最適化プログラム212が受け付ける顧客要求について説明する。
顧客要求は、検査正解率f1と、虚報率f2と、検査時間f3と、検査再現性f4と、学習時間f5と、装置コストf6と、運用コストf7と、装置ロバスト性f8と、検査汎用性f9と、寿命f10と、組立容易さf11と、必要な組立精度f12と、環境に対するロバスト性f13と、メンテナンスの容易さf14と、認識処理の判断根拠の明瞭性f15と、検出箇所の認識容易さf16との複数の要素評価指標を含む。
検査正解率f1は、検査対象の数に対して、良品と不良品との認識が正しく行えた率である。ここで、良品を良品として認識した数をTNとし、不良品を不良品として認識した数をTPとし、良品を不良品と誤認した数をFPとし、不良品を良品と誤認した数をFNとすると、検査正解率f1は、以下に示す式(1)と表すことができる。
虚報率f2は、良品総数に対して、良品を不良品と誤認識した率である。虚報率f2は、以下に示す式(2)と表すことができる。
ここで、検査の精度に関する指標として、検査正解率f1と、虚報率f2とを例に挙げたが、これに限られず、TN,TP,FP,FNのいずれか複数を用いた別の指標を用いてもよい。
検査時間f3は、検査に係る時間であり、例えば、ハンドリング機構140の移動時間、撮像センサ120の撮像時間、データの転送時間や、認識処理プログラムが欠陥を判定する時間の総和となる一つの検査対象の検査に要する時間であってもよい。
検査再現性f4は、同じ検査対象を繰り返し検査した場合の検査の再現性である。
学習時間f5は、認識プログラム161として学習型の検査アルゴリズムを用いる場合において学習に要する時間であり、認識プログラム161が学習型ではない検査アルゴリズムを用いる場合、例えば、画像の特徴量を閾値との比較で欠陥を検出する方法の場合には、0となる。
装置コストf6は、検査システム100の構築に係る費用である。
運用コストf7は、検査システム100を稼働するために係る費用である。運用コストf7には、検査システム100の電気代やメンテナンス費用を含む。
装置ロバスト性f8は、検査システム100の故障のしにくさを表す指標である。
検査汎用性f9は、検査システム100において、様々な検査対象に適用できるかを表す指標である。
寿命f10は、検査システム100の寿命である。
組立容易さf11は、検査システム100の組み立ての容易さを表す指標である。
必要な組立精度f12は、検査正解率などを達成するために求められる組立精度を表す指標である。必要な組立精度が高いほど、組立による誤差が検査正解率などに悪影響を与えるとともに、装置組み立てコストが上がる。
環境に対するロバスト性f13は、外交、温湿度変化、振動などの環境によって検査結果が変装しないか、検査システム100が故障しないか等を表す指標である。
メンテナンスの容易さf14は、検査システム100の清掃、調整のしやすさを表す指標である。
認識処理の判断根拠の明瞭性f15は、検査システム100の認識プログラム161が認識処理の判断根拠を説明できる認識プログラムであるかを表す指標である。一般的には、深層学習を使用した認識プログラムは判断根拠が乏しいことが多く、明瞭性が低くなる。
検出箇所の認識容易さf16は、認識プログラム161が欠陥を検出した際に、画像のどの部分に欠陥があるかを認識できるかを表す指標である。なお、認識プログラム161の認識エンジンの種類によっては、画像のどの部分に欠陥があるかを認識できない場合があり、その場合には、認識容易さは低くなる。
顧客指標(fi(i=1~16))の目標値は、例えば、GUI画面900(図7参照)によりユーザから入力を受け付けられるが、顧客指標の一部の要素評価指標の目標値には、定性的な指標が含まれる。そこで、本実施形態では、受け付けた顧客指標(fi(i=1~16))を、定量化して比較可能な比較用顧客指標(gi(i=1~16))に変換する。
そして、比較用顧客指標(gi(i=1~16))に基づいて、式(3)に示すように複数の要素評価指標を含む指標Ftargetを生成し、最適化処理に用いる。
ここで、wiは、各要素評価指標giに対応する重みである。wiは、GUI画面900を介して入力を受け付けてもよく、また、GUI画面900を介してwiの再設定を受け付けてもよい。
図3は、第1実施形態に係る検査条件を説明する図である。
検査システム100の検査条件は、照明に関する条件(照明条件)と、撮像に関する条件(撮像条件)と、ハンドリングに関する条件(ハンドリング条件)と、認識に関する条件(認識条件)とを含む。
照明条件は、照明種類、照明配置、照明強度、照明時間、点灯周期等の条件を含む。撮像条件は、撮像センサ種類、撮像センサ配置、絞り量、撮像時間、撮像周期等の条件を含む。ハンドリング条件は、ハンドリング機構種類、目標位置姿勢、目標位置姿勢に至る経路等の条件を含む。認識条件は、認識エンジン種類、認識処理パラメータ等の条件を含む。
本実施形態では、各条件は、図3に示す記号により表す。ここで、Tは、条件の対象となる対象物の種類を示す。Pは、対象の3次元位置と姿勢とを表す。Pは、例えば、3次元位置を示す(x,y,z)と、姿勢を表す単位ベクトル(i,j,k)とを組み合わせたベクトル(x,y,z,i,j,k)に対応する。Sは、対象に関わる周期を表す。Hは、対象に関わる時間を表す。Iは、照明強度(例えば、ワット)を表し、Aは、撮像センサの絞り量(絞りの強さ、例えば、1~0の値)を表し、Kは、ハンドリング機構140の軌道(例えば、軌道における各位置の3次元座標と姿勢とのベクトル(x,y,z,i,j,k)の集合)を表し、Mは、認識処理のパラメータ(パラメータ値の集合)を表す。
アルファベットの右上の添え字(1)~(4)は、それぞれ、照明、撮像、ハンドリング、認識に関する値であることを表す。また、アルファベットの右下の添え字iは、同種のものの配置の数を表す。なお、Kについては、右下の添え字としてi,jを有し、iは、軌道の始点を示し、jは、軌道の終点を示す。また、認識に関するT,Mについては、右下の添え字としてi,lを有し、iは、撮像した画像の箇所を示し、lは、その画像に対して行った認識処理の番号を表す。
検査条件最適化プログラム212による検査条件最適化処理においては、指標Ftargetに基づいて、適切な検査条件(T,P,S,H,I,A,K,M)の組み合わせを算出して出力することとなる。ここで、適切な検査条件としては、採用する指標により決まってくるが、例えば、指標Ftargetの値が最小、最大、極小、極大、所定の値を満たす、傾きが緩やかな(安定な)極大値、傾きが緩やかな極小値の何れかを満たす検査条件である。
次に、計算機200による検査条件最適化処理の処理動作について説明する。
まず、検査システム100による実際の検査結果に基づいて検査条件を最適化する検査条件最適化処理(第1の検査条件最適化処理)について説明する。
図4は、一実施形態に係る第1の検査条件最適化処理のフローチャートである。
検査条件最適化プログラム212(厳密には、検査条件最適化プログラム212を実行するプロセッサ202)は、GUI画面900を介して顧客要求に対応する顧客指標(f1~f16)、各要素評価指標の目標値、及び各要素評価指標についての重みの設定を受け取る(S501)。
次いで、検査条件最適化プログラム212は、顧客指標(f1~f16)に対応する比較用評価指標(g1~g16)と、重みの設定と、に基づいて、処理に使用する評価指標(式(3))を作成し、各要素評価指標の目標値を比較用評価指標の目標値(比較用目標値)に変換する(S502)。
次いで、検査条件最適化プログラム212は、例えば、GUI画面900を介して、最適化処理における検査条件についての制約条件とする検討条件を受け取る(S503)。ここで、検討条件としては、例えば、検討する照明の種類、撮像センサの種類、ハンドリング機構の種類、認識エンジンの種類等がある。
次いで、検査条件最適化プログラム212は、検討条件に従って、検討すべき検査条件を決定し、検査システム100を決定した検査条件(対象検査条件)に従った設定とする(S504)。なお、対象検査条件の中に検査システム100自身が設定できない条件がある場合には、検査システム100のユーザが設定するようにしてもよい。
次いで、検査条件最適化プログラム212は、検査システム100により、所定の軌道(対象検査条件に軌道の条件があれば、その条件に対応する軌道)に従ってハンドリング機構140を駆動させ(S505)、対象検査条件に従って、検査対象130の画像を取得させる(S506)。
次いで、検査条件最適化プログラム212は、軌道のすべての移動を終了し、且つすべての撮像センサ120による撮像が終了したか否かを判定し(S507)、軌道のすべての移動を終了し、且つすべての撮像センサによる撮像が終了していない場合(S507:NO)には、処理をステップS505に進める。これにより、引き続いて軌道の移動及び撮像センサ120による撮像が行われることとなる。
一方、軌道のすべての移動を終了し、且つすべての撮像センサ120による撮像が終了した場合(S507:YES)には、検査条件最適化プログラム212は、認識プログラム211に、撮像された画像を用いて検査の性能を評価させ(S508)、その性能評価の結果等に基づいて、評価指標Ftargetを計算する(S509)。
次いで、検査条件最適化プログラム212は、検討条件のすべてに対応する検査条件についての評価指標を計算したか否かを判定し(S510)、検討条件のすべてに対応する検査条件についての評価指標の計算を行っていない場合(S510:NO)には、検査条件最適化プログラム212は、評価指標の計算を行っていない検討条件を含む検査条件を実行するために、処理をステップS504に進める。
一方、検討条件のすべてに対応する検査条件についての評価指標の計算を行った場合(S510:YES)には、検査条件最適化プログラム212は、複数の検査条件による評価指標の値に基づいて、最適な検査条件を決定し、決定した結果を出力(例えば、GUI画面900に表示)する(S511)。なお、ステップS511では、最適な検査条件を決定し、出力するようにしているが、これに限られず、所定の基準(例えば、評価指標の目標値を超えること)を満たす適切な検査条件を決定し、出力してもよい。
次に、検査システム100における検査を光学モデルによりシミュレートした検査結果に基づいて検査条件を最適化する検査条件最適化処理(第2の検査条件最適化処理)について説明する。
図5は、一実施形態に係る第2の検査条件最適化処理のフローチャートである。
検査条件最適化プログラム212(厳密には、検査条件最適化プログラム212を実行するプロセッサ202)は、GUI画面900を介して顧客要求に対応する顧客指標(f1~f16)、各要素評価指標の目標値、及び各要素評価指標についての重みの設定を受け取る(S601)。
次いで、検査条件最適化プログラム212は、顧客指標(f1~f16)に対応する比較用評価指標(g1~g16)と、重みの設定と、に基づいて、処理に使用する評価指標(式(3))を作成し、各要素評価指標の目標値を比較用評価指標の目標値(比較用目標値)に変換する(S602)。
次いで、検査条件最適化プログラム212は、例えば、GUI画面900を介して、最適化処理における検査条件についての制約条件とする検討条件を受け取る(S603)。ここで、検討条件としては、例えば、検討する照明の種類、撮像センサの種類、ハンドリング機構の種類、認識エンジンの種類等がある。
次いで、検査条件最適化プログラム212は、検討条件に従って、検討すべき検査条件を決定し、光学シミュレーションプログラム213は、検査対象130の形状モデル601(3次元形状モデル)と、検査対象130の表面性状602と、検査条件と、に基づいて、検査システム100における検査対象130の検査の状態を表す光学モデルを作成する(S604)。
ここで、形状モデル601は、製品の設計情報である3D-CADモデル、又は、3次元形状計測装置で測定した結果から作成したメッシュやCADデータである。形状モデル601は、例えば、計算機200のメモリ201から取得してもよく、外部から受信してもよい。また、表面性状602は、BRDF(Bidirectional Reflectance Distribution Function)などで表現される、形状モデルに含まれない微小な凹凸と材料で決まる光の反射特性の情報(表面性状情報)であり、例えば、ユーザにより入力されてもよく、表面性状測定機で測定したデータであってもよい。表面性状602は、例えば、計算機200のメモリ201から取得してもよく、外部から受信してもよい。
光学シミュレーションプログラム213は、所定の軌道(対象検査条件に軌道の条件があれば、その条件に対応する軌道)に従って光学モデル内の検査対象を移動し(S605)、光学モデルを用いて検査対象130について撮像されると推定される画像(推定画像)を生成する(S606)。
次いで、検査条件最適化プログラム212は、軌道のすべての移動を終了し、且つすべての撮像センサにより撮像されると推定される推定画像の生成が終了したか否かを判定し(S607)、軌道のすべての移動を終了し、且つすべての撮像センサによる推定画像の生成が終了していない場合(S607:NO)には、処理をステップS605に進める。これにより、引き続いて軌道の移動を行った場合の推定画像の生成が行われることとなる。
一方、軌道のすべての移動を終了し、且つすべての推定画像の生成が終了した場合(S607:YES)には、検査条件最適化プログラム212は、認識プログラム211に、推定画像を用いて検査の性能を評価させ(S608)、その性能評価の結果等に基づいて、評価指標Ftargetを計算する(S609)。
次いで、検査条件最適化プログラム212は、検討条件のすべてに対応する検査条件についての評価指標を計算したか否かを判定し(S610)、検討条件のすべてに対応する検査条件についての評価指標の計算を行っていない場合(S610:NO)には、検査条件最適化プログラム212は、評価指標の計算を行っていない検討条件を含む検査条件を実行するために、処理をステップS604に進める。
一方、検討条件のすべてに対応する検査条件についての評価指標の計算を行った場合(S610:YES)には、検査条件最適化プログラム212は、複数の検査条件による評価指標の値に基づいて、最適な検査条件を決定し、決定した結果を出力(例えば、GUI画面900に表示)する(S611)。なお、ステップS611では、最適な検査条件を決定し、出力するようにしているが、これに限られず、所定の基準(例えば、評価指標の目標値を超えること)を満たす適切な検査条件を決定し、出力してもよい。
なお、図4、図5に示す検査条件最適化処理では、検査条件を網羅的に変更して最適化を行うようにしていたが、最適化の方法はこれに限られない。例えば、実験計画法や、ベイズ最適化などの効率的な探索を行うようにしてもよい。例えば、装置構成に関する線形部分の条件(図3において、符号Tで表される条件)と、非線形部分(パラメータ)の条件とに分けて、最適条件を探索するBenders分解法を用いてもよい。また、ナレッジデータベース220の類似する事例に基づいて、照明種類や配置、認識エンジンの種類を限定してもよい。この時、類似する事例については、ユーザが見つけたものでもよく、機械学習された照合機能を用いて見つけられたものでもよい。
次に、光学モデルを校正する光学モデル校正処理について説明する。光学モデル校正成処理は、例えば、図5に示す第2の検査条件最適化処理の前に実行される。
図6は、一実施形態に係る光学モデル校正処理のフローチャートである。
光学モデル校正プログラム214(厳密には、光学モデル校正プログラム214を実行するプロセッサ202)は、GUI画面を介してユーザから、校正に使用する検査システム100の検査条件(例えば、検査システム100の現在の検査条件)と、光学モデルの変更条件(例えば、検査対象の反射率の変更範囲(0.2~0.8等))と、を含む校正条件の設定を受け取る(S701)。
次いで、光学モデル校正プログラム214は、校正における評価指標(校正評価指標)を作成する(S702)。ここで、校正評価指標は、校正において比較する特徴量を組み合わせた関数であり、例えば、後述する推定画像と、取得画像とのピクセルごとの差分の平均値又は分散の和としてもよい。校正評価指標は、ユーザによる定義に従ってもよく、事例に基づいて選択あるいは生成してもよい。
次いで、光学モデル校正プログラム214は、光学モデルを用いて推定画像を取得する処理(S711~S714)と、検査システム100により実際に画像を取得する処理(S721~S724)とを実行する。
光学モデルを用いて推定画像を取得する処理(S711~S714)では、まず、光学モデル校正プログラム214は、校正条件に基づいて検討すべき光学モデルの条件(例えば、検査対象の反射率の変更範囲内の所定の値)を決定し、光学シミュレーションプログラム213は、校正条件における設定条件と、決定された光学モデルの条件とに基づいて、検査システム100における検査対象130の検査の状態を表す光学モデルを作成する(S711)。
光学シミュレーションプログラム213は、所定の軌道(対象検査条件に軌道の条件があれば、その条件に対応する軌道)に従って光学モデル内の検査対象を移動し(S712)、光学モデルを用いて検査対象130について撮像されると推定される画像(推定画像)を生成する(S713)。
次いで、光学モデル校正プログラム214は、軌道のすべての移動を終了し、且つすべての撮像センサにより撮像されると推定される推定画像の生成が終了したか否かを判定し(S714)、軌道のすべての移動を終了し、且つすべての撮像センサによる推定画像の生成が終了していない場合(S714:NO)には、処理をステップS712に進める。これにより、引き続いて軌道の移動を行った場合の推定画像の生成が行われることとなる。
一方、軌道のすべての移動を終了し、且つすべての推定画像の生成が終了した場合(S714:YES)には、光学モデル校正プログラム214は、処理をステップS731に処理を進める。
検査システム100により実際に画像を取得する処理(S721~S724)では、まず、光学モデル校正プログラム214は、検査システム100を校正条件に含まれる検査条件(対象検査条件)に従った設定とする(S721)。なお、対象検査条件の中に検査システム100自身が設定できない条件がある場合には、検査システム100のユーザが設定するようにしてもよい。
次いで、光学モデル校正プログラム214は、検査システム100により、所定の軌道(対象検査条件に軌道の条件があれば、その条件に対応する軌道)に従ってハンドリング機構を駆動させ(S722)、対象検査条件に従って、検査対象130の画像(実画像)を取得させる(S723)。
次いで、光学モデル校正プログラム214は、軌道のすべての移動を終了し、且つすべての撮像センサによる撮像が終了したか否かを判定し(S724)、軌道のすべての移動を終了し、且つすべての撮像センサによる撮像が終了していない場合(S724:NO)には、処理をステップS722に進める。これにより、引き続いて軌道の移動及び撮像センサによる撮像が行われることとなる。
一方、軌道のすべての移動を終了し、且つすべての撮像センサによる撮像が終了した場合(S724:YES)には、光学モデル校正プログラム214は、処理をステップS731に進める。
ステップS731では、光学モデル校正プログラム214は、推定画像と実画像との特徴量を比較し、使用した光学モデルについての校正評価指標を算出する。
次いで、光学モデル校正プログラム214は、校正条件に含まれる変更条件に対応するすべての光学モデルについての変更が行われたか否かを判定する(S732)。
この結果、すべての光学モデルについての変更が行われていない場合(S732:NO)には、光学モデル校正プログラム214は、変更条件に基づいて光学モデルについての条件を変更し(S733)、処理をステップS711に進め、他の光学モデルについての推定画像を取得する処理を行う。
一方、すべての光学モデルについての変更が行われた場合(S732:YES)には、光学モデル校正プログラム214は、評価指標に基づいて、実際の検査対象についての検査を適切に表す光学モデルのパラメータ(例えば、検査対象の反射率)を特定し、光学モデルのパラメータを校正データとして出力する(S734)。ここで、検査を適切に表す光学モデルにパラメータは、採用する校正評価指標により決まってくるが、例えば、校正評価指標の値が最小、最大、極小、極大、所定の値を満たす、傾きが緩やかな(安定な)極大値、傾きが緩やかな極小値の何れかを満たすパラメータである。
なお、この後に図5に示す第2の検査条件最適化処理が実行されると、光学シミュレーションプログラム213は、校正データに基づいて光学モデルを生成することとなり、実際の検査システム100における検査状態に即した光学モデルを生成して、高精度な推定画像を生成することができる。
次に、GUI画面900について説明する。
図7は、一実施形態に係るGUI画面を示す図である。
GUI画面900は、入力領域910と、出力領域920とを含む。入力領域910は、顧客要求入力領域911と、検討条件入力領域912と、重み入力領域913とを含む。
顧客要求入力領域911は、顧客要求を入力する領域であり、顧客要求の要素評価指標を示す記号と、要素評価指標の内容を示す顧客要求と、要素評価指標の目標値を入力する目標値とのフィールドを含む。ここで、目標値に不要を設定することにより、対応する要素評価指標を考慮しない評価指標に設定することができる。すなわち、式(3)において、対応する要素評価指標の値が考慮されないようにすることができる。
検討条件入力領域912は、検査システム100における検査条件において検討すべき条件(検討条件)を入力する領域である。
重み入力領域913は、各要素評価指標の値に対する重み値を入力する領域である。なお、重み入力領域913においては、重み値と、重み値を固定値とするか変動値とさせるかの設定を入力することができる。
出力領域920には、処理結果リスト921が表示される。処理結果リスト921は、検査条件最適化処理で検出された適切な検査条件のエントリを含む。例えば、すべての要素評価指標の重みwiが固定値として入力された場合には、一つのエントリが表示され、要素評価指標の重みwiが変動値として入力された場合には、各要素評価指標の重みの組ごとに対応する適切な検査条件のエントリが表示される。
処理結果リスト921のエントリは、要素評価指標/重み921aと、検査条件921bとのフィールドを含む。要素評価指標/重み921aには、各要素評価指標についての値と、その要素評価指標に対する重みとの値が表示される。検査条件921bには、検査システム100の各検査条件の値(検査条件情報)が格納される。
上記説明では、検査対象130を一体として検査を行う例を示したが、検査対象130は、形状や、表面性状によっては、検査対象の部分ごとに、適切な照明や撮像センサや認識プログラムが異なることが起こり得る。例えば、検査対象が鋳造品の一部を切削したものであれば、鋳肌面が残っている部分と、切削された部分とでは、表面性状が違い、画像的な特徴が大きく異なる。そのため、照明種類、照明角度、照明強度を変えたり、認識プログラムのパラメータを変えたりすることにより、検査成功率の向上につながる。
そこで、検査対象130の検査領域を複数の部分に分割して検査するようにしてもよい。以下に複数の検査領域に分割して検査する場合について説明する。
図8は、一実施形態に係る検査領域分割時の検査条件を説明する図である。なお、図8は、検査対象130を、上面の平面131と、円筒面132とに分割して検査する例であり、平面131は、照明110aと撮像センサ120aとで撮像し、円筒面132は、照明110bと撮像センサ120bとで撮像して検査する場合の例である。
検査システム100の検査条件は、照明に関する条件(照明条件)と、撮像に関する条件(撮像条件)と、ハンドリングに関する条件(ハンドリング条件)と、認識に関する条件(認識条件)とを含む。
照明条件は、照明種類、照明配置、照明強度、照明時間、点灯周期等の条件を含む。撮像条件は、撮像センサ種類、撮像センサ配置、絞り量、撮像時間、撮像周期等の条件を含む。ハンドリング条件は、ハンドリング機構種類、目標位置姿勢、目標位置姿勢に至る経路等の条件を含む。認識条件は、認識エンジン種類、認識処理パラメータ等の条件を含む。
各条件は、図8に示す記号により表す。ここで、記号については、図3に示す記号との差異を説明する。
アルファベットの右下の添え字として、mが追加されている。mは、検査対象の面(検査対象領域)を表す番号である。本例では、検査対象の面が平面131である場合には、mは1とし、検査対象の面が円筒面132である場合には、mは2とする。
次に、検査対象130を複数の部分に分割して検査する場合における検査条件最適化処理について説明する。
まず、検査条件最適化プログラム212は、検査対象130を、検査対象130の加工条件に基づいて、複数の検査領域(部分検査領域)に分割する分割案を決定する(分割案決定ステップ)。
次いで、検査条件最適化プログラム212は、分割案における各検査領域のそれぞれを対象として、図4又は図5の検査条件最適化処理を実行し、最適な検査条件を決定するとともに、各検査領域の評価指標値を合計してこの分割時における全体の評価指標値(分割案評価指標値)を算出する(分割案評価指標算出ステップ)。
次いで、検査条件最適化プログラム212は、分割案決定ステップ及び分割案評価指標算出ステップを行うことにより、検査対象130についての複数の分割案における検査条件を決定するとともに、それぞれの分割案評価指標値を算出する。
次いで、検査条件最適化プログラム212は、複数の分割案の分割案評価指標に基づいて、所定の条件を満たす適切な(例えば、最適な)分割案及び検査条件を決定し、決定結果を出力する。
この処理によると、適切な検査対象130の分割案と、分割案における検査領域毎の適切な検査条件を決定することができる。
次いで、検査システム100が対象とする検査対象の検査画像の時間経過に伴う変化について説明する。
図9は、一実施形態に係る検査画像の変化を説明する図である。図9(A)は、検査対象を撮像する状態を示し、図9(B)は、検査システム100の稼働開始直後における検査画像を示し、図9(C)は、検査システム100の稼働からある程度の時間が経過した後の検査画像を示す。
検査システム100においては、図9(A)に示すように、検査対象130の上方から照明110を当てて、撮像センサ120により撮像するものとする。
検査システム100の稼働開始直後においては、検査対象130の検査画像は、図9(B)に示すように、検査対象130を鮮明に撮像した状態となっている。
この後、検査システム100の稼働を継続し、例えば、撮像センサ120のレンズに傷がついてしまった場合には、検査対象130の検査画像は、例えば、図9(C)に示すように、傷1031が移り込んでしまったりする場合がある。また、レンズに汚れ等が発生すると、全体的に画像が暗くなってしまう虞がある。また、検査対象130が同一の製品だったとしても、時間の経過に伴い、検査対象130の製造に使用する材質の変化等により、検査対象130の表面1032の色合いや明度が変わってしまう虞もある。
このような状態にあっては、検査システム100における検査条件が、最適な検査条件でなくなっている可能性もある。
そこで、本実施形態に係る検査システム100では、そのような場合に検査条件を再決定する処理(検査条件再決定処理)を行う。
図10は、一実施形態に係る検査条件再決定処理のフローチャートである。
検査画像変化検知プログラム215は、検査画像における特徴量についての変動の許容値を受け取る(S1101)。ここで、特徴量は、検査画像又は検査画像の所定の領域における輝度平均や、輝度分散などの統計量としてもよい。また、許容値は、検査システム100の運用開始時や、所定回数の検査を行う毎にユーザから受け取るようにしてもよい。また、許容値はデフォルトの値でもよい。
次いで、検査画像変化検知プログラム215は、検査システム100で撮像されて蓄積されている検査対象についての検査画像に基づいて、画像の特徴量を算出する(S1102)。
次いで、検査画像変化検知プログラム215は、算出した特徴量が許容値を超えているか否かを判定する(S1103)。
この結果、算出した特徴値が許容値を超えている場合(S1103:YES)、検査画像変化検知プログラム215は、アラートを発し、検査条件最適化プログラム212を実行させることにより図4又は図5の検査条件最適化処理を実行させ(S1104)、検査画像変化検知プログラム215は、その結果を出力する(S1105)。なお、検査条件再決定処理において検査条件最適化処理を行う場合には、検査条件の中の照明種類、画像センサ種類、ハンドリング機構などの一部の検査条件を現在の状態に固定にしてもよい。このようにすると、検査システム100のすでに利用している構成をそのまま利用できる検査条件とすることができ、検査システム100の追加投資の発生を防止できる。
一方、算出した特徴値が許容値を超えていない場合(S1103:NO)、検査画像変化検知プログラム215は、検査条件最適化処理を実行することが必要ないとの結果を出力する(S1105)。
次に、計算機200により、複数の加工工程と、複数の検査工程とを含む製造工程における各種条件の最適化を行う例を説明する。
図11は、一実施形態に係る製造工程を説明する図である。
この製造工程は、検査工程1と、加工工程1と、検査工程2と、加工工程2と、検査工程3と、加工工程3と、検査工程4との工程を含む。検査工程1では、検査システム100-1により受け入れられた素材についての検査が行われ、検査工程2では、検査システム100-2により加工工程1で加工された加工品の検査が行われ、検査工程3では、検査システム100-3により加工工程2で加工された加工品の検査が行われ、検査工程4では、検査システム100-4により加工工程3で加工された加工品の検査が行われる。ここで、加工工程における製造に関する情報(製造情報)としての、工程能力をAkとし、歩留まりをTkとし、製造速度をSkとして、製造コストをCkとする。なお、kは、加工工程の工程の番号を表す。
この例における複数台検査条件最適化プログラム216による検査条件最適化処理を説明する。なお、ここでは、便宜的に、図3(図4)を参照し、複数台検査条件最適化プログラム216と検査条件最適化プログラム212との処理の差異について説明する。また、各加工工程についての工程能力Ak、歩留まりTk、製造コストSk、製造コストCkは、わかっている又は想定されており、設定又は入力されているものとする。
ステップS501(S601)では、複数台検査条件最適化プログラム216は、GUI画面を介して各検査システム100における顧客要求に対応する顧客指標fij(i=1~16,jは検査工程の工程番号であり、図11の例では、j=1~4)、目標値、及び顧客要求の各要素評価指標についての重みの設定(Wij)を受け取る。また、複数台検査条件最適化プログラム216は、検査工程全体における顧客要求に対応する全体顧客指標Fi(i=1~16)、目標値、及び全体顧客要求の各要素評価指標についての重みの設定(Wi)を受け取る。
ステップS502(S602)では、複数台検査条件最適化プログラム216は、顧客指標fij(i=1~16,j=1~4)に対応する比較用評価指標gijを求め、全体顧客指標Fi(i=1~16)に対応する比較用評価指標Giを求め、検査工程と加工工程とを考慮した処理に使用する評価指標(式(4))を作成し、顧客指標及び全体顧客指標の目標値を比較用評価指標の目標値(比較用目標値)に変換する。
ここで、wak,wtk,wsk,wckは、それぞれ工程能力Ak、歩留まりTk、製造コストSk、製造コストCkの重みである。なお、式(4)では、評価指標を、各加工工程の評価指標と、加工工程の製造状況の情報との線形和としていたが、本発明はこれに限られず、例えは、積としてもよく、各指標の逆数の和としてもよい。
ステップS511(S611)では、複数台検査条件最適化プログラム216は、複数の検査条件による評価指標(式(4))の値に基づいて、最適な検査条件を決定し、決定した結果を出力する。
この製造工程における条件の最適化を行う処理によると、検査工程に対する顧客要求と、加工工程の情報とをひとつの評価指標にまとめているので、製造工程全体において適切な検査条件を決定することができる。
なお、本発明は、上述の実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で、適宜変形して実施することが可能である。
例えば、上記実施形態では、最適な検査条件を決定するようにしていたが、本発明はこれに限られず、最適な検査条件に限らず、所定の条件を満たす検査条件を決定するようにしてもよい。
また、上記実施形態では、計算機200に、図3及び図4の検査条件最適化処理を実行可能としていたが、いずれか一方の検査条件最適化処理のみを実行可能としてもよい。
また、上記実施形態では、計算機150と計算機200とを別の計算機としていたが、例えば、計算機200の機能を計算機150に組み込むようにしてもよい。
また、上記実施形態において、プロセッサが行っていた処理の一部又は全部を、ハードウェア回路で行うようにしてもよい。また、上記実施形態におけるプログラムは、プログラムソースからインストールされてよい。プログラムソースは、プログラム配布サーバ又は記録メディア(例えば可搬型の記録メディア)であってもよい。
100…検査システム、150…計算機、200…計算機、201…メモリ、202…プロセッサ、203…入力装置、204…表示装置、211…認識プログラム、212…検査条件最適化プログラム、213…光学シミュレーションプログラム、214…光学モデル校正プログラム、215…検査画像変化検知プログラム、216…複数台検査条件最適化プログラム

Claims (15)

  1. プロセッサを備え、所定の検査対象についての検査システムの検査における検査条件を決定する検査条件決定システムであって、
    前記プロセッサは、
    前記検査システムにおける検査についての、検査正解率、虚報率、検査時間、検査再現性、学習時間、装置コスト、運用コスト、装置ロバスト性、検査汎用性、寿命、組立容易さ、必要な組立精度、環境に対するロバスト性、メンテナンスの容易さ、認識処理の判断根拠の明瞭性、検出箇所の認識容易さ、のうちの少なくとも2つ以上の要素評価指標及び前記要素評価指標の目標に関するユーザ要求の入力を受け付け、
    前記ユーザ要求に基づいて、前記検査システムにおける検査についての複数の要素評価指標に基づく評価指標を作成し、
    複数の検査条件における検査結果について前記評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定する
    検査条件決定システム。
  2. 前記プロセッサは、
    前記決定された検査条件に関する検査条件情報を表示出力する
    請求項1に記載の検査条件決定システム。
  3. 前記評価指標は、複数の前記要素評価指標の値を重みで調整して組み合わせた指標である
    請求項2に記載の検査条件決定システム。
  4. 前記プロセッサは、
    前記重みを調整し、
    複数の検査条件における検査結果についての前記重みを調整した評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定し、
    検査条件と、前記検査条件に対応する要素評価指標の値とを表示する
    請求項3に記載の検査条件決定システム。
  5. 前記重みの調整をユーザから受け付ける
    請求項4に記載の検査条件決定システム。
  6. 前記検査システムは、前記検査対象に対して光を照射する照明と、前記検査対象を撮像する撮像センサと、前記検査対象と撮像センサとの相対的な位置を調整するハンドリング機構とを有し、
    前記検査条件は、
    照明種類、照明配置、照明強度、照明時間、点灯周期、撮像センサ種類、撮像センサ配置、絞り量、撮像時間、撮像周期、ハンドリング機構種類、目標位置姿勢、軌道、認識エンジン、及び認識処理パラメータの少なくとも一部である
    請求項1に記載の検査条件決定システム。
  7. 前記検査条件は、撮像センサ種類、撮像センサ配置、絞り量、撮像時間、及び撮像周期の少なくとも一つと、ハンドリング機構種類、目標位置姿勢、及び軌道の少なくとも一つとを含む
    請求項6に記載の検査条件決定システム。
  8. 前記検査システムは、前記検査対象に対して光を照射する照明と、前記検査対象を撮像する撮像センサと、を有し、
    前記プロセッサは、
    前記検査対象の3次元形状モデルと、前記検査対象の表面性状情報と、前記照明に関する検査条件と、前記撮像センサに関する検査条件と、に基づいて、前記検査対象についての検査状態に関する光学モデルを作成し、
    前記光学モデルに基づいて前記撮像センサにより撮像されると推定される推定画像を作成し、
    前記推定画像を用いた検査結果における前記評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定する
    請求項1に記載の検査条件決定システム。
  9. 前記プロセッサは、
    前記3次元形状モデルと、前記表面性状情報との入力を受け付ける
    請求項8に記載の検査条件決定システム。
  10. 前記プロセッサは、
    前記推定画像を作成した際と同じ検査条件で前記検査システムにより撮像された実画像を取得し、
    前記推定画像と前記実画像との特徴量を特定し、前記特徴量に基づいて前記光学モデルを校正する
    請求項8に記載の検査条件決定システム。
  11. 前記プロセッサは、
    検査対象の検査領域を複数の部分検査領域に分割した複数の分割案を作成し、
    各分割案について、複数の部分検査領域について、複数の検査条件についての前記評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定し、
    複数の分割案の中から適切な分割案を決定する
    請求項1に記載の検査条件決定システム。
  12. 前記プロセッサは、
    決定された検査条件により前記検査システムにより撮像された実画像を取得し、前記実画像による検査結果が、前記ユーザ要求の前記要素評価指標の目標を満たすか否かを判定し、目標を満たさない場合に、アラートを発し、複数の検査条件による新たな検査結果について前記評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定する
    請求項1に記載の検査条件決定システム。
  13. 前記プロセッサは、
    決定された検査条件により前記検査システムにより撮像された複数の実画像を取得し、複数の前記実画像の特徴量が所定の許容値を超えるか否かを判定し、特徴量が許容値を超える場合に、アラートを発し、複数の検査条件による新たな検査結果について前記評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定する
    請求項1に記載の検査条件決定システム。
  14. 前記プロセッサは、
    複数台の検査システムのそれぞれについて、前記ユーザ要求の入力を受け付け、
    前記ユーザ要求に基づいて、前記検査システムにおける検査についての複数の要素評価指標に基づく評価指標を作成し、複数の検査条件における検査結果について前記評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定する
    請求項1に記載の検査条件決定システム。
  15. 複数台の検査システムは、製造工程における複数の検査工程において利用されており、
    前記プロセッサは、
    複数台の検査システム全体における検査についての、検査正解率、虚報率、検査時間、検査再現性、学習時間、装置コスト、運用コスト、装置ロバスト性、検査汎用性、寿命、組立容易さ、必要な組立精度、環境に対するロバスト性、メンテナンスの容易さ、認識処理の判断根拠の明瞭性、検出箇所の認識容易さ、のうちの少なくとも2つ以上の要素評価指標及び前記要素評価指標の目標に関するユーザ要求の入力を更に受け付け、
    前記製造工程の工程能力、歩留まり、製造速度、製造コストの中の少なくとも一つ以上の製造情報と、複数台の検査システム全体についての要素評価指標と、各検査システムに対する要素評価指標とに基づいて、前記製造工程における製造及び検査についての評価指標を作成し、複数の検査条件における検査結果及び製造状況について前記評価指標による評価を行い、複数の検査条件の中から適切な検査条件を決定する
    請求項14に記載の検査条件決定システム。



JP2022163558A 2022-10-11 2022-10-11 検査条件決定システム Pending JP2024056561A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022163558A JP2024056561A (ja) 2022-10-11 2022-10-11 検査条件決定システム
CN202380065239.4A CN119856045A (zh) 2022-10-11 2023-09-20 检查条件决定系统
PCT/JP2023/034056 WO2024080087A1 (ja) 2022-10-11 2023-09-20 検査条件決定システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022163558A JP2024056561A (ja) 2022-10-11 2022-10-11 検査条件決定システム

Publications (2)

Publication Number Publication Date
JP2024056561A true JP2024056561A (ja) 2024-04-23
JP2024056561A5 JP2024056561A5 (ja) 2025-05-13

Family

ID=90669118

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022163558A Pending JP2024056561A (ja) 2022-10-11 2022-10-11 検査条件決定システム

Country Status (3)

Country Link
JP (1) JP2024056561A (ja)
CN (1) CN119856045A (ja)
WO (1) WO2024080087A1 (ja)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4014379B2 (ja) * 2001-02-21 2007-11-28 株式会社日立製作所 欠陥レビュー装置及び方法
JP4935109B2 (ja) * 2005-03-17 2012-05-23 オムロン株式会社 基板検査装置並びにその検査ロジック設定方法および検査ロジック設定装置
JP2009014447A (ja) * 2007-07-03 2009-01-22 Fuji Electric Systems Co Ltd 欠陥検査装置及び欠陥検査プログラム
JPWO2018225406A1 (ja) * 2017-06-08 2020-04-09 コニカミノルタ株式会社 表面欠陥検査装置の配置決定方法、該装置、該プログラムおよび記録媒体
JP6923794B2 (ja) * 2017-08-04 2021-08-25 富士通株式会社 検査装置、検査プログラム、及び検査方法
JP2019090643A (ja) * 2017-11-13 2019-06-13 三菱電機株式会社 検査方法、および検査装置
JP7028333B2 (ja) * 2018-03-05 2022-03-02 オムロン株式会社 照明条件の設定方法、装置、システム及びプログラム並びに記憶媒体
JP7167453B2 (ja) * 2018-03-12 2022-11-09 オムロン株式会社 外観検査システム、設定装置、画像処理装置、設定方法およびプログラム
JP7234812B2 (ja) * 2019-06-10 2023-03-08 コニカミノルタ株式会社 画像検査装置、及び、画像形成システム
JP2021086432A (ja) * 2019-11-28 2021-06-03 キヤノン株式会社 情報処理装置、情報処理方法、コンピュータプログラム、計測装置、システムおよび物品の製造方法

Also Published As

Publication number Publication date
CN119856045A (zh) 2025-04-18
WO2024080087A1 (ja) 2024-04-18

Similar Documents

Publication Publication Date Title
JP7131617B2 (ja) 照明条件を設定する方法、装置、システム及びプログラム並びに記憶媒体
CN112567428B (zh) 摄影方法及摄影装置
JP7011592B2 (ja) スキャトロメトリ計測におけるプロセス変動の根本原因の解析
CN107194908A (zh) 图像处理装置以及图像处理方法
US20170372466A1 (en) Information processing apparatus and method of selecting viewpoint for measuring object, and measuring system
CN109961433A (zh) 产品缺陷检测方法、装置及计算机设备
WO2023084543A1 (en) System and method for leveraging neural network based hybrid feature extraction model for grain quality analysis
US20240070537A1 (en) Microscopy System and Method for Generating a Machine-Learned Model for Processing Microscope Data
JP2013224833A (ja) 外観検査装置、外観検査方法及びコンピュータプログラム
US11775512B2 (en) Data analysis apparatus, method and system
JP2024075727A (ja) 画像検査装置、画像検査方法及びプログラム
WO2022059402A1 (ja) 検査装置、検査方法及び検査プログラム
JP2020042669A (ja) 検査装置及び機械学習方法
CN117871042B (zh) Led模组显示效果智能测试方法及系统
JP2023145412A (ja) 欠陥検出方法及びシステム
KR20220085740A (ko) 인공지능 소프트웨어의 신뢰성 평가 방법 및 장치
CN111492198A (zh) 物体形状测量装置和方法以及程序
CN117891159A (zh) 一种基于大数据的食品加工控制系统及方法
CN109997028B (zh) 调整对检查体的是否良好判定条件的方法及装置
US6807288B2 (en) Image processing apparatus, image processing method, and recording medium recording image processing program
CN117589109A (zh) 石英中心托盘制作工艺的质量检测与控制方法
CN119375643B (zh) 一种绝缘检测功能的检测方法及系统
JP2024056561A (ja) 検査条件決定システム
CN119539185A (zh) 氨气传感器的数据优化和预警方法、系统、设备及介质
US20220215210A1 (en) Information processing apparatus, non-transitory computer-readable storage medium, and information processing method

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250501

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20250501