DE19536297A1 - Verfahren zur geometrischen Kalibrierung von optischen 3D-Sensoren zur dreidimensionalen Vermessung von Objekten und Vorrichtung hierzu - Google Patents

Description

Die Erfindung betrifft ein Verfahren zur geometrischen Ka­ librierung von optischen 3D-Sensoren zur dreidimensionalen Vermessung von Objekten relativ zu einem Referenzkoordina­ tensystem auf den Prinzipien der Streifenprojektion und der Triangulation, unter Verwendung wenigstens einer Ka­ mera, einer Einrichtung zur Digitalisierung und Speiche­ rung von Bildfolgen der Kamera, mindestens einem zur Ka­ mera fixierten Beleuchtungsprojektor, der zeitlich nach­ einander Lichtstrukturen aus wenigstens eindimensionalen Streifen innerhalb eines Arbeitsvolumens erzeugt, minde­ stens einer Beleuchtungseinrichtung zur gleichmäßigen Beleuchtung von reflektierenden und/oder streuenden Signalmarken einer Ka­ libriereinrichtung und eines Rechners zur Steuerung und Verarbeitung der Bilder sowie eine Vorrichtung zur Durch­ führung des Verfahrens.

Verfahren zur Kamerakalibrierung sind bekannt. Dabei wer­ den mit einer Kamera Punkte aufgenommen, deren Koordinaten bekannt sind, also die x-, y- und z-Koordinaten in der Welt bekannt sind und die Bilder ausgewertet. Die Kali­ brierung der Kamera beruht dann darauf, daß die Bildkoor­ dinaten mit den Weltkoordinaten in Übereinstimmung ge­ bracht werden. Die Kalibrierung eines Projektors ist im Unterschied dazu schwieriger, weil der Projektor gewisser­ maßen nicht sehen kann, wohin er leuchtet. Der Projektor sendet zwar einen bestimmten Streifen mit der Nummer x aus, es gibt jedoch keine Möglichkeit mit dem Projektor selbst festzustellen, wo der Streifen in der Welt landet, dazu bedarf es zusätzlicher Hilfsgeräte, nämlich weiterer Kameras im System. Beobachtet man mit einer kalibrierten und orientierten Kamera diese Streifen eines Projektors in der Welt und kennt die Streifen, die der Projektor intern (virtuell) gesendet hat, kann man den Zusammenhang zwi­ schen den externen (visuellen) Streifen des Projektors und den internen (virtuellen) Streifen des Projektors herstel­ len. Jedoch weiß man nicht, an welcher Stelle man sich längs eines externen Streifens befindet. Wenn der Streifen x gesendet wird, so findet man in der Welt mit der Kamera diesen Streifen x wieder, jedoch weiß man nicht, welche x- y-Stelle im Projektor, an der das Licht erzeugt wurde, dann an der Stelle x-y-z in der Welt auftaucht. Das bedeu­ tet, daß nicht jedem Bildpunkt der Kamera ein räumlicher Koordinatenwert zugeordnet werden kann.

Es sind flächenhafte optische Meßverfahren mit einer Ma­ trixkamera und einem Projektor für unkodierte oder ko­ dierte Streifen bekannt, bei denen die dreidimensionalen Koordinaten der Oberflächenpunkte aus den beiden Bildkoor­ dinaten des Kamerabildes und der an der jeweiligen Bildko­ ordinate detektierten Streifennummer berechnet werden (Reinhard W. Malz: Codierte Lichtstrukturen für 3-D-Meß­ technik und Inspektion, Thesis, Universität Stuttgart 1992, Reihe: Berichte aus dem Institut für Technische Op­ tik der Universität Stuttgart). Ebenso sind Verfahren mit mehreren Projektoren bekannt.

Des weiteren sind photogrammetrische optische Meßverfahren mit mehreren Matrixkameras oder eine Matrixkamera in meh­ reren Positionen bekannt, bei denen die dreidimensionalen Koordinaten eindeutig bestimmbarer Punkte im Raum aus meh­ reren Ansichten derselben numerisch bestimmt werden. Zur Erzeugung eindeutig bestimmbarer Punkte im Objektraum wer­ den natürliche Objektmerkmale, zum Beispiel reguläre oder stochastische Grauwert- oder Farbverteilungen am Objekt, ebenso genutzt wie künstliche Merkmale wie aufgeklebte oder aufprojizierte Marken bzw. reguläre oder stochasti­ sche Grauwert- oder Farbverteilungen.

Bekannt sind des weiteren photogrammetrische Verfahren, die die räumliche Lage einer Kamera relativ zu mehreren sichtbaren Referenzpunkten bestimmen können, deren abso­ lute Koordinaten bekannt sind (Räumlicher Rückwärts­ schnitt). Ebenso sind photogrammetrische Verfahren be­ kannt, die mehrere räumliche Lagen einer Kamera relativ zueinander bestimmen können, sofern die aus mehreren Lagen aufgenommenen Bilder mehrere gemeinsame Referenzpunkte enthalten, deren Koordinaten vorab nicht bekannt sein müs­ sen (Bündelausgleichung). Bei diesem Verfahren werden zu­ sätzlich zu den Lagen der Kamera auch die Koordinaten der in mehreren Bildern sichtbaren Punkte berechnet (Punktmes­ sung).

Desweiteren sind photogrammetrische Kalibrierverfahren be­ kannt zur Bestimmung der Strahlgeometrie von Kameras. Hierbei werden durch mehrfache Beobachtung eines zeitlich invarianten Kalibrierkörpers mittels numerischer Verfahren die inneren Parameter der Kamera hinsichtlich Brennweite, Verzeichnungen etc. bestimmt. Photogrammetrische Kali­ brierverfahren erreichen eine hohe Präzision und erfordern keine Präzisionspositioniereinrichtungen. Bei einem Ob­ jektfeld von z. B. 250 mm×350 mm und einer Kameraauflösung von 500×700 Pixeln sind laterale Fehler im Objektfeld von <10 µm (1σ) erreichbar.

Des weiteren ist ein aktives optisches Triangulationsver­ fahren zur Bestimmung der Strahlgeometrie von Projektoren zur Oberflächenvermessung bekannt geworden, bei dem der Projektor in der Lage sein muß, Linienkreuze zu projizie­ ren, deren Lage von einem photogrammetrischen Kameraver­ band vermessen wird (Th. Strutz: Ein genaues aktives opti­ sches Triangulationsverfahren zur Oberflächenvermessung, Thesis, Technische Universität Braunschweig, 1993). Diese Kalibrierung erfordert somit einen speziellen Projektor, der Linienkreuze zu projizieren imstande ist.

Ebenso sind numerische Kalibrierverfahren bekannt, die den durch Zentralperspektiven von Kamera und Projektor sowie durch optische Abbildungsfehler verzerrten Bildraum [ξ(x,y)] mittels Polynome an den 3D-Objektraum (x,y,z) ad­ aptieren (B. Breuckmann et al: Präzisionskalibrierung von topometrischen Sensoren, LASER 95, München, 19.- 23.06.1995). Dabei wird eine weiße Platte, auf die mehrere schwarze Kreisringe aufgebracht sind, mehrfach exakt in Normalenrichtung verschoben und jeweils entsprechend dem Sensorprinzip mit unterschiedlichen Streifenmustern be­ leuchtet. Die innerhalb der Kreisringe detektierten Meßwerte werden zur Kalibrierung verwendet. Nachteilig ist, daß diese Kalibrierung eine hochgenaue und wohldefi­ nierte mechanische Positionierung erfordert, da die Kali­ brierplatte exakt in Normalenrichtung bewegt werden muß. Des weiteren ist die Korrekturrechnung aufgrund der zahl­ reichen Polynomkoeffizienten langwierig. Das Kalibrierver­ fahren ist nicht für den Einsatz in Verbindung mit photo­ grammetrischen Verfahren (Navigation, Bündeltriangulation) geeignet, welche auf kompakte und physikalisch begründete Kamera- und Projektormodelle gestützt sind.

Der Erfindung liegt die Aufgabe zugrunde, ein Verfahren der eingangs genannten Gattung und eine Vorrichtung zur Durchführung des Verfahrens zu schaffen, mit welchen bei einer Messung prinzipiell jedem Bildpunkt der Kamera ein räumlicher Koordinatenwert in einem Referenzkoordinatensy­ stem zugeordnet werden kann, wobei der Koordinatenwert be­ liebig reproduzierbar ist.

Zweck der Erfindung ist zum Beispiel, Herstellungsmaschi­ nen, wie Pressen oder Fräsen oder Werkzeugmaschinen, mit­ tels der Erfindung so zu steuern, daß über die optische Aufnahme eines Probenkörpers ein hochgenaues Werkstück als Abbild des Probenkörpers hergestellt werden kann oder softwaremäßig praktisch beliebige Manipulationen am virtu­ ellen Bildmaterial vorgenommen und wieder als Werkstück ausgegeben werden können.

Die Lösung der Aufgabe besteht erfindungsgemäß darin, daß a) die Kalibriereinrichtung innerhalb und am Rande des zu kalibrierenden Arbeitsvolumens nacheinander in verschie­ dene Positionen relativ zu Kamera und Beleuchtungsprojek­ tor gebracht und die Kalibriereinrichtung jeweils so be­ leuchtet wird, daß die Bereiche der Signalmarken der Kali­ briereinrichtung in den digitalisierten und gespeicherten Bildern eine möglichst hohe Grauwert- oder Farbmodulation ohne Übersteuerung aufweisen, b) die Kalibrierung der Ka­ meras durch ein photogrammetrisches Standardverfahren er­ folgt zum Auffinden der Parameter der inneren und äußeren Orientierung, c) der Projektor einen Lichtmodulator auf­ weist, der nach außen sichtbare Muster aus beliebigen Streifen oder Pixeln als Bildelemente auf die Kalibrier­ einrichtung projiziert, d) zur Kalibrierung des Projektors dieser als inverse Kamera betrachtet wird, indem den äuße­ ren Bildelementen ein reales oder fiktives x-y-Projekti­ onsmuster definierter Breite aber unbestimmter Länge im Innern des Projektors zugeordnet wird, und zur Bestimmung der Parameter der inneren und äußeren Orientierung des Be­ leuchtungsprojektors mehrere Beobachtungen (Bildfolgen) herangezogen werden, in denen jeweils geometrische Zusam­ menhänge zwischen den x-y-Projektionsmusters (interne Pro­ jektorstreifenkoordinaten) und den korrespondierenden außen sichtbaren Mustern hergestellt werden, e) die gefun­ denen und gespeicherten Kalibrierparameter beim Einsatz des 3D-Sensorsystems zur Vermessung von Objekten von einem Algorithmus wiederverwendet werden, der einerseits die Strahlgeometrien innerhalb der Kamera und des Projektors korrigiert, zum anderen basierend auf dem Prinzip der Tri­ angulation die x,y,z-Koordinaten des Objektes im Objektraum berechnet.

Der Vorteil des erfindungsgemäßen Verfahrens besteht darin, daß mit demselben prinzipiell jedem Bildpunkt auf aufnehmenden Kamera ein räumlicher Koordinatenwert in ei­ nem Referenzkoordinatensystem zugeordnet werden kann, der beliebig reproduzierbar ist. Dazu besteht die 3D-Sensoran­ ordnung aus mindestens einer Kamera, wie Videokamera, Still Video Camera, Scanning Camera, und einer Einrichtung zur Digitalisierung und Speicherung von Bildfolgen der Ka­ mera, mindestens einem zur Kamera fixierten Beleuchtungsprojektor, der zeitlich nacheinander Licht­ strukturen aus wenigstens eindimensionalen Streifen inner­ halb eines Arbeitsvolumens erzeugt, mindestens einer Be­ leuchtungseinrichtung zur gleichmäßigen Beleuchtung von reflektierenden und/oder streuenden Signalmarken einer Ka­ libriereinrichtung und aus einem Rechner zur Steuerung und Verarbeitung der Bilder.

Der Kalibrierkörper (Welt) ist zum Zweck der Kalibrierung mit einem schwarz-weiß-gestreiften Muster ausgestattet, was ungefähr orthogonal zu dem ges endeten Streifenmuster des Projektors liegt. Dadurch werden die Streifen des Pro­ jektors periodisch unterbrochen und es entstehen ungefähr quadratische helle Lichtflecke. Diese Lichtflecke können von einer Kamera lokal, also in zwei oder in drei Dimen­ sionen, detektiert werden und geben eine Aussage über den Ort des Streifens im Referenzkoordinatensystem (Welt). Existieren zur Kalibrierung eines Projektors zwei Kameras, die ein Stereopaar bilden, so betrachten diese Kameras die Kalibrierplatte mit den weißen Quadraten. Dieses Stereo­ paar kann somit diese quadratischen weißen Flecken der Ka­ librierplatte im Raum bestimmen.

Ebenso ist es möglich, auf die zweite Kamera zu verzichten und die Ortsbestimmung der weißen Quadrate auf der Kali­ brierplatte mit einer einzigen Kamera zu bewerkstelligen. Das ist möglich, wenn mit der einer Kamera zunächst der Ort der Kalibrierplatte im Raum bestimmt wird über einen sogenannten Vorwärtsschnitt. Voraussetzung hierzu ist, daß die Kamera gewissermaßen die Geometrie der Kalibrierplatte kennt und aufgrund der perspektivischen Verzerrung die Lage der Kalibrierplatte relativ zu der Kamera berechnet, um dann in einem zweiten Schritt zu bestimmen, wo die weißen Quadrate in der Ebene der Kalibrierplatte liegen, so daß diese dreidimensional bestimmt sind. Zur Projektor­ kalibrierung wird zunächst ein Zwei-Kamera-System kali­ briert, d. h. es wird von einer Kamera selbst die innere Kalibrierung gemacht und anschließend die relative Zuord­ nung zueinander, so daß ein komplettes absolut kalibrier­ tes Stereopaar zur Verfügung steht. Dieses ist geeignet, Punkte im Raum absolut zu vermessen, die von beiden Kame­ ras gesehen werden. Werden somit weiße Projektorquadrate auf der Kalibrierplatte erzeugt, so können diese auch ab­ solut im Raum vermessen werden. Wird dies in verschiedenen Stellungen der Kalibrierplatte getan, so läßt sich der Strahlengang der Projektorstreifen im Raum verfolgen und durch das Projektionszentrum in der Kamera durch die Pro­ jektorpupille extrapolieren, womit die gesamte Geometrie des Projektors festgelegt ist.

Die relative Position und Orientierung von Kamera und Pro­ jektor bzw. Kameras und Projektoren kann zueinander tem­ porär, d. h. für die Dauer von Kalibrierung und Messung oder dauerhaft, zum Beispiel durch eine mechanische starre Verbindung fixiert sein.

Zur Selbstkalibrierung der Kamera kann die Kalibrierein­ richtung vorteilhaft wenigstens vier kalibrierte und eine Vielzahl weiterer Signalmarken oder Referenzmarken aufwei­ sen, die sich im Bildfeld der Kamera befinden müssen. Dar­ aus können zunächst mit Hilfe direkter Lösungen (Literatur Beyer) Näherungen für die Elemente der äußeren Orientie­ rung der Kamera relativ zum Referenzkoordinatensystem (Weltkoordinatensystem) berechnet werden. Ausgehend von diesen Näherungen kann die exakte äußere Orientierung des aktiv-optischen Systems in bezug auf den objektbezogenen Koordinatenrahmen berechnet werden.

In vorteilhafter Weise können zur näherungsweisen automa­ tischen Orientierung der Kalibriereinrichtung relativ zur Kamera wenigstens drei der kalibrierten und/oder der Viel­ zahl der weiteren Signalmarken kodiert sein, sofern die Koordinaten der letzteren zumindest näherungsweise bekannt sind. Mit dem Einsatz kodierter Signalmarken und direkten Lösungen für die Bestimmung der Näherungen kann somit das Verfahren vollautomatisch durchgeführt werden. Dabei kön­ nen die Berechnungen sowohl Indikatoren für die Genauig­ keit, d. h. Standardabweichungen der Orientierungselemente, als auch Indikatoren für die Robustheit des Verfahrens ausgeben.

Bei mehreren Kameras können diese über gleiche oder unter­ schiedliche Fokussierung für verschiedene Entfernungen verfügen ebenso wie sie über gleiche oder unterschiedliche Bildwinkel verfügen können wie die Kameras auch gleiche oder unterschiedliche spektrale Empfindlichkeit aufweisen können. Ebenso können die Kameras in die gleiche oder in verschiedene Raumrichtungen blicken und gleichzeitig oder zu unterschiedlichen Zeiten Bilder aufnehmen.

Es können durch das Verfahren Signalmarken mit einem hohen Kontrast mit sehr hoher Genauigkeit vermessen werden und zwar wenigstens zwischen 1/30 bis 1/100 Pixel.

Will man solche Systeme kalibrieren, die nur aus einer Ka­ mera und einem Projekt bestehen, so ist eine Zusatzinfor­ mation erforderlich, es muß dann gefordert werden, daß die Kalibrierplatte exakt beschrieben wird, d. h., daß diese vollständig eben ist und daß die schwarzen Streifen, die den Projektorstreifen schneiden, ebenfalls präzise defi­ niert sind. Ist das der Fall, kann aus einem einzigen Ka­ merabild jeweils die Lage der Kalibrierplatte im Raum be­ stimmt werden, womit wiederum die Lage der weißen Quadrate auf der Kalibrierplatte bestimmt ist. Beim Zweikamerakali­ brierverfahren werden die weißen Quadrate auf der Kali­ brierplatte von beiden Kameras gesehen, weitere Informatio­ nen der Platte sind nicht erforderlich. Beim Einkameraka­ librierverfahren muß, um die Kalibrierplatte im Raum loka­ lisieren zu können, auch eine Vermessung der Retromarken oder Signalmarken der Kalibrierplatte erfolgen. Auf der Basis dieser Information wird eine affine Transformation durchgeführt, aus der sich die Lage der Kalibrierplatte ergibt. Bei der affinen Transformation wird das beobach­ tete Bild der Retromarken bzw. Signalmarken mit einem ab­ gespeicherten Bild der Kalibrierplatte verglichen, die Platte wird dann durch eine numerische Operation so ge­ dreht, bis das Bild mit dem angespeicherten Bild überein­ stimmt, wodurch dann alle sechs Freiheitsgrade der Drehung der Translation im Raum bekannt sind.

Vorzugsweise kann mit einer Kamera und einem Projektor ein aktives 3D-Meßsystem kalibriert und ein solches Meßsystem aufgebaut werden, wozu zum Zwecke der Kalibrierung eine zweite Kamera beigestellt wird, die mit der ersten Kamera ein Stereopaar bildet, solange die Kamera kalibriert wird. Nach erfolgter Kalibrierung kann die zweite beigestellte Kamera wieder entfernt werden, wonach der kalibrierte Pro­ jektor zusammen mit der ersten verbleibenden Kamera ein aktives Meßsystem bildet. Dieser Ansatz mit zwei Kameras zur Kalibrierung kann selbstverständlich auch für Systeme benutzt werden, die von vornherein und permanent zwei Ka­ meras aufweisen. In diesem Fall könnte die Streifenauswer­ tung des Projektors sowohl mit der einen als auch mit der anderen Kamera erfolgen, so daß gewissermaßen zwei gekop­ pelte Meßsysteme vorliegen, die einmal mit der einen Ka­ mera und dem Projektor und das andere Mal mit der anderen Kamera und demselben Projektor arbeiten. Ebenso ist es möglich, daß beide Kameras, wie beim Kalibrieren, auch beim Messen ein Stereopaar bilden und der Projektor als zusätzliche Information zur Markierung des Objektes ver­ wendet wird.

Wesentlich ist, daß die Kalibrierplatte in ihrer Form be­ kannt ist, die Anordnungen der Signalmarken vorab vermes­ sen wird und daß die Kalibrierplatte über codierte Marken verfügt, die eine automatische Orientierung der Kalibrier­ platte im Raum ermöglicht; wenigstens vier Gitterpunkte auf der Kalibrierplatte dienen dann der Orientierung der­ selben relativ zur Kamera. Vorteilhaft ist es, wenn die vier Kalibrierpunkte codiert sind, damit ihre Reihenfolge automatisch identifiziert werden kann.

Vorteilhaft wird ein Projektor verwendet, der nur ein ein­ ziges periodisches Grauwert- oder Farbgitter projiziert, das in ein Phasenbild umgerechnet werden kann (laterales Phasenshiftverfahren), wobei die für die Kalibrierung er­ forderlichen Projektorstreifen synthetisch aus dem Phasen­ bild abgeleitet werden und die Schwarz-Weiß-Schwarz-Über­ gänge der synthetischen Streifen jeweils Orte konstanter Phase im Phasenbild darstellen.

Der Algorithmus zur Wiedererkennung der Kalibrierparameter korrigiert ebenfalls die im Projektormodell vorgesehenen und von üblichen Fehlermodellen für Kameras abweichenden Verzeichnungsfehler, zum Beispiel durch eine zylindrische Projektionsoptik verursachten Fehler; der zunächst nicht direkt beobachtbare Ort längs des Projektorstreifens wird zum Zwecke der Verzeichnungskorrektur über eine iterative Rechnung bestimmt.

Ist die Kalibriereinrichtung eine ebene Kalibrierplatte, so kann sie wenigstens vier kalibrierte Signalmarken auf­ weisen, und das zur Kalibrierung erforderliche schwarz- weiße Streifengitter bekannter Geometrie synthetisch er­ zeugt werden, indem ein berechnetes Streifengitter mit Hilfe der aktuell bestimmte Orientierungsparameter in die Bildebene der Kamera transformiert und mit dem Bild der Kalibrierplatte logisch verknüpft wird.

Vorteilhaft ist somit als Kalibriereinrichtung eine ebene Kalibrierplatte, die wenigstens vier kalibrierte Signal­ marken und ein schwarz-weißes Streifengitter bekannter Geometrie aufweist.

Die Kalibriereinrichtung kann aber auch eine nichtebene Kalibrierplatte sein, die wenigstens vier kalibrierte Si­ gnalmarken und ein schwarz-weißes Streifengitter bekannter Geometrie aufweist, wobei wenigstens zwei Kameras zum Ein­ satz gelangen, mit welchen die aktuelle Topologie der Ka­ libriereinrichtung jederzeit nachmeßbar ist.

Wenn die Kalibriereinrichtung eine ebene Kalibrierplatte ist, die wenigstens vier kalibrierte Signalmarken auf­ weist, so kann das zur Kalibrierung erforderliche schwarz- weiße Streifengitter bekannter Geometrie synthetisch er­ zeugt werden, indem ein berechnetes Streifengitter mit Hilfe der aktuell bestimmten Orientierungsparameter in die Bildebene der Kamera transformiert und mit dem Bild der Kalibrierplatte logisch verknüpft wird.

Weitere Vorteile der Erfindung bestehen insbesondere in einer Kostenreduktion durch Verzicht auf mechanische Prä­ zisionspositioniereinrichtungen wie Koordinatenmeßgeräte, Präzisions-Meßroboter, oder zusätzliche Präzisionsmeßsy­ steme, wie Theodolit, Interferometer, die ansonsten die Länge von Werkstück oder Sensor vermessen.

Kurzbeschreibung der Zeichnung, in der zeigen:

Fig. 1 eine prinzipielle Darstellung einer Kamera- Projektor-Einheit als Sensor, der auf eine Kalibrierplatte gerichtet ist,

Fig. 2 eine mögliche Ausführung einer Kalibriereinrichtung in Form einer ebenen Kalibrierplatte,

Fig. 3 eine schematische Darstellung der Verschiebung der Kalibrierplatte im Arbeitsvolumen,

Fig. 4 eine beleuchtete Kalibrierplatte mit retroreflektierenden Marken,

Fig. 5 ein typisches Beleuchtungsfeld eines Projektors, wie er im Verfahren Anwendung findet,

Fig. 6 eine Kalibrierplatte unter Beleuchtung mit einem periodischen Projektorstreifenmuster.

Fig. 1 zeigt eine kompakte Ausführung eines 3D-Sensors bestehend aus einer Kamera 10 und einen Projektor 11, wo­ bei die Strahlen der Kamera 10 mit x-y-Koordinaten und die eindimensionale Streifenkoordinate des Projektors 11 mit z bezeichnet sind. Weiterhin ist in Fig. 1 eine Kalibrier­ platte 12 mit mehreren Signalmarken 13 gezeigt, die sich im Blickfeld von Kamera 10 und Projektor 11 befindet.

Fig. 2 zeigt eine mögliche Ausführung einer Kalibrierein­ richtung als ebene Platte 21 mit den vier Ecken A, B, C, D und mit drei verschiedenen Strukturen: Erstens codierte Marken 22 mit einem eindeutig identifizierbaren Label, die in der Mitte der Kalibrierplatte 21 quadratisch angeordnet sind. Weitere uncodierte Marken 23, weiterhin parallele schwarz-weiße Streifenmuster 24, die in der Anwendung dann orthogonal zu den Projektorstreifen stehen und aus den Projektorstreifen stückweise Abschnitte herausschneiden.

Fig. 3 zeigt schematisch, wie eine Kalibrierplatte 30 mit ihren vier Ecken A, B, C, D im Arbeitsvolumen 31 bewegt wird, wobei das Arbeitsvolumen 31 dargestellt ist durch ein Drahtmodell mit den Punkten P1 bis P12 in Zuordnung der Ecken A, B, C, D die den Punkten P1 bis P12 entsprechen sol­ len; diese Punkte werden in einer Tabelle abgelegt, Ta­ belle 1.

Tabelle 1

Fig. 4 beschreibt die Kalibrierplatte 41 der Fig. 2 und eine Beleuchtung mit retroreflektierenden Marken 42, wobei nur diese mit erkennbarer Helligkeit zu sehen sind.

Fig. 5 zeigt das typische Beleuchtungsfeld des Projek­ tors, bei dem mehrere Projektorstreifen jeweils zu einem Streifenblock zusammengefaßt sind, z. B. ist im Streifen­ block 51 der Projektstreifen 1 bis 8 zusammengefaßt und auf weiß geschaltet, im Streifenblock 52 sind die Projek­ torstreifen 9 bis 16 zusammengefaßt und schwarz geschaltet usw.

Fig. 6 zeigt die Kalibrierplatte der Fig. 2 unter Be­ leuchtung mit einem periodischen Projektorstreifenmuster unter einem Winkel von 90 Grad; bei dieser Art der Be­ leuchtung werden die Projektorlichtstreifen in kleine qua­ dratische Bereiche 61 unterteilt, die einer Vermessung ei­ ner photogrammetrischen Erkennung und Vermessung mittels Kamera und Bildkorrelation zugänglich sind, und zwar gemäß der Fig. 3.

Die Erfindung ist insbesondere dazu anwendbar, eine Ein- Kamera-Projektor-Einheit oder eine Zwei-Kamera-Projek­ toreinheit unter Verzicht auf teure Präzisionskalibrier­ einrichtungen zu kalibrieren, um mit einem dergestalt ka­ librierten Ein-Kamera-Projektor-Sensor oder Zwei-Kamera- Projektor-Sensor bei einer nachfolgenden Messung prinzipi­ ell jedem Bildpunkt der Kamera einen räumlichen Koordina­ tenwert in einem Referenzkoordinatensystem in eindeutiger und reproduzierbarer Weise zuzuordnen. Damit können Her­ stellungsmaschinen, wie Pressen oder Fräsen oder Werkzeug­ maschinen angesteuert werden, so daß über die optische Aufnahme eines Probenkörpers ein hochgenaues Werkstück als Abbild des Probenkörpers hergestellt werden kann oder softwaremäßig praktisch beliebige Manipulationen am virtu­ ellen Bildmaterial vorgenommen und wieder als Werkstück ausgegeben werden können.

Claims (9)

1. Verfahren zur geometrischen Kalibrierung von optischen 3D-Sensoren zur dreidimensionalen Vermessung von Objekten relativ zu einem Referenzkoordinatensystem auf den Prinzi­ pien der Streifenprojektion und der Triangulation, unter Verwendung wenigstens einer Kamera (10), vorzugsweise Vi­ deokamera, einer Einrichtung zur Digitalisierung und Spei­ cherung von Bildfolgen der Kamera, mindestens einem zur Kamera fixierten Beleuchtungsprojektor (11), der zeitlich nacheinander Lichtstrukturen aus wenigstens eindimensiona­ len Streifen innerhalb eines Arbeitsvolumens erzeugt, min­ destens einer Beleuchtungseinrichtung zur gleichmäßigen Beleuchtung von reflektierenden und/oder streuenden Si­ gnalmarken einer Kalibriereinrichtung (12) und eines Rech­ ners zur Steuerung und Verarbeitung der Bilder, dadurch gekennzeichnet, daß

• a) die Kalibriereinrichtung innerhalb und am Rande des zu kalibrierenden Arbeitsvolumens nacheinander in verschiedene Positionen relativ zu Kamera und Beleuchtungsprojektor gebracht und die Kalibrier­ einrichtung jeweils so beleuchtet wird, daß die Bereiche der Signalmarken der Kalibriereinrichtung in den digitalisierten und gespeicherten Bildern eine möglichst hohe Grauwert- oder Farbmodulation ohne Übersteuerung aufweisen,
• b) die Kalibrierung der Kameras durch ein photogram­ metrisches Standardverfahren erfolgt zum Auffinden der Parameter der inneren und äußeren Orientie­ rung,
• c) der Projektor einen Lichtmodulator aufweist, der nach außen sichtbare Muster aus beliebigen Strei­ fen oder Pixeln als Bildelemente auf die Kali­ briereinrichtung projiziert,
• d) zur Kalibrierung des Projektors dieser als inverse Kamera betrachtet wird, indem den äußeren Bildele­ menten ein reales oder fiktives x-y-Projektionsmu­ ster definierter Breite aber unbestimmter Länge im Innern des Projektors zugeordnet wird, und zur Be­ stimmung der Parameter der inneren und äußeren Orientierung des Beleuchtungsprojektors mehrere Beobachtungen (Bildfolgen) herangezogen werden, in denen jeweils geometrische Zusammenhänge zwischen den x-y-Projektionsmustern (interne Projek­ torstreifenkoordinaten) und den korrespondierenden außen sichtbaren Mustern hergestellt werden,
• e) die gefundenen und gespeicherten Kalibrierparame­ ter beim Einsatz des 3D-Sensorsystems zur Vermes­ sung von Objekten von einem Algorithmus wiederver­ wendet werden, der einerseits die Strahlgeometrien innerhalb der Kamera und des Projektors korri­ giert, zum anderen basierend auf dem Prinzip der Triangulation die x,y,z-Koordinaten des Objektes im Objektraum berechnet.

2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daß die Kamera mittels einer Kalibriereinrichtung mit wenig­ stens vier kalibrierten und eine Vielzahl weiterer Si­ gnalmarken selbstkalibriert wird.

3. Verfahren nach Anspruch 2, dadurch gekennzeichnet, daß zur näherungsweisen automatischen Orientierung der Kali­ briereinrichtung relativ zur Kamera wenigstens drei der kalibrierten und/oder eine Vielzahl der weiteren Signalmarken kodiert werden, sofern die Koordinaten der letzteren zumindest näherungsweise bekannt sind.

4. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daß ein Projektor verwendet wird, der nur ein einziges peri­ odisches Grauwert- oder Farbgitter projiziert, das in ein Phasenbild umgerechnet werden kann (laterales Phasenshift­ verfahren), wobei die für die Kalibrierung erforderlichen Projektorstreifen synthetisch aus dem Phasenbild abgelei­ tet werden und die Schwarz-Weiß-Schwarz-Übergänge der syn­ thetischen Streifen jeweils Orte konstanter Phase im Pha­ senbild darstellen.

5. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daß der Algorithmus zur Wiedererkennung der Kalibrierparameter die im Projektormodell vorgesehenen und von üblichen Feh­ lermodellen für Kameras abweichenden Verzeichnungsfehler, zum Beispiel durch eine zylindrische Projektionsoptik ver­ ursachten Fehler, ebenfalls korrigiert und daß der zunächst nicht direkt beobachtbare Ort längs des Projek­ torstreifens zum Zwecke der Verzeichnungskorrektur über eine iterative Rechnung bestimmt wird.

6. Verfahren nach Anspruch 1 unter Verwendung einer ebe­ nen Kalibrierplatte als Kalibriereinrichtung, dadurch ge­ kennzeichnet, daß die Kalibrierplatte wenigstens vier ka­ librierte Signalmarken aufweist, und daß das zur Kalibrie­ rung erforderliche schwarz-weiße Streifengitter bekannter Geometrie synthetisch erzeugt wird, indem ein berechnetes Streifengitter mit Hilfe der aktuell bestimmten Orientie­ rungsparameter in die Bildebene der Kamera transformiert wird und mit dem Bild der Kalibrierplatte logisch ver­ knüpft wird.

7. Vorrichtung zur Durchführung des Verfahrens nach An­ spruch 1, dadurch gekennzeichnet, daß die Kalibrierein­ richtung eine ebene Kalibrierplatte ist, die wenigstens vier kalibrierte Signalmarken und ein schwarz-weißes Streifengitter bekannter Geometrie aufweist.

8. Vorrichtung zur Durchführung des Verfahrens nach An­ spruch 1, dadurch gekennzeichnet, daß die Kalibrierein­ richtung eine nichtebene Kalibrierplatte ist, die wenig­ stens vier kalibrierte Signalmarken und ein schwarz-weißes Streifengitter bekannter Geometrie aufweist, wobei wenig­ stens zwei Kameras zum Einsatz kommen, mit welchen die ak­ tuelle Topologie der Kalibriereinrichtung jederzeit nach­ meßbar ist.

9. Vorrichtung zur Durchführung des Verfahrens nach An­ spruch 6, dadurch gekennzeichnet, daß die Kalibrierein­ richtung eine ebene Kalibrierplatte ist, die wenigstens vier kalibrierte Signalmarken aufweist, wobei das zur Ka­ librierung erforderliche schwarz-weiße Streifengitter be­ kannter Geometrie synthetisch erzeugt ist, indem ein be­ rechnetes Streifengitter mit Hilfe der aktuell bestimmten Orientierungsparameter in die Bildebene der Kamera trans­ formiert wird und mit dem Bild der Kalibrierplatte logisch verknüpft wird.