WO2011113535A2 - Anlage, verfahren zur bestimmung der position eines fahrzeuges innerhalb einer anlage und verfahren zum erstellen einer verbesserten soll-bahnkurve für ein fahrzeug innerhalb einer anlage - Google Patents
Anlage, verfahren zur bestimmung der position eines fahrzeuges innerhalb einer anlage und verfahren zum erstellen einer verbesserten soll-bahnkurve für ein fahrzeug innerhalb einer anlage Download PDFInfo
- Publication number
- WO2011113535A2 WO2011113535A2 PCT/EP2011/001073 EP2011001073W WO2011113535A2 WO 2011113535 A2 WO2011113535 A2 WO 2011113535A2 EP 2011001073 W EP2011001073 W EP 2011001073W WO 2011113535 A2 WO2011113535 A2 WO 2011113535A2
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- vehicle
- camera
- determined
- mark
- markings
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/002—Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/20—Instruments for performing navigational calculations
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/16—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using electromagnetic waves other than radio waves
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0234—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using optical markers or beacons
Definitions
- the invention relates to a system, a method for determining the position of a
- Vehicle within a plant and a method for creating an improved target trajectory for a vehicle within a plant.
- Emitting laser beams to detect marks even the
- the invention is therefore based on the object, a system and a method for
- CONFIRMATION COPY wherein a means for determining the position of at least one vehicle is provided, wherein in the system markings are arranged.
- Markings is possible. Thus, only a simple inexpensive camera is necessary and the provision of appropriately shaped markers in the system. Furthermore, a mapping, that is to say a determination of the positions of the markings in an electronically available map is necessary, so that the position of the vehicle can be determined from the spatial markings. In this case, only the distance and angular position of the vehicle for marking must be determined during operation.
- the tag has identity information, such as a bar code or the like.
- identity information such as a bar code or the like.
- the mark is one-to-one identifiable and the stored position data are thus uniquely assignable.
- a vehicle has one or more markings on its outside.
- the advantage here is that even mobile markings
- the marker has a characteristic shape, in particular a rectangle, a circle, a hatched rectangle or a hatched circle, so that the size and distortion of the image taken by the camera of the marker an estimate of the distance between the camera and marker and one
- the line is here understood that touches the center of gravity of the lens of the camera and is aligned perpendicular to the symmetry plane of the lens.
- the advantage here is that from the size of the distance and from the distortion, for example, the ratio of the major axes of an ellipse, which results from the distorted representation of a circle, or from the angles of a parallelogram resulting from the distorted representation of a rectangle, the angular position between the connecting line between the camera and the marking and the normal direction of the marking just executed can be determined and thus the position of the camera can be determined. From the determinable by the camera
- Viewing angle of the mark ie the angle at which the mark of the camera appears, the orientation of the camera in space can be determined. From the angular position of the mark is the angle between the normal direction of the
- Marking and connecting line between camera and mark can be determined. Furthermore, the distance can be determined from the size of the marking. In addition, from the viewing angle of the camera, the orientation of the vehicle can be determined. In an advantageous embodiment, the spatial positions of the markings can be stored in a memory of the vehicle. The advantage here is that after detecting and identifying a mark by means of a relative distance and angular position for marking the spatial position can be determined.
- Important features in the method for determining the position of a vehicle within a system are that one or more markings or markings arranged on a vehicle and / or in the installation are detected by means of a camera of the vehicle, in particular an image is recorded and / or recorded be estimated from the respectively detected image of at least one mark the position of a vehicle and / or determined.
- the advantage here is that the position of the vehicle can be determined in a simple manner with a camera mounted on the vehicle by merely taking a camera image with image evaluation means.
- the size and distortion, in particular also the shape, position and spatial orientation, of the image taken by the camera make the mark an estimated value for the distance between the camera and the mark and an estimated value for the angle between the normal direction of the just executed
- Marking and the connecting line between camera and mark determinable.
- the advantage here is that in a simple manner from the eccentricity of an ellipse, so a distorted mapped circle, the angle of the normal direction of the plane containing the circle and from the size of the image, the distance is determinable.
- a circle other shapes are also usable, such as a rectangle, for example distorted figure as a parallelogram appears when the viewing direction is perpendicular to one side of the rectangle and an angle to the normal direction of the
- the orientation of the camera in space can be determined, in particular in the plane.
- improved estimated values are determined by determining the estimated values for a plurality of respective markings.
- the advantage here is that the error intervals can be reduced by increasing the number of labels used.
- a first marking is arranged on a first vehicle
- the orientation of the vehicle in the trajectory can be determined.
- Markers in the environment can be attached or attached. It is important that a data exchange connection between the vehicles and / or between the
- Vehicles and a stationary computer unit is present. Because the constantly changing spatial position of the mobile marking must be transmitted and taken into account in the evaluation of the detected by the camera image of the marker.
- an associated at the time of determining the position of the first vehicle speed of the first vehicle is detected and
- an extrapolated to the time of recording the image of the first mark by the camera of the second vehicle position information is determined and taken into account in the determination of the position of the other vehicle.
- the vehicle determines its position by means of a camera and markers provided in the system and is controlled along a setpoint curve
- Accuracy interval is determined, in particular so that to each
- trajectory sections are determined in which the respective accuracy of the determined positions exceeds a critical value, in particular therefore in the trajectory sections the positions can be determined with high accuracy
- a new target trajectory is determined and / or assembled by means of a computer such that the new target trajectory through the target positions runs, in particular as an interpolated curve, in particular by means of spline interpolation, or as curve segments composed of curve segments, such as straight line section and / or circular arc section.
- the vehicle is then moved to a desired position in these space areas and thus offsets or other systematic errors in the
- Position determination balanced This new position is saved as the respective target position. Thereafter, the target positions are interpolated and thus determines a new setpoint curve, which is then retractable.
- a vehicle 1 is equipped with a camera 2.
- the vehicle 1 is moved in a system which is equipped with a plurality of markings 3.
- Markings 3 lying in the field of view 4 of the camera 2 are detected by an image recognition means connected to the camera 2 and thus the position and orientation of the vehicle in the installation are determined.
- the respective position of the marker 3 is stored in a memory and thus determined from the determined by means of the camera angular distances between markers 3, the position of the vehicle.
- the markers 3 are arranged at approximately constant height above at the edges of a vehicle, whereby the computational effort is reduced.
- an inductive or optically recognizable guideline is dispensable.
- the markings 3 have a shape such that an alignment of the marking 3 can be recognized quickly with little computational effort and from this the orientation of the vehicle can be determined quickly and with little effort.
- the vehicle 1 also has a drive, preferably an electric motor drive, and on the one hand equipped with an energy storage and on the other hand inductively supplied from an elongated within the plant laid primary conductor.
- a drive preferably an electric motor drive
- the vehicle has a secondary coil, from which the drive of the vehicle can be supplied.
- the marking is designed with such a circular shape, hatching and / or in a rectangular shape that even with a single mark the Distance to the mark is determinable.
- the marking in a rectangular area has a circle and parallel bars that substantially fill the remaining area of the marking. From the distortion of the rectangle to a parallelogram or from the distortion of the circular area to an ellipse of the viewing angle of the camera can be determined. The distance can be determined from the size of the rectangle and / or the circle.
- the size of the markings as well as their spatial position is stored in the memory of the vehicle. Thus, depending on the number of marks a high accuracy can be achieved.
- a mark 5 can be attached, which is detectable by other vehicles.
- a plurality of vehicles are provided within the system for this purpose, which are each connected to each other for data exchange either directly with each other or by means of a central computer unit.
- Each of these vehicles is equipped with at least one or more markings 5 on its outside. Now has a vehicle determines its position in the manner indicated above, it reports this result together with the associated error interval to the central computer unit.
- Computer unit and / or to other vehicles on, with the speed and time at the time of measurement are further indexed.
- another vehicle determines its position from the markings detectable by its camera and / or from the mark or marks 5 of the first-mentioned vehicle, and when using the data of the mark attached to the first-mentioned vehicle, also an extrapolation of the position of the former vehicle, so that an estimate of this position is determined at the time of detection of the marks by the camera of the other vehicle.
- the camera and markers are also executable so that they are readable only in infrared.
- an adhesive surface is advantageous for material-locking connection with corresponding receiving surfaces of a vehicle or a vehicle
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Automation & Control Theory (AREA)
- Aviation & Aerospace Engineering (AREA)
- Traffic Control Systems (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Navigation (AREA)
Abstract
Anlage, Verfahren zur Bestimmung der Position eines Fahrzeuges innerhalb einer Anlage und Verfahren zum Erstellen einer verbesserten Soll-Bahnkurve für ein Fahrzeug innerhalb einer Anlage, aufweisend zumindest ein Fahrzeug, das zumindest eine Kamera aufweist, wobei ein Mittel zur Bestimmung der Position zumindest eines Fahrzeugs vorgesehen ist, wobei in der Anlage Markierungen angeordnet sind.
Description
Anlage, Verfahren zur Bestimmung der Position eines Fahrzeuges innerhalb einer Anlage und Verfahren zum Erstellen einer verbesserten Soll-Bahnkurve für ein Fahrzeug innerhalb einer Anlage
Beschreibung:
Die Erfindung betrifft eine Anlage, ein Verfahren zur Bestimmung der Position eines
Fahrzeuges innerhalb einer Anlage und ein Verfahren zum Erstellen einer verbesserten Soll- Bahnkurve für ein Fahrzeug innerhalb einer Anlage.
Es ist bekannt, bei Fahrzeugen ein GPS System zur Navigation zu verwenden. Allerdings ist dies in geschlossenen Anlagen nur teilweise verwendbar. Insbesondere Reflexion von Strahlungen kann zu Fehlern bei der Positionsbestimmung führen. Außerdem ist eine aufwendige elektronische Schaltung notwendig.
Weiter ist bei Fahrzeugen zur Navigation innerhalb einer Anlage bekannt, mittels
Aussendung von Laserstrahlen Markierungen zu detektieren, wobei sogar die
Entfernungsbestimmung mittels Laufzeitverfahren ausführbar ist. Auch diese Verfahren sind aufwendig und kostspielig.
Der Erfindung liegt daher die Aufgabe zugrunde, eine Anlage und ein Verfahren zur
Bestimmung der Position eines Fahrzeuges innerhalb einer Anlage weiterzubilden, wobei die Navigation des Fahrzeuges innerhalb der Anlage kostengünstig und in einfacher Weise weitergebildet werden soll.
Erfindungsgemäß wird die Aufgabe bei der Anlage nach den in Anspruch 1 , bei dem
Verfahren zur Bestimmung der Position eines Fahrzeuges innerhalb einer Anlage nach den in Anspruch 6 und bei dem Verfahren zum Erstellen einer verbesserten Soll-Bahnkurve für ein Fahrzeug innerhalb einer Anlage nach den in Anspruch 15 angegebenen Merkmalen gelöst.
Wichtige Merkmale der Erfindung bei der Anlage sind, dass sie zumindest ein Fahrzeug aufweist, das zumindest eine Kamera aufweist,
BESTÄTIGUNGSKOPIE
wobei ein Mittel zur Bestimmung der Position zumindest eines Fahrzeugs vorgesehen ist, wobei in der Anlage Markierungen angeordnet sind. Von Vorteil ist dabei, dass eine Bestimmung der räumlichen Position mittels der
Markierungen ermöglicht ist. Somit ist nur eine einfache kostengünstige Kamera notwendig und das Vorsehen von geeignet ausgeformten Markierungen in der Anlage. Des Weiteren ist eine Kartierung, also eine Bestimmung der Positionen der Markierungen in einer elektronisch verfügbaren Landkarte notwendig, so dass die Position des Fahrzeugs aus den räumlichen Markierungen bestimmbar ist. Dabei muss also im Betrieb nur die Entfernung und Winkellage des Fahrzeugs zur Markierung bestimmt werden.
Vorzugswiese weist die Markierung ein Identitätsinformation, wie Barcode oder dergleichen, auf. Auf diese Weise ist die Markierung eineindeutig identifizierbar und die gespeicherten Positionsdaten sind somit eineindeutig zuordenbar.
Bei einer vorteilhaften Ausgestaltung weist ein Fahrzeug eine oder mehrere Markierungen an seiner Außenseite auf. Von Vorteil ist dabei, dass auch mobile Markierungen
mitberücksichtigbar sind.
Bei einer vorteilhaften Ausgestaltung weist die Markierung eine kennzeichnende Form auf, insbesondere ein Rechteck, ein Kreis, ein schraffiertes Rechteck oder ein schraffierter Kreis, so dass aus Größe und Verzerrung des von der Kamera aufgenommenen Bildes der Markierung ein Schätzwert für Abstand zwischen Kamera und Markierung und ein
Schätzwert für den Winkel zwischen der Blickrichtung der Kamera und der Verbindungslinie zwischen Kamera und Markierung bestimmbar ist. Unter Blickrichtung wird hier diejenige Linie verstanden, die den Schwerpunkt der Linse der Kamera berührt und senkrecht zur Symmetrieebene der Linse ausgerichtet ist. Von Vorteil ist dabei, dass aus der Größe die Entfernung und aus der Verzerrung, also beispielsweise dem Verhältnis der Hauptachsen einer Ellipse, welche aus der verzerrten Darstellung eines Kreises resultiert, oder aus den Winkeln eines Parallelogramms, welches aus der verzerrten Darstellung eines Rechtecks resultiert, die Winkellage zwischen der Verbindungslinie zwischen Kamera und Markierung und der Normalenrichtung der eben ausgeführten Markierung bestimmbar ist und somit
die Position der Kamera bestimmbar ist. Aus dem durch die Kamera bestimmbaren
Betrachtungswinkel der Markierung, also demjenigen Winkel, unter dem die Markierung der Kamera erscheint, ist die Ausrichtung der Kamera im Raum bestimmbar. Aus der Winkellage der Markierung ist der Winkel zwischen Normalenrichtung der
Markierung und Verbindunglinie zwischen Kamer und Markierung bestimmbar. Des Weiteren ist aus der Größe der Markierung die Entfernung bestimmbar. Darüber hinaus ist aus dem Betrachtungswinkel der Kamera die Ausrichtung des Fahrzeugs bestimmbar. Bei einer vorteilhaften Ausgestaltung sind in einem Speicher des Fahrzeugs die räumlichen Positionen der Markierungen speicherbar. Von Vorteil ist dabei, dass nach Detektieren und Identifizieren einer Markierung mittels relativem Abstand und Winkellage zur Markierung die räumliche Position bestimmbar ist. Wichtige Merkmale bei dem Verfahren zur Bestimmung der Position eines Fahrzeuges innerhalb einer Anlage sind, dass eine oder mehrere, auf einem Fahrzeug und/oder in der Anlage angeordnete Markierung beziehungsweise Markierungen mittels einer Kamera des Fahrzeugs detektiert werden, insbesondere ein Bild erfasst und/oder aufgenommen werden, aus dem jeweils detektierten Bild zumindest einer Markierung die Position eines Fahrzeugs geschätzt und/oder bestimmt wird.
Von Vorteil ist dabei, dass in einfacher Weise mit einer auf dem Fahrzeug befestigten Kamera durch bloße Aufnahme eines Kamerabildes mit Bildauswertemitteln die Position des Fahrzeugs bestimmbar ist.
Bei einer vorteilhaften Ausgestaltung ist aus Größe und Verzerrung, insbesondere auch aus Form, Position und räumlicher Ausrichtung, des durch die Kamera aufgenommenen Bildes der Markierung ein Schätzwert für den Abstand zwischen Kamera und Markierung und ein Schätzwert für den Winkel zwischen der Normalenrichtung der eben ausgeführten
Markierung und der Verbindungslinie zwischen Kamera und Markierung bestimmbar. Von Vorteil ist dabei, dass in einfacher Weise aus der Exzentrizität einer Ellipse, also einem verzerrt abgebildeten Kreis, der Winkel der Normalenrichtung des den Kreis enthaltenden Ebene und aus der Größe der Abbildung die Entfernung bestimmbar ist. Anstatt eines Kreises sind auch andere Formen verwendbar, wie beispielsweise ein Rechteck, das bei
verzerrter Abbildung als Parallelogramm erscheint, wenn die Blickrichtung senkrecht ist zu einer Seite des Rechtecks und einen Winkel aufweist zur Normalenrichtung der das
Parallelogramm enthaltenden Ebene. Bei räumlicher Schrägansicht wird das Rechteck im Wesentlichen rautenförmig verzerrt dargestellt. Auch dann ist der Winkel zwischen
Blickrichtung und Normalenrichtung der das Parallelogramm enthaltenden Ebene
bestimmbar.
Aus dem aufgenommenen Betrachtungswinkel ist die Orientierung der Kamera im Raum bestimmbar, insbesondere in der Ebene.
Bei einer vorteilhaften Ausgestaltung werden durch Bestimmung der Schätzwerte zu mehreren jeweiligen Markierungen verbesserte Schätzwerte bestimmt. Von Vorteil ist dabei, dass die Fehlerintervalle verminderbar sind bei Erhöhung der Anzahl der verwendeten Markierungen.
Bei einer vorteilhaften Ausgestaltung ist eine erste Markierung auf einem ersten Fahrzeug angeordnet,
wobei die zugehörige Position dieser Markierung, insbesondere zusammen mit ihrem Fehlerintervall, an ein weiteres Fahrzeug übermittelt wird, mit dessen Kamera die Markierung des ersten Fahrzeugs detektiert wird und aus dem übermittelten
Positionswert und aus den Schätzwerten, welche aus dem von der Kamera des weiteren Fahrzeugs aufgenommenen Bildes der Markierung bestimmt werden, eine Position des weiteren Fahrzeugs ermittelt wird, insbesondere wobei die Schätzwerte einen Schätzwert für den Abstand zwischen Kamera und Markierung und einen Schätzwert für den Winkel zwischen Normalenrichtung der eben ausgeführten Markierung und der Verbindungslinie zwischen Kamera und Markierung umfassen. Außerdem ist aus dem Betrachtungswinkel die Orientierung des Fahrzeugs in der Verfahrebene bestimmbar. Von Vorteil ist dabei, dass sogar mobile Markierungen
verwendbar sind zur Bestimmung der Position. Somit ist beispielsweise bei hintereinander her fahrenden Fahrzeugen eine schnelle und einfache Bestimmung der Position ermöglicht, indem die Markierung des Vorausfahrenden Fahrzeugs, die beispielsweise an dessen Rückseite angebracht ist, detektiert und ausgewertet wird. Auf diese Weise ist sogar eine Positionsbestimmung in räumlichen Bereichen ermöglicht, wo keine stationären
Markierungen in der Umgebung anbringbar oder angebracht sind. Wichtig ist dabei, dass
eine Datenaustauschverbindung zwischen den Fahrzeugen und/oder zwischen den
Fahrzeugen und einer stationären Rechnereinheit vorhanden ist. Denn die ständig veränderliche räumliche Position der mobilen Markierung muss übermittelt werden und bei der Auswertung der durch die Kamera detektierten Abbildung der Markierung berücksichtigt werden.
Bei einer vorteilhaften Ausgestaltung wird eine zum Zeitpunkt der Bestimmung der Position des ersten Fahrzeuges zugehörige Geschwindigkeit des ersten Fahrzeugs erfasst und
bei der Bestimmung der Position des weiteren Fahrzeugs wird eine auf den Zeitpunkt der Aufnahme des Bildes der ersten Markierung durch die Kamera des zweiten Fahrzeuges extrapolierte Positionsinformation ermittelt und berücksichtigt bei der Bestimmung der Position des weiteren Fahrzeugs.
Von Vorteil ist dabei, dass bei Detektion und Bestimmung von Positionsdaten relativ zu einer mobilen Markierung eine Erhöhung der Genauigkeit ausführbar ist, indem die zeitlich extrapolierte Position verwendet wird. Hierzu ist selbstverständlich ebenfalls eine
Datenaustauschverbindung zwischen dem die Markierung aufweisenden Fahrzeug und dem die Kamera zur Aufnähme eines Bildes der mobilen Markierung aufweisenden Fahrzeugs.
Wichtige Merkmale bei dem Verfahren zum Erstellen einer Soll-Bahnkurve für ein Fahrzeug innerhalb einer Anlage sind, dass
1) das Fahrzeug seine Position mittels einer Kamer und in der Anlage vorgesehenen Markierungen bestimmt und entlang einer Sollkurve gesteuert wird,
2) wobei zu jeder bestimmten Position ein jeweiliges Fehlerintervall, insbesondere
Genauigkeitsintervall, bestimmt wird, insbesondere so dass zu jedem
Bahnkurvenpunkt ein Genauigkeitsintervall gespeichert wird,
3) wobei Bahnkurvenabschnitte bestimmt werden, in welchen die jeweilige Genauigkeit der bestimmten Positionen einen kritischen Wert übersteigt, insbesondere also in den Bahnkurvenabschnitten die Positionen mit hoher Genauigkeit bestimmbar sind,
4) wobei das Fahrzeug an Bahnpunkte der bestimmten Bahnkurvenabschnitte verfahren wird und dort als Teach-In das Fahrzeug auf eine jeweilige gewünschte Zielposition weiterverfahren wird, insbesondere wobei das Weiterverfahren von einem Bediener ausgeführt wird,
5) wobei eine neue Soll-Bahnkurve mittels eines Rechners derart ermittelt und/oder zusammengesetzt wird, dass die neue Soll-Bahnkurve durch die Zielpositionen
verläuft, insbesondere als interpolierte Kurve, insbesondere mittels Spline- Interpolation, oder als aus Kurvensegmenten, wie Geradenabschnitt und/oder Kreisbogenabschnitt, zusammengesetzte Kurve.
Von Vorteil ist dabei, dass zunächst eine Probefahrt gemacht wird und dort die
Raumbereiche mit guten Genauigkeiten für die Positionsbestimmung detektierbar sind.
Danach wird dann in diesen Raumbereichen das Fahrzeug auf eine gewünschte Position verschoben und somit Offsets oder sonstige systematische Fehler bei der
Positionsbestimmung ausgeglichen. Diese neue Position wird als jeweilige Zielposition abgespeichert. Danach werden die Zielpositionen interpoliert und somit eine neue Sollkurve bestimmt, die dann abfahrbar ist.
Weitere Vorteile ergeben sich aus den Unteransprüchen. Die Erfindung ist nicht auf die Merkmalskombination der Ansprüche beschränkt. Für den Fachmann ergeben sich weitere sinnvolle Kombinationsmöglichkeiten von Ansprüchen und/oder einzelnen
Anspruchsmerkmalen und/oder Merkmalen der Beschreibung und/oder der Figuren, insbesondere aus der Aufgabenstellung und/oder der sich durch Vergleich mit dem Stand der Technik stellenden Aufgabe.
Die Erfindung wird nun anhand von Abbildungen näher erläutert: In der Figur 1 ist das Prinzip der Erfindung schematisch skizziert.
Dabei ist ein Fahrzeug 1 mit einer Kamera 2 ausgerüstet. Das Fahrzeug 1 wird in einer Anlage verfahren, die mit mehreren Markierungen 3 ausgestattet ist.
Im Sichtfeld 4 der Kamera 2 liegende Markierungen 3 werden von einem mit der Kamera 2 verbundenen Bilderkennungsmittel detektiert und somit die Position und Ausrichtung des Fahrzeugs in der Anlage bestimmt.
Dabei wird einerseits die jeweilige Position der Markierung 3 in einem Speicher hinterlegt und somit aus den mittels der Kamera bestimmten Winkelabständen zwischen Markierungen 3 die Position des Fahrzeugs bestimmbar.
Vorzugsweise werden die Markierungen 3 in ungefähr konstanter Höhe über an den Rändern eines Fahrzeugs angeordnet, wodurch der Rechenaufwand verringerbar ist. Mittels der Markierungen 3 samt Kamera 2 mit Bilderkennungssystem ist eine induktiv oder optisch erkennbare Leitlinie entbehrlich.
Bei einem weiteren Ausführungsbeispiel weisen die Markierungen 3 eine derartige Form auf, dass eine Ausrichtung der Markierung 3 mit geringem Rechenaufwand schnell erkennbar ist und daraus die Ausrichtung des Fahrzeugs schnell und mit geringem Aufwand bestimmbar ist.
Das Fahrzeug 1 weist außerdem einen Antrieb, vorzugsweise einen elektromotorischen Antrieb, auf und ist einerseits mit einem Energiespeicher ausgerüstet und andererseits induktiv versorgbar aus einem innerhalb der Anlage langgestreckt verlegten Primärleiter. Zur induktiven Ankoppelung weist das Fahrzeug eine Sekundärspule auf, aus welcher der Antrieb des Fahrzeugs versorgbar ist.
Vorzugsweise ist die Markierung mit derartigen Kreisform, Schraffuren und/oder in rechteckiger Form ausgeführt, dass sogar schon mit einer einzigen Markierung die
Entfernung zur Markierung bestimmbar ist. Beispielsweise weist die Markierung in einer rechteckigen Fläche einen Kreis auf sowie parallele Balken, die im Wesentlichen die Restfläche der Markierung auffüllen. Aus der Verzerrung des Rechtecks zu einem Parallelogramm beziehungsweise aus der Verzerrung der Kreisfläche zu einer Ellipse ist der Betrachtungswinkel der Kamera bestimmbar. Aus der Größe des Rechtecks und/oder des Kreises ist die Entfernung bestimmbar. Zwar sind die bestimmten Werte für Winkel und Entfernung mit einem
Fehlerintervall belastet. Jedoch ist durch die Bestimmung dieser Größen zu mehreren Markierungen eine ausreichende Genauigkeit erreichbar.
Die Größe der Markierungen ist ebenso wie deren räumliche Position im Speicher des Fahrzeugs hinterlegt. Somit ist je nach Anzahl der Markierungen eine hohe Genauigkeit erreichbar.
Auf dem Fahrzeug ist ebenfalls eine Markierung 5 anbringbar, die von anderen Fahrzeugen detektierbar ist.
In einem weiteren erfindungsgemäßen Ausführungsbeispiel sind hierzu mehrere Fahrzeuge innerhalb der Anlage vorgesehen, die jeweils zum Datenaustausch entweder direkt miteinander oder mittels einer zentralen Rechnereinheit verbunden sind. Jedes dieser Fahrzeuge ist mit mindestens einer oder mehreren Markierungen 5 an seiner Außenseite ausgestattet. Hat nun ein Fahrzeug seine Position bestimmt in der oben angegebenen Weise, meldet es dieses Ergebnis zusammen mit dem zugehörigen Fehlerintervall an die zentrale
Rechnereinheit und/oder an weitere Fahrzeuge weiter, wobei auch die Geschwindigkeit und Zeit zum Messzeitpunkt weitermeldbar sind. Auf diese Weise ist es ermöglicht, dass ein weiteres Fahrzeug aus den von seiner Kamera detektierbaren Markierungen und/oder aus der oder den Markierungen 5 des erstgenannten Fahrzeugs seine Position bestimmt, wobei bei Verwendung der Daten der am erstgenannten Fahrzeug angebrachten Markierung auch eine Extrapolation der Position des erstgenannten Fahrzeuges ausgeführt wird, so dass ein Schätzwert dieser Position zum Zeitpunkt der Detektion der Markierungen durch die Kamera des weiteren Fahrzeugs bestimmt wird.
Die Kamera und Markierungen sind auch derart ausführbar, dass sie nur in Infrarot ablesbar sind. Auf der Rückseite der Markierungen ist eine Klebefläche vorteilhaft zum stoffschlüssgien Verbinden mit entsprechenden Aufnahmeflächen eines Fahrzeugs oder einer
Anlagenkomponente.
Bezugszeichenliste
1 Fahrzeug
2 Kamera
3 Markierung
4 Sichtfeld der Kamera 2
5 Markierung auf Fahrzeug
Claims
1. Anlage, aufweisend zumindest ein Fahrzeug, das zumindest eine Kamera aufweist, wobei ein Mittel zur Bestimmung der Position zumindest eines Fahrzeugs vorgesehen ist, dadurch gekennzeichnet, dass
in der Anlage Markierungen angeordnet sind.
2. Anlage nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
ein Fahrzeug eine oder mehrere Markierungen an seiner Außenseite aufweist.
3. Anlage nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
die Markierung eine kennzeichnende Form aufweist, insbesondere ein Rechteck, ein Kreis, ein schraffiertes Rechteck oder ein schraffierter Kreis, so dass aus Größe und Verzerrung des von der Kamera aufgenommenen Bildes der Markierung ein Schätzwert für Abstand zwischen Kamera und Markierung und ein Schätzwert für den Winkel zwischen
Normalenrichtung der eben ausgeführten Markierung und der Verbindungslinie zwischen Kamera und Markierung bestimmbar ist.
4. Anlage nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
aus dem Betrachtungswinkel der Markierung ein Schätzwert für die räumliche Ausrichtung der Kamera bestimmbar ist, insbesondere für die Blickrichtung der Kamera innerhalb der Verfahrebene des Fahrzeugs.
5. Anlage nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
in einem Speicher des Fahrzeugs die räumlichen Positionen der Markierungen speicherbar sind.
6. Anlage nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
die Markierungen eine jeweilige eineindeutig kennzeichnende Struktur, wie
Identitätsinformation, Barcode oder dergleichen, aufweisen und/oder dass die Kamera im Bereich nicht-sichtbarer elektromagnetischer Wellen, insbesondere Infrarot, arbeitet und die Markierungen in diesem Bereich kennzeichnend sind, und/oder dass auf ihrer Rückseite selbstklebend ausgeführt sind, insbesondere zum schnellen und einfachen Anordnen an Komponenten der Anlage oder an einer entsprechenden
Aufnahmefläche am Fahrzeug.
7. Verfahren zur Bestimmung der Position eines Fahrzeuges innerhalb einer Anlage, insbesondere nach mindestens einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass eine oder mehrere, auf einem Fahrzeug und/oder in der Anlage angeordnete Markierung beziehungsweise Markierungen mittels einer Kamera des Fahrzeugs detektiert werden, insbesondere ein Bild erfasst und/oder aufgenommen werden, aus dem jeweils detektierten Bild zumindest einer Markierung die Position eines Fahrzeugs geschätzt und/oder bestimmt wird.
8. Verfahren nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
aus Größe und Verzerrung, insbesondere auch aus Form, Position und räumlicher
Ausrichtung, des durch die Kamera aufgenommenen Bildes der Markierung ein Schätzwert für den Abstand zwischen Kamera und Markierung und ein Schätzwert für den Winkel zwischen der Blickrichtung der Kamera und der Verbindungslinie zwischen Kamera und Markierung bestimmbar ist.
9. Verfahren nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
durch Bestimmung der Schätzwerte zu mehreren jeweiligen Markierungen verbesserte Schätzwerte bestimmt werden.
10. Verfahren nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
eine erste Markierung auf einem ersten Fahrzeug angeordnet ist,
- wobei die zugehörige Position dieser Markierung, insbesondere zusammen mit ihrem
Fehlerintervall, an ein weiteres Fahrzeug übermittelt wird, mit dessen Kamera die Markierung des ersten Fahrzeugs detektiert wird und aus dem übermittelten
Positionswert und aus den Schätzwerten, welche aus dem von der Kamera des weiteren Fahrzeugs aufgenommenen Bildes der Markierung bestimmt werden, eine Position des weiteren Fahrzeugs ermittelt wird, insbesondere wobei die Schätzwerte einen Schätzwert für den Abstand zwischen Kamera und Markierung und einen Schätzwert für den Winkel zwischen der Blickrichtung der Kamera und der Verbindungslinie zwischen Kamera und Markierung umfassen.
1 1. Verfahren nach mindestens einem der vorangegangenen Ansprüche,
dadurch gekennzeichnet, dass
eine zum Zeitpunkt der Bestimmung der Position des ersten Fahrzeuges zugehörige Geschwindigkeit des ersten Fahrzeugs erfasst wird und
- bei der Bestimmung der Position des weiteren Fahrzeugs eine auf den Zeitpunkt der
Aufnahme des Bildes der ersten Markierung durch die Kamera des zweiten
Fahrzeuges extrapolierte Positionsinformation ermittelt und berücksichtigt wird bei der Bestimmung der Position des weiteren Fahrzeugs.
12. Verfahren zum Erstellen einer Soll-Bahnkurve und/oder Betreiben einer Anlage mit Position eines Fahrzeuges innerhalb einer Anlage, insbesondere nach mindestens einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass aus den bekannten Positionen und Orientierungen der Markierungen eine elektronische lesbare Landkarte erstellt wird, aus der Raumbereiche bestimmbar sind, in denen eine fehlerarme Positionsbestimmung ausführbar ist, insbesondere wobei also eine hohe Anzahl von Markierungen detektierbar ist mittels der Kamera bestimmbar ist.
13. Verfahren nach Anspruch 12,
dadurch gekennzeichnet, dass
ein Soll-Bahnkurve für das Fahrzeug derart bestimmt wird, dass eine möglichst viele und/oder lange Bahnkurvenabschnitte durch die Raumbereiche mit fehlerarmer
Positionsbestimmung verlaufen.
14. Verfahren nach Anspruch 12 oder 13,
dadurch gekennzeichnet, dass
aus der elektronisch lesbaren Landkarte Position und Ausrichtung einer zusätzlich erforderlichen Markierung bestimmbar ist.
15. Verfahren zum Erstellen einer verbesserten Soll-Bahnkurve für ein Fahrzeug innerhalb einer Anlage, insbesondere nach mindestens einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass
1) wobei das Fahrzeug seine Position mittels einer Kamer und in der Anlage
vorgesehenen Markierungen bestimmt und entlang einer Sollkurve gesteuert wird,
2) wobei zu jeder bestimmten Position ein jeweiliges Fehlerintervall, insbesondere Genauigkeitsintervall, bestimmt wird, insbesondere so dass zu jedem
Bahnkurvenpunkt ein Genauigkeitsintervall gespeichert wird,
3) wobei Bahnkurvenabschnitte bestimmt werden, in welchen die jeweilige
Genauigkeit der bestimmten Positionen einen kritischen Wert übersteigt, insbesondere also in den Bahnkurvenabschnitten die Positionen mit hoher Genauigkeit bestimmbar sind,
4) wobei das Fahrzeug an Bahnpunkte der bestimmten Bahnkurvenabschnitte
verfahren wird und dort als Teach-In das Fahrzeug auf eine jeweilige gewünschte Zielposition weiterverfahren wird, insbesondere wobei das Weiterverfahren von einem Bediener ausgeführt wird,
5) wobei eine neue Soll-Bahnkurve mittels eines Rechners derart ermittelt und/oder zusammengesetzt wird, dass die neue Soll-Bahnkurve durch die Zielpositionen verläuft, insbesondere als interpolierte Kurve, insbesondere mittels Spline- Interpolation, oder als aus Kurvensegmenten, wie Geradenabschnitt und/oder Kreisbogenabschnitt, zusammengesetzte Kurve.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP11709002.7A EP2548088B1 (de) | 2010-03-19 | 2011-03-04 | Anlage, verfahren zur bestimmung der position eines fahrzeuges innerhalb einer anlage und verfahren zum erstellen einer verbesserten soll-bahnkurve für ein fahrzeug innerhalb einer anlage |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102010012187.8 | 2010-03-19 | ||
| DE102010012187.8A DE102010012187B4 (de) | 2010-03-19 | 2010-03-19 | Verfahren zur Bestimmung der Position zumindest eines ersten und eines zweiten Fahrzeuges innerhalb einer Anlage |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| WO2011113535A2 true WO2011113535A2 (de) | 2011-09-22 |
| WO2011113535A3 WO2011113535A3 (de) | 2013-01-24 |
| WO2011113535A9 WO2011113535A9 (de) | 2013-05-30 |
Family
ID=44455208
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/EP2011/001073 Ceased WO2011113535A2 (de) | 2010-03-19 | 2011-03-04 | Anlage, verfahren zur bestimmung der position eines fahrzeuges innerhalb einer anlage und verfahren zum erstellen einer verbesserten soll-bahnkurve für ein fahrzeug innerhalb einer anlage |
Country Status (3)
| Country | Link |
|---|---|
| EP (1) | EP2548088B1 (de) |
| DE (1) | DE102010012187B4 (de) |
| WO (1) | WO2011113535A2 (de) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103869814A (zh) * | 2012-12-17 | 2014-06-18 | 联想(北京)有限公司 | 一种终端定位和导航方法以及可移动的终端 |
| CN107727104A (zh) * | 2017-08-16 | 2018-02-23 | 北京极智嘉科技有限公司 | 结合标识的同时定位和地图创建导航方法、装置及系统 |
| WO2018206151A1 (de) * | 2017-05-10 | 2018-11-15 | Sew-Eurodrive Gmbh & Co. Kg | Verfahren zur bestimmung der position eines mobilteils und informationsträger zur durchführung eines verfahrens |
| DE102024125688A1 (de) * | 2024-09-06 | 2026-03-12 | Beissbarth Automotive Testing Solutions Gmbh | Vorrichtung, Verfahren und System zum Bestimmen der räumlichen Ausrichtung von Fahrzeug-Aufnahmeflächen einer Kraftfahrzeug-Hebebühne |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102773862B (zh) * | 2012-07-31 | 2015-01-07 | 山东大学 | 用于室内移动机器人的快速精确定位系统及其工作方法 |
| DE102013001079B4 (de) * | 2013-01-23 | 2023-02-16 | Sew-Eurodrive Gmbh & Co Kg | System mit Fahrzeugen und Verfahren zum Betreiben eines Systems mit mehreren Fahrzeugen |
| DE102014210673A1 (de) * | 2014-06-05 | 2015-12-17 | BSH Hausgeräte GmbH | Bestimmen einer Einschubebene eines Gargutträgers |
| DE102014219326A1 (de) * | 2014-09-24 | 2016-03-24 | Continental Teves Ag & Co. Ohg | Sensorfusion mit Smartphone im Fahrzeug |
| CN106017458B (zh) * | 2016-05-18 | 2019-08-27 | 宁波华狮智能科技有限公司 | 移动机器人组合式导航方法及装置 |
| JP2019159380A (ja) * | 2018-03-07 | 2019-09-19 | 株式会社デンソー | 物体検知装置、物体検知方法およびプログラム |
| DE102018221142A1 (de) * | 2018-12-06 | 2020-06-10 | Robert Bosch Gmbh | Lokalisierung in komplexen Verkehrsszenarien durch Markierungen |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10501908A (ja) * | 1994-06-22 | 1998-02-17 | シーメンス アクチエンゲゼルシヤフト | 自律可動式装置のオリエンテーション、ルート選定及び制御のための方法 |
| US7054716B2 (en) * | 2002-09-06 | 2006-05-30 | Royal Appliance Mfg. Co. | Sentry robot system |
| DE102004020099A1 (de) * | 2004-04-24 | 2005-11-17 | Kuka Roboter Gmbh | Verfahren und Vorrichtung zum Beeinflussen eines mehrachsigen Handhabungsgeräts |
| US7845560B2 (en) * | 2004-12-14 | 2010-12-07 | Sky-Trax Incorporated | Method and apparatus for determining position and rotational orientation of an object |
| US8368759B2 (en) * | 2007-03-13 | 2013-02-05 | Research Institute Of Industrial Science & Technology | Landmark for position determination of mobile robot and apparatus and method using it |
| US20090062974A1 (en) * | 2007-09-03 | 2009-03-05 | Junichi Tamamoto | Autonomous Mobile Robot System |
-
2010
- 2010-03-19 DE DE102010012187.8A patent/DE102010012187B4/de active Active
-
2011
- 2011-03-04 EP EP11709002.7A patent/EP2548088B1/de active Active
- 2011-03-04 WO PCT/EP2011/001073 patent/WO2011113535A2/de not_active Ceased
Non-Patent Citations (1)
| Title |
|---|
| None |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103869814A (zh) * | 2012-12-17 | 2014-06-18 | 联想(北京)有限公司 | 一种终端定位和导航方法以及可移动的终端 |
| WO2018206151A1 (de) * | 2017-05-10 | 2018-11-15 | Sew-Eurodrive Gmbh & Co. Kg | Verfahren zur bestimmung der position eines mobilteils und informationsträger zur durchführung eines verfahrens |
| CN107727104A (zh) * | 2017-08-16 | 2018-02-23 | 北京极智嘉科技有限公司 | 结合标识的同时定位和地图创建导航方法、装置及系统 |
| CN107727104B (zh) * | 2017-08-16 | 2019-04-30 | 北京极智嘉科技有限公司 | 结合标识的同时定位和地图创建导航方法、装置及系统 |
| DE102024125688A1 (de) * | 2024-09-06 | 2026-03-12 | Beissbarth Automotive Testing Solutions Gmbh | Vorrichtung, Verfahren und System zum Bestimmen der räumlichen Ausrichtung von Fahrzeug-Aufnahmeflächen einer Kraftfahrzeug-Hebebühne |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2011113535A9 (de) | 2013-05-30 |
| DE102010012187A1 (de) | 2011-09-22 |
| EP2548088A2 (de) | 2013-01-23 |
| EP2548088B1 (de) | 2020-05-06 |
| WO2011113535A3 (de) | 2013-01-24 |
| DE102010012187B4 (de) | 2020-12-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2548088B1 (de) | Anlage, verfahren zur bestimmung der position eines fahrzeuges innerhalb einer anlage und verfahren zum erstellen einer verbesserten soll-bahnkurve für ein fahrzeug innerhalb einer anlage | |
| DE102012211151B4 (de) | Ladeanordnung und Verfahren zum induktiven Laden eines elektrischen Energiespeichers | |
| DE102019220049A1 (de) | Verfahren und Vorrichtung zur Kalibrierung mindestens eines Sensors | |
| DE102013012324A1 (de) | Verfahren und Vorrichtung zur Fahrwegfindung | |
| DE102011111051A1 (de) | Verfahren und Vorrichtung zur Unterstützung eines Fahrers bei der Steuerung eines Fahrzeugs | |
| DE102015218410A1 (de) | Verfahren und Einrichtung zum Bestimmen der Absolutposition eines Fahrzeuges | |
| DE102013001079B4 (de) | System mit Fahrzeugen und Verfahren zum Betreiben eines Systems mit mehreren Fahrzeugen | |
| DE102015209147A1 (de) | Verfahren zur Parkflächenerkennung | |
| WO2011098107A1 (de) | Verfahren zur ermittlung eines spurverlaufes einer fahrstrecke | |
| DE102018009114A1 (de) | Verfahren zur Bestimmung der Position eines auf einer Verfahrfläche bewegbaren Mobilteils und Anlage mit Mobilteil zur Durchführung des Verfahrens | |
| DE102018210340A1 (de) | Verfahren und System zum Ermitteln einer Relativpose zwischen einem Zielobjekt und einem Fahrzeug | |
| DE102021127078A1 (de) | Verfahren zum Plausibilisieren einer auf Basis von Schwarmdaten erzeugten Trajektorie für ein zumindest teilweise assistiert betriebenes Kraftfahrzeug, Computerprogrammprodukt sowie Assistenzsystem | |
| DE102010021042A1 (de) | Verfahren zur rechnergestützten Spurführung von Fahrzeugen | |
| DE102016207181A1 (de) | Verfahren und System zum Bestimmen einer Position eines Fahrzeugs auf einer Fahrbahn | |
| DE102009022277A1 (de) | Vorrichtung zur Erfassung von Objekten | |
| DE102018008792A1 (de) | Vorrichtung zum zeitgleichen Kalibrieren eines Mehrsensorsystems | |
| DE102011012689B4 (de) | Verfahren zur Bestimmung der Position eines Objekts in einem Bezugssystem | |
| DE102006044615A1 (de) | Verfahren zur Kalibrierung von Bilderfassungseinrichtungen in Fahrzeugen | |
| EP3612905B1 (de) | Verfahren zum detektieren beweglicher objekte in einer anlage und/oder zur kollisionsvermeidung in einer anlage und anlage zur durchführung eines solchen verfahrens | |
| DE102016222258A1 (de) | Verfahren und System zum Bereitstellen von Daten für eine Trajektorie | |
| DE102009024444A1 (de) | Verfahren und Vorrichtung zur Messung der Entfernung zu einem anfliegenden Ziel | |
| EP2565580A1 (de) | Verfahren zur Bestimmung eines Ausmaßes eines Objekts in einer Umgebung eines Fahrzeugs sowie eine entsprechende Vorrichtung und ein Fahrzeug mit einer derartigen Vorrichtung | |
| DE102017011564A1 (de) | Verfahren zur Erkennung einer Straßenausfahrt | |
| DE102012003027A1 (de) | Fahrerassistenzsystem für ein Fahrzeug und Verfahren zur Signalisierung einer Spurverlassenswarnung an einen Fahrer und/oder zur automatisierten Spurführung des Fahrzeugs sowie Fahrzeug mit dem Fahrerassistenzsystem | |
| DE102021005925A1 (de) | Verfahren zur Spurhalteregelung eines Fahrzeuges |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 11709002 Country of ref document: EP Kind code of ref document: A2 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| WWE | Wipo information: entry into national phase |
Ref document number: 2011709002 Country of ref document: EP |