WO2011124483A1 - Verfahren und vorrichtung zur lokalisierung von personen in einem vorgegebenen bereich - Google Patents

Verfahren und vorrichtung zur lokalisierung von personen in einem vorgegebenen bereich Download PDF

Info

Publication number
WO2011124483A1
WO2011124483A1 PCT/EP2011/054629 EP2011054629W WO2011124483A1 WO 2011124483 A1 WO2011124483 A1 WO 2011124483A1 EP 2011054629 W EP2011054629 W EP 2011054629W WO 2011124483 A1 WO2011124483 A1 WO 2011124483A1
Authority
WO
WIPO (PCT)
Prior art keywords
persons
predetermined
group
evaluation
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/EP2011/054629
Other languages
English (en)
French (fr)
Inventor
Jan Rexilius
Jan Karl Warzelhan
Matthias Koenig
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to US13/639,892 priority Critical patent/US8983129B2/en
Publication of WO2011124483A1 publication Critical patent/WO2011124483A1/de
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING SYSTEMS, e.g. PERSONAL CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects

Definitions

  • the invention relates to a method for locating persons in a predetermined area according to the preamble of independent claim 1 and an associated device for locating persons in a predetermined area according to the preamble of independent claim 8, as well as a computer program product and a data processing program for carrying out the method ,
  • Image processing methods are nowadays an integral part of automatic video surveillance techniques. They serve, for example, for segmentation, detection, tracking, classification and counting of moving objects within a region to be monitored, which is monitored by at least one image recording device.
  • the at least one image acquisition device continuously generates images of the predetermined monitored area, which are analyzed and evaluated using at least one image processing method and / or image evaluation method.
  • the image processing is an essential component for automatic monitoring of larger areas with a plurality of image recording devices, in particular in order to be able to associate objects which are recorded with different image recording devices from one another from different images.
  • an apparatus and a method for tracking at least one object in one Scene described.
  • the described method recognizes when a moving object comes to a stop from the movement and counts the dwell time at standstill in order to generate signaling as a function of the dwell time.
  • the object is described by a list or a matrix with respect to the direction of movement and the time.
  • the described method is used in particular in a video surveillance, which has at least one image generator, a processor, a memory and output means, with which a signaling, for example in the form of an alarm, can take place.
  • the signaling can also be used as a signal for other systems.
  • the inventive method for localizing persons in a given area with the features of independent claim 1 has the advantage that generated images of a given area for the detection and localization of persons are analyzed and evaluated, with recognized and localized persons classified and at least be assigned to a predetermined group, and wherein the assignment to a group is made in accordance with predetermined clothing features.
  • An apparatus for locating persons in a predetermined area with the features of independent claim 8 has the advantage that an evaluation and control unit analyzes and evaluates the generated images of the predetermined area for the detection and localization of persons, wherein the evaluation and control unit classified and localized persons classified and assigned to at least one predetermined group, wherein the evaluation and control unit performs the assignment to a group depending on predetermined clothing features.
  • the images of the area to be monitored are continuously generated by at least one image acquisition device and analyzed and evaluated using at least one image processing method and / or image evaluation method.
  • the evaluation and control unit according to the invention is designed to execute steps of the above-mentioned method and a computer program for controlling steps of the above-mentioned method when the computer program is executed by the evaluation and control unit. Under an evaluation and control unit can present an electrical
  • the control unit may have at least one interface, which may be formed in hardware and / or software.
  • the interfaces may for example be part of a so-called system ASICs, the various functions of the
  • Control unit includes.
  • the interfaces are their own integrated circuits or at least partially consist of discrete components.
  • the interfaces may be software modules that are present, for example, on a microcontroller in addition to other software modules.
  • a computer program product with program code which is stored on a machine-readable carrier such as a semiconductor memory, a hard disk memory or an optical memory and is used to carry out the method according to one of the described embodiments when the program is executed on a control device.
  • Embodiments of the present invention advantageously enable video-based localization of service personnel based on uniform workwear.
  • embodiments of the present invention may, as further tasks, perform the counting of the service personnel as well as the customers in predefined areas to determine whether there is enough personnel in an area, ie, a favorable ratio of personnel to customers. With this information, an optimal distribution of the staff can be achieved in order to provide the customer with the best possible support.
  • the essential advantage of the present invention lies in the video-based recognition of partial areas within the area to be monitored, in which a sufficient number or a too small number of persons of the service personnel is present.
  • enhancements are possible with regard to the analysis of the actions currently being performed by the service staff to determine whether the complete service staff is currently running at full capacity, so further support is needed.
  • the video-based analysis Compared with a localization of individual persons of the service personnel by means of radio sensors, the video-based analysis has the advantage that the area to be monitored is precisely defined, i. there is a higher accuracy in locating persons of service personnel. If a person of the service personnel moves out of the field of view of the at least one image recording device, then this person is no longer available in this area.
  • the video analysis allows the counting of persons of the service personnel and other persons or objects in the area to be monitored. Thus, the relationship between persons of the service personnel and other persons can be determined in a simple manner.
  • the video analysis can also determine by means of action analysis how many persons of the service personnel are currently involved.
  • embodiments of the present invention also enable a weak type of access control. If only persons with safety clothing are to be present in a certain area, then this can be determined and reported very simply by the video analysis.
  • the predetermined clothing features include, for example, predetermined color spectrums and / or shapes.
  • workwear such as headgear, scarves, jackets, trousers, etc., which have a predetermined shape and / or color, can be distinguished from "normal wear" of the customers.
  • airport personnel usually wear visible protective clothing to be easily recognized. This differs significantly from passengers who z. B. should not be allowed to stay outside of certain buildings.
  • Embodiments of the present invention are capable of distinguishing both groups of people. Thus, a departed passenger can be detected and reported. At a station, only railway personnel may move on the tracks. This can be monitored and reported by embodiments of the invention. In certain circumstances, such as train delays, timetable changes or train cancellations, the service personnel are heavily searched and interviewed by passengers. Embodiments of the invention can now determine whether a large number of customers, ie a person queue or a
  • Embodiments of the present invention know where personnel of the service personnel reside and, for example, can display at a service point the current locations of persons of the service personnel on a monitor.
  • the technical essence of the present invention lies in the recognition of the service personnel based on the associated work clothes.
  • the methods of image processing and classification offer a number of ways to achieve this recognition.
  • the system is given either over a number of pictures of the service personnel in appropriate clothing or directly in a special learning mode data of the clothing of the service personnel.
  • These data allow the method according to the invention to determine clothing characteristics.
  • you can the clothing features are obtained from the color spectrum of professional clothing.
  • the most significant clothing features can be selected from a given set of features, such as gradient histograms, color histograms, scale invariant features such as SIFT, etc. by means of a Principal Components Analysis.
  • the classifier can be trained, for example, via a support vector machine or boosting.
  • the learned classifier is applied to the conventional video analysis results and thus provides the recognition of persons of the service personnel.
  • the localization is based on the known positions of the image recording devices or an underlying calibration. Analogously, methods for detecting actions can be implemented.
  • At least a portion of the predetermined range is determined by the position of a person of the service personnel group and / or by a predetermined number of persons of the customer group.
  • the ratio of the number of persons of the service personnel group to the number of persons of the customer group can be determined in the entire specified range and / or in subregions of the predetermined range.
  • corresponding areas can be displayed in different colors. If the personnel-customer relationship is correct, then such an area can be marked green, for example, on an output monitor.
  • Fig. 1 shows a schematic block diagram of an embodiment of a device according to the invention for the localization of persons in a predetermined area.
  • FIG. 2 shows a flow chart of an exemplary embodiment of a method according to the invention for localizing persons in a predetermined area.
  • FIG. 3 shows a schematic plan view of a predetermined area in which persons are located with the device according to the invention according to FIG. 1 or the method according to the invention according to FIG. 2.
  • a device 1 for locating persons 12, 14 in a predetermined region 10 in the illustrated embodiment comprises a plurality of image recording devices 3, which continuously generate images of the predetermined region 10 for monitoring the predetermined region 10 and to an evaluation and output control unit 20.
  • the evaluation and control unit 20 analyzes and evaluates the continuously generated images using at least one image processing method and / or image evaluation method.
  • the evaluation and control unit 20 is coupled via corresponding interfaces 22 with the image recording devices 3.
  • the evaluation and control unit 20 analyzes and evaluates the generated images of the predetermined area 10 for identifying and locating persons 12, 14, the evaluation and control unit 20 classifying detected and localized persons 12, 14 and assigning them to at least one predetermined group, and wherein the evaluation and control unit 20 performs the assignment to a group depending on predetermined clothing features.
  • the localized and classified persons 12, 14 become from the evaluation and control unit 20 with further information via an interface 22 to an optical display unit 30 output.
  • the illustrated exemplary embodiment of a method according to the invention for localizing persons 12, 14 continuously acquires images of the predefined area 10 with at least one image recording device 3 in a predetermined area in a step S10.
  • a step S20 the captured images of the predetermined area using at least one image processing method and / or Profausnceverfah- ren analyzed and evaluated.
  • persons 12, 14 are detected and located in the predetermined area.
  • the recognized and localized persons 12, 14 are classified and assigned to at least one predetermined group, wherein the assignment to a group is made as a function of predetermined clothing features.
  • a first group of identified persons 12 are assigned, which belong to the service staff, with all other identified persons 14 being assigned to a customer group.
  • the predetermined clothing features for distinguishing different persons recognized include, for example, color spectrums and / or forms of clothing.
  • the technical essence of the present invention is thus in the detection of persons 12 of the service personnel based on their work clothes.
  • the methods of image processing and classification offer a number of ways to achieve this recognition.
  • the evaluation and control unit 20 are given either a number of pictures of persons of the service personnel in appropriate clothing or directly in a special learning mode data of the clothing of the service personnel. These data allow the evaluation and control unit 20 features, in the simplest case, these could be obtained from the color spectrum of clothing, to determine. This could, for example, from a given set of features
  • the classifier 28 can be trained, for example, via a support vector machine or boosting. In actual operation, the classifier 28 is applied to the conventional video analysis results and thus provides the recognition of persons 12 of the service personnel within the predetermined area 10. The localization takes place on the basis of the known positions of the image recording devices 3 or an underlying calibration. Furthermore, methods for detecting actions of the service personnel can be implemented.
  • a relationship between service personnel and other persons can be determined.
  • the video analysis can also be analyzed by action analysis according to the articles "Human Action Recognition Using Distributed Oriented Rectangular Patches” by N. Ikizler and P. Duygulu, Human Motion - Understanding, Modeling, Capture and Animation, Springer-Verlag Berlin / Heidelberg, ISSN 161 1 -3349, pp. 271-284, 2007, and "Human action detection via boosted local motion histograms" by Q. Luo, X. Kong, G. Zeng and J.
  • the evaluation and control unit 20 in the illustrated exemplary embodiment comprises a computing unit 24, a memory unit 26 and the classifier 28 ,
  • the predetermined region 10 in the exemplary embodiment illustrated comprises a part of a bag railway station with several platforms, in which the customer and personnel volume is determined and displayed. Embodiments of the invention automatically recognize this
  • Service personnel 12 and customers 14 by means of video analysis and / or image processing. Subsequently, the number of customers 14 per person 12 of the service staff is counted. If the utilization is correct, such partial areas 12.3 are marked green, for example. If there is too much customer traffic per person 12 of the service personnel in a subarea 12.4 or is not a person
  • the subareas 14.1, 14.2 with a predetermined number of customers 14, in which no persons 12 of the service personnel are present, are also detected and classified to distinguish whether a normal entry / exit process, or a panic and / or a collection of customers in front- lies so that, depending on the detected situation, persons 12 of the service personnel can be sent to these sub-areas 14.1, 14.2.
  • the various subregions 12. 1, 12. 2, 12. 3, 12. 4, 14. 1, 14. 2 of the predefined area 10 are represented by the position of a person 12 of the service personnel group and / or by a predefined number of persons 14 of the customer group.
  • the subregions 12.1, 12.2, 12.3, 12.4 in each case by the position of an approximately centrally in the respective sub-area 12.1. 12.2, 12.3, 12.4 of the seconded person 12 of the service personnel, which are completed
  • the sections 14.1, 14.2 are determined by a predetermined number of persons 14, which are shown as filled circles and belong to the customer group. Thus, in such a subarea 14.1, 14.2, for example, at least five persons 14 of the customer group keep up without a service person 12.
  • embodiments of the invention also enable a weak type of access control. If only persons with safety clothing stay in a certain area, the video analysis can easily determine and report this.
  • Embodiments of the present invention can be realized as a circuit, device, method, data processing program with program code means and / or as a computer program product. Accordingly, the present invention may be implemented entirely in hardware and / or software and / or a combination of hardware and / or software components. In addition, the present invention can be embodied as a computer program product on a computer-usable storage medium with computer-readable program code, whereby various computer-readable storage media such as hard disks, CD-ROMs, optical or magnetic storage elements, etc. can be used.
  • the computer-usable or computer-readable media may comprise, for example, electronic, magnetic, optical, electromagnetic infrared or semiconductor systems, devices, devices or distribution media. Moreover, the computer-readable media may include an electrical connection to one or more lines, a portable computer disk, a random access memory (RAM), a read-only memory (ROM), an erasable and programmable read-only memory (EPROM or flash memory,
  • RAM random access memory
  • ROM read-only memory
  • EPROM or flash memory erasable and programmable read-only memory
  • the computer-usable or computer-readable medium may even be paper or other suitable medium on which the program is written and from which it may be obtained, for example by optical scanning of the paper or other medium is electrically detectable, then compiled, interpreted or if necessary lent processed in another way and then stored in the computer memory.
  • Embodiments of the invention advantageously enable the automatic detection and localization of persons of the service personnel on the basis of their uniform work clothes. These are image processing methods in the
  • Video surveillance system applied to analyze the area to be monitored.
  • persons of the service personnel and customers in defined areas are counted to determine whether there is enough staff in one area. With this information, an optimal distribution of the personnel can be achieved, for example, with the customer in a supermarket

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)

Abstract

Die Erfindung betrifft ein Verfahren und eine Vorrichtung zur Lokalisierung von Personen (12, 14) in einem vorgegebenen Bereich (10), welcher durch mindestens eine Bildaufnahmevorrichtung (3) überwacht wird, wobei die mindestens eine Bildaufnahmevorrichtung (3) fortlaufend Bilder des vorgegebenen überwachten Bereichs (10) erzeugt, welche unter Verwendung von mindestens einem Bildverarbeitungsverfahren und/oder Bildauswerteverfahren analysiert und ausgewertet werden, sowie ein Computerprogrammprodukt und ein Datenverarbeitungsprogramm. Erfindungsgemäß werden die erzeugten Bilder des vorgegebenen Bereichs (10) zur Erkennung und Lokalisierung von Personen (12, 14) analysiert und ausgewertet, wobei erkannte und lokalisierte Personen (12, 14) klassifiziert und mindestens einer vorgegebenen Gruppe zugeordnet werden, wobei die Zuordnung zu einer Gruppe in Abhängigkeit von vorgegebenen Kleidungsmerkmalen getroffen wird.

Description

Beschreibung Titel
Verfahren und Vorrichtung zur Lokalisierung von Personen in einem
vorgegebenen Bereich
Stand der Technik
Die Erfindung betrifft ein Verfahren zur Lokalisierung von Personen in einem vorgegebenen Bereich nach der Gattung des unabhängigen Patentanspruchs 1 und eine zugehörige Vorrichtung zur Lokalisierung von Personen in einem vorgegebenen Bereich nach der Gattung des unabhängigen Patentanspruchs 8, sowie ein Computerprogrammprodukt und ein Datenverarbeitungsprogramm zur Durchführung des Verfahrens.
Bildverarbeitungsverfahren sind heutzutage integraler Bestandteil automatischer Videoüberwachungsverfahren. Sie dienen beispielsweise zur Segmentierung, Erkennung, Verfolgung (Tracking), Klassifizierung sowie Zählen von bewegten Objekten innerhalb eines zu überwachenden Bereichs, welcher durch mindestens eine Bildaufnahmevorrichtung überwacht wird. Die mindestens eine Bildaufnahmevorrichtung erzeugt fortlaufend Bilder des vorgegebenen überwachten Bereichs, welche unter Verwendung von mindestens einem Bildverarbeitungsverfahren und/oder Bildauswerteverfahren analysiert und ausgewertet werden. Die Bildverarbeitung ist ein wesentlicher Bestandteil für eine automatische Überwachung von größeren Bereichen mit einer Mehrzahl von Bildaufnahmevorrichtungen, insbesondere um Objekte, welche mit unterschiedlichen Bildaufnahmevorrichtungen aufgenommen werden, aus unterschiedlichen Aufnahmen einander zuzuordnen zu können.
In der Offenlegungsschrift DE 102 10 926 A1 werden beispielsweise eine Vorrichtung und ein Verfahren zur Verfolgung wenigstens eines Objekts in einer Szene beschrieben. Das beschriebene Verfahren erkennt, wenn ein sich bewegendes Objekt aus der Bewegung zum Stillstand kommt und zählt die Verweildauer im Stillstand, um in Abhängigkeit von der Verweildauer eine Signalisierung zu erzeugen. Hierbei wird das Objekt durch eine Liste oder eine Matrix bezüglich der Bewegungsrichtung und der Zeit beschrieben. Das beschriebene Verfahren wird insbesondere in einer Videoüberwachung verwendet, welche wenigstens einen Bildgeber, einen Prozessor, einen Speicher und Ausgabemittel aufweist, mit denen dann eine Signalisierung, beispielsweise in Form eines Alarms erfolgen kann. Die Signalisierung kann auch als Signal für andere Systeme verwendet werden.
Offenbarung der Erfindung
Das erfindungsgemäße Verfahren zur Lokalisierung von Personen in einem vor- gegebenen Bereich mit den Merkmalen des unabhängigen Patentanspruchs 1 hat demgegenüber den Vorteil, dass erzeugte Bilder eines vorgegebenen Bereichs zur Erkennung und Lokalisierung von Personen analysiert und ausgewertet werden, wobei erkannte und lokalisierte Personen klassifiziert und mindestens einer vorgegebenen Gruppe zugeordnet werden, und wobei die Zuordnung zu einer Gruppe in Abhängigkeit von vorgegebenen Kleidungsmerkmalen getroffen wird.
Eine Vorrichtung zur Lokalisierung von Personen in einem vorgegebenen Bereich mit den Merkmalen des unabhängigen Patentanspruchs 8 weist den Vorteil auf, dass eine Auswerte- und Steuereinheit die erzeugten Bilder des vorgegebenen Bereichs zur Erkennung und Lokalisierung von Personen analysiert und auswertet, wobei die Auswerte- und Steuereinheit erkannte und lokalisierte Personen klassifiziert und mindestens einer vorgegebenen Gruppe zuordnet, wobei die Auswerte- und Steuereinheit die Zuordnung zu einer Gruppe in Abhängigkeit von vorgegebenen Kleidungsmerkmalen durchführt. Die Bilder des zu überwachenden Bereichs werden von mindestens einer Bildaufnahmevorrichtung fortlaufend erzeugt und unter Verwendung von mindestens einem Bildverarbeitungsverfahren und/oder Bildauswerteverfahren analysiert und ausgewertet. Die erfindungsgemäße Auswerte- und Steuereinheit ist zur Ausführung von Schritten des oben genannten Verfahrens und eines Computerprogramms zur Steuerung von Schritten des vorstehend genannten Verfahrens ausgebildet, wenn das Computerprogramm von der Auswerte- und Steuereinheit ausgeführt wird. Unter einer Auswerte- und Steuereinheit kann vorliegend ein elektrisches
Gerät, wie beispielsweise ein Steuergerät verstanden werden, welches erfasste Bildsignale verarbeitet bzw. auswertet. Das Steuergerät kann mindestens eine Schnittstelle aufweisen, die hard- und/oder softwaremäßig ausgebildet sein kann. Bei einer hardwaremäßigen Ausbildung können die Schnittstellen beispielsweise Teil eines sogenannten System-ASICs sein, der verschiedenste Funktionen des
Steuergeräts beinhaltet. Es ist jedoch auch möglich, dass die Schnittstellen eigene, integrierte Schaltkreise sind oder zumindest teilweise aus diskreten Bauelementen bestehen. Bei einer softwaremäßigen Ausbildung können die Schnittstellen Softwaremodule sein, die beispielsweise auf einem Mikrocontroller neben anderen Softwaremodulen vorhanden sind. Von Vorteil ist auch ein Computerprogrammprodukt mit Programmcode, der auf einem maschinenlesbaren Träger wie einem Halbleiterspeicher, einem Festplattenspeicher oder einem optischen Speicher gespeichert ist und zur Durchführung des Verfahrens nach einem der beschriebenen Ausführungsformen verwendet wird, wenn das Programm auf ei- nem Steuergerät ausgeführt wird.
Ausführungsformen der vorliegenden Erfindung ermöglichen in vorteilhafter Weise eine videobasierte Lokalisierung von Servicepersonal anhand einer einheitlichen Berufskleidung. Zudem können Ausführungsformen der vorliegenden Erfin- dung als weitere Aufgaben das Zählen des Servicepersonals als auch der Kunden in vorab definierten Bereichen durchführen, um zu ermitteln, ob in einem Bereich genug Personal vorhanden ist, d.h. ein günstiges Verhältnis von Personal zu Kunden vorliegt. Mit dieser Information kann eine optimale Verteilung des Personals erzielt werden, um dem Kunden eine bestmögliche Unterstützung zu gewährleisten. Der wesentliche Vorteil der vorliegenden Erfindung liegt in der videobasierten Erkennung von Teilbereichen innerhalb des zu überwachenden Bereichs, in welchen eine ausreichende Anzahl bzw. eine zu geringe Anzahl von Personen des Servicepersonals vorhanden ist. Neben dieser einfachen Funktion sind Erweiterungen hinsichtlich der Analyse der gerade durchgeführten Handlun- gen des Servicepersonals möglich, um festzustellen, ob das komplette Service- personal gerade voll ausgelastet ist, und daher noch weitere Unterstützung erforderlich ist.
Gegenüber einer Lokalisierung von einzelnen Personen des Servicepersonals mittels Funksensoren weist die videobasierte Analyse den Vorteil auf, dass der zu überwachende Bereich genau festgelegt ist, d.h. es gibt eine höhere Genauigkeit hinsichtlich der Lokalisation von Personen des Servicepersonals. Bewegt sich eine Person des Servicepersonals aus dem Sichtbereich der mindestens einen Bildaufnahmevorrichtung, dann steht diese Person damit auch nicht mehr in diesem Gebiet zur Verfügung. Zudem ermöglicht die Videoanalyse das Zählen von Personen des Servicepersonals und anderen Personen bzw. Objekten in dem zu überwachenden Bereich. Damit kann auf einfache Weise das Verhältnis zwischen Personen des Servicepersonals und anderen Personen ermittelt werden. Weiterhin kann die Videoanalyse auch mittels Handlungsanalyse feststellen, wie viele Personen des Servicepersonals gerade eingebunden sind.
Neben diesen Analysefunktionen ermöglichen Ausführungsformen der vorliegenden Erfindung auch eine schwache Art der Zugangskontrolle. Sollen sich in einem bestimmten Gebiet nur Personen mit Sicherheitskleidung aufhalten, dann kann dies sehr einfach durch die Videoanalyse ermittelt und gemeldet werden.
Durch die in den abhängigen Ansprüchen aufgeführten Maßnahmen und Weiterbildungen sind vorteilhafte Verbesserungen des im unabhängigen Patentanspruch 1 angegebenen Verfahrens zur Lokalisierung von Personen in einem vorgegebenen Bereich möglich.
Besonders vorteilhaft ist, dass einer ersten Gruppe erkannte Personen zugeordnet werden, welche zum Servicepersonal gehören, wobei alle anderen erkannten Personen einer Kundengruppe zugeordnet werden. Die vorgegebenen Kleidungsmerkmale umfassen beispielsweise vorgegebene Farbspektren und/oder Formen. So können Berufskleidungsstücke, wie beispielsweise Kopfbedeckungen, Schals, Jacken, Hosen usw., welche eine vorgegebene Form und/oder Farbe aufweisen, von„normaler Kleidung" der Kunden unterschieden werden. Auf einem Flughafen trägt Flughafenpersonal normalerweise sichtbare Schutzkleidung, um einfach erkannt zu werden. Damit unterscheidet es sich deutlich von Fluggästen, die sich z. B. nicht außerhalb bestimmter Gebäude aufhalten dürfen. Beim Einstieg bzw. Ausstieg aus Flugzeugen mit kurzem Fußweg über das Flugfeld, beispielsweise vom Bus zum Flugzeug, befinden sich Fluggäste und Personal gemeinsam auf dem Flugfeld. Ausführungsformen der vorliegenden Erfindung sind in der Lage beide Personengruppen zu unterscheiden. Somit kann ein vom Weg abgekommener Fluggast entdeckt und gemeldet werden. Auf einem Bahnhof darf sich auf den Gleisen nur Bahnpersonal bewegen. Dies kann durch Ausführungsformen der Erfindung überwacht und gemeldet werden. Unter bestimmten Umständen, beispielsweise bei Zugverspätungen, Fahrplanänderungen bzw. Zugausfällen wird das Servicepersonal stark von Fahrgästen gesucht und befragt. Ausführungsformen der Erfindung können nun feststellen, ob sich eine große Anzahl von Kunden, d.h. eine Personenschlange oder eine
Personenanhäufung, auf wenige Personen des Servicepersonals verteilt. Damit können Ausführungsformen der vorliegenden Erfindung erkennen und melden, in welchen Bereichen mehr Personal benötigt wird. In großen Einkaufszentren ist es denkbar, dass Kunden Servicepersonal suchen.
Ausführungsformen der vorliegenden Erfindung wissen, wo sich Personen des Servicepersonals aufhalten und können beispielsweise an einem Servicepunkt die aktuellen Standorten von Personen des Servicepersonals auf einem Monitor anzeigen.
Der technische Kern der vorliegenden Erfindung liegt in der Erkennung des Servicepersonals anhand der zugehörigen Berufskleidung. Die Methoden der Bildverarbeitung und Klassifikation bieten dabei eine Anzahl von Möglichkeiten, diese Erkennung zu erreichen.
Ein solcher Ansatz ist das Erkennen anhand der Kleidung. Dabei werden dem System entweder über eine Anzahl von Bildern des Servicepersonals in entsprechender Kleidung oder direkt in einem speziellen Lernmodus Daten der Kleidung des Servicepersonals vorgegeben. Diese Daten erlauben es dem erfindungsge- mäßen Verfahren Kleidungsmerkmale zu ermitteln. Im einfachsten Fall können die Kleidungsmerkmale aus dem Farbspektrum der Berufskleidung gewonnen werden. Dazu können beispielsweise aus einer vorgegeben Menge von Merkmalen, wie beispielsweise Gradienten-Histogramme, Farb-Histogramme, Skaleninvariante-Merkmale, wie SIFT usw., mittels einer Principal-Components-Analysis die signifikantesten Kleidungsmerkmale ausgewählt werden. Diese dienen dann als Kleidungsmerkmale, um einen Klassifikator anzulernen. Der Klassifikator kann beispielsweise über eine Support-Vector-Machine oder Boosting angelernt werden. Während des Ablaufs des erfindungsgemäßen Verfahrens wird der gelernte Klassifikator auf die herkömmlichen Videoanalyseergebnisse angewendet und liefert damit die Erkennung von Personen des Servicepersonals. Die Lokalisierung erfolgt anhand der bekannten Positionen der Bildaufnahmevorrichtungen bzw. einer zugrunde liegenden Kalibrierung. Analog können Verfahren zur Erkennung von Handlungen umgesetzt werden.
In vorteilhafter Ausgestaltung des erfindungsgemäßen Verfahrens wird mindestens ein Teilbereich des vorgegebenen Bereichs durch die Position einer Person der Servicepersonalgruppe und/oder durch eine vorgegebene Anzahl von Personen der Kundengruppe bestimmt. Zudem kann im gesamten vorgegebenen Bereich und/oder in Teilbereichen des vorgegebenen Bereichs das Verhältnis der Anzahl von Personen der Servicepersonalgruppe zur Anzahl von Personen der Kundengruppe bestimmt werden. In Abhängigkeit von der Auslastung, d.h. vom ermittelten Personal-Kunden-Verhältnis, können korrespondierende Bereiche in unterschiedlichen Farben dargestellt werden. Stimmt das Personal-Kunden- Verhältnis, dann kann ein solcher Bereich beispielsweise grün auf einem Ausgabemonitor markiert werden. Ist ein zu hohes Kundenaufkommen pro Person des Servicepersonals vorhanden, dann können solche Bereiche durch entsprechende Warnfarben wie gelb, orange oder rot hervorgehoben und gegebenenfalls zusätzliches Personal zu diesen Bereichen geschickt werden. Bereiche in denen kein Personal vorhanden ist werden ebenfalls detektiert und klassifiziert und je nach Situation kann Servicepersonal in diese Bereiche geschickt werden.
Vorteilhafte Ausführungsformen der Erfindung sind in den Zeichnungen dargestellt und werden nachfolgend beschrieben. In den Zeichnungen bezeichnen gleiche Bezugszeichen Komponenten bzw. Elemente, die gleiche bzw. analoge Funktionen ausführen. Kurze Beschreibung der Zeichnungen
Fig. 1 zeigt ein schematisches Blockdiagram eines Ausführungsbeispiels einer erfindungsgemäßen Vorrichtung zur Lokalisierung von Personen in einem vorgegebenen Bereich.
Fig. 2 zeigt ein Flussdiagramm eines Ausführungsbeispiels eines erfindungsgemäßen Verfahrens zur Lokalisierung von Personen in einem vorgegebenen Bereich.
Fig. 3 zeigt eine schematische Draufsicht eines vorgegebenen Bereichs, in welchem mit der erfindungsgemäßen Vorrichtung gemäß Fig. 1 oder dem erfindungsgemäßen Verfahren gemäß Fig. 2 Personen lokalisiert werden.
Ausführungsformen der Erfindung
Wie aus Fig. 1 ersichtlich ist, umfasst eine erfindungsgemäße Vorrichtung 1 zur Lokalisierung von Personen 12, 14 in einem vorgegebenen Bereich 10 im dargestellten Ausführungsbeispiel mehrere Bildaufnahmevorrichtungen 3, welche zur Überwachung des vorgegebenen Bereichs 10 fortlaufend Bilder des vorgegebenen Bereichs 10 erzeugen und an eine Auswerte- und Steuereinheit 20 ausgeben. Die Auswerte- und Steuereinheit 20 analysiert und wertet die fortlaufend erzeugen Bilder unter Verwendung von mindestens einem Bildverarbeitungsverfahren und/oder Bildauswerteverfahren aus. Zum Empfang der erzeugten Bilddaten ist die Auswerte- und Steuereinheit 20 über entsprechende Schnittstellen 22 mit den Bildaufnahmevorrichtungen 3 gekoppelt.
Erfindungsgemäß analysiert und wertet die Auswerte- und Steuereinheit 20 die erzeugten Bilder des vorgegebenen Bereichs 10 zur Erkennung und Lokalisierung von Personen 12, 14 aus, wobei die Auswerte- und Steuereinheit 20 erkannte und lokalisierte Personen 12, 14 klassifiziert und mindestens einer vorgegebenen Gruppe zuordnet, und wobei die Auswerte- und Steuereinheit 20 die Zuordnung zu einer Gruppe in Abhängigkeit von vorgegebenen Kleidungsmerkmalen durchführt. Die lokalisierten und klassifizierten Personen 12, 14 werden von der Auswerte- und Steuereinheit 20 mit weiteren Informationen über eine Schnittstelle 22 an eine optische Anzeigeeinheit 30 ausgegeben.
Wie aus Fig. 2 ersichtlich ist, erfasst das dargestellte Ausführungsbeispiel eines erfindungsgemäßen Verfahrens zur Lokalisierung von Personen 12, 14 in einem vorgegebenen Bereich in einem Schritt S10 fortlaufend Bilder des vorgegebenen Bereichs 10 mit mindestens einer Bildaufnahmevorrichtung 3. In einem Schritt S20 werden die erfassten Bilder des vorgegebenen Bereichs unter Verwendung von mindestens einem Bildverarbeitungsverfahren und/oder Bildauswerteverfah- ren analysiert und ausgewertet. In einem Schritt S30 werden Personen 12, 14 im vorgegebenen Bereich erkannt und lokalisiert. In einem Schritt S40 werden die erkannten und lokalisierten Personen 12, 14 klassifiziert und mindestens einer vorgegebenen Gruppe zugeordnet, wobei die Zuordnung zu einer Gruppe in Abhängigkeit von vorgegebenen Kleidungsmerkmalen getroffen wird. So werden ei- ner ersten Gruppe erkannte Personen 12 zugeordnet, welche zum Servicepersonal gehören, wobei alle anderen erkannten Personen 14 einer Kundengruppe zugeordnet werden. Die vorgegebenen Kleidungsmerkmale zur Unterscheidung von verschiedenen erkannten Personen umfassen beispielsweise Farbspektren und/oder Kleidungsformen.
Der technische Kern der vorliegenden Erfindung liegt somit in der Erkennung, von Personen 12 des Servicepersonals anhand ihrer Berufskleidung. Die Methoden der Bildverarbeitung und Klassifikation bieten dabei eine Anzahl von Möglichkeiten, diese Erkennung zu erreichen. Dabei werden der Auswerte- und Steuereinheit 20 entweder über eine Anzahl von Bildern von Personen des Servicepersonals in entsprechender Kleidung oder direkt in einem speziellen Lernmodus Daten der Kleidung des Servicepersonals vorgegeben. Diese Daten erlauben es der Auswerte- und Steuereinheit 20 Merkmale, im einfachsten Fall könnten diese aus dem Farbspektrum der Kleidung gewonnen werden, zu ermit- teln. Dazu könnten beispielsweise aus einer vorgegeben Menge von Merkmalen
(Gradienten-Histogramm, Farb-Histogramme, Skalen-invariante-Merkmale, wie SIFT, etc.) mittels einer Principal-Components-Analysis die signifikantesten ausgewählt werden. Diese dienen dann als Merkmale, um einen Klassifikator 28 der Auswerte- und Steuereinheit 20 anzulernen. Der Klassifikator 28 kann beispiels- weise über eine Support-Vector-Machine oder Boosting angelernt werden. Im eigentlichen Betrieb wird der Klassifikator 28 auf die herkömmlichen Videoanalyse-Ergebnisse angewendet und liefert damit die Erkennung von Personen 12 des Servicepersonals innerhalb des vorgegebenen Bereichs 10. Die Lokalisie- rung erfolgt anhand der bekannten Positionen der Bildaufnahmevorrichtungen 3 bzw. einer zugrunde liegenden Kalibrierung. Des Weiteren können Verfahren zur Erkennung von Handlungen des Servicepersonals umgesetzt werden.
Zur Segmentierung, Erkennung, Verfolgung (Tracking), Klassifizierung sowie Zählen von bewegten Objekten im vorgegebenen Bereich 10 können bekannte
Bildverarbeitungsverfahren verwendet werden, wie sie beispielsweise im Artikel „A survey on Visual surveillance of object motion and behaviors" von W. Hu, T. Tan, L. Wang und S. Maybank, IEEE Transactions on Systems, Man, and Cy- bernetics, Part C: Applications and Reviews, Vol. 34 (3), pp. 334-352, August 2004 beschrieben sind. Zur Bildverarbeitung des größeren Bereichs 10, welcher durch mehrere Bildaufnahmevorrichtungen 3 überwacht wird, können die in den Artikeln„Tracking people across disjoint camera views by an illumination-tolerant appearance representation" von C. Madden, E. D. Cheng, und M. Piccardi, Machine Vision and Applications, 18(3):233-247, 2007, und„Full-body person re- Cognition system" von C. Nakajima, M. Pontil, B. Heisele, und T. Poggio, Pattern
Recognition, 36(9):1997-2006, 2003 beschriebenen Verfahren verwendet werden, um insbesondere Objekte bzw. Personen einander zuzuordnen, welche von unterschiedlichen Bildaufnahmevorrichtungen 3 erfasst werden. Der Vorteil der vorliegenden Erfindung liegt in der videobasierten Erkennung von
Gebieten, in denen genug bzw. zu wenig Servicepersonal vorhanden ist. Neben dieser einfachen Funktion sind Erweiterungen hinsichtlich der Analyse der gerade durchgeführten Handlung des Servicepersonals möglich, um festzustellen, ob gerade das komplette Servicepersonal voll ausgelastet ist, und daher noch Un- terstützung benötigt wird. Zudem ermöglicht die Videoanalyse das Zählen von
Personen 12 des Servicepersonals und von anderen Personen 14 bzw. Objekten in dem vorgegebenen Bereich 10. Damit kann z.B. ein Verhältnis zwischen Servicepersonal und anderen Personen ermittelt werden. Weiterhin kann die Videoanalyse auch mittels Handlungsanalyse nach den in den Artikeln„Human Action Recognition Using Distribution of Oriented Rectangular Patches" von N. Ikizler und P. Duygulu, Human Motion - Understanding, Modeling, Capture and Animation, Springer-Verlag Berlin/Heidelberg, ISSN 161 1 -3349, pp. 271 -284, 2007, und "Human action detection via boosted local motion histograms" von Q. Luo, X. Kong, G. Zeng und J. Fan, Machine Vision and Applications, Springer-Verlag Berlin-Heidelberg, ISSN 1432-1769, 2008 beschriebenen Verfahren die Handlungen der lokalisierten Personen 12, 14 erkennen, so dass beispielsweise festgestellt werden kann, wie viele Personen 12 des Servicepersonals gerade eingebunden sind. Zur Durchführung der Bildverarbeitungsverfahren und/oder Bildauswerteverfahren zur Analyse und Auswertung der erzeugten Bilddaten und zum Ausführen des erfindungsgemäßen Verfahrens zur Lokalisierung von Personen in einem vorgegebenen Bereich umfasst die Auswerte- und Steuereinheit 20 im dargestellten Ausführungsbeispiel eine Recheneinheit 24, eine Speichereinheit 26 und den Klassifikator 28.
Wie aus Fig. 1 oder 3 ersichtlich ist, umfasst der vorgegebenen Bereich 10 im dargestellten Ausführungsbeispiel einen Teil eines Sackbahnhofs mit mehreren Bahnsteigen, in welchem das Kunden- und Personalaufkommen ermittelt und dargestellt wird. Ausführungsformen der Erfindung erkennen automatisch das
Servicepersonal 12 und Kunden 14 mittels Videoanalyse und/oder Bildverarbeitung. Anschließend wird die Anzahl der Kunden 14 pro Person 12 des Servicepersonals gezählt. Stimmt die Auslastung so werden solche Teilbereiche 12.3 beispielsweise grün markiert. Ist ein zu hohes Kundenaufkommen pro Person 12 des Servicepersonals in einem Teilbereich 12.4 vorhanden oder ist keine Person
12 des Servicepersonals in einem Teilbereich 14.1 , 14.2 mit beispielsweise mindestens 5 Kunden vorhanden oder sind keine Kunden im Bereich 12.1 einer Person 12 des Servicepersonals vorhanden, dann werden diese Bereiche durch eine entsprechende Markierung in einer Warnfarbe hervorgehoben und gegebenen- falls zusätzliche Personen 12 des Servicepersonals hingeschickt bzw. Personen
12 des Servicepersonals werden aufgefordert ihre Position entsprechend zu verändern. Die Teilbereiche 14.1 , 14.2 mit einer vorgegebenen Anzahl von Kunden 14, in welchen keine Personen 12 des Servicepersonals vorhanden sind, werden ebenfalls detektiert und klassifiziert um zu unterscheiden, ob ein normaler Ein- /Aussteigvorgang, oder eine Panik und/oder eine Ansammlung von Kunden vor- liegt, so dass je nach erkannter Situation Personen 12 des Servicepersonal in diese Teilbereiche 14.1 , 14.2 geschickt werden können.
Wie aus Fig. 1 oder 3 weiter ersichtlich ist, werden die verschiedenen dargestell- ten Teilbereiche 12.1 , 12.2, 12.3, 12.4, 14.1 , 14.2 des vorgegebenen Bereichs 10 durch die Position einer Person 12 der Servicepersonalgruppe und/oder durch eine vorgegebene Anzahl von Personen 14 der Kundengruppe bestimmt. So werden beispielsweise die Teilbereiche 12.1 , 12.2, 12.3, 12.4 jeweils durch die Position einer ungefähr mittig im jeweiligen Teilbereich 12.1. 12.2, 12.3, 12.4 an- geordneten Person 12 des Servicepersonals bestimmt, welche als ausgefülltes
Dreieck dargestellt ist. Die Teilbereiche 14.1 , 14.2 werden durch eine vorgegebene Anzahl von Personen 14 bestimmt, welche als ausgefüllte Kreise dargestellt sind und der Kundengruppe angehören. So halten sich in einem solchen Teilbereich 14.1 , 14.2 beispielsweise mindestens fünf Personen 14 der Kunden- gruppe ohne eine Serviceperson 12 auf.
Neben diesen Analysefunktionen ermöglichen Ausführungsformen der Erfindung ebenso eine schwache Art der Zugangskontrolle. Sollten sich nur Personen mit Sicherheitskleidung in einem bestimmten Gebiet aufhalten, kann die Videoanaly- se das sehr einfach ermitteln und melden.
Ausführungsformen der vorliegenden Erfindung können als Schaltung, Vorrichtung, Verfahren, Datenverarbeitungsprogramm mit Programmcodemitteln und/oder als Computerprogrammprodukt realisiert werden. Entsprechend kann die vorliegende Erfindung vollständig als Hardware und/oder als Software und/oder als Kombination aus Hardware- und/oder Softwarekomponenten ausgeführt werden. Zudem kann die vorliegende Erfindung als Computerprogrammprodukt auf einem computernutzbaren Speichermedium mit computerlesbarem Programmcode ausgeführt werden, wobei verschiedene computerlesbare Spei- chermedien wie Festplatten, CD-ROMs, optische oder magnetische Speicherelemente usw. benutzt werden können.
Die computernutzbaren oder computerlesbaren Medien können beispielsweise elektronische, magnetische, optische, elektromagnetische Infrarot- oder Halblei- tersysteme, Vorrichtungen, Geräte oder Verbreitungsmedien umfassen. Zudem können die computerlesbaren Medien eine elektrische Verbindung mit einer oder mehreren Leitungen, eine tragbare Computerdiskette, einen Speicher mit direktem Zugriff (RAM), einen Nur-Lese-Speicher (ROM), einen löschbaren und programmierbaren Nur-Lese-Speicher (EPROM oder Flashspeicher, eine optischen Leitung und eine tragbare CD-ROM umfassen. Das computernutzbare oder das computerlesbare Medium kann sogar Papier oder ein anderes geeignetes Medium sein, auf welchem das Programm geschrieben ist, und von welchem es, beispielsweise durch einen optischen Abtastvorgang des Papiers oder des anderen Mediums elektrisch erfassbar ist, dann kompiliert, interpretiert oder falls erforder- lieh auf andere Weise verarbeitet und dann im Computerspeicher gespeichert werden kann.
Ausführungsformen der Erfindung ermöglichen in vorteilhafter Weise die automatische Erkennung und Lokalisierung von Personen des Servicepersonals anhand ihrer einheitlichen Berufskleidung. Dazu werden Bildverarbeitungsverfahren im
Videoüberwachungssystem angewendet, um den zu überwachenden Bereich zu analysieren. Zudem werden Personen des Servicepersonals und Kunden in definierten Gebieten gezählt, um zu ermitteln, ob in einem Bereich genug Personal vorhanden ist. Mit dieser Information kann eine optimale Verteilung des Perso- nals erzielt werden, um den Kunden beispielsweise in einem Supermarkt bei
Fragen bezüglich eines Produktstandorts, am Bahnhof bezügliche einer Reiseauskunft usw. die bestmögliche Unterstützung zu gewähren.

Claims

Ansprüche
1 . Verfahren zur Lokalisierung von Personen in einem vorgegebenen Bereich, welcher durch mindestens eine Bildaufnahmevorrichtung (3) überwacht wird, wobei die mindestens eine Bildaufnahmevorrichtung (3) fortlaufend Bilder des vorgegebenen überwachten Bereichs (10) erzeugt, welche unter Verwendung von mindestens einem Bildverarbeitungsverfahren und/oder Bildauswerteverfahren analysiert und ausgewertet werden, dadurch gekennzeichnet, dass die erzeugten Bilder des vorgegebenen Bereichs (10) zur Erkennung und Lokalisierung von Personen (12, 14) analysiert und ausgewertet werden, wobei erkannte und lokalisierte Personen (12, 14) klassifiziert und mindestens einer vorgegebenen Gruppe zugeordnet werden, wobei die Zuordnung zu einer Gruppe in Abhängigkeit von vorgegebenen Kleidungsmerkmalen getroffen wird.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass einer ersten Gruppe erkannte Personen (12) zugeordnet werden, welche zum Servicepersonal gehören, wobei alle anderen erkannten Personen (14) einer Kundengruppe zugeordnet werden.
3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die vorgegebenen Kleidungsmerkmale Farbspektren und/oder Kleidungsformen umfassen.
4. Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass Kleidungsmerkmale durch Gradienten-Histogramme und/oder Farb-Histogramme und/oder Skaleninvariante-Merkmale vorgegeben werden, wobei signifikante Kleidungsmerkmale mittels einer Principal-Components-Analysis ausgewählt werden.
5. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass die vorgegebenen Kleidungsmerkmale zum Anlernen eines Klassifikators (28) verwendet werden, welcher über eine Support-Vector-Machine und/oder ein Boosting- Verfahren angelernt wird.
6. Verfahren nach einem der Ansprüche 2 bis 5, dadurch gekennzeichnet, dass mindestens ein Teilbereich (12.1 , 12.2, 12.3, 12.4, 14.1 , 14.2) des vorgegebenen Bereichs (10) durch die Position einer Person (12) der Servicepersonalgruppe und/oder durch eine vorgegebene Anzahl von Personen (14) der Kundengruppe bestimmt wird.
7. Verfahren nach einem der Ansprüche 2 bis 6, dadurch gekennzeichnet, dass im gesamten vorgegebenen Bereich (10) und/oder in Teilbereichen (12.1 , 12.2, 12.3, 12.4, 14.1 , 14.2) des vorgegebenen Bereichs (10) das Verhältnis der Anzahl von Personen (12) der Servicepersonalgruppe zur Anzahl von Personen (4) der Kundengruppe bestimmt wird.
8. Vorrichtung zur Lokalisierung von Personen in einem vorgegebenen Bereich, welchen mindestens eine Bildaufnahmevorrichtung (3) überwacht, wobei die mindestens eine Bildaufnahmevorrichtung (3) fortlaufend Bilder des vorgegebenen überwachten Bereichs (10) erzeugt und ausgibt, welche eine Auswerte- und Steuereinheit (20) unter Verwendung von mindestens einem Bildverarbeitungsverfahren und/oder Bildauswerteverfahren analysiert und auswertet, dadurch gekennzeichnet, dass die Auswerte- und Steuereinheit (20) die erzeugten Bilder des vorgegebenen Bereichs (10) zur Erkennung und Lokalisierung von Personen (12, 14) analysiert und auswertet, wobei die Auswerte- und Steuereinheit (20) erkannte und lokalisierte Personen (12, 14) klassifiziert und mindestens einer vorgegebenen Gruppe zuordnet, wobei die Auswerte- und Steuereinheit (20) die Zuordnung zu einer Gruppe in Abhängigkeit von vorgegebenen Kleidungsmerkmalen durchführt.
9. Computerprogrammprodukt mit Programmcode, der auf einem maschinenlesbaren Träger gespeichert ist, zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 7, wenn das Programm durch eine Auswerte- und Steuereinheit (20) ausgeführt wird.
10. Datenverarbeitungsprogramm mit Programmcodemitteln zur Ausführung des Verfahrens nach einem der Ansprüche 1 bis 7 durch eine Auswerte- und Steuereinheit (20), wenn das Datenverarbeitungsprogramm durch die Auswerte- und Steuereinheit (20) abgearbeitet wird.
PCT/EP2011/054629 2010-04-07 2011-03-25 Verfahren und vorrichtung zur lokalisierung von personen in einem vorgegebenen bereich Ceased WO2011124483A1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US13/639,892 US8983129B2 (en) 2010-04-07 2011-03-25 Detecting and classifying persons in a prescribed area

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102010003669.2 2010-04-07
DE102010003669.2A DE102010003669B4 (de) 2010-04-07 2010-04-07 Verfahren und Vorrichtung zur Lokalisierung von Personen in einem vorgegebenen Bereich

Publications (1)

Publication Number Publication Date
WO2011124483A1 true WO2011124483A1 (de) 2011-10-13

Family

ID=43902875

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2011/054629 Ceased WO2011124483A1 (de) 2010-04-07 2011-03-25 Verfahren und vorrichtung zur lokalisierung von personen in einem vorgegebenen bereich

Country Status (3)

Country Link
US (1) US8983129B2 (de)
DE (1) DE102010003669B4 (de)
WO (1) WO2011124483A1 (de)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130101165A1 (en) * 2010-04-07 2013-04-25 Robert Bosch Gmbh Method and device for locating persons in a prescribed area
US11314971B2 (en) 2017-09-27 2022-04-26 3M Innovative Properties Company Personal protective equipment management system using optical patterns for equipment and safety monitoring
US11373076B2 (en) 2017-02-20 2022-06-28 3M Innovative Properties Company Optical articles and systems interacting with the same

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150363720A1 (en) * 2014-06-13 2015-12-17 Vivint, Inc. Automated metric tracking for a business
US12506735B2 (en) * 2017-11-03 2025-12-23 Tyco Fire & Security Gmbh Methods and system for employee monitoring and rule and quorum compliance monitoring
US12106567B2 (en) * 2018-12-14 2024-10-01 Xovis Ag Method and arrangement for determining a group of persons to be considered
US12542044B2 (en) * 2024-01-03 2026-02-03 Honeywell International Inc. Methods for improving guard safety in a correctional facility using a video surveillance system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10210926A1 (de) 2002-03-13 2003-10-16 Bosch Gmbh Robert Vorrichtung zur Verfolgung wenigstens eines Objekts in einer Szene
US6907387B1 (en) * 2002-08-05 2005-06-14 Bellsouth Intellectual Property Corporation Systems and methods for remote monitoring of a facility location

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090231436A1 (en) 2001-04-19 2009-09-17 Faltesek Anthony E Method and apparatus for tracking with identification
US7505621B1 (en) * 2003-10-24 2009-03-17 Videomining Corporation Demographic classification using image components
US8369570B2 (en) * 2005-09-28 2013-02-05 Facedouble, Inc. Method and system for tagging an image of an individual in a plurality of photos
US20080033752A1 (en) 2006-08-04 2008-02-07 Valence Broadband, Inc. Methods and systems for monitoring staff/patient contacts and ratios
US7787656B2 (en) 2007-03-01 2010-08-31 Huper Laboratories Co., Ltd. Method for counting people passing through a gate
US8068676B2 (en) * 2007-11-07 2011-11-29 Palo Alto Research Center Incorporated Intelligent fashion exploration based on clothes recognition
DE102010003669B4 (de) * 2010-04-07 2022-05-05 Robert Bosch Gmbh Verfahren und Vorrichtung zur Lokalisierung von Personen in einem vorgegebenen Bereich

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10210926A1 (de) 2002-03-13 2003-10-16 Bosch Gmbh Robert Vorrichtung zur Verfolgung wenigstens eines Objekts in einer Szene
US6907387B1 (en) * 2002-08-05 2005-06-14 Bellsouth Intellectual Property Corporation Systems and methods for remote monitoring of a facility location

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
VON C. MADDEN, E. D. CHENG, M. PICCARDI: "Tracking people across disjoint camera views by an illumination-tolerant appearance representation", MACHINE VISION AND APPLICATIONS, vol. 18, no. 3, 2007, pages 233 - 247, XP019510959, DOI: doi:10.1007/s00138-007-0070-6
VON C. NAKAJIMA, M. PONTIL, B. HEISELE, T. POGGIO: "Full-body person recognition system", PATTERN RECOGNITION, vol. 36, no. 9, 2003, pages 1997 - 2006, XP004429548, DOI: doi:10.1016/S0031-3203(03)00061-X
VON N. IKIZLER, P. DUYGULU: "Human Motion - Understanding, Modeling, Capture and Animation", 2007, SPRINGER-VERLAG, article "Human Action Recognition Using Distribution of Oriented Rectangular Patches", pages: 271 - 284
VON Q. LUO, X. KONG, G. ZENG, J. FAN: "Machine Vision and Applications", 2008, SPRINGER-VERLAG, article "Human action detection via boosted local motion histograms"
VON W. HU, T. TAN, L. WANG, S. MAYBANK: "A survey on visual surveillance of object motion and behaviors", IEEE TRANSACTIONS ON SYSTEMS, MAN, AND CYBERNETICS, PART C: APPLICATIONS AND REVIEWS, vol. 34, no. 3, August 2004 (2004-08-01), pages 334 - 352

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130101165A1 (en) * 2010-04-07 2013-04-25 Robert Bosch Gmbh Method and device for locating persons in a prescribed area
US8983129B2 (en) * 2010-04-07 2015-03-17 Robert Bosch Gmbh Detecting and classifying persons in a prescribed area
US11373076B2 (en) 2017-02-20 2022-06-28 3M Innovative Properties Company Optical articles and systems interacting with the same
US11651179B2 (en) 2017-02-20 2023-05-16 3M Innovative Properties Company Optical articles and systems interacting with the same
US12159177B2 (en) 2017-02-20 2024-12-03 3M Innovative Properties Company Optical articles and systems interacting with the same
US12169748B2 (en) 2017-02-20 2024-12-17 3M Innovative Properties Company Optical articles and systems interacting with the same
US11314971B2 (en) 2017-09-27 2022-04-26 3M Innovative Properties Company Personal protective equipment management system using optical patterns for equipment and safety monitoring
US11682185B2 (en) 2017-09-27 2023-06-20 3M Innovative Properties Company Personal protective equipment management system using optical patterns for equipment and safety monitoring

Also Published As

Publication number Publication date
US20130101165A1 (en) 2013-04-25
US8983129B2 (en) 2015-03-17
DE102010003669B4 (de) 2022-05-05
DE102010003669A1 (de) 2011-10-13

Similar Documents

Publication Publication Date Title
DE102010003669B4 (de) Verfahren und Vorrichtung zur Lokalisierung von Personen in einem vorgegebenen Bereich
DE102014210820B4 (de) Verfahren zum Nachweis von großen und Passagierfahrzeugen von festen Kameras
DE102014105351B4 (de) Detektion von menschen aus mehreren ansichten unter verwendung einer teilumfassenden suche
DE102015104954B4 (de) Sichtbasiertes Überwachungssystem zur Validierung von Aktivitätssequenzen
DE102014106211B4 (de) Sichtbasierte Mehrkamera-Fabriküberwachung mit dynamischer Integritätsbewertung
CN105744232B (zh) 一种基于行为分析技术的输电线路视频防外破的方法
DE112014007249B4 (de) Bildverarbeitungsvorrichtung, Fahrzeuganzeigesystem, Anzeigevorrichtung, Bildverarbeitungsverfahren und Bildverarbeitungsprogramm
DE102014214448B4 (de) Vorrichtung und Verfahren zur Erkennung eines Verkehrszeichens
EP2174260A2 (de) Vorrichtung zur erkennung und/oder klassifizierung von bewegungsmustern in einer bildsequenz von einer überwachungsszene, verfahren sowie computerprogramm
DE112018007287T5 (de) Fahrzeugsystem und -verfahren zum erfassen von objekten und einer objektentfernung
DE112017001311T5 (de) System und Verfahren zum Trainieren eines Objektklassifikators durch maschinelles Lernen
DE602005001627T2 (de) Vorrichtung zur Extraktion von Fussgängern
DE102015206178A1 (de) Ein Videoverfolgungsbasiertes Verfahren zur automatischen Reihung von Fahrzeugen in Drivethrough-Anwendungen
DE102009028604A1 (de) Vorrichtung zur Erkennung einer Objektschlange, Verfahren sowie Computerprogramm
DE102015205309A1 (de) Stabile Erfassung von Windschutzscheiben über die Lokalisierung von Markierungspunkten
CN104537840B (zh) 非法营运出租车辆的检测系统
CN106951889A (zh) 井下高危区域动目标监测和管理系统
WO2011076609A2 (de) Vorrichtung und verfahren zum überwachen von videoobjekten
DE102012218870A1 (de) Verbessertes Erkennen herrenloser Objekte unter Verwendung des Erfassens von Fussgängern
EP2521070A2 (de) Verfahren und System zum Erfassen einer statischen oder dynamischen Szene, zum Bestimmen von Rohereignissen und zum Erkennen von freien Flächen in einem Beobachtungsgebiet
DE102014106506A1 (de) Verfahren zum Durchführen einer Diagnose eines Kamerasystems eines Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102015207047A1 (de) Verfahren und System automatisierten Sequenzieren von Fahrzeugen in nebeneinander angeordneten Durchfahrtskonfigurationen über eine bildbasierte Einstufung
CN106355682A (zh) 一种视频分析方法、装置及系统
WO2020126167A1 (de) Verfahren zur erkennung von mindestens einem muster in einer umgebung eines fahrzeugs, steuergerät zum ausführen eines solchen verfahrens, sowie fahrzeug mit einem solchen steuergerät
KR20210004271A (ko) 이벤트 태깅 기반 상황인지 방법 및 그 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11709964

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 13639892

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 11709964

Country of ref document: EP

Kind code of ref document: A1