EP2380709A2 - 3D safety device and method for securing and operating at least one machine - Google Patents

Abstract

The three-dimensional safety device (10) has a three-dimensional sensor (20) for capturing three-dimensional image data of a work place (12), a machine (16) and an operating person (14) at the work place. An evaluation unit (40) is provided to determine the movement patterns of the operating person. The evaluation unit is formed to convey user input from the movement patterns to the three-dimensional sensor or to the machine. An independent claim is also included for a method for securing and operating a machine in a cooperative work place.

Description

Translated fromGerman

Die Erfindung betrifft eine 3D-Sicherheitsvorrichtung und ein Verfahren zur Absicherung und Bedienung mindestens einer Maschine an einem kooperativen Arbeitsplatz nach dem Oberbegriff von Anspruch 1 beziehungsweise 15.The invention relates to a 3D security device and a method for securing and operating at least one machine at a cooperative workstation according to the preamble of claims 1 and 15, respectively.

In der Fertigung industrieller Güter besteht neben der Vollautomation ein weites Feld von teilautomatisierten Lösungen zur Montage. Dabei sind beispielsweise Arbeitsplätze vorgesehen, an denen einige Arbeitsschritte nicht mechanisiert, sondern in Handarbeit ausgeführt werden. Solche Anwendungen werden als hybride Montage bezeichnet und dienen einer Aufgabenteilung zwischen Mensch und automatischen Maschinenfunktionen, um die jeweiligen spezifischen Vorteile zu nutzen: die Maschine mit ihrer Gleichmäßigkeit und Wiederholgenauigkeit von Funktionen und der Mensch mit seinen Anpassungsfähigkeiten an Änderungen und Störungen sowie seinen sensorischen und haptischen Fähigkeiten.In the production of industrial goods, in addition to full automation, there is a wide field of semi-automated solutions for assembly. In this case, for example, jobs are provided at which some work steps are not mechanized, but executed by hand. Such applications are referred to as hybrid assembly and serve a division of tasks between human and automatic machine functions to take advantage of their specific advantages: the machine with its uniformity and repeatability of functions and the human being with its adaptability to changes and disturbances as well as its sensory and haptic capabilities ,

Gerade bei neuen Produkten wird oft mit einer einfachen Handmontage begonnen, welche anschließend weiter automatisiert wird und damit wachsen kann, um die Stückzahl der Nachfrage und dem Lebenszyklus anzupassen. Aber auch in reifen Produktionsstadien gibt es Aufgabenstellungen, welche nur sehr schwierig zu automatisieren sind, so dass Handarbeitsplätze im Fertigungsablauf verbleiben. Diese Kombination findet man beispielsweise in verketteten Montagelinien, wo auf Werkstückträgern ggf. mehrmalige Umläufe zwischen Automatikstationen und Handarbeitsplätzen notwendig sind.Especially with new products, it is often started with a simple hand assembly, which is then further automated and can grow with it to adjust the number of demand and the life cycle. But even in mature production stages, there are tasks that are very difficult to automate, so that manual workstations remain in the production process. This combination can be found, for example, in interlinked assembly lines, where multiple passes between automatic stations and manual workstations may be necessary on workpiece carriers.

Das Ziel ist jeweils eine flexible Montage in Kombination mit teilautomatischen Lösungen. Teilautomatische Arbeitsschritte, wie Fügeprozesse oder das Auftragen von Kleberaupen, sind aus Gründen der Qualität oder durch die Konstruktion vorgegeben und können bei ihrer Ausführung durch Automatiken Gefahren für den Werker durch Quetsch- oder Scherstellen darstellen. In der gegenwärtigen Praxis erfolgt darum eine Absicherung in Form einer Distanzierung der Bedienperson gegenüber der Gefahrenstelle. Dazu werden häufig optoelektronische Sensoren eingesetzt, wie Sicherheitslichtgitter oder Sicherheitslaserscanner. Der Arbeitsplatz wird entweder von der Bedienperson oder von der Maschine genutzt, und eine direkte Kooperation findet praktisch nicht statt.The goal is always a flexible assembly in combination with semi-automatic solutions. Semi-automatic work steps, such as joining processes or the application of adhesive beads, are specified for reasons of quality or construction and, when executed by automatic equipment, may present hazards to the operator as a result of crushing or shearing. In current practice, therefore, there is a hedge in the form of distancing the operator from the danger spot. For this purpose, optoelectronic sensors are often used, such as safety light grids or safety laser scanners. The workplace is either used by the operator or by the machine, and there is virtually no direct cooperation.

Die kooperative Zusammenarbeit von Mensch und Roboter wurde beispielsweise in einem Projekt "Team@work" der Fraunhofergesellschaft demonstriert. Die Sicherheit der Bedienperson wird dabei durch eine Abstandsüberwachung gewährleistet, die mittels mehrerer Kameras den jeweils kürzesten Abstand zwischen Bedienperson und Roboter ermittelt und die Roboterbewegung bei Unterschreiten des sicherheitstechnisch kleinsten zulässigen Abstands anhält. In derDE 10 2004 043 514 A1 umgibt ein Schutzfeld die Maschine, welches an die Bewegung der Maschine angepasst wird.The cooperative collaboration between humans and robots was demonstrated for example in a project "Team @ work" of the Fraunhofergesellschaft. The safety of the operator is ensured by a distance monitoring, which determines the shortest distance between the operator and robot by means of multiple cameras and stops the robot movement falls below the safety-technically smallest allowable distance. In the DE 10 2004 043 514 A1 A protective field surrounds the machine, which is adapted to the movement of the machine.

Diesen Überlegungen ist jedoch gemeinsam, dass die beiden Beteiligte, also Mensch und Maschine, ihre Arbeitsschritte weitgehend unabhängig und parallel nebeneinander ausführen. Eine effektive Kommunikation zwischen Mensch und Maschine und damit eine echte Kooperation fehlt. Die einzige Kommunikationsschnittstelle besteht in Bildschirmen und Schalteinheiten an der Maschine. Mit solchen Schaltern zeigt die Bedienperson den Abschluss einer definierten Tätigkeit an und startet die Bewegung der Maschine. Schaltelemente müssen mit dem Arbeitsplatz mitbewegt oder mehrfach ausgeführt werden, um für die Bedienperson innerhalb des Arbeitsablaufes erreichbar zu bleiben.These considerations, however, have in common that the two parties, ie man and machine, perform their work largely independently and in parallel alongside each other. An effective communication between man and machine and thus a real cooperation is missing. The only communication interface consists of screens and switching units on the machine. With such switches, the operator indicates the completion of a defined activity and starts the movement of the machine. Switching elements must be moved with the workstation or executed several times in order to remain accessible to the operator within the workflow.

Dabei sind an Schnitten im Arbeitsablauf, die einer Interaktion zwischen Mensch und Maschine bedürfen, relativ starre Vorgaben zu erfüllen, um die Sicherheit zu gewährleisten, denn beispielsweise die Übergabe eines Werkstücks erfordert, dass die absichernden Sensoren vorübergehend eine enge Annäherung zwischen Mensch und Maschine tolerieren. Die Absicherung kann sich nicht allein an einem festen Zeitablauf orientieren, weil dies jede Korrektur bei Fehlern der Bedienperson oder des Werkstücks ausschließen würde.Relatively rigid specifications are to be met by cuts in the work process that require an interaction between man and machine in order to ensure safety, because, for example, the transfer of a workpiece requires that the securing sensors temporarily tolerate a close rapprochement between man and machine. The protection can not be based solely on a fixed timing, because this would preclude any correction in errors of the operator or the workpiece.

Die Bedienung erzwingt also zusätzliche Arbeitsschritte oder bringt zusätzliche Nachteile mit sich. Bekannt sind Zweihandschalter, deren Betätigung nur so möglich ist, dass sich keine Hand der Bedienperson im Gefahrenbereich befindet. Auch Fußschalter werden eingesetzt, doch verringern sie die Standsicherheit, belasten das Skelett einseitig und stellen mit ihren Zuleitungen Stolperfallen dar. Bildschirme zur Anzeige von Maschineninformationen befinden sich häufig an den Rändern der Maschine, sofern überhaupt erkennbare Darstellungen gegeben sind. Diese Trennung des Interaktionsbereiches am Werkstück und der Informations- und Steuereinrichtungen der Maschine, insbesondere wenn diese die Arbeitsschritte, Einlegerichtungen oder andere notwendige Informationen anzeigen, führt wegen der ständigen Kopfbewegungen und Akkommodation des Auges zur Ermüdung.The operation thus enforces additional steps or brings additional disadvantages. Are known two-hand switch whose operation is only possible so that there is no hand of the operator in the danger area. Footswitches are also used, but they reduce stability, load the skeleton unilaterally and trip with their leads. Screens for displaying machine information are often located at the edges of the machine, as long as recognizable representations are given. This separation of the interaction area on the workpiece and the information and control devices of the machine, especially when they indicate the work steps, insertion directions or other necessary information, leads to fatigue due to the constant head movements and accommodation of the eye.

Arbeitsplätze an Maschinen oder manuellen Montagestationen müssen einer Reihe von ergonomischen Standards und Richtlinien genügen. Viele Arbeitsplätze besitzen deshalb Verstellmöglichkeiten, etwa für die Anpassung von Sitz- und Greifhöhen. Teilweise ist aber eine individuelle Anpassung von Maschinen gar nicht möglich und der Arbeitsplatz nur für einen durchschnittlichen Menschen ausgelegt. In jedem Fall erfordert die Einstellung ein manuelles Eingreifen. Für die Ausführung von verschiedenen Arbeitsschritten bei größeren Bauteilen oder Halbfertigprodukten kann aber eine unterschiedliche Arbeitshöhe optimal sein, um biomechanische Hebel optimal zu nutzen und eine vorzeitige Ermüdung zu vermeiden. Dann sind auch manuelle Verstellungen zu zeitraubend und umständlich.Workplaces at machinery or manual assembly stations must meet a range of ergonomic standards and guidelines. Many workstations therefore have adjustment options, for example, for adjusting seat and reach heights. Sometimes, however, an individual adaptation of machines is not possible and the workplace is only designed for an average person. In any case, the setting requires manual intervention. However, to perform different operations on larger components or semi-finished products, a different working height may be optimal for optimally utilizing biomechanical levers and avoiding premature fatigue. Then manual adjustments too time-consuming and cumbersome.

Letztlich muss sich demnach der Mensch der Maschine oder den Arbeitsaufgaben anpassen und nicht umgekehrt. Gerade bei Einzelfertigungen werden die notwendigen Nebenzeiten zur Einrichtung des Arbeitsplatzes wegen des hohen Aufwands vermieden. Diese Herangehensweise widerspricht dem Prinzip der Ergonomie und eines gesunden und effektiven Arbeitens.Ultimately, therefore, the human must adapt to the machine or the work tasks and not vice versa. Especially with individual production, the necessary non-productive time to set up the workplace because of the high cost is avoided. This approach contradicts the principle of ergonomics and healthy and effective working.

Es ist bekannt, für die Absicherung einer Maschine gegen Unfälle mit Bedienpersonen mittels einem oder mehreren optischen Sensoren dreidimensionale Bilddaten zu erzeugen und auf deren Basis Gefahrensituationen zu erkennen. Beispielsweise ist in derUS 6,297,844 ein optischer Sicherheitsvorhang offenbart, der Bilddaten mit einem stereoskopischen Kamerasystem erzeugt.It is known to generate three-dimensional image data for the protection of a machine against accidents with operators by means of one or more optical sensors and to detect dangerous situations on the basis thereof. For example, in the US 6,297,844 discloses an optical safety curtain that generates image data with a stereoscopic camera system.

Derartige 3D-Sensoren sind meist als Kamera ausgebildet. Ein stereoskopisches Kamerasystem nimmt zwei oder mehr Bilder einer Szenerie aus unterschiedlichem Blickwinkel auf, ordnet Strukturen der verschiedenen Bilder einander zu und trianguliert aus der Disparität, also dem scheinbaren Versatz der Strukturen, und auf Basis der bekannten Perspektiven deren Entfernung. Bei einer Laufzeitkamera wird aktiv ein Lichtsignal ausgesandt und für jeden Pixel beispielsweise mittels Photonmischdetektion die Laufzeit bis zum Empfang des aus der Szenerie remittierten Lichts bestimmt. Wegen der bekannten und konstanten Lichtgeschwindigkeit liefert auch dies eine dreidimensionale Entfernungskarte. Es sind Bildsensoren bekannt, in deren intelligenten Pixel die Laufzeitbestimmung integriert ist.Such 3D sensors are usually designed as a camera. A stereoscopic camera system captures two or more images of a scene from different perspectives, arranges structures of the different images to each other and triangulates from the disparity, ie the apparent offset of the structures, and their distance based on the known perspectives. In a runtime camera, a light signal is actively transmitted and for each pixel, for example by means of photon mixing detection, the time until receipt of the light remitted from the scene is determined. Because of the known and constant speed of light, this also provides a three-dimensional distance map. Image sensors are known in whose intelligent pixels the transit time determination is integrated.

Aber auch Laserscanner oder Lichtgitter lassen sich zu dreidimensionale Sensoren weiterbilden. Dazu wird der Laserscanner, der üblicherweise nur eine Ebene abtastet, auch in der Senkrechten zu der üblichen Scanbewegung bewegt. Ein Lichtgitter kann tastend ausgebildet werden, besteht also aus entfernungsmessenden Lichttastern anstelle von einfachen Lichtschranken. Zur Entfernungsmessung werden dabei sowohl bei dem Laserscanner als auch bei dem Lichtgitter Lichtlaufzeitverfahren analog dem für eine Laufzeitkamera beschriebenen Verfahren eingesetzt.But even laser scanners or light grids can be further developed into three-dimensional sensors. For this purpose, the laser scanner, which usually scans only one plane, also moves in the vertical to the usual scanning movement. A light grid can be formed groping, so it consists of distance-measuring light sensors instead of simple light barriers. To measure the distance, both in the case of the laser scanner and in the light grid, the light transit time method is used in analogy to the method described for a runtime camera.

All diese Sicherheitseinrichtungen ermöglichen zwar die Überwachung dreidimensionaler Schutzfelder auf unzulässige Eingriffe. Für die Bedienperson ist aber der Schutzbereich nicht erkennbar, und es kommt deshalb immer wieder zu einer unbeabsichtigten Auslösung der Sicherheitseinrichtung. Dies führt zu mitunter erheblichen Produktionsstörungen, da zusätzlich zu dem Zeitverlust durch das Wiederanfahren der Maschine nach einem sicherheitsgerichteten Nothalt auch das Werkstück unbrauchbar wird oder zumindest nachbearbeitet werden muss.All these safety devices allow monitoring of three-dimensional protective fields for impermissible interventions. For the operator, however, the scope is not recognizable, and it therefore always comes back to an accidental release of the safety device. This sometimes leads to considerable production disruptions, since in addition to the loss of time due to the restarting of the machine after a safety-related emergency stop, the workpiece also becomes unusable or at least must be reworked.

Zur Visualisierung dreidimensionaler Bilddaten sind Datenbrillen oder HMDs (Head Mounted Displays) bekannt. Sie arbeiten zum Teil mit zumindest halbdurchsichtigen Anzeigen, die im Sichtfeld des Anwenders angeordnet werden, um die künstlichen Darstellungen einer natürlichen Szenerie zu überlagern. Eine noch fortschrittlichere Variante sind VRDs (Virtual Retinal Displays), die auf einer Brille sitzen und das Bild direkt auf die Netzhaut projizieren. Diese Art der Visualisierung findet in wissenschaftlichen Studien oder bei Militärpiloten Anwendung, jedoch nicht in der industriellen Fertigung.To visualize three-dimensional image data, data glasses or HMDs (Head Mounted Displays) are known. They work in part with at least semi-transparent displays arranged in the field of view of the user to superimpose the artificial representations of a natural scene. An even more advanced variant is VRDs (Virtual Retinal Displays), which sit on a pair of glasses and project the image directly onto the retina. This type of visualization is used in scientific studies or military pilots, but not in industrial production.

Aus derDE 10 2006 048 166 A1 ist ein Mehrkamerasystem zur Beobachtung einer Person in einem industriellen Umfeld bekannt, bei dem fortlaufend ein virtuelles 3D-Modell den aufgenommenen Bilddaten einer Person angepasst wird, um die Position und das Bewegungsverhalten der Person zu ermitteln. Daraus wird ein Gefährdungspotential geschätzt und, wenn dieses eine Schwelle überschreitet, auf die Bewegungssteuerung einer Maschine im Umfeld der Person eingewirkt. Das herkömmliche Kamerasystem gibt der Person keinerlei Möglichkeiten, in Interaktion mit dem Kamerasystem oder der Maschine zu treten. Das Bewegungsverhalten wird ausschließlich im Hinblick auf eine mögliche Gefahrensituation ausgewertet.From the DE 10 2006 048 166 A1 is a multi-camera system for observing a person in an industrial environment is known in which continuously a virtual 3D model is adapted to the recorded image data of a person to determine the position and the movement behavior of the person. From this, a hazard potential is estimated and, if this exceeds a threshold, the motion control of a machine in the environment of the person acted. The conventional camera system does not give the person any opportunities to interact with the camera system or the machine. The movement behavior is evaluated exclusively with regard to a possible danger situation.

DieEP 2 048 557 A1 offenbart einen optoelektronischen Sensor zur Überwachung eines Raumbereichs, bei dem Schutzfelder konfiguriert werden, indem ein besonderes Handgerät entlang der gewünschten Schutzfeldgrenzen in dem Raumbereich geführt wird. Die bereits konfigurierten oder teilkonfigurierten Schutzfelder werden dabei in einer Ausführungsform mit einer Datenbrille angezeigt. Bei dem herkömmlichen Vorgehen ist zum einen das besondere Handgerät erforderlich. Außerdem bezieht sich die Interaktion allein auf den Sensor und eine Konfigurationsphase vor dem eigentlichen Fertigungsbetrieb.TheEP 2 048 557 A1 discloses an opto-electronic sensor for monitoring a spatial area in which protective fields are configured by guiding a particular handset along the desired protective field boundaries in the spatial area. The already configured or partially configured protective fields are displayed in an embodiment with a data glasses. In the conventional approach, on the one hand the special handset is required. In addition, the interaction relates solely to the sensor and a configuration phase prior to the actual manufacturing operation.

Es ist daher Aufgabe der Erfindung, die Zusammenarbeit zwischen Mensch und Maschine an einem kooperativen Arbeitsplatz bei voller Absicherung gegenüber Unfallgefahren zu verbessern.It is therefore an object of the invention to improve the cooperation between man and machine in a cooperative workplace with full protection against accident hazards.

Diese Aufgabe wird durch eine 3D-Sicherheitsvorrichtung gemäß Anspruch 1 sowie ein Verfahren zur Absicherung und Bedienung mindestens einer Maschine an einem kooperativen Arbeitsplatz gemäß Anspruch 15 gelöst. Dabei geht die Erfindung von dem Grundgedanken aus, dreidimensionale Bilddaten eines Sicherheitssensors nicht allein für die Absicherung, sondern auch für die Bedienung zu verwenden. Bestimmte Bewegungsmuster der Bedienperson werden erkannt und als Eingabe an den 3D-Sensor oder die Maschine interpretiert und weiterverarbeitet. So wird beispielsweise der 3D-Sensor angewiesen, in einen anderen Modus zu wechseln, einen anderen Sichtwinkel zu wählen, sich zu deaktivieren oder dergleichen. Statt wie herkömmlich Mensch und Maschine durch eine Sicherheitsvorrichtung voneinander zu trennen, wird so eine echte Kooperation erreicht.This object is achieved by a 3D security device according to claim 1 and a method for securing and operating at least one machine at a cooperative workstation according to claim 15. The invention is based on the basic idea of using three-dimensional image data of a safety sensor not only for the protection, but also for the operation. Certain movement patterns of the operator are recognized and interpreted as input to the 3D sensor or the machine and further processed. For example, the 3D sensor is instructed to switch to another mode, to choose a different viewing angle, to deactivate, or the like. Instead of separating man and machine by a safety device as usual, a real cooperation is achieved.

Bewegungsmuster sind dabei weit aufzufassen und schließen auch an sich statische Elemente wie eine Pose beziehungsweise eine Körperhaltung ein. Sowohl die Posen als auch die Bewegungen werden mit einem Toleranzspielraum erkannt, weil von einer menschlichen Bedienperson keine identischen Bewegungsabläufe und Körperhaltungen erwartet werden. Die Erkennung eines Bewegungsmusters erfolgt beispielsweise durch Klassifikation, also die gezielte Zuordnung zu einem von mehreren möglichen Bewegungsmustern.Movement patterns are to be understood broadly and include static elements such as a pose or posture. Both the poses and the movements are recognized with a margin of tolerance, because no identical movements and postures are expected from a human operator. The recognition of a movement pattern takes place, for example, by classification, that is, the specific assignment to one of several possible movement patterns.

Unter einem kooperativen Arbeitsplatz wird ein Bereich verstanden, in dem mindestens eine Bedienperson und mindestens eine Maschine, wie beispielsweise ein Roboter, eine Montagestation oder dergleichen, gleichzeitig tätig sind, wobei zumindest in einem Teil des Fertigungsprozesses Arbeitsergebnisse zwischen Mensch und Maschine ausgetauscht oder Arbeitsschritte gemeinsam erledigt werden.A cooperative workstation is understood to be an area in which at least one operator and at least one machine, such as a robot, an assembly station or the like, are active at the same time, at least in one part of the manufacturing process exchanging work results between man and machine or carrying out work steps together become.

Da manche Benutzereingaben sicherheitskritisch oder zumindest prozesskritisch, also entscheidend für das Arbeitsprodukt sind, ist denkbar, dass alle oder manche Bewegungsmuster nur nach einer besonderen Authentifizierung als Benutzereingabe akzeptiert werden. Diese Authentifizierung kann ganz herkömmlich als Eingabe eines Zahlencodes, Passworts oder Lesen einer Zugangskarte realisiert sein. Alternativ werden auch für die Authentifizierung Sensordaten in Form einer Personenerkennung oder eines besonderen Bewegungsmusters zur Freigabe herangezogen.Since some user inputs are critical to security or at least critical to the process, that is critical for the work product, it is conceivable that all or some movement patterns are accepted as user input only after a special authentication. This authentication can be realized conventionally as input of a numerical code, password or reading of an access card. Alternatively, sensor data in the form of a person recognition or a special movement pattern are used for the authentication for the authentication.

Die Erfindung hat den Vorteil, dass die Bedienung, also die Mensch-Maschine-Schnittstelle, vollständig mittels 3D-Technik in die sicherheitstechnische Lösung integriert wird. Die Kooperation der Bedienperson mit der Maschine wird als 3D-Schnittstelle aufgefasst. Dadurch ist eine einfache, intuitive Kommunikation für die Bedienperson möglich. Nebenzeiten und Nebentätigkeiten zur Einrichtung und Anpassung des Arbeitsplatzes werden reduziert. Die Produktivität wird erhöht und die ergonomische Anpassungen werden erleichtert. Damit verbessert sich sowohl die Qualität des Produkts als auch die Arbeitszufriedenheit.The invention has the advantage that the operation, ie the man-machine interface, is completely integrated into the safety-related solution by means of 3D technology. The cooperation of the operator with the machine is understood as a 3D interface. This allows a simple, intuitive communication for the operator. Ancillary and secondary activities to set up and adapt the workplace are reduced. Productivity is increased and ergonomic adjustments are made easier. This improves both the quality of the product and job satisfaction.

Bevorzugt ist eine Anzeigeeinrichtung vorgesehen, insbesondere ein Projektor oder eine Datenbrille, um der Bedienperson ein mit Zusatzinformationen überlagertes Bild des Arbeitsplatzes zu präsentieren, wobei die Zusatzinformationen insbesondere die Darstellung eines Werkstücks, eine vorgesehene Position, Pose oder Bewegung der Bedienperson und/oder ein Schutzfeld umfassen. Die Anzeige erfolgt noch bevorzugter dreidimensional. Die Bedienperson erkennt daraus beispielsweise die notwendige Einlegerichtung für ein Werkstück, ihre eigene dafür vorgesehene Position und Körperhaltung oder die aktuellen Grenzen eines Gefahrenbereichs. Eine Datenbrille ist hier als Stellvertreter für alle HMDs oder ähnliche Anzeigemittel genannt, die mit dem Körper verbunden getragen werden, um dem Auge ein Bild zu präsentieren, das mit dem natürlichen Sichtfeld überlagert werden kann. Die Anzeigeeinrichtung kommuniziert bevorzugt drahtlos mit der Auswertungseinrichtung und ist in einen ohnehin getragenen Schutzhelm oder eine Schutzbrille integriert.Preferably, a display device is provided, in particular a projector or a data glasses, in order to present the operator with an additional information superimposed image of the workplace, the additional information in particular the representation of a workpiece, a proposed position, pose or movement of the operator and / or include a protective field , The display is even more preferable three-dimensional. The operator recognizes, for example, the necessary insertion direction for a workpiece, their own designated position and posture or the current limits of a danger zone. A pair of smart glasses is hereby referred to as a proxy for all HMDs or similar display means that are worn attached to the body to present to the eye an image that can be overlaid with the natural field of view. The display device preferably communicates wirelessly with the evaluation device and is integrated into an already worn protective helmet or goggles.

Die Anzeigeeinrichtung ist bevorzugt dafür ausgebildet, Bedienelemente in den Arbeitsplatz einzublenden, insbesondere virtuelle Schalter oder Regler. Der 3D-Sensor erkennt Bewegungsmuster der Bedienperson als Benutzereingabe. Für die Betätigung virtueller Schalter kommt es deshalb letztlich darauf an, ein Körperteil an eine bestimmte Stelle zu bringen und dort gegebenenfalls eine bestimmte Bewegung auszuführen. Diese Bewegung kann eine Geste insbesondere aus dem Fingeralphabet sein. Damit aber auch die Bedienperson weiß, welche Bewegung von ihr erwartet wird, werden diese Bedienelemente dargestellt, so dass die Bedienperson sie beispielsweise über die Positionierung der Hände in dem derart kenntlich gemachten Schalterbereich aktiviert. Herkömmliche Schalter an der Maschine werden dadurch entbehrlich, und die virtuellen Schalter können stets ergonomisch, für die Bedienperson gut erreichbar angezeigt werden. Ein besonders sicherheitsrelevantes Bedienelement ist ein virtueller Notausschalter, der beispielsweise als visueller Ring um einen bestimmten Bereich gezeigt wird. Ebenso denkbar ist ein optischer Zweihandschalter.The display device is preferably designed to display operating elements in the workstation, in particular virtual switches or controllers. The 3D sensor detects motion patterns of the operator as user input. For the operation of virtual switches, therefore, it is ultimately important to bring a body part to a specific point and there possibly perform a certain movement. This movement can be a gesture, especially from the finger alphabet. But so that the operator knows what movement is expected of her, these controls are displayed so that the operator activates them, for example, on the positioning of the hands in the thus marked switch area. This eliminates the need for conventional switches on the machine, and the virtual switches can always be displayed ergonomically, easily accessible to the operator. A particularly safety-relevant operating element is a virtual emergency stop switch, which is shown, for example, as a visual ring around a specific area. Also conceivable is an optical two-hand switch.

Die Auswertungseinheit ist bevorzugt dafür ausgebildet, einen Unterschied zwischen einem Sollzustand und einem Istzustand zu erkennen und mittels der Anzeigeeinrichtung anzuzeigen. Ein Sollzustand ist beispielsweise die erforderliche Art und Form eines Werkstücks, dessen Position und Orientierung, die Position und Körperhaltung der Bedienperson oder deren Bewegungsablauf für einen auszuführenden Arbeitsschritt. Die Anzeige kann als farbliche Markierung erfolgen. Für Farbenblinde ist sowohl die Farbe wählbar als auch eine andere Strukturierung möglich. Die Bedienperson erkennt so rasch, ob mit dem Werkstück oder dem Arbeitsablauf etwas nicht stimmt, und kann dies frühzeitig korrigieren.The evaluation unit is preferably configured to detect a difference between a desired state and an actual state and to display it by means of the display device. A desired state is, for example, the required type and shape of a workpiece, its position and orientation, the position and posture of the operator or their sequence of movements for a work step to be performed. The display can be made as a color mark. For color blinds, both the color is selectable and a different structuring possible. The operator recognizes so quickly whether something is wrong with the workpiece or the workflow, and can correct this early.

Die Auswertungseinheit ist noch bevorzugter dafür ausgebildet, einen Arbeitsschritt der Maschine so lange zu verweigern, bis Sollzustand und Istzustand übereinstimmen. Damit kann eine Qualitätssicherung erfolgen. So wird etwa geprüft, ob das richtige Werkstück in der richtigen Weise eingelegt wurde. Nur dann ist eine Auslösung des nachfolgenden automatischen Arbeitsschrittes möglich. Die Übereinstimmung wird jeweils nur in einem praktisch relevanten Maß gefordert. Eine andere Möglichkeit besteht in einer Überprüfung der Vollständigkeit vor einer Taktauslösung beispielsweise bei Füge- oder Montageaufgaben.The evaluation unit is even more preferably configured to refuse a work step of the machine until the desired state and actual state coincide. This can be a quality assurance. For example, it checks whether the correct workpiece has been inserted in the correct way. Only then is it possible to trigger the subsequent automatic work step. The agreement is required only in a practically relevant measure. Another possibility is to check the completeness before a clock release, for example, in joining or assembly tasks.

Die Auswertungseinheit ist bevorzugt dafür ausgebildet, als Bewegungsmuster Gesten oder Körperhaltungen, insbesondere Handbewegungen zu erkennen. Beispielsweise werden bestimmte Gesten virtuellen Schaltern zugeordnet. Diese Art, einen Schalter beispielsweise mittels Wischen zu bedienen, kann alternativ oder kumulativ zur Einblendung von Schaltelementen mittels der Anzeigeeinrichtung genutzt werden. Durch eine Gestensteuerung lassen sich analog der Gebärdensprache auch komplexe Befehle geben. Ein Bewegungsmuster ist gegenüber einer Geste der übergeordnete Begriff, weil ein Bewegungsmuster zusätzlich zu Gesten auch einen Positionswechsel und den ganzen Körper einbeziehende Bewegungen umfasst. Je näher die erkannten Bewegungsmuster an aus dem Alltag bekannte Gesten angelehnt sind, desto intuitiver wird die Bedienung. Alle in dieser Beschreibung genannten Gesten sind nur Beispiele, die Erfindung ist darauf nicht beschränkt. Die direkte Interaktion mit der Maschine ermöglicht eine manuelle Handhabung des Werkstückes und damit die Einsparung von Supporteinrichtungen, weil die üblichen Ablagen oder Formteile entfallen können. Das Werkstück wird eingelegt und manuell fixiert und anschließend der Bearbeitungsvorgang durch eine bestimmte Geste ausgelöst, wie eine bestimmte räumliche Handposition für die beiden Hände.The evaluation unit is preferably designed to detect gestures or postures, in particular hand movements, as movement patterns. For example, certain gestures are assigned to virtual switches. This way of operating a switch, for example by means of wiping, can be used alternatively or cumulatively for the insertion of switching elements by means of the display device. A gesture control can be analogous to the sign language give even complex commands. A movement pattern is the superordinate term compared to a gesture, because a movement pattern in addition to gestures also includes a change of position and movements involving the whole body. The closer the detected movement patterns are to everyday gestures, the more intuitive the operation becomes. All gestures mentioned in this description are only examples, the invention is not limited thereto. The direct interaction with the machine allows manual handling of the workpiece and thus the saving of support facilities, because the usual shelves or moldings can be omitted. The workpiece is inserted and manually fixed and then triggered the machining process by a specific gesture, such as a specific spatial hand position for the two hands.

Die Auswertungseinheit ist bevorzugt dafür ausgebildet, Bewegungsmuster für das Heben oder Senken eines Maschinenteils oder die Einstellung eines Abstands zwischen Bedienperson und Maschinenteil zu erkennen und das Maschinenteil entsprechend zu bewegen. Derartige Bewegungsmuster bestehen beispielsweise angelehnt an die Handzeichen eines Einweisers aus einem Herabsenken oder Anheben beider nach unten beziehungsweise nach oben gerichteter Handflächen oder der Anzeige eines Abstands zwischen den zueinander gerichteten Handflächen.The evaluation unit is preferably designed to detect movement patterns for the lifting or lowering of a machine part or the setting of a distance between the operator and the machine part and to move the machine part accordingly. Such movement patterns consist, for example, based on the hand signals of a referrer from a lowering or raising of both downward or upward facing palms or the display of a distance between the mutually facing palms.

Die Auswertungseinheit ist bevorzugt dafür ausgebildet, Bewegungsmuster zum Auslösen oder Beenden eines automatischen Arbeitsschritts zu erkennen und die Maschine entsprechend zum Ausführen oder Anhalten des Arbeitsschritts anzusteuern, wobei ein Bewegungsmuster insbesondere eine Notausgeste oder eine Körperhaltung zur Bedienung einer virtuellen Zweihandschaltung ist. Dazu dienen beispielsweise Gesten wie der nach oben oder unten gerichtete Daumen oder das zwischen Daumen und Zeigefinger geformte OK-Zeichen. Es kann eine besondere Notfallgeste für einen Nothalt definiert werden, die besonders robust erkennbar und besonders einfach auszuführen sein sollte und zugleich ausschließt, dass die Bedienperson dieses Bewegungsmuster zufällig ausführt. Ein Beispiel ist das abwehrende Vorstrecken beider Hände. Auch ein Zweihandschalter lässt sich als Bewegungsmuster interpretieren. Dabei wird die Position der Hände und möglicherweise auch des Kopfes überwacht, so dass sichergestellt ist, dass zumindest diese Körperteile nicht von dem nachfolgenden Arbeitsschritt gefährdet werden.The evaluation unit is preferably designed to recognize movement patterns for triggering or terminating an automatic work step and to control the machine accordingly for executing or stopping the work step, wherein a movement pattern is in particular an emergency release or a posture for operating a virtual two-hand circuit. For example, gestures such as the thumb pointing up or down or the OK mark formed between the thumb and forefinger are used. It can be defined a special emergency gesture for emergency stop, which should be particularly robust recognizable and particularly easy to do and at the same time precludes that the operator performs this movement pattern randomly. An example is the defensive Vorstrecken both hands. A two-hand switch can also be interpreted as a movement pattern. In this case, the position of the hands and possibly also of the head is monitored, so that it is ensured that at least these body parts are not endangered by the subsequent work step.

Die Auswertungseinheit ist bevorzugt dafür ausgebildet, Bewegungsmuster zum Zurückdrängen eines Maschinenteils zu erkennen und das Maschinenteil entsprechend zu bewegen. Dazu dient ein besonderes Bewegungsmuster, beispielsweise eine Geste analog dem Verscheuchen einer Fliege. Statt also bei Annäherung an die Gefahrenquelle einen Notstopp auszulösen, wird so ermöglicht, das Maschinenteil, etwa eine Achse eines Roboters, zum Zurückweichen zu bewegen. Solange keine Gefährdung erkannt wird und kein Schutzfeld verletzt ist, kann das Zurückziehen des Maschinenteils auch verzögert werden, um zunächst einen automatischen Arbeitsschritt abzuschließen.The evaluation unit is preferably designed to detect movement patterns for pushing back a machine part and to move the machine part accordingly. This is a special movement pattern, such as a gesture analogous to the scare away a fly. So instead of triggering an emergency stop when approaching the source of danger, it is thus possible to move the machine part, such as an axis of a robot, to retreat. As long as no danger is detected and no protective field is injured, the retraction of the machine part can also be delayed to complete an automatic work step first.

Der Unterschied zwischen Verscheuchen und Notstopp kann den Konflikt zwischen Prozesssicherheit und Gefahrensituation lösen. Greift die Bedienperson in den Schutzbereich ein, ist ein Notstopp erforderlich, der zu Qualitätsproblemen führen kann. Der Eingriff erfolgt aber mitunter, um Korrekturen auszuführen. Hierzu kann aufgrund der Verscheuchen-Geste der Teilschritt abschlossen werden, die Achse zieht sich dann zurück, und die Korrektur kann erfolgen. Anschließend wird der Arbeitsschritt mittels einer Startgeste wieder gestartet und abgeschlossen. Hierzu dient ein Heranwinken. Soll die Achse ihre Position ändern, so wird mit dem Zeigefinger in die jeweilige Richtung gewiesen werden. Die Dauer dieser Geste entscheidet dabei über den zurückgelegten Weg.The difference between scare and emergency stop can solve the conflict between process safety and dangerous situations. If the operator interferes with the protection area, an emergency stop is required, which can lead to quality problems. The intervention is sometimes done to make corrections. For this purpose, due to the scare gesture, the sub-step can be completed, the axis then retracts, and the correction can be made. Subsequently, the step is restarted and completed by means of a start gesture. This purpose is a Heranwinken. If the axis is to change its position, the index finger points in the respective direction. The duration of this gesture decides the distance traveled.

Die Auswertungseinheit ist bevorzugt für einen Konfigurationsmodus ausgebildet, in dem Bewegungsmuster einer bestimmten Bedienperson eingelernt und Bedienelementen oder Benutzereingaben zugeordnet werden. Dies ist eine Art "3D-Customizing". Durch Anpassung des "look and feel", also der Gestaltungs-, Farb- und Strukturelemente, ist die durch die Erfindung realisierte 3D-Schnittstelle an individuelle Vorlieben der Bedienperson anpassbar. Aber auch individuelle Besonderheiten mit besonders großer Auswirkung auf die Ergonomie, wie Rechts- oder Linkshändigkeit, oder Körpergröße oder körperliche Beeinträchtigungen werden berücksichtigt. Die Bewegungsmuster sind individuell einlernbar, um eine robuste Erkennung und eine für die jeweilige Bedienperson intuitive und einfache Steuerung zu erreichen. Schließlich können bestimmte Steuerungsmöglichkeiten freigeschaltet oder inaktiv gesetzt werden.The evaluation unit is preferably designed for a configuration mode in which movement patterns of a specific operator are taught in and control elements or user inputs are assigned. This is a kind of "3D Customizing". By adapting the "look and feel", ie the design, color and structure elements, the 3D interface realized by the invention can be adapted to individual preferences of the operator. But also individual peculiarities with particularly great impact on the ergonomics, such as right or left handedness, or height or physical impairments are considered. The movement patterns are individually teachable to achieve a robust recognition and an intuitive and simple control for each operator. Finally, certain control options can be enabled or disabled.

Die Auswertungseinheit ist bevorzugt für einen Kalibrierungsmodus ausgebildet, in dem der Arbeitsplatz und die Maschine an die Bedienperson angepasst wird, insbesondere indem die Handhöhe oder die Kopfhöhe bestimmt und daraufhin eine ergonomische Höhenanpassung des Arbeitsplatzes und/oder einer ergonomische Präsentation von Werkstücken durch die Maschine an die Bedienperson erfolgt. Durch diesen Abgleich zwischen der Präsentation des Werkstücks, des Arbeitstisches und der Standfläche der Bedienperson werden Zwangshaltungen vermieden und biomechanische Hebel der Bedienperson optimal genutzt. Da eine Anpassung der Tischhöhe die Werkstücklogistik erschwert, ist alternativ eine Anpassung der Höhe der Standfläche möglich. Die Kalibrierung erfolgt beispielsweise auf Grundlage der Handposition, indem die aktuelle Handhöhe der präsentierten Hände gemessen wird und die Höhenelemente des Arbeitsplatzes darauf abgestimmt werden. Ebenso ist denkbar, die Körpergröße auf Grundlage der Kopfhöhe zu verwenden. Die Kalibrierung kann bei Schichtbeginn erfolgen oder jederzeit aktiviert werden, um eine optimale Anpassung an die Statur der aktuell tätigen Bedienperson sicherzustellen. Auch die Speicherung in einem Nutzerprofil ist möglich.The evaluation unit is preferably designed for a calibration mode in which the workstation and the machine are adapted to the operator, in particular by determining the hand height or the head height and then an ergonomic height adjustment of the workplace and / or an ergonomic presentation of workpieces by the machine to the Operator takes place. By this comparison between the presentation of the workpiece, the work table and the footprint of the operator forced postures are avoided and biomechanical levers of the operator used optimally. Since an adjustment of the table height makes the workpiece logistics more difficult, it is alternatively possible to adapt the height of the standing surface. Calibration is based, for example, on the hand position by measuring the current hand height of the hands presented and adjusting the height elements of the workstation. It is also conceivable to use the body size based on the head height. The calibration can be done at the beginning of the shift or activated at any time to ensure an optimal adaptation to the stature of the current operator. The storage in a user profile is possible.

Nicht nur der Arbeitsplatz an sich, sondern auch die Präsentation der Werkstücke wird so an die Bedienperson angepasst. Gerade bei schweren Werkstücken werden Hebehilfen eingesetzt, es wird mit Robotern interagiert, oder die Montage erfolgt auf rollenden Werkbänken. Dabei sollte sich das Werkstück stets in einer ergonomischen Arbeitshöhe befinden, die von der Bedienperson abhängt und der Sicherheitsvorrichtung aufgrund der Kalibrierung bekannt ist. Wird auch noch die bevorzugte Arbeitshand spezifiziert, so kann die Werkstückpräsentation beispielsweise über einen Anstellwinkel zu der Bedienperson weiter optimiert werden.Not only the workplace itself, but also the presentation of the workpieces is adapted to the operator. Especially for heavy workpieces, lifting aids are used, it is interacted with robots, or the assembly takes place on rolling workbenches. The workpiece should always be at an ergonomic working height, which depends on the operator and the safety device is known due to the calibration. If the preferred working hand is also specified, the workpiece presentation can be further optimized, for example, via an angle of attack to the operator.

Die Auswertungseinheit ist bevorzugt dafür ausgebildet, eine Gefährdung der Bedienperson anhand eines unzulässigen Eingriffs in einen Schutzbereich innerhalb des Arbeitsplatzes zu erkennen. Eine Gefahrensituation wird demnach immer dann erkannt, wenn ein Eingriff in ein Schutzfeld erfolgt. Das erleichtert die Gefahrenerkennung. Von unzulässigen Eingriffen sind zulässige Eingriffe zu unterscheiden, beispielsweise durch die Maschine oder ein Werkstück. Kann die Sicherheitsvorrichtung Schutzfeldeingriffe solchen bekannten Objekten zuordnen und ist ein solcher Schutzfeldeingriff im Prozess vorgesehen, so muss keine Absicherung erfolgen.The evaluation unit is preferably designed to detect a hazard to the operator based on an unauthorized intervention in a protected area within the workplace. A dangerous situation is therefore always recognized when an intervention in a protective field takes place. This facilitates danger detection. Inadmissible interventions must be distinguished from permissible interventions, for example by the machine or a workpiece. If the safety device can assign protective field interventions to such known objects and if such interception of the protective field is provided for in the process, then no protection must be provided.

Die Schutzbereiche werden dabei noch bevorzugter dynamisch an ein derzeit bearbeitetes Werkstück angepasst. Die dynamische Anpassung berücksichtigt demnach nicht nur das bewegte Maschinenteil, sondern auch das Werkstück, welches beispielsweise aufschwenken könnte. Andererseits ist bei kleinen Werkstücken eine Reduktion des Schutzbereiches möglich, wohingegen ohne Berücksichtigung des Werkstücks das Schutzfeld entsprechend dem Maximalfall auszulegen wäre. Je kleiner die Schutzfelder bei weiterhin garantierter Absicherung sind, desto weniger wird die Bedienperson hierdurch eingeschränkt, und desto weniger unnötige Abschaltungen verringern die Verfügbarkeit.The protection areas are even more preferably dynamically adapted to a currently machined workpiece. The dynamic adaptation accordingly takes into account not only the moving machine part, but also the workpiece, which could swing up, for example. On the other hand, with small workpieces, a reduction of the protection range is possible, whereas without consideration of the workpiece, the protective field would have to be interpreted according to the maximum case. The smaller the protective fields are, with continued guaranteed protection, the less the operator is thereby restricted, and the less unnecessary shutdowns reduce the availability.

Die Anzeigeeinrichtung ist bevorzugt dafür ausgebildet, der Bedienperson die Schutzfelder darzustellen. Dies gilt sowohl für eine Konfigurationsphase, in denen Schutzfelder eingerichtet werden, als auch für den eigentlichen Betrieb. Während der Konfiguration, die durch eine eher komplexe Authentifizierungsgeste eingeleitet wird, wird die Hand längs den gewünschten Schutzfeldgrenzen mit einer bestimmten Fingerstellung bewegt. Durch eine weitere Geste, beispielsweise doppeltes Antippen mit dem Zeigefinger, kann eine bestehende Schutzfeldgrenze angewählt und anschließend durch Heranwinken oder Fortschieben beziehungsweise virtuelles Anfassen und Positionieren verändert werden. Dabei gibt die Anzeigeeinrichtung jeweils visuelle Rückmeldung über den Arbeitsfortschritt und die aktuelle Eingabe. Während des Betriebs werden die aktiven Schutzfelder eingeblendet, um versehentliche Eingriffe der Bedienperson zu reduzieren. Gerade bei dynamisch an die aktuelle Situation angepassten Schutzfeldern wäre ohne eine solche Anzeige nicht immer klar, welche Bereiche die Sicherheitsfunktion auslösen, so dass die Bedienperson unnötige Sicherheitsabstände einhält und damit in ihrer Bewegungsfreiheit eingeschränkt wird.The display device is preferably designed to represent the operator the protective fields. This applies both to a configuration phase in which protective fields are set up, as well as for the actual operation. During the configuration, which is initiated by a rather complex authentication gesture, the hand is moved along the desired protective field boundaries with a certain finger position. By a further gesture, for example, double tapping with the index finger, an existing protective field boundary can be selected and then changed by hitching or pushing or virtual touch and positioning. In each case, the display device gives visual feedback about the work progress and the current input. During operation, the active protective fields are displayed to reduce accidental intervention by the operator. Especially with dynamically adapted to the current situation protected fields would not always be clear which areas trigger the safety function without such a display, so that the operator observes unnecessary safety distances and thus restricted in their freedom of movement.

Die Auswertungseinheit ist bevorzugt dafür ausgebildet, Konturen von Objekten, die unzulässig in ein Schutzfeld eingreifen, mittels der Anzeigeeinrichtung optisch hervorzuheben. Dazu wird beispielsweise mit einer Blinkfunktion auf ganze Objekte oder nur Störkonturen hingewiesen, die sich noch im Schutzbereich befinden. Mit diesen klaren Hinweisen lässt sich rasch die Störungsursache einer sicherheitsgerichteten Abschaltung finden und beseitigen, und die Verfügbarkeit verbessert sich.The evaluation unit is preferably designed to visually emphasize contours of objects that inadmissibly engage in a protective field by means of the display device. For this purpose, for example, with a flashing function on whole objects or only interference contours are pointed out, which are still in the protection area. With these clear indications, you can quickly find and eliminate the cause of a safety-related trip, and availability improves.

Die Auswertungseinheit ist bevorzugt dafür ausgebildet, bei Ausgabe eines Abschaltbefehls die dreidimensionalen Bilddaten zu speichern. Damit wird dokumentiert, wie es zu dem Nothalt kommen konnte, um einen Unfallhergang zu rekonstruieren oder den Ablauf zukünftig zu optimieren. Die Bilder können natürlich darüber hinaus auch ständig aufgezeichnet und beispielsweise in einer Sicherheitszentrale visualisiert werden.The evaluation unit is preferably designed to store the three-dimensional image data when a shutdown command is issued. This documents how the emergency stop could come about in order to reconstruct an accident or to optimize the process in the future. Of course, the images can also be constantly recorded and visualized in a security center, for example.

Das erfindungsgemäße Verfahren kann auf ähnliche Weise weitergebildet werden und zeigt dabei ähnliche Vorteile. Derartige vorteilhafte Merkmale sind beispielhaft, aber nicht abschließend in den sich an die unabhängigen Ansprüche anschließenden Unteransprüchen beschrieben.The method according to the invention can be developed in a similar manner and shows similar advantages. Such advantageous features are described by way of example but not exhaustively in the subclaims following the independent claims.

Die Erfindung wird nachstehend auch hinsichtlich weiterer Merkmale und Vorteile beispielhaft anhand von Ausführungsformen und unter Bezug auf die beigefügte Zeichnung näher erläutert. Die Abbildungen der Zeichnung zeigen in:

Fig. 1

eine schematische dreidimensionale Darstellung eines kooperativen Arbeitsplatzes mit einer erfindungsgemäßen 3D-Sicherheitsvorrichtung; und

Fig. 2

eine Darstellung gemäßFigur 1 zu einem anderen Zeitpunkt des Fertigungsablaufs.

The invention will be explained in more detail below with regard to further features and advantages by way of example with reference to embodiments and with reference to the accompanying drawings. The illustrations of the drawing show in:

Fig. 1

a schematic three-dimensional representation of a cooperative workstation with a 3D security device according to the invention; and

Fig. 2

a representation according to FIG. 1 at another point in the production process.

Figur 1 zeigt in einer schematischen dreidimensionalen Darstellung den allgemeinen Aufbau einer erfindungsgemäßen 3D-Sicherheitsvorrichtung 10 an einem kooperativen Arbeitsplatz 12. Dort sind eine Bedienperson 14 und eine Maschine 16, in dem Beispiel ein Roboter, mit einer hybriden Montage befasst, wobei in dem dargestellten Arbeitsschritt die Maschine ein Werkstück 18 bearbeitet. FIG. 1 shows in a schematic three-dimensional representation of the general structure of a3D safety device 10 according to the invention at acooperative workstation 12. There are anoperator 14 and amachine 16, in the example a robot, deals with a hybrid assembly, wherein in the illustrated step, the machine aworkpiece 18 edited.

Die 3D-Sicherheitsvorrichtung 10 weist einen 3D-Sensor 20 auf, der als Stereoskopiekamera ausgebildet ist. Die Erfindung ist aber unabhängig von der Art, mit der dreidimensionale Bilddaten gewonnen werden, und umfasst auch andere 3D-Sensoren einschließlich der einleitend genannten Laserscanner und Lichtlaufzeitkameras. Es ist denkbar, eine zusätzliche, in derFigur 1 nicht dargestellte 2D-Kamera einzusetzen, um ergänzende Bilddaten zu gewinnen, die beispielsweise höher aufgelöst, in einem anderen Spektrum oder aus einer anderen Perspektive aufgenommen werden. Ebenso kann der 3D-Sensor statt vertikal auch seitlich montiert sein.The3D security device 10 has a3D sensor 20, which is designed as a stereoscopic camera. However, the invention is independent of the manner in which three-dimensional image data is obtained, and also includes other 3D sensors including the initially mentioned laser scanner and light time cameras. It is conceivable, an additional, in the FIG. 1 not shown 2D camera to use to obtain additional image data, which are recorded, for example, higher resolution, in a different spectrum or from a different perspective. Likewise, the 3D sensor can be mounted laterally instead of vertically.

Die 3D-Sicherheitsvorrichtung 10 ist weiterhin mit einem Projektor 30 ausgerüstet, mit dem visuelle Informationen auf den Arbeitsplatz 12 projiziert werden. Eine Auswertungseinheit 40 ist mit dem 3D-Sensor 20 und dem Projektor 30 verbunden und mit der Steuerung und Auswertung der 3D-Sicherheitsvorrichtung 10 befasst. Durch diese Kombination können sowohl Daten und Informationen dargestellt als auch Steuerbefehle ausgelöst werden. Es können auch mehrere 3D-Sensoren 20 und/oder mehrere Projektoren 30 eingesetzt werden, beispielsweise um einen größeren Arbeitsbereich abzudecken oder schlechte Sicht- und Projektionswinkel beziehungsweise Abschattungen zu kompensieren.The3D security device 10 is further equipped with aprojector 30 with which visual information is projected onto theworkstation 12. Anevaluation unit 40 is connected to the3D sensor 20 and theprojector 30 and deals with the control and evaluation of the3D security device 10. This combination allows both data and information to be displayed and control commands to be triggered. It is also possible to use a plurality of3D sensors 20 and / or a plurality ofprojectors 30, for example to cover a larger work area or to compensate for poor viewing and projection angles or shadowing.

In dem 3D-Sensor 20 sind zwei Kameramodule 21a-b in einem bekannten festen Abstand zueinander montiert und nehmen jeweils Bilder des Arbeitsplatzes 12 auf. In jeder Kamera ist ein Bildsensor 22a-b vorgesehen, üblicherweise ein matrixförmiger Aufnahmechip, der ein rechteckiges Pixelbild aufnimmt, beispielsweise ein CCD- oder ein CMOS-Sensor. Den Bildsensoren 22a-b ist je ein Objektiv 23a-b mit einer abbildenden Optik zugeordnet, welche in der Praxis als jedes bekannte Abbildungsobjektiv realisiert sein können. Der Sichtwinkel dieser Optiken ist inFigur 1 durch gestrichelte Linien dargestellt, die jeweils eine Sichtpyramide 24a, 24b bilden.In the3D sensor 20, twocamera modules 21a-b are mounted at a known, fixed distance from each other and each take pictures of theworkstation 12. In each camera, animage sensor 22a-b is provided, usually a matrix-shaped recording chip, which receives a rectangular pixel image, for example a CCD or a CMOS sensor. Theimage sensors 22a-b are each assigned an objective 23a-b with imaging optics, which in practice can be realized as any known imaging objective. The viewing angle of these optics is in FIG. 1 represented by dashed lines, each forming aviewing pyramid 24a, 24b.

In der Mitte zwischen den beiden Bildsensoren 22a-b ist eine Beleuchtungseinheit 25 vorgesehen, wobei diese räumliche Anordnung nur als Beispiel zu verstehen ist und die Beleuchtungseinheit ebenso asymmetrisch oder sogar außerhalb des 3D-Sensors 10 angeordnet sein kann. Diese Beleuchtungseinheit 25 weist eine Lichtquelle 26, beispielsweise einen oder mehrere Laser oder LED sowie ein Mustererzeugungselement 27 auf, das beispielsweise als Maske, Phasenplatte oder diffraktives optisches Element ausgebildet ist. Somit ist die Beleuchtungseinheit 25 in der Lage, den Raumbereich 12 mit einem strukturierten Muster auszuleuchten. Das strukturierte Beleuchtungsmuster erleichtert die stereoskopische Gewinnung von 3D-Bilddaten, sollte aber vorzugsweise für die Bedienperson 14 unsichtbar beispielsweise im infraroten Spektrum liegen. Es sind auch Ausführungsformen mit homogener Beleuchtung oder solche denkbar, die ohne Beleuchtungseinheit 25 allein mit dem Umgebungslicht auskommen.In the middle between the twoimage sensors 22a-b, alighting unit 25 is provided, wherein this spatial arrangement is to be understood only as an example and the lighting unit may also be arranged asymmetrically or even outside of the3D sensor 10. Thisillumination unit 25 has alight source 26, for example one or more lasers or LEDs, and apattern generation element 27, which is designed, for example, as a mask, phase plate or diffractive optical element. Thus, thelighting unit 25 is able to illuminate thespace area 12 with a structured pattern. The structured illumination pattern facilitates the stereoscopic acquisition of 3D image data, but should preferably be invisible to theoperator 14, for example in the infrared spectrum. There are also embodiments with homogeneous lighting or those conceivable that manage withoutlighting unit 25 alone with the ambient light.

Mit den beiden Bildsensoren 21a-b ist eine Stereoskopie-Auswertungseinheit 28 verbunden, welche Bilddaten der Bildsensoren 21a-b empfängt und daraus mit Hilfe einer stereoskopischen Disparitätsschätzung dreidimensionale Bilddaten des Arbeitsplatzes 12 berechnet. Das strukturierte Beleuchtungsmuster sorgt dabei für einen guten Kontrast und eine eindeutig zuordenbare Struktur jedes Bildelements des beleuchteten Arbeitsplatzes 12.Connected to the twoimage sensors 21a-b is astereoscopic evaluation unit 28, which receives image data from theimage sensors 21a-b and calculates therefrom three-dimensional image data of theworkstation 12 with the aid of a stereoscopic disparity estimation. The structured illumination pattern ensures good contrast and a clearly assignable structure of each pixel of the illuminatedworkstation 12.

Im von dem Sicherheitssensor 10 überwachten Raumbereich 12 können sich bekannte und unerwartete Objekte befinden. Dabei kann es sich beispielsweise wie dargestellt um einen Roboterarm 32, aber auch eine sonstige Maschine, eine Bedienperson und anderes handeln. Der Raumbereich 12 bietet Zugang zu einer Gefahrenquelle, sei es weil es ein Zugangsbereich ist oder weil sich eine gefährliche Maschine, wie der Roboterarm 32, in dem Raumbereich 12 selbst befindet. Um diese Gefahrenquelle abzusichern, können ein oder mehrere virtuelle Schutz- und Warnfelder 34 konfiguriert werden. Sie bilden einen virtuellen Zaun um die gefährliche Maschine 32. Aufgrund der dreidimensionalen Auswertung ist es möglich, Schutz- und Warnfelder 34 dreidimensional zu definieren, so dass eine große Flexibilität entsteht.Thespace area 12 monitored by thesecurity sensor 10 may contain known and unexpected objects. For example, as shown, this may be a robot arm 32, but also another machine, an operator and others. Theroom area 12 provides access to a source of danger, be it because it is an access area or because a dangerous machine, such as the robotic arm 32, is in theroom area 12 itself. To secure this source of danger, one or more virtual protection and alert fields 34 may be configured. They form a virtual fence around the dangerous machine 32. Due to the three-dimensional evaluation, it is possible to define protection and warning fields 34 three-dimensionally, so that a great flexibility arises.

Der 3D-Sensor 20 gibt die dreidimensionalen Bilddaten an die Auswertungseinheit 40 aus. In einer Bewegungsmuster-Erkennungseinheit 41 der Auswertungseinheit 40 wird die Bedienperson 14 innerhalb der dreidimensionalen Bilddaten identifiziert und ihre Position, Bewegungsbahn und Körperhaltung bestimmt. Je nach Anforderung der Anwendung werden Gesten und Posen eher grob nur des gesamten Körpers bis hin zu einer feinen Erkennung einzelner Fingerbewegungen aufgelöst. Möglichkeiten der Erkennung von 3D-Bewegungsmustern sind an sich bekannt und beispielsweise in der einleitend genanntenDE 10 2006 048 166 A1 sowie der darin zitierten Literatur beschrieben. Beispielsweise wird anhand der aktuellen Bilddaten ein 3D-Modell einer Person parametriert. Durch Klassifizierung bekannter Bewegungsmuster wird dann entschieden, welches Bewegungsmuster die Person derzeit ausführt. Dazu wird häufig nicht nur das aktuelle Bild ausgewertet, sondern auch die Vergangenheit berücksichtigt. Ein bekanntes Verfahren hierfür ist das Objekt-Tracking beispielsweise basierend auf Kalmanfiltern.The3D sensor 20 outputs the three-dimensional image data to theevaluation unit 40. In a movementpattern recognition unit 41 of theevaluation unit 40, theoperator 14 is identified within the three-dimensional image data and determines their position, trajectory and posture. Depending on the requirements of the application, gestures and poses are roughly resolved only roughly from the entire body to a fine recognition of individual finger movements. Possibilities of detecting 3D motion patterns are known per se and, for example, in the introductory mentionedDE 10 2006 048 166 A1 and the literature cited therein. For example, a 3D model of a person is parameterized on the basis of the current image data. By classifying known movement patterns, it is then decided which movement pattern the person is currently performing. For this purpose, not only the current image is often evaluated, but also the past is taken into account. A known method for this is the object tracking, for example based on Kalman filters.

Wird ein Bewegungsmuster erkannt, das einem voreingestellten oder eingelernten Bewegungsmuster entspricht, so interpretiert die Auswertungseinheit 40 dies als eine Benutzereingabe analog der Betätigung eines Schalters oder Reglers. Die Auswertungseinheit 40 führt dann den für das Bewegungsmuster vorgesehenen Befehl oder Vorgang aus oder leitet ein entsprechendes Signal an den 3D-Sensor 20, den Projektor 30 oder über eine nicht dargestellte Verbindung, die auch drahtlos oder mittelbar über eine Anlagensteuerung realisiert sein kann, an die Maschine 16 weiter.If a movement pattern is detected which corresponds to a preset or learned movement pattern, theevaluation unit 40 interprets this as a user input analogous to the operation of a switch or regulator. Theevaluation unit 40 then executes the command provided for the movement pattern or Operation or passes a corresponding signal to the3D sensor 20, theprojector 30 or via a connection, not shown, which may also be realized wirelessly or indirectly via a system control, to themachine 16 on.

Für Befehle an den Projektor 30 ist in der Auswertungseinheit 40 eine Anzeigensteuerung 42 vorgesehen. Damit können Bedienelemente auf den Arbeitsplatz projiziert, Rückbestätigungen für Eingaben und ganz allgemein Daten und Informationen für die Bedienperson 14 visualisiert werden. Eine wichtige Information für die Bedienperson 14 sind Schutzfelder 50, in die aus Sicherheitsgründen nicht eingegriffen werden darf, wobei inFigur 1 beispielhaft eine virtuelle Wand zwischen der Bedienperson 14 und der Maschine 16 als Schutzfeld 50 gezeigt ist.For commands to theprojector 30, adisplay controller 42 is provided in theevaluation unit 40. In this way, operating elements can be projected onto the workstation, return confirmations for inputs and, more generally, data and information for theoperator 14 can be visualized. An important information for theoperator 14 areprotective fields 50, which must not be interfered with for safety reasons, wherein in FIG. 1 By way of example, a virtual wall between theoperator 14 and themachine 16 is shown as aprotective field 50.

Diese Schutzfelder 50 werden in einer Schutzfeld-Auswertungseinheit 43 der Auswertungseinheit 40 auf unzulässige Eingriffe ausgewertet. Die Auswertungsregeln können beispielsweise vorschreiben, dass in Schutzfeldern 50 überhaupt kein Objekt vorhanden sein darf. Flexiblere Auswertungsregeln sehen vor, zwischen erlaubten und nicht erlaubten Objekten zu differenzieren, etwa anhand von Bewegungsbahnen, Mustern oder Konturen, Geschwindigkeiten oder allgemeinen Arbeitsabläufen, die sowohl vorab als erlaubt eingelernt als auch anhand von Bewertungen, Heuristiken oder Klassifikationen noch während des Betriebs eingeschätzt werden.Theseprotective fields 50 are evaluated in a protectivefield evaluation unit 43 of theevaluation unit 40 for improper interventions. The evaluation rules may stipulate, for example, that no object may be present inprotective fields 50 at all. More flexible evaluation rules provide differentiation between allowed and non-permitted objects, such as trajectories, patterns or contours, speeds or general workflows that are both learned in advance as well as evaluated on the basis of assessments, heuristics or classifications during operation.

Die Schutzfeld-Auswertungseinheit 43 kennt das Bewegungsverhalten der Bedienperson 14 von der Bewegungsmuster-Erkennungseinheit 41. Ganz analog kann auch das Bewegungsmuster der Maschine 16 durch den 3D-Sensor 20 erkannt werden. Alternativ oder zusätzlich stehen für das Bewegungsmuster der Maschine 16 auch die Daten der Maschinensteuerung zur Verfügung. Damit sind hoch flexible Schutzfelder 50 möglich, die an die jeweilige Situation angepasst sind.The protectivefield evaluation unit 43 knows the movement behavior of theoperator 14 from the movementpattern recognition unit 41. Quite analogously, the movement pattern of themachine 16 can also be recognized by the3D sensor 20. Alternatively or additionally, the data of the machine control are also available for the movement pattern of themachine 16. This highly flexibleprotective fields 50 are possible, which are adapted to the particular situation.

Erkennt die Schutzfeld-Auswertungseinheit 43 einen unzulässigen Eingriff in ein Schutzfeld 50, so wird über einen Sicherheitsausgang 44 (OSSD, Output Signal Switching Device) oder ein Sicherheitsnetzwerk die Maschine 16 gestoppt, gebremst oder in eine sichere Position bewegt. Um für sicherheitstechnische Anwendungen geeignet zu sein, ist die Sicherheitsvorrichtung 10 fehlersicher ausgelegt. Dies bedeutet unter anderem, dass der 3D-Sensor 10 und die Auswertungseinheit 40 sich selber, auch in Zyklen unterhalb der geforderten Ansprechzeit, testen kann und dass der Sicherheitsausgang 44 sicher, beispielsweise zweikanalig ausgelegt ist. Ebenso sind auch zumindest alle mit sicherheitsrelevanten Auswertungen Einheiten selbstsicher, werten also zweikanalig aus oder verwendet Algorithmen, die sich selbst prüfen können. Derartige Sicherheitsvorschriften sind für allgemeine berührungslos wirkende Schutzeinrichtungen in der EN 61496-1 bzw. der IEC 61496 normiert sowie in der DIN EN ISO 13849 und EN 61508 normiert. Eine entsprechende Norm für Sicherheitskameras befindet sich in der Vorbereitung. Die Bewegungsmuster-Erkennungseinheit 41 und die Anzeigensteuerung 42 sowie der Projektor 30 müssen nicht notwendig so streng aufgebaut und überwacht werden, da hier ein Ausfall zu keiner Unfallgefahr führt.If the protectivefield evaluation unit 43 detects an impermissible intervention in aprotective field 50, themachine 16 is stopped, braked or moved to a safe position via a safety output 44 (OSSD, output signal switching device) or a safety network. In order to be suitable for safety applications, thesafety device 10 is designed fail-safe. This means, inter alia, that the3D sensor 10 and theevaluation unit 40 can test themselves, even in cycles below the required response time, and that thesafety output 44 is safe, designed, for example, two-channel. Likewise, at least all security-related evaluations are self-assured units, so they evaluate two-channel or use algorithms that can check themselves. Such safety regulations are for general non-contact protective devices standardized in EN 61496-1 or IEC 61496 and standardized in DIN EN ISO 13849 and EN 61508. A corresponding standard for security cameras is in preparation. The movementpattern recognition unit 41 and thedisplay controller 42 as well as theprojector 30 do not necessarily have to be constructed and monitored as strictly as here a failure does not lead to an accident risk.

Anstelle eines Projektors 30 wird in einer weiteren, nicht dargestellten Ausführungsform eine Datenbrille beziehungsweise ein HMD eingesetzt. Die Datenbrille wird drahtlos von der Anzeigensteuerung 42 angesteuert und stellt die Informationen der Auswertungseinheit 40 der Bedienperson 14 so dar, dass sich das natürliche Bild und die künstlichen Informationen überlagern. Dies geschieht entweder, indem die Datenbrille weiterhin die Sicht auf die Szenerie zulässt, oder indem eine weitere Kamera am Kopf der Bedienperson den Arbeitsplatz 12 aus deren Perspektive aufnimmt und elektronisch zu einer überlagerten dreidimensionalen Ansicht verarbeitet. Dabei können sogar noch zur Erleichterung für die Bedienperson irrelevante Bildelemente ausgeblendet werden, beispielsweise ferne Objekte. Als weiteres Beispiel künstlich veränderter Bilddaten könnte eine gefährdende Bewegung der Maschine 16 optisch vorweggenommen werden, um ein natürliches Zurückweichen der Bedienperson zu erreichen. Für eine korrekte Anzeige der Informationen auf der Datenbrille müssen Position und Blickrichtung der Bedienperson erfasst werden, sei es durch den 3D-Sensor 20 und die Bewegungsmuster-Auswertungseinheit 41 oder unterstützt beziehungsweise ausschließlich durch zusätzliche Sensoren der Datenbrille.Instead of aprojector 30, data glasses or an HMD are used in a further, not shown embodiment. The data glasses are wirelessly controlled by thedisplay controller 42 and represent the information of theevaluation unit 40 of theoperator 14 so as to overlap the natural image and the artificial information. This is done either by the data glasses continue to allow the view of the scenery, or by another camera at the head of the operator, theworkplace 12 from its perspective and electronically processed to a superimposed three-dimensional view. In this case, even to facilitate the operator irrelevant picture elements can be hidden, such as distant objects. As another example of artificially altered image data, a hazardous movement of themachine 16 could be optically anticipated to achieve a natural retreat of the operator. For a correct display of the information on the data glasses, the position and viewing direction of the operator must be detected, be it by the3D sensor 20 and the movementpattern evaluation unit 41 or supported or exclusively by additional sensors of the data glasses.

Durch die 3D-Sicherheitsvorrichtung 10 entsteht ein intuitives und einheitliches 3D-Interface, in dem Informationsdarstellung, Bedienungshandlungen, Visualisierung von Arbeitsschritten und die Maschinensicherheit zusammengefasst sind. Bisher eigenständige Elemente werden damit zu einer optimalen Gesamtlösung für eine effektive, sichere und ergonomische Mensch-Maschine-Interaktion integriert, welche zudem die Qualität sichert sowie Nebenzeiten und Nebentätigkeiten reduziert.The3D security device 10 creates an intuitive and uniform 3D interface in which information representation, operating actions, visualization of work steps and machine safety are combined. So far, independent elements have been integrated into an optimal overall solution for an effective, safe and ergonomic man-machine interaction, which also ensures quality and reduces non-productive time and secondary activities.

DieFiguren 1 und2 illustrieren einen Teilaspekt dieser Interaktion. InFigur 1 bearbeitet die Maschine 16 das Werkstück 18, und die Bedienperson ist durch das mauerartige Schutzfeld 50 völlig von der Maschine 16 getrennt. Diese Situation spiegelt das herkömmliche parallele Arbeiten wieder. Erfindungsgemäß ist eine solche Trennung nur für bestimmte Arbeitsschritte vorgesehen, in denen keine Interaktion erforderlich ist oder in denen die maschinelle Bearbeitung so gefährlich ist, dass die Bedienperson größeren Abstand halten muss.The FIGS. 1 and 2 illustrate a partial aspect of this interaction. In FIG. 1 Themachine 16 processes theworkpiece 18 and the operator is completely separated from themachine 16 by theprotective wall 50. This situation reflects the conventional parallel work. According to the invention, such a separation is provided only for certain operations in which no interaction is required or in which the machining is so dangerous that the operator must keep greater distance.

Figur 2 zeigt einen späteren Bearbeitungsschritt. Die automatische Teilbearbeitung des Werkstücks 18 ist abgeschlossen, und die Maschine 16 übergibt das Werkstück 18 an die Bedienperson 14 oder haltert es in bequemer Arbeitshöhe und Position für eine manuelle Bearbeitung oder Inspektion. Das Schutzfeld 50 ist dynamisch angepasst, in diesem Fall so weit, dass es gänzlich verschwunden ist, denn der ruhende Roboterarm stellt keine Gefahrenquelle dar. Die Bedienperson 14 wird nun mit den oben beschriebenen Gesten beispielsweise den Roboterarm zu Positionswechseln, Drehungen oder, nach Abschluss des manuellen Teilschritts, der Fortsetzung der automatischen Bearbeitung veranlassen. Bei allen Maschinenbewegungen wird die Auswertungseinheit 40 entsprechend angepasste Schutzfelder 50 erzeugen. FIG. 2 shows a later processing step. The automatic partial machining of theworkpiece 18 is completed, and themachine 16 transfers theworkpiece 18 to theoperator 14 or holds it at a comfortable working height and position for manual processing or inspection. Theprotective field 50 is dynamically adjusted, in this case so far that it has completely disappeared, because the stationary robot arm is not a source of danger. Theoperator 14 is now using the gestures described above, for example, the robot arm to position changes, rotations or, after completion of the manual substep, to continue automatic processing. For all machine movements, theevaluation unit 40 will generate correspondingly adaptedprotective fields 50.

Claims (15)

Translated fromGerman

3D-Sicherheitsvorrichtung (10) zur Absicherung und Bedienung mindestens einer Maschine (16) an einem kooperativen Arbeitsplatz (12) mit einem 3D-Sensor (20) zur Erfassung dreidimensionaler Bilddaten des Arbeitsplatzes (12), der Maschine (16) und mindestens einer Bedienperson (14) an dem Arbeitsplatz (12) und mit einer Auswertungseinheit (40, 41, 43), die dafür ausgebildet ist, Bewegungsmuster der Bedienperson zu bestimmen und bei Erkennung einer Gefährdung der Bedienperson einen Absicherungsbefehl an die Maschine (16) auszugeben,
dadurch gekennzeichnet,
dass die Auswertungseinheit (41) dafür ausgebildet ist, aus den Bewegungsmustern Benutzereingaben an den 3D-Sensor oder an die Maschine abzuleiten.3D security device (10) for securing and operating at least one machine (16) at a cooperative workstation (12) with a 3D sensor (20) for acquiring three-dimensional image data of the workstation (12), the machine (16) and at least one operator (14) at the workstation (12) and with an evaluation unit (40, 41, 43), which is designed to determine movement pattern of the operator and issue a safety command to the machine (16) upon detection of a hazard to the operator,
characterized,
in that the evaluation unit (41) is designed to derive user inputs from the movement patterns to the 3D sensor or to the machine.3D-Sicherheitsvorrichtung (10) nach Anspruch 1,
die eine Anzeigeeinrichtung (30, 42), insbesondere einen Projektor oder eine Datenbrille aufweist, um der Bedienperson (14) ein mit Zusatzinformationen überlagertes Bild des Arbeitsplatzes (12) zu präsentieren, wobei die Zusatzinformationen insbesondere die Darstellung eines Werkstücks (18), eine vorgesehene Position, Pose oder Bewegung der Bedienperson (14) und/oder ein Schutzfeld (50) umfassen.A 3D security device (10) according to claim 1,
a display device (30, 42), in particular a projector or a data glasses, to present the operator (14) with additional information superimposed image of the workstation (12), wherein the additional information in particular the representation of a workpiece (18), an envisaged Position, pose or movement of the operator (14) and / or a protective field (50) include.3D-Sicherheitsvorrichtung (10) nach Anspruch 2,
wobei die Anzeigeeinrichtung (30, 42) dafür ausgebildet ist, Bedienelemente in den Arbeitsplatz (12) einzublenden, insbesondere virtuelle Schalter oder Regler.A 3D security device (10) according to claim 2,
wherein the display device (30, 42) is designed to display operating elements in the workstation (12), in particular virtual switches or controllers.3D-Sicherheitsvorrichtung (10) nach Anspruch 2 oder 3,
wobei die Auswertungseinheit (40) dafür ausgebildet ist, einen Unterschied zwischen einem Sollzustand und einem Istzustand zu erkennen und mittels der Anzeigeeinrichtung (30) anzuzeigen.A 3D security device (10) according to claim 2 or 3,
wherein the evaluation unit (40) is adapted to detect a difference between a desired state and an actual state and display by means of the display device (30).3D-Sicherheitsvorrichtung nach Anspruch 4,
wobei die Auswertungseinheit (40) dafür ausgebildet ist, einen Arbeitsschritt der Maschine (16) so lange zu verweigern, bis Sollzustand und Istzustand übereinstimmen.3D security device according to claim 4,
wherein the evaluation unit (40) is adapted to refuse a work step of the machine (16) until the desired state and actual state match.3D-Sicherheitsvorrichtung (10) nach einem der vorhergehenden Ansprüche,
wobei die Auswertungseinheit (40, 41) dafür ausgebildet ist, als Bewegungsmuster Gesten oder Körperhaltungen, insbesondere Handbewegungen zu erkennen.A 3D security device (10) according to any one of the preceding claims,
wherein the evaluation unit (40, 41) is adapted to recognize as movement patterns gestures or postures, in particular hand movements.3D-Sicherheitsvorrichtung (10) nach einem der vorhergehenden Ansprüche,
wobei die Auswertungseinheit (40, 41) dafür ausgebildet ist, Bewegungsmuster für das Heben oder Senken eines Maschinenteils (16) oder die Einstellung eines Abstands zwischen Bedienperson (14) und Maschinenteil (16) zu erkennen und das Maschinenteil (16) entsprechend zu bewegen.A 3D security device (10) according to any one of the preceding claims,
wherein the evaluation unit (40, 41) is adapted to detect movement patterns for lifting or lowering a machine part (16) or the setting of a distance between the operator (14) and machine part (16) and to move the machine part (16) accordingly.3D-Sicherheitsvorrichtung (10) nach einem der vorhergehenden Ansprüche,
wobei die Auswertungseinheit (40, 41) dafür ausgebildet ist, Bewegungsmuster zum Auslösen oder Beenden eines automatischen Arbeitsschritts zu erkennen und die Maschine (16) entsprechend zum Ausführen oder Anhalten des Arbeitsschritts anzusteuern, wobei ein Bewegungsmuster insbesondere eine Notausgeste oder eine Körperhaltung zur Bedienung einer virtuellen Zweihandschaltung ist.A 3D security device (10) according to any one of the preceding claims,
wherein the evaluation unit (40, 41) is adapted to recognize movement patterns for triggering or terminating an automatic operation and to control the machine (16) accordingly to execute or stop the operation, wherein a movement pattern in particular an emergency Ausgeste or a posture for operating a virtual Two-handed operation is.3D-Sicherheitsvorrichtung (10) nach einem der vorhergehenden Ansprüche,
wobei die Auswertungseinheit (40, 41) dafür ausgebildet ist, Bewegungsmuster zum Zurückdrängen eines Maschinenteils (16) zu erkennen und das Maschinenteil (16) entsprechend zu bewegen.A 3D security device (10) according to any one of the preceding claims,
wherein the evaluation unit (40, 41) is adapted to detect movement patterns for pushing back a machine part (16) and to move the machine part (16) accordingly.3D-Sicherheitsvorrichtung (10) nach einem der vorhergehenden Ansprüche,
wobei die Auswertungseinheit (40, 41) für einen Konfigurationsmodus ausgebildet ist, in dem Bewegungsmuster einer bestimmten Bedienperson (14) eingelernt und Bedienelementen oder Benutzereingaben zugeordnet werden.A 3D security device (10) according to any one of the preceding claims,
wherein the evaluation unit (40, 41) is designed for a configuration mode in which movement patterns of a specific operator (14) are taught in and associated with operating elements or user inputs.3D-Sicherheitsvorrichtung (10) nach einem der vorhergehenden Ansprüche,
wobei die Auswertungseinheit (40) für einen Kalibrierungsmodus ausgebildet ist, in dem der Arbeitsplatz (12) und die Maschine (16) an die Bedienperson (14) angepasst wird, insbesondere indem die Handhöhe oder die Kopfhöhe bestimmt und daraufhin eine ergonomische Höhenanpassung des Arbeitsplatzes (12) und/oder einer ergonomische Präsentation von Werkstücken (18) durch die Maschine (16) an die Bedienperson (14) erfolgt.A 3D security device (10) according to any one of the preceding claims,
wherein the evaluation unit (40) is designed for a calibration mode in which the workstation (12) and the machine (16) are adapted to the operator (14), in particular by determining the hand height or the head height and thereupon an ergonomic height adjustment of the workstation (12) and / or an ergonomic presentation of workpieces (18) by the machine (16) to the operator (14).3D-Sicherheitsvorrichtung (10) nach einem der vorhergehenden Ansprüche,
wobei die Auswertungseinheit (40, 43) dafür ausgebildet ist, eine Gefährdung der Bedienperson (14) anhand eines unzulässigen Eingriffs in einen Schutzbereich (50) innerhalb des Arbeitsplatzes (12) zu erkennen und insbesondere die Schutzbereiche (50) dynamisch an ein derzeit bearbeitetes Werkstück (18) anzupassen, und wobei die Anzeigeeinrichtung (30, 42) dafür ausgebildet ist, der Bedienperson (14) die Schutzfelder (50) darzustellen.A 3D security device (10) according to any one of the preceding claims,
wherein the evaluation unit (40, 43) is adapted to detect a threat to the operator (14) on the basis of an unauthorized intervention in a protection area (50) within the workstation (12) and in particular the protection areas (50) dynamically to a currently machined workpiece (18), and wherein the display means (30, 42) is adapted to present to the operator (14) the protective fields (50).3D-Sicherheitsvorrichtung (10) nach Anspruch 12,
wobei die Auswertungseinheit (40, 42) dafür ausgebildet ist, Konturen von Objekten, die unzulässig in ein Schutzfeld (50) eingreifen, mittels der Anzeigeeinrichtung (30) optisch hervorzuheben.A 3D security device (10) according to claim 12,
wherein the evaluation unit (40, 42) is designed to visually emphasize contours of objects that inadmissibly engage in a protective field (50) by means of the display device (30).3D-Sicherheitsvorrichtung (10) nach einem der vorhergehenden Ansprüche,
wobei die Auswertungseinheit (40, 42) dafür ausgebildet ist, bei Ausgabe eines Abschaltbefehls die dreidimensionalen Bilddaten zu speichern.A 3D security device (10) according to any one of the preceding claims,
wherein the evaluation unit (40, 42) is adapted to store the three-dimensional image data upon issuance of a shutdown command.Verfahren zur Absicherung und Bedienung mindestens einer Maschine (16) an einem kooperativen Arbeitsplatz (12), wobei mit einem 3D-Sensor (20) dreidimensionale Bilddaten des Arbeitsplatzes (12), der Maschine (16) und mindestens einer Bedienperson (14) an dem Arbeitsplatz (12) erfasst und Bewegungsmuster der Bedienperson (14) bestimmt werden, wobei bei Erkennung einer Gefährdung der Bedienperson (14) ein Absicherungsbefehl an die Maschine (16) ausgegeben wird,
dadurch gekennzeichnet,
dass aus den Bewegungsmustern Benutzereingaben an den 3D-Sensor (20) oder an die Maschine (16) abgeleitet werden.Method for securing and operating at least one machine (16) at a cooperative workstation (12), wherein with a 3D sensor (20) three-dimensional image data of the workstation (12), the machine (16) and at least one operator (14) on the Workstation (12) detected and movement patterns of the operator (14) are determined, wherein upon detection of a threat to the operator (14) a hedge command is issued to the machine (16),
characterized,
that user inputs to the 3D sensor (20) or to the machine (16) are derived from the movement patterns.

Images