Systeme und Verfahren zum Steuern eines Betriebs von Maschinen unter Verwendung von erweiterter Realität oder virtueller Realität werden beschrieben. Eine Steuerung ist ausgelegt zum Detektieren eines über eine Anzeige sichtbaren Objekts zumindest teilweise basierend auf von einem Objektsensor empfangenen Sensordaten. Die Steuerung erzeugt dann ein dem detektierten Objekt entsprechendes Graphikelement und gibt dieses auf der Anzeige aus. Die Steuerung überwacht dann Interaktionen zwischen einer Hand des Bedieners und dem Graphikelement und sendet Steuersignale an einen Maschinenaktuator, um einen Betrieb eines Werkzeugs der Maschinerie zumindest teilweise basierend auf einer oder mehreren Interaktionen zwischen der Hand des Bedieners und dem Graphikelement zu steuern.
Systems and methods are described for controlling an operation of machinery using augmented reality or virtual reality. A controller is configured to detect an object visible via a display based at least in part on sensor data received from an object sensor. The controller then generates and outputs on the display a graphical element corresponding to the detected object. The controller then monitors for interactions between an operator's hand and the graphical element and transmits control signals to a machinery actuator to control an operation of a tool of the machinery based at least in part on one or more detected interactions between the operator's hand and the graphical element.
Erweiterte-Realität-Steuerung für eine Maschine
2019-05-02
Patent
Electronic Resource
German