Ein Sichtsystem (200) zur Unterstützung eines Bedieners einer Maschine (100) wird bereitgestellt. Eine Bilderfassungsvorrichtung (120), die an der Maschine (100) montiert ist, ist so konfiguriert, dass sie ein Bild (302) einer Umgebung der Maschine (100) erfasst. Das Sichtsystem (200) beinhaltet eine Steuerung (202), die so konfiguriert ist, dass sie einen Objekterkennungsprozess zum Erkennen eines Objekts (122) in dem Bild (302) anwendet. Die Steuerung (202) ermittelt einen Begrenzungsrahmen (402), der ein oder mehrere Pixel umfasst, die dem Objekt (122) zugeordnet sind. Die Steuerung (202) ermittelt eine Höhe und einen Bereich, die dem Objekt (122) zugeordnet sind, auf Basis des Begrenzungsrahmens (402). Die Steuerung (202) extrahiert die ein oder mehreren Pixel innerhalb des Begrenzungsrahmens (402). Die Steuerung (202) ist ferner so konfiguriert, dass sie eine dreidimensionale (3D) Ansicht (500, 600), die das Objekt (122) umfasst, auf Basis des Bildes erzeugt, das durch die Bilderfassungsvorrichtung (120) erfasst wird. Die Steuerung (202) fügt die ein oder mehreren Pixel als vertikales Einblendelement in Bezug auf eine Bodenebene wieder in die 3D-Ansicht (500, 600) ein. Eine Anzeige (118) ist bereitgestellt, die die 3D-Ansicht (500, 600) dem Bediener der Maschine (100) anzeigt.
A vision system for assisting an operator of a machine is provided. An image capturing device, mounted on the machine, is configured to capture an image of an environment of the machine. The vision system includes a controller configured to apply an object detection process to detect an object in the image. The controller determines a bounding box comprising one or more pixels associated with the object. The controller determines a height and a range associated with the object based on the bounding box. The controller extracts the one or more pixels within the bounding box. The controller is further configured to generate a three-dimensional (3D) view comprising the object based on the image captured by the image capturing device. The controller reinserts the one or more pixels as a vertical pop-up element with respect to a ground plane in the 3D view. A display is provided to display the 3D view to the operator of the machine.
BEDIENERASSISTENZ-SICHTSYSTEM
2020-07-23
Patent
Elektronische Ressource
Deutsch