Es wird ein Verfahren bei einem fortschrittlichen Fahrerassistenzsystem (ADAS (= Advanced Driver-Assistance System)) bereitgestellt. Das Verfahren extrahiert (505) aus einem Eingabe-Videostream, der eine Vielzahl von Bildern enthält, unter Verwendung eines faltenden neuronalen Netzwerks (CNN) mit Multitasking, gemeinsam genutzte Merkmale über unterschiedliche Wahrnehmungsaufgaben hinweg. Die Wahrnehmungsaufgaben enthalten Objekterkennung und andere Wahrnehmungsaufgaben. Das Verfahren löst gleichzeitig (510), unter Verwendung des Multitasking-CNN, die unterschiedlichen Wahrnehmungsaufgaben in einem einzigen Durchgang durch gleichzeitiges Verarbeiten von entsprechenden der gemeinsam genutzten Merkmale durch jeweils unterschiedliche Zweige des Multitasking-CNN, um eine Vielzahl von Ausgaben von unterschiedlichen Wahrnehmungsaufgaben bereitzustellen. Jeder jeweils unterschiedliche Zweig entspricht einer jeweiligen der unterschiedlichen Wahrnehmungsaufgaben. Das Verfahren bildet (530) eine parametrische Darstellung einer Fahrszene als wenigstens eine Draufsicht-Karte in Reaktion auf die Vielzahl von Ausgaben von unterschiedlichen Wahrnehmungsaufgaben aus. Das Verfahren steuert einen Betrieb des Fahrzeugs zur Kollisionsvermeidung in Reaktion auf wenigstens eine Draufsicht-Karte, die eine bevorstehende bzw. drohende Kollision anzeigt.
A method is provided in an Advanced Driver-Assistance System (ADAS). The method extracts, from an input video stream including a plurality of images using a multi-task Convolutional Neural Network (CNN), shared features across different perception tasks. The perception tasks include object detection and other perception tasks. The method concurrently solves, using the multi-task CNN, the different perception tasks in a single pass by concurrently processing corresponding ones of the shared features by respective different branches of the multi-task CNN to provide a plurality of different perception task outputs. Each respective different branch corresponds to a respective one of the different perception tasks. The method forms a parametric representation of a driving scene as at least one top-view map responsive to the plurality of different perception task outputs. The method controls an operation of the vehicle for collision avoidance responsive to the at least one top-view map indicating an impending collision.
Multitasking-Wahrnehmungsnetzwerk mit Anwendungen für ein Szenenverständnis und ein fortschrittliches Fahrerassistenzsystem
2021-12-23
Patent
Electronic Resource
German
IPC: | B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion / G06V / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS |
IMMER EINGESCHALTETES, FORTSCHRITTLICHES LATERALES FAHRERASSISTENZSYSTEM
European Patent Office | 2022
|FORTSCHRITTLICHES FAHRERASSISTENZSYSTEM UND FAHRZEUG MIT DIESEM
European Patent Office | 2022
|Moderne Schmiedepresse - fortschrittliches Zubehoer
Automotive engineering | 1978
|