Perception-Quick-Start-Software für die ADAS-Entwicklung

摘要

Die Lösung von Renesas umfasst Referenzsoftware für drei Erkennungsmethoden für sensorbasierte automatisierte Fahrzeugsysteme der Stufe 2+. Sie bietet Entwicklern eine End-to-End-Pipeline-Referenz. Diese ermöglicht es Anwendern, ihr Applikationsdesign unmittelbar zu starten, unabhängig davon, ob sie über Expertise im Einsatz von optimierten Beschleunigern oder nur über begrenzte Erfahrung verfügen. Die Referenzsoftware umfasst das Einlesen von Sensor- oder aufgezeichneten Daten, alle Verarbeitungsschritte sowie die Darstellung auf einem Bildschirm. Bei der COD-Referenz-software kommt ein CNN-IP (convoluti-onal Neural Network), eine CV-E (Computer Vision Engine) und Bildwiedergabe-Technologie (IMR - Image Rendering) zum Einsatz, um 2D-Objekte wie Autos, Lastwagen, Busse und Fußgänger zu erkennen und zu markieren. Die COD erreicht etwa 30 Bilder pro Sekunde (FPS). Die LOD-Software verwendet CNN-IP und CV-E, um 3D-Objekte, einschließlich Autos und Lastwagen, zu erkennen. Sie erreicht etwa 15 FPS und markiert Objekte bis 50 Meter Entfernung mit SD-Rahmen. Die RFD-Referenzsoftware umfasst CNN-IP, CV-E, IMR und eine vielseitige Pipeline-Engine (IMP), um befahrbaren freien Raum, Fahrspuren, Straßenbegrenzungen und Entfernungen zu Fahrspuren und nächstgelegenen Objekten zu identifizieren und damit NCAP 2020 zu unterstützen. Sie erreicht etwa 30 FPS.