Abschlussbericht zum Teilprojekt Integrierte multimodale Sensor- und Verarbeitungslösung mit innovativem Single-Shot-Prinzip zur Gestaltung dynamischer Waren-Transportprozesse (SINGLESHOTDYNAMO) im Verbundprojekt Innovative Photonik für Automatische Kollaborative Systeme in dynamischen Waren-Transportprozessen (AutoKoWaT)

Abstract

Im Teilvorhaben ZBS-SINGLESHOTDYNAMO „Integrierte multimodale Sensor- und Verarbeitungslösung“ wurden Sensorprinzipien des echtzeitfähigen aktiven SingleShot-3D als Bestandteil eines multimodalen Kameraverbundes erforscht und umgesetzt sowie dafür Lösungen der sensornahen und höheren sensorbezogenen multimodalen Bildverarbeitung erarbeitet. Ein besonderer Fokus der Forschungs- und Entwicklungsarbeiten war auf die latenzoptimierte Umsetzung photonischer Verarbeitungsketten von Erfassung bis Reaktion gerichtet, die zur Umsetzung sicherer automatischer Waren-Transportprozesse in dynamischen Umfeldern geeignet sind. Das Teilvorhaben war Bestandteil des multidisziplinären Verbundes AutoKoWaT. Die Ergebnisse wurden evaluiert in einem Demonstratorumfeld, das ein dynamisches robotisches Logistikszenario, typisch in der Kleinserienproduktion, nachstellt. Das Zentrum für Bild- und Signalverarbeitung e.V. (ZBS) arbeitete in einem Zusammenschluss von Forschungseinrichtungen und Unternehmen entsprechend eines gemeinsam abgestimmten Arbeitsplans und eines geschlossenen Kooperationsvertrages. In the ZBS-SINGLESHOTDYNAMO sub-project ‘Integrated multimodal sensor and processing solution’, sensor principles of real-time capable active SingleShot-3D were researched and implemented as part of a multimodal camera network, and solutions for sensor-related and higher sensor-related multimodal image processing were developed. The research and development work focused in particular on the latency-optimised implementation of photonic processing chains from detection to reaction, which are suitable for implementing safe automatic goods transport processes in dynamic environments. The sub-project was part of the multidisciplinary AutoKoWaT consortium. The results were evaluated in a demonstrator environment that simulates a dynamic robotic logistics scenario which is typical in small-batch productions. The Centre for Image and Signal Processing (ZBS) worked in a consortium of research institutions and companies in accordance with a jointly agreed work plan and a cooperation agreement.