Virtuelle Sichtverbesserung und intuitive Interaktion durch Erweiterte Realität an Flurförderzeugen

Thema Industrie 4.0, Fahrerlose Transportfahrzeuge
Projekttitel Virtuelle Sichtverbesserung und intuitive Interaktion durch Erweiterte Realität an Flurförderzeugen (ViSIER)
Laufzeit 01.06.2019 – 30.11.2021
Video
Download
Pressemitteilung

Eine der größten Herausforderungen bei der Bedienung eines Gabelstaplers ist die eingeschränkte Sicht des Fahrers auf seine Umgebung, insbesondere bei der Ein- und Auslagerung von Ladungsträgern oder dem Transport sperriger Lasten. Unterschiedliche Kamera- und Assistenzsysteme werden an den Fahrzeugen verwendet, um den Fahrer und seine Umgebung zu unterstützen und die Betriebssicherheit des Fahrzeugs zu steigern. Bedienelemente und Bildschirme zur Anzeige von Auftragsdaten, Fahrzeugparametern oder der Wiedergabe von Rückfahr- oder Gabelzinkenkameras, wie sie heute bei den meisten Fahrzeugen verwendet werden, stellen aber auch eine zusätzliche Sichteinschränkung dar.

Ziel dieses Forschungsvorhabens ist es daher, ein auf AR (Augmented Reality bzw. Erweiterter Realität) basierendes Bedienerassistenzsystem für Gabelstapler zu realisieren, mit dessen Unterstützung Sichteinschränkungen des Fahrers durch Fahrzeugkomponenten und Ladung ausgeglichen und Fahrzeug- sowie Auftragsdaten situationsabhängig mit dem Fahrer vernetzt werden. Dabei soll die Interaktion mit dem Assistenzsystem mittels Gesten und virtuellen Elementen erfolgen.

  • Keine aktuellen Termine vorhanden.
  • 26.11.2021, 11:00 Uhr - 13:00 Uhr
  • Institut für Transport- und Automatisierungstechnik | An der Universität 2 | 30823 Garbsen
  • Online Meeting via Webex
  • 11.11.2020, 10:00 Uhr - 12:00 Uhr
  • IPH Hannover gGmbH | Hollerithallee 6 | 30419 Hannover
  • Online-Meeting über MS Teams
  • 23.04.2020, 10:30 Uhr - 12:30 Uhr
  • IPH Hannover gGmbH | Hollerithallee 6 | 30419 Hannover
  • Online-Meeting über MS Teams
  • 27.08.2019, 10:30 Uhr - 14:45 Uhr
  • IPH - Institut für Integrierte Produktion Hannover gGmbH, Hollerithallee 6, 30419 Hannover

Veröffentlichungen zum Projekt

Die eingeschränkte Sicht beim Betrieb von Gabelstaplern ist eine der größten Gefahrenquellen beim innerbetrieblichen Materialumschlag. Bestehende Systeme erfassen verdeckte Bereiche über Kameras und zeigen diese direkt auf Monitoren in der Fahrerkabine an. Der Fahrer muss seine Aufmerksamkeit vorübergehend auf einen Bildschirm richten und kann die für die Fahraufgabe notwendigen Informationen nicht wirklich wahrnehmen. Wir haben das erste Augmented-Reality-basierte Fahrerassistenzsystem zur Verbesserung der Sicherheit in der Intralogistik entwickelt. Die Ergebnisse zeigen, dass es in der Lage ist, Sichteinschränkungen direkt im Blickfeld des Fahrers zu beseitigen und die Illusion von transparenten Fahrzeugkomponenten zu erzeugen.

Augmented Reality, Assistenzsystem, Intralogistik

Die zeitlich und räumlich exakte Darstellung von Informationen in Augmented Reality (AR) Systemen ist entscheidend für die Immersion und die Betriebssicherheit beim Einsatz der Technologie. In dieser Veröffentlichung wird ein Assistenzsystem vorgestellt, das ein Head-Mounted Display (HMD) verwendet, um visuelle Einschränkungen auf Gabelstaplern zu verbergen. Zudem wird eine Methode zur Bewertung der Genauigkeit und Latenz von AR-Systemen basierend auf HMD vorgeschlagen. Um die Genauigkeit zu messen, werden die Abweichungen zwischen realen und virtuellen Markern bestimmt. Für die Latenzmessung wird die Frame-Differenz zwischen realen und virtuellen Ereignissen bestimmt. Die Ergebnisse der Messungen zeigen die Einflüsse verschiedener Systemparameter und -dynamiken auf die Latenz und Einblendungsgenauigkeit.

Augmented Reality, Bildverarbeitung, Assistenzsystem, Flurförderzeuge

In diesem Artikel wird ein Verfahren zur Überlagerung von Sichteinschränkungen, basierend auf dem Prinzip der Augmented Reality, vorgestellt. Das Verfahren beruht auf einer Überlagerung des tatsächlichen Bedienerblickfeldes mit Informationen aus einer rekonstruierten Szene. Die rekonstruierte Szene wird über den sichteinschränkenden Komponenten als Hologramm eingeblendet. Das vorgestellte Verfahren gliedert sich in die Komponenten Positionsbestimmung, Datenübertragung und Visualisierung. Diese Softwarekomponenten werden detailliert vorgestellt. Im Hinblick auf den späteren Einsatz des Systems in einem Flurförderzeug werden zudem die Echtzeitfähigkeit der Datenübertragung, die Genauigkeit der Visualisierung und die Robustheit der Positionsbestimmung untersucht.

Augmented Reality, Bildverarbeitung, Fahrerassistenzsystem, Flurförderzeuge, Hinderniserkennung

Wie können Sichteinschränkungen im Gabelstapler mit Hilfe von strategisch angebrachten Kameras und einer Augmented-Reality-Brille kompensiert werden? Dieser Fragestellung nehmen sich Wissenschaftler des ITA und des IPH gemeinsam an.

Augmented Reality, AR, Flurförderzeuge, Sichtverbesserung, Assistenzsystem

In diesem Artikel wird ein Verfahren zur automatischen Sichteinschränkungsdetektion und maskenbasierten, deckungsgleichen Sichteinschränkungskompensation, basierend auf dem Prinzip der erweiterten Realität, vorgestellt. Das Verfahren beruht auf einer Überlagerung eines simulierten Bedienerblickfeldes mit Informationen aus einer von zwei RGB-Kameras rekonstruierten Szene. Die Kameras werden derart angeordnet, dass sie die Szeneninformationen hinter der Sichteinschränkung aufnehmen können. Neben der Vorstellung des Versuchsaufbaus, findet eine detaillierte Vorstellung der Bildverarbeitungssoftware statt. Im Hinblick auf den späteren Einsatz des Systems in einem Flurförderzeug, wird zudem die Echtzeitfähigkeit untersucht und Optimierungsmöglichkeiten diskutiert.

Augmented Reality, Bildverarbeitung, Fahrerassistenzsysteme, Flurförderzeuge, Hinderniserkennung

Konstruktionsbedingt können unter anderem der Hubmast und Anbaugeräte an Flurförderzeugen das Sichtfeld des Fahrers einschränken. Im Projekt „Virtuelle Sichtverbesserung und intuitive Interaktion durch Erweiterte Realität an Flurförderzeugen (Visier)“ soll diesem Sachverhalt mit der Entwicklung eines neuen Fahrerassistenzsystems entgegengewirkt werden. Mithilfe einer Augmented-Reality-Brille (AR-Brille) sollen die Voraussetzungen dafür geschaffen werden, dass der Fahrer Sichteinschränkungen ausblenden und so ein Blick hinter die Ladung und das Hubgerüst werfen kann, um Gefahren und Hindernisse frühzeitig zu erkennen.

Augmented Reality, Assistenzsystem, Flurförderzeuge

Förderer

Dieses vorwettbewerbliche Projekt mit dem Förderkennzeichen 20158 N/2 wurde vom Bundesministerium für Wirtschaft und Klimaschutz mit den Mitteln der IGF gefördert.

Partner

Ansprechperson