Schulungsübersicht
Einführung in die Mensch-Maschine-Interaktion
- Überblick über HMI sowie ihre interdisziplinäre Natur
- Anwendungsbereiche in Industrie, Gesundheitswesen und Dienstleistungsrobotik
- Nutzerzentrierte Gestaltungsprinzipien für interaktive Systeme
Sprachinteraktion und sprachbasierte Steuerung
- Grundlagen der Spracherkennung sowie des Verständnisses natürlicher Sprache
- Erstellung von Sprachbefehlen und Reaktionen mittels Python
- Integration von Sprachschnittstellen in ROS-basierte Roboter
Gestenerkennung und nonverbale Kommunikation
- Bedeutung von Gesten sowie Körpersprache bei der Kommunikation zwischen Mensch und Roboter
- Einsatz von Computer-Vision-Techniken zur Erkennung und Klassifizierung von Gesten
- Implementierung einer Echtzeit-Gestenerkennung unter Verwendung von OpenCV sowie KI-Modellen
Kooperative und gemeinsame Steuerung
- Grundlagen der Zusammenarbeit zwischen Menschen und Robotern sowie der gemeinsamen Autonomie
- Sicherheitskonzepte für physische sowie kognitive Interaktionen
- Einbindung von Sensordaten sowie adaptiver Steuerung bei kooperativen Aufgaben
Gestaltung mehrkanaliger Interaktionssysteme
- Kombination aus Sprache, Gestik und visueller Rückmeldung
- Berücksichtigung des Kontexts sowie der Absichten des Nutzers in mehrkanaligen Systemen
- Entwicklung eines einfachen Prototyps für mehrkanalige HMI-Systeme in einer Simulation
Menschliche Aspekte, Ethik und Sicherheit bei der HMI
- Wahrnehmung, Vertrauen und Akzeptanz von Robotersystemen durch Menschen
- Ethische Überlegungen im Zusammenhang mit kooperativer Robotik
- Bewertung der Nutzbarkeit sowie Sicherheit von Interaktionsschnittstellen
Praktisches Projekt: Entwicklung eines durch Sprache und Gesten gesteuerten Roboters in Zusammenarbeit mit dem Menschen
- Ausgestaltung der Systemarchitektur sowie Definition der Interaktionsmodi
- Implementierung von Sprach- und Gestenerkennungseinheiten
- Integration sowie Test des vollständigen HMI-Prototyps
Zusammenfassung und weitere Schritte
Voraussetzungen
- Grundlegende Kenntnisse über Robotik-Konzepte sowie Programmierung in Python
- Vertrautheit mit Benutzerschnittstellen oder Steuerungssystemen zwischen Mensch und Maschine
- Interesse an Interaktionsgestaltung, Wahrnehmungsforschung oder angewandter Künstlicher Intelligenz
Zielgruppe
- Forscher im Bereich Mensch-Maschine-Interaktion, die sich mit Zusammenarbeit zwischen Menschen und Robotern beschäftigen
- Produktdesigner, die interaktive oder unterstützende Roboter entwickeln
- Ingenieure, die mehrkanalige Interaktions- und Steuerungssysteme erforschen
Erfahrungsberichte (2)
Bereitstellung der Materialien (virtuelle Maschine), um direkt mit den Übungen zu beginnen, sowie Erläuterung der ROS2-Kernkonzepte. Warum bestimmte Dinge auf eine bestimmte Weise funktionieren.
Arjan Bakema
Kurs - Autonomous Navigation & SLAM with ROS 2
Maschinelle Übersetzung
sein Wissen und die Nutzung von KI für Robotik in der Zukunft.
Ryle - PHILIPPINE MILITARY ACADEMY
Kurs - Artificial Intelligence (AI) for Robotics
Maschinelle Übersetzung