Schulungsübersicht
Grundlagen von TinyML in der Robotik
- wesentliche Möglichkeiten und Einschränkungen von TinyML
- Bedeutung der Edge-KI für autonome Systeme
- Hardwarerelevante Aspekte bei mobilen Robotern und Drohnen
Eingebettete Hardware sowie Schnittstellen zu Sensoren
- Mikrocontroller und Boards für robotische Anwendungen
- Integration von Kameras, IMUs sowie Näherungssensoren
- Planung des Energie- und Rechenressourceneinsatzes
Datenverarbeitung für die robotische Wahrnehmung
- Datenerfassung und -kennzeichnung im Kontext roboterischer Aufgaben
- Techniken zur Vorverarbeitung von Signalen und Bildern
- Strategien zur Merkmalsextraktion unter begrenzten Ressourcenbedingungen
Entwicklung und Optimierung von Modellen
- Auswahl geeigneter Architekturen für Wahrnehmung, Detektion sowie Klassifizierung
- Arbeitsabläufe beim Training von Modellen für eingebettete Umgebungen
- Methoden zur Modellkompression, Quantisierung sowie Latenzreduktion
Lokale Wahrnehmung und Steuerung im Robotermodul
- Ausführung von Inferenzen direkt auf Mikrocontrollern
- Kombinierung von TinyML-Ergebnissen mit klassischen Steuerungsalgorithmen
- Sicherheit und Reaktionsgeschwindigkeit in Echtzeitumgebungen
Verbesserung der autonomen Navigation
- effiziente Navigationslösungen basierend auf Bildverarbeitung
- Erkennung und Vermeidung von Hindernissen
- Umgebungserfassung unter begrenzten Ressourcenbedingungen
Testen und Validierung robotischer Systeme mit TinyML-Unterstützung
- Simulationswerkzeuge sowie praktische Feldtests
- Leistungsindikatoren für die Autonomie von Robotern mit eingebetteter KI
- Fehlerbehebung und kontinuierliche Verbesserungen
Integration in bestehende Robotikplattformen
- Implementierung von TinyML-Elementen in ROS-basierte Systemumgebungen
- Anbindung von KI-Modellen an Motorkontroller
- Sicherstellung der Stabilität trotz Unterschieden in der Hardwarekonfiguration
Zusammenfassung und nächste Schritte
Voraussetzungen
- Grundverständnis von Architekturen roboterischer Systeme
- Erfahrung in der Entwicklung für eingebettete Systeme
- Kenntnisse grundlegender Konzepte des maschinellen Lernens
Zielgruppe
- Robotik-Ingenieure
- KI-Forscher
- Entwickler eingebetteter Systeme
Erfahrungsberichte (2)
Bereitstellung der Materialien (virtuelle Maschine), um direkt mit den Übungen zu beginnen, sowie Erläuterung der ROS2-Kernkonzepte. Warum bestimmte Dinge auf eine bestimmte Weise funktionieren.
Arjan Bakema
Kurs - Autonomous Navigation & SLAM with ROS 2
Maschinelle Übersetzung
sein Wissen und die Nutzung von KI für Robotik in der Zukunft.
Ryle - PHILIPPINE MILITARY ACADEMY
Kurs - Artificial Intelligence (AI) for Robotics
Maschinelle Übersetzung