Schulungsübersicht
Grundlagen von TinyML für die Robotik
- Wesentliche Fähigkeiten und Einschränkungen von TinyML
- Rolle der Edge-KI in autonomen Systemen
- Hardwareaspekte bei mobilen Robotern und Drohnen
Eingebettete Hardware und Sensor-Schnittstellen
- Mikrocontroller und Embedded-Boards für die Robotik
- Integration von Kameras, IMUs und Näherungssensoren
- Budgetierung von Energie und Rechenleistung
Datenengineering für die robotische Wahrnehmung
- Erfassung und Kennzeichnung von Daten für Robotik-Aufgaben
- Techniken zur Signal- und Bildvorverarbeitung
- Strategien zur Merkmalsextraktion für ressourcenbeschränkte Geräte
Modellentwicklung und Optimierung
- Auswahl von Architekturen für Wahrnehmung, Objekterkennung und Klassifizierung
- Trainingspipelines für Embedded ML
- Modellkompression, Quantisierung und Latenzoptimierung
Geräteintellekt und Steuerung auf dem Gerät
- Durchführung von Inferenzen auf Mikrocontrollern
- Fusion von TinyML-Ausgaben mit Steuerungsalgorithmen
- Echtzeit-Sicherheit und Ansprechverhalten
Erweiterungen der autonomen Navigation
- Leichte visionbasierte Navigation
- Hinderniserkennung und -vermeidung
- Umgebungserkundung unter Ressourcenbeschränkungen
Testen und Validieren von TinyML-gesteuerten Robotern
- Simulationswerkzeuge und Ansätze zum Feldtest
- Leistungsindikatoren für eingebettete Autonomie
- Fehlerbehebung und iterative Verbesserung
Integration in Robotik-Plattformen
- Bereitstellung von TinyML innerhalb ROS-basierter Pipelines
- Anbindung von ML-Modellen an Motorcontroller
- Aufrechterhaltung der Zuverlässigkeit über verschiedene Hardwarevarianten hinweg
Zusammenfassung und nächste Schritte
Voraussetzungen
- Verständnis von Robotik-Systemarchitekturen
- Erfahrung mit der Entwicklung eingebetteter Systeme
- Vertrautheit mit Machine-Learning-Konzepten
Zielgruppe
- Robotikingenieure
- KI-Forscher
- Entwickler eingebetteter Systeme
Erfahrungsberichte (2)
Bereitstellung der Materialien (virtuelle Maschine), um direkt mit den Übungen zu beginnen, sowie Erläuterung der ROS2-Kernkonzepte. Warum bestimmte Dinge auf eine bestimmte Weise funktionieren.
Arjan Bakema
Kurs - Autonomous Navigation & SLAM with ROS 2
Maschinelle Übersetzung
sein Wissen und die Nutzung von KI für Robotik in der Zukunft.
Ryle - PHILIPPINE MILITARY ACADEMY
Kurs - Artificial Intelligence (AI) for Robotics
Maschinelle Übersetzung