Regelung des inversen Pendels mit Reinforcement Learning
Trainingssystem zur Entwicklung und Erprobung von Reinforcement-Learning-Algorithmen an einem realen inversen Pendel. Ein KI-Steuergerät trainiert den Agenten direkt am System und tauscht die Gewichte über den CAN-Bus aus.
- Systemdynamik und Verdrahtung untersuchen
- Skripte und Modelle parametrieren
- Belohnungsfunktion definieren
- Actor-Critic-Architektur implementieren
- Echtzeit-KI-Training am realen System
- Hybride Steuerungsarchitektur
- Rapid Prototyping auf der DSP-Hardware
- Variabler Pendelschwerpunkt
Das inverse Pendel ist das klassische Modell einer instabilen Regelstrecke: ein drehbar gelagerter Pendelstab auf einer Linearachse mit Riemenantrieb. Statt es über ein exaktes mathematisches Modell zu stabilisieren, lernt hier ein Agent die Regelstrategie selbst. Lernende parametrieren vorgegebene Python-Skripte und Simulink-Modelle, definieren die Belohnungsfunktion und implementieren die Actor-Critic-Architektur auf dem KI-Steuergerät mit NVIDIA Jetson Xavier NX. Das Training läuft direkt am realen System, die Gewichte gehen live über den CAN-Bus an die Echtzeitregelung. Über das Live-Scope verfolgen Lernende den Lernfortschritt und bewerten, wie sich Belohnungsfunktion und Parameter auf das Ergebnis auswirken.
| Artikel-Nr. | Menge | Bezeichnung |
|---|---|---|
| Basisprodukt | ||
| CO3620-2G | 1 | Positions- und Winkelregelstrecke, inverses Pendel |
Positions- und Winkelregelstrecke, inverses Pendel
Die Positions- und Winkelregelstrecke ist ein Trainingssystem, an dem moderne Regelungstechnik sehr anschaulich angewendet werden kann. Die vermittelbaren Lerninhalte reichen von der klassischen Positionsregelung mit Standardreglern bis hin zur modellbasierten Mehrgrößenregelung im Zustandsraum. Das Aufschwingen und das Balancieren eines an einem Schlitten drehbar gelagerten Pendelstabs (inverses Pendel) durch rein horizontale Beschleunigungen des Schlittens stellt eine besondere Herausforderung dar. Das Prinzip lässt sich unter anderem auf die Regelung des Segway PT übertragen. Darüber hinaus wird dem Lernenden der grundsätzliche Umgang mit gekoppelten Mehrgrößensystemen praxisnah vermittelt.
|
||
| CO3620-2A | 1 | Universeller digitaler Regler (DSP) |
Universeller digitaler Regler (DSP)
Robustes und kompaktes Schulungssystem eines DSP-gesteuerten digitalen Reglers. Durch eine übersichtliche Menüführung kann der Regler sehr einfach bedient werden. Über die USB-Schnittstelle ist eine PC-Anbindung möglich. Das System kann über eine MATLAB-Schnittstelle erweitert werden. So lassen sich eigene Applikationen erstellen und mit realen Hardwarekomponenten testen.
|
||
| CO3620-3E | 1 | KI Steuergerät |
KI Steuergerät
Ein vielseitig einsetzbares Steuergerät für KI-Anwendungen, bestehend aus einem Ein-Platinen-Computer mit zahlreichen Schnittstellen zur Kommunikation und Einbindung in andere Systeme. Mit der dazugehörigen Kurssoftware werden KI-Modelle für unterschiedliche Aufgaben lokal im Gerät erstellt und trainiert. Mit dem Trainingssystem zur praktischen Einführung ins Machine Learning wird anhand von praxisnahen Beispielen der komplette Workflow zur Umsetzung einer KI-Applikation durchgeführt, von der Datenbeschaffung bis hin zur Anwendung des fertigen Algorithmus. Es werden die Vorteile und Möglichkeiten des maschinellen Lernens vermittelt und die Kompetenz, es zielführend einzusetzen.
|
||
| CO3636-3D | 1 | USB-Adapter mit MATLAB-Toolbox für Leistungselektronik und Regelungstechnik |
USB-Adapter mit MATLAB-Toolbox für Leistungselektronik und Regelungstechnik
MATLAB ermöglicht das Rapid Prototyping von Embedded Steuerungs- und Regelungssystemen. Systementwürfe lassen sich zuerst auf dem PC untersuchen. Im nächsten Schritt lassen sich diese auf reale Hardware übertragen und testen.Die MATLAB-Schnittstelle ermöglicht MATLAB Projekte auf das Leistungselektroniksystem oder den Digitalen Universalregler zu übertragen und auszutesten. Treiber und Toolboxen ermöglichen die Erstellung eigener Applikationen. Besonderheiten:Separate Hardwareschnittstelle zum Übertragen der in MATLAB erstellten ApplikationenMATLAB unterstützte USB Schnittstelle für den Austausch von Parametern und MessdatenBeliebige Größen lassen sich in MATLAB aufzeichnen und aufbereitenAngepasste MATLAB Bibliothek erleichtert den Zugriff auf die LeistungselektronikhardwareSoftware in the loop UnterstützungProzessor in the loop UnterstützungHardware in the loop Unterstützung Notwendige Systemvoraussetzungen:MATLAB Version R2022aSimulink Version 10.5Embedded Coder Version 7.8C2000 Microcontroller BlocksetMATLAB Coder Version 5.4Simulink Coder Version 9.7Code Composer Studio v5 Lieferumfang:Programmieradapter mit USB-Schnittstelle, galvanisch getrenntMATLAB-Toolbox für Leistungselektronik und AntriebsregelungTreiberDokumentation (D, EN) |
||
| SO5147-2A | 1 | Satz Kabel und Messleitungen für IAC53 |
Satz Kabel und Messleitungen für IAC53
Satz Kabel und Messleitungen für IAC53
|
||
| Projekt | ||
| PPC012001C | 1 | RXLea Content IAC53PT: Regelung des inversen Pendels mit Reinforcement Learning |
|
RXLea Content IAC53PT: Regelung des inversen Pendels mit Reinforcement Learning
|
||
| SW00001 | 1 | Software RX Lea |
|
Software RX Lea
|
||
| SW00019 | 1 | Software LN Installer |
|
Software LN Installer
|
||
| Kurs | ||
| SO2802-3G | 1 | Interactive Lab Assistant: Regelung einer Positions- und Winkelregelstrecke |
Interactive Lab Assistant: Regelung einer Positions- und Winkelregelstrecke
Die Versuchsanleitung bildet ein Interactive Lab Assistant Kurs. Dieser Multimediakurs führt Schritt für Schritt in die Thematik "Regelung einer Positions- und Winkelregelstrecke". Physikalische Grundlagen werden durch leicht verständliche Animationen vermittelt. Der Interactive Lab Assistant bildet zusammen mit den virtuellen Instrumenten eine komfortable Experimentierumgebung. Besonderheiten:
Lerninhalte:
|
||
| SO2802-3H | 1 | Interactive Lab Assistant: Regelung d. Positions- u. Winkelstrecke m. Simulink |
Interactive Lab Assistant: Regelung d. Positions- u. Winkelstrecke m. Simulink
Die Versuchsanleitung bildet ein Interactive Lab Assistant Kurs. Dieser Multimediakurs führt Schritt für Schritt in die Thematik "Regelung einer Positions- und Winkelregelstrecke mit Matlab Simulink" ein. Physikalische Grundlagen werden durch leicht verständliche Animationen vermittelt. Der Interactive Lab Assistant bildet zusammen mit den virtuellen Instrumenten eine komfortable Experimentierumgebung. Besonderheiten:
Lerninhalte:
|
||
| Möbel | ||
| ST7200-7A | 1 | SybaPro Experimentierwagen, 3-etagig, 6 Steckdosen, 1250x1970x800mm |
SybaPro Experimentierwagen, 3-etagig, 6 Steckdosen, 1250x1970x800mm
Robuster Experimentierwagen mit großem Platzangebot, hoher Stabilität und Belastbarkeit. Einfache Handhabung und hohe Vielseitigkeit durch Kompatibilität mit dem SybaPro System. Arbeitsplatte und Ablageboden:
Stabiler Aufbau und optimale Laufeigenschaften:
Integrierter 3-etagiger Experimentierrahmen:
Zubehör inbegriffen:
Abmessungen:
Der Experimentier-/Laborwagen wird vormontiert geliefert. |
||
| Möbel Zubehör | ||
| ST8010-4T | 1 | Flachbildschirmhalter m. Faltarm, bis 15kg zur Aluprofilbefestigung, VESA 75/100 |
Flachbildschirmhalter m. Faltarm, bis 15kg zur Aluprofilbefestigung, VESA 75/100
Flachbildschirmhalter m. Faltarm, bis 15kg zur Aluprofilbefestigung, VESA 75/100
|
||
| ST7200-5L | 1 | Schutzhülle für Experimentierwagen, 3-etagig |
Schutzhülle für Experimentierwagen, 3-etagig
Schutzhülle für 3-etagige mobile Experimentierstände (ST7200-7A und ST7200-7D).
|
||
| ST8010-4G | 1 | Tastaturadapter als Erweiterung für Flachbildschirmhalter |
Tastaturadapter als Erweiterung für Flachbildschirmhalter
Tastaturadapter zur Verwendung in Kombination mit Flachbildschirmhaltern Montage zwischen Monitor und Aufnahme des Flachbildschirmhalters Dieser Adapter sollte nur in Verbindung mit Monitorhaltern bis 15kg Tragkraft verwendet werden.
|
||
| ST8008-8N | 1 | Energieversorgung, für Experimentierstände mit Absicherung |
Energieversorgung, für Experimentierstände mit Absicherung
Stromverteiler 400V CEE mit Sicherungsautomaten zur Befestigung am Profil der mobilen Experimentierstände oder direkt an der Tischplatte.
|
||
| ST8010-4J | 1 | Steckdosenleiste, 6-fach, mit Netzschalter beleuchtet |
Steckdosenleiste, 6-fach, mit Netzschalter beleuchtet
6-fach Steckdosenleiste mit Schalter, 2-polig beleuchtet
|
||
| ST8000-6A | 1 | Display zu den Ausstattungen der Reglungstechnik |
Display zu den Ausstattungen der Reglungstechnik
|
||
Lernziele im Detail
Systemdynamik und Verdrahtung untersuchen
Skripte und Modelle parametrieren
Belohnungsfunktion definieren
Actor-Critic-Architektur implementieren
Lernprozess überwachen und bewerten
Features & Anwendung
- Echtzeit-KI-Training am realen System — Lernende trainieren den KI-Agenten nicht in der Simulation, sondern am realen Pendel. Die Gewichtsparameter gehen live über den CAN-Bus an die Regelung.
- Hybride Steuerungsarchitektur — MATLAB Simulink übernimmt die Echtzeitregelung, Python mit TensorFlow das KI-Training. Lernende sehen, wie beide Welten zusammenarbeiten.
- Rapid Prototyping auf der DSP-Hardware — Lernende kompilieren Simulink-Modelle direkt in C-Code, testen die Regelalgorithmen als Hardware-in-the-Loop und optimieren die Parameter am laufenden System.
- Variabler Pendelschwerpunkt — Der Schwerpunkt des Pendels lässt sich verschieben. Lernende verändern damit die Streckeneigenschaften und prüfen, wie robust die trainierte Regelung bleibt.
- LN-Toolbox mit JTAG-Programmieradapter — Modelle und Algorithmen entstehen in Matlab Simulink und wandern per Knopfdruck in die Hardware.
- Riemenantrieb mit Kugelumlaufführung — Die Führung erlaubt präzise und reibungsarme lineare Bewegungen auf bis zu 400 mm Verfahrweg.
- Hybrid-Schrittmotor mit bis zu 100 W — Strom- und Drehzahlregelung sind integriert, sodass hochdynamische Fahrprofile möglich sind.
- CAN-Winkelsensor — Der hochauflösende Inkrementalgeber liefert 16000 Impulse pro Umdrehung über eine CAN-Schnittstelle.
- KI-Steuergerät für das Training on the Edge — Das Steuergerät mit NVIDIA Jetson Xavier NX führt die rechenintensiven Trainingsprozesse dank Volta-GPU mit CUDA- und Tensor-Kernen direkt auf dem Gerät aus. Zum Einsatz kommen Python, TensorFlow und OpenCV.
- Python RL-Framework mit KerasRL und TensorFlow — Das Skriptpaket steuert das Training auf dem KI-Steuergerät, verwaltet den Replay Buffer und synchronisiert die Gewichte über den CAN-Bus.
- LN-Toolbox für Matlab Simulink — Die Bibliothek liefert fertige Hardware-Blöcke und verkürzt den Modellaufbau in Simulink.
- Integriertes Live-Scope — Lernende visualisieren Systemgrößen in Echtzeit und greifen im laufenden Betrieb verändernd ein.

Aus Wissen wird Können.
You guide the learning
Wenn Theorie und Praxis Hand in Hand gehen.
RXLea bringt eine neue Art des Lernens: projektorientiert, praxisnah und klar strukturiert. Lernende lösen reale Aufgaben, Lehrkräfte sparen Zeit bei der Vorbereitung. Interaktive Module, smarte Analysen und echte Hardware schaffen eine moderne, effiziente Lernwelt.
Praxisnah und interaktiv
Animationen, interaktive Aufgaben und realitätsnahe Szenarien fördern ein tiefes Verständnis. Alle Inhalte sind als klare Lernpfade strukturiert – für fokussiertes, praxisnahes Lernen.
Digitale Unterstützung
3D-Aufbauanimationen und digitale Anleitungen erleichtern komplexe Abläufe, reduzieren Fehler und stärken die Selbstständigkeit der Lernenden.
Visuelle Unterstützung
Übersichtsbilder, Screenshots und Animationsbeispiele machen die Lernwelt transparent. Ergänzend stehen Fotos aus den Lernpaketen zur Verfügung, bei Bedarf auch länderspezifisch.




