WORLDTECHGoogle bringt Reinforcement Learning mit OpenRL auf Kubernetes
Googles GKE-Labs-Gruppe hat das Feintuning von Modellen per Reinforcement Learning zu einer Kubernetes-Anwendung gemacht, und Google hat das daraus entstandene Projekt OpenRL an die Cloud Native Computing Foundation gespendet. SiliconANGLE berichtet, dass der Ansatz die Reinforcement-Learning-Schleife von der darunterliegenden Rechen-Infrastruktur trennt.
Was OpenRL bietet
OpenRL ist im Juni 2026 als Research Preview gestartet. Es stellt eine selbst betriebene Trainingsschnittstelle bereit, die ein Unternehmen auf dem eigenen Kubernetes-Cluster betreiben kann. So lässt sich ein bestehendes Modell für eine engere Aufgabe weitertrainieren, ohne die umgebende Infrastruktur von Grund auf zusammenzustellen.
Feintuning per Reinforcement Learning zählt zunehmend zu den anspruchsvollsten Aufgaben in der KI-Infrastruktur. Training, Inferenz und abgeschottete Agentenarbeit laufen darin in einer Schleife zusammen, und der beteiligte Forschungscode ist oft eng an die darunterliegenden Systeme gebunden.
Wie das GKE-Labs-Team dorthin kam
Laut Sunil Arora, Senior Software Engineer bei Google Cloud, baute das Team zunächst einen KI-Agenten für Kubernetes-Aufgaben und danach einen Benchmark, mit dem sich Modelle bei dieser Arbeit bewerten lassen. GKE Labs ist die Gruppe, die experimentelle Projekte früh in die Hände der Nutzer gibt.
Arora beschrieb eine Aufteilung, bei der Infrastrukturingenieure die Skalierung übernehmen, während Forscher die Kontrolle über ihre Experimente behalten. Auch Justin Santa Barbara, Entwickler bei Google, war an der Diskussion beteiligt.
Sandboxes und begrenzte Rechenkapazität
Sandboxes sind der Punkt, an dem die Reinforcement-Learning-Schleife auf die Agenteninfrastruktur trifft, denn das Berechnen von Belohnungen kann das Ausführen von Millionen isolierter Befehle bedeuten. Arora sagte, Googles Agent Substrate erlaube es, mehr dieser Sandboxes auf begrenzter Rechenkapazität laufen zu lassen.
Das Gespräch wurde auf der KubeCon + CloudNativeCon aufgezeichnet und auf theCUBE übertragen; Google Cloud hat diesen Abschnitt gesponsert.
Offene Fragen
- Wird OpenRL über die Research-Preview-Phase hinaus weiterentwickelt?