Models

Hugging Face Hub eröffnet zentrale Sektion für RL-Umgebungen

huggingface reinforcement-learning agents training benchmark

Reinforcement-Learning-Umgebungen sind jetzt Bürger erster Klasse auf dem Hugging Face Hub. Ein Dataset-Repo mit dem Tag rl-environment erscheint automatisch im neuen RL-Environments-Filter - ohne neuen Repo-Typ, ohne Registry, ohne Anmeldung. Der “Use this dataset”-Button generiert direkt den passenden Run-Befehl für das jeweilige Framework.

Vier Frameworks zum Start

  • harbor - Harbor
  • verifiers - Verifiers (PrimeIntellect)
  • openenv - OpenEnv (Hugging Face)
  • nemo-gym - NeMo Gym (NVIDIA)

Die Kernidee der Integration: Schluss mit isolierten Environment-Registries. Jedes RL-Paper und Framework pflegt bisher eigene Hubs, Task-Listen und Loader - Umgebungen bleiben in Silos gefangen. Künftig speichert und versioniert die Hub die Task-Daten, die Frameworks liefern Runtime und Verifier. Ein Repo darf mehrere Framework-Tags tragen, weil Kompatibilität nicht exklusiv ist.

Was schon verfügbar ist

  • Harbor-Mix: 100 harte agentische Aufgaben aus dem Harbor-Adapter-Pool
  • Multi-SWE-RL-Verified: 2.232 validierte Issue-Loesungs-Tasks in C, Go, Java, JavaScript, Rust und TypeScript
  • Scale-SWE-Verified: 17.202 Python-Tasks mit sauberem Reward-Signal
  • NVIDIA Workplace Assistant: Sandbox mit 5 Datenbanken, 26 Tools und 690 Business-Aufgaben

Der Nebeneffekt: Ein Repo, eine Diskussion. Fixt ein Autor eine kaputte Aufgabe, bekommen alle Frameworks den Fix beim nächsten Pull. Ein eigenes Environment zu taggen ist ein Dreizeiler im YAML-Header der Dataset-Card.

Quelle: Hugging Face Blog