Waypoint-1.5 erweitert Echtzeit-Weltmodelle für Consumer-Hardware

Waypoint-1.5 ist Overworlds nächstes Echtzeit-Video-Weltmodell und soll interaktive generative Welten auf Hardware bringen, die Nutzer tatsächlich besitzen. Gegenüber Waypoint-1 verbessert die neue Version die visuelle Qualität, erweitert die lokal unterstützte Hardware-Basis und soll interaktive Weltsimulationen ohne Rechenleistung im Datacenter-Maßstab einen Schritt weiterbringen.

Auf Desktop-Hardware von RTX 3090 bis RTX 5090 kann Waypoint-1.5 Echtzeit-Umgebungen mit bis zu 720p und 60 FPS erzeugen. Zusätzlich gibt es eine 360p-Stufe, die auf deutlich mehr Consumer-Hardware flüssig laufen soll, darunter Gaming-Laptops und demnächst auch Apple-Silicon-Macs.

Der größte Schwerpunkt dieser Version ist die Zugänglichkeit. Dafür gibt es zwei Modellstufen: ein 720p-Modell für leistungsstärkere Hardware und ein 360p-Modell, das für breitere Bereitstellung optimiert wurde, ohne die Echtzeit-Interaktivität aufzugeben.

Nach Angaben von Overworld wurde das Training gegenüber Waypoint-1 stark skaliert. Waypoint-1.5 wurde mit fast 100-mal mehr Daten trainiert als der Vorgänger. Das soll die Fähigkeit des Modells verbessern, kohärentere Umgebungen zu erzeugen und Bewegungen über die Zeit konsistenter zu halten.

Technisch setzt Waypoint-1.5 außerdem auf effizientere Video-Modeling-Verfahren, um redundante Berechnungen zwischen Frames zu verringern. Für Echtzeit-Weltmodelle sei nicht nur die Qualität einzelner Bilder entscheidend, sondern auch, ob die Welt unmittelbar reagiert, bei Bewegung kohärent bleibt und auf lokaler Hardware nutzbar ist.

Overworld beschreibt Reaktionsfähigkeit als zentralen Maßstab für interaktive Welten. Nicht allein die visuelle Qualität, sondern die unmittelbare Reaktion der Umgebung, kohärente Bewegung und eine zusammenhängende Weltstruktur beim Erkunden sollen den Unterschied zwischen einem generierten Video und einer tatsächlich begehbaren generativen Umgebung ausmachen.

Für die Nutzung gibt es zwei Wege. Über Overworld Biome lässt sich Waypoint-1.5 lokal ausführen; die aktualisierte Biome-Runtime soll die Einrichtung vereinfachen, sodass Nutzer nach dem Download innerhalb weniger Minuten lokal starten können. Alternativ bietet Overworld Stream einen sofortigen Zugriff im Browser ohne lokale Einrichtung.

Zusätzlich stellt Overworld mit World Engine eine flexible Inference-Bibliothek bereit, die die offiziellen Clients sowie fast ein Dutzend Drittanbieter-Clients und -Bibliotheken antreibt.

Waypoint-1.5 wird als weiterer Schritt in Richtung interaktiver generativer Welten beschrieben, die sich in Echtzeit erkunden und steuern lassen und zugleich auf lokaler Consumer-Hardware laufen.

Quelle

Originalquelle: Hugging Face Blog

Recent Articles

spot_img

Related Stories

Leave A Reply

Bitte geben Sie Ihren Kommentar ein!
Bitte geben Sie hier Ihren Namen ein

Stay on op - Ge the daily news in your inbox