Die Pipeline, wie sie entworfen ist

Roadmap

Das Deployment-Design hält den Weg von der Kamera zur Analyse kurz. Video wird dekodiert, Spieler werden detektiert und getrackt; ein Posenschätzer verwandelt jeden Spieler in Keypoints pro Frame; Fenster dieser Keypoints gehen in das Foundation Model, und ein einziger Forward-Pass liefert beide Ausgaben – ein sauberes 3D-Skelett und das Bewegungs-Embedding. Keine Stufe des Designs verlangt Spezialhardware auf dem Platz: Die Eingabe ist gewöhnliches Video.

videogewöhnliches Materialdetect + trackSpieler pro FrameposeKeypoints pro Spielermodelein Forward-Pass3D + 384-dSkelett + Embedding
Der entworfene Serving-Pfad – ein Forward-Pass des Foundation Models je Bewegungsfenster. Roadmap: läuft noch nicht produktiv.

Klein genug, um beweglich zu bleiben

Das Backbone ist nach Foundation-Model-Maßstäben ein bewusst kleines Modell (siehe das Modell-Datenblatt der Architektur), und der Deployment-Plan geht weiter: Post-Training-Quantisierung für weniger Speicher und Latenz sowie Kompression in kompakte aufgabenspezifische Modelle, wo ein Produkt nur einen Ausschnitt des Modellverständnisses braucht. Die Ziele sind als Ziele formuliert – gemessene Latenz- und Durchsatzzahlen werden veröffentlicht, sobald eine Serving-Pipeline existiert, die sie messen kann.

Design-Ziele

Roadmap
ZielBegründung
Single-Pass-ServingBeide Modellausgaben aus einem Forward-Pass – keine Kette von Spezialmodellen, die betrieben werden muss.
QuantisierungPost-Training-Quantisierung für weniger Speicher und Latenz auf Standard-GPUs.
KompressionKompakte aufgabenspezifische Modelle, wo ein Produkt nur einen Teil des Backbones braucht.
Edge-Hardware-ZieleAnalyse nahe der Kamera, wo Bandbreite oder Datenschutz es verlangen.
Gebatchtes Pose-FrontendAmortisierte Kosten pro Spieler, wenn sich viele Körper einen Frame teilen.

Die Abfrageoberfläche, die diese Pipeline speisen soll, ist in der Knowledgebase-API spezifiziert.