Die Pipeline, wie entworfen

Roadmap

Das Deployment-Design hält den Weg von der Kamera zur Erkenntnis kurz. Video wird dekodiert, Spieler werden detektiert und getrackt; ein Pose-Schätzer verwandelt jeden Spieler in Keypoints pro Frame; Fenster dieser Keypoints gehen in das Foundation Model, und ein einziger Forward-Pass liefert beide Ausgaben — ein sauberes 3D-Skelett und das Bewegungs-Embedding. Keine Stufe des Designs verlangt Spezialhardware am Platz: Die Eingabe ist gewöhnliches Video.

videogewöhnliches Materialdetect + trackSpieler pro FrameposeKeypoints pro Spielermodelein Forward-Pass3D + 384-dSkelett + Embedding
Der entworfene Serving-Pfad — ein Forward-Pass des Foundation Model je Bewegungsfenster. Roadmap: noch kein Produktionsdienst.

Klein genug, um sich zu bewegen

Das Backbone ist nach Foundation-Model-Maßstäben ein bewusst kleines Modell (siehe das Modell-Datenblatt der Architektur), und der Deployment-Plan geht weiter: Post-Training-Quantisierung für weniger Speicher und Latenz sowie Destillation in aufgabenspezifische Student-Modelle, wo ein Produkt nur einen Ausschnitt des Modellverständnisses braucht. Die Ziele sind als Ziele formuliert — gemessene Latenz- und Durchsatzzahlen werden veröffentlicht, sobald eine Serving-Pipeline existiert, die sie messen kann.

Design-Ziele

Roadmap
ZielBegründung
Single-Pass-ServingBeide Modellausgaben aus einem Forward-Pass — keine Kette von Spezialmodellen zu betreiben.
QuantisierungPost-Training-Quantisierung für weniger Speicher und Latenz auf Standard-GPUs.
DestillationAufgabenspezifische Student-Modelle, wo ein Produkt nur einen Teil des Backbones braucht.
Edge-Klasse-ZieleAnalyse nahe der Kamera, wo Bandbreite oder Datenschutz es verlangen.
Gebatchtes Pose-FrontendAmortisierte Kosten pro Spieler, wenn viele Körper ein Bild teilen.

Die Abfrageoberfläche, die diese Pipeline speisen soll, ist in der Knowledgebase-API spezifiziert.