Tasarlandığı haliyle hat

Yol Haritası

Dağıtım tasarımı, kameradan içgörüye giden yolu kısa tutar. Video çözülür, oyuncular tespit edilip takip edilir; bir poz kestirici her oyuncuyu kare başına anahtar noktalara çevirir; bu noktaların pencereleri temel modele girer ve tek bir ileri geçiş iki çıktıyı birden döndürür — temiz bir 3B iskelet ve hareket gömmesi. Tasarımın hiçbir aşaması sahada özel donanım gerektirmez: girdi sıradan videodur.

videosıradan görüntüdetect + trackkare başına oyuncularposeoyuncu başına noktalarmodeltek ileri geçiş3D + 384-diskelet + gömme
Tasarlanan servis hattı — hareket penceresi başına temel modelin tek ileri geçişi. Yol haritası: henüz bir üretim servisi değil.

Taşınacak kadar küçük

Omurga, temel model standartlarına göre bilinçli olarak küçük tutulmuş bir modeldir (bkz. mimari model künyesi); dağıtım planı daha da ileri gider: bellek ve gecikmeyi küçültmek için eğitim sonrası kuantizasyon ve bir ürünün modelin kavrayışından yalnızca bir dilime ihtiyaç duyduğu yerlerde göreve özgü öğrenci modellere distilasyon. Hedefler hedef olarak ifade edilmiştir — ölçülmüş gecikme ve verim sayıları, onları ölçecek bir servis hattı var olduğunda yayımlanacaktır.

Tasarım hedefleri

Yol Haritası
HedefGerekçe
tek geçişli servisModelin iki çıktısı tek ileri geçişten — işletilecek uzman model zinciri yok.
kuantizasyonSıradan GPU’larda bellek ve gecikmeyi düşürmek için eğitim sonrası kuantizasyon.
distilasyonBir ürünün omurganın yalnızca bir kısmına ihtiyaç duyduğu yerlerde göreve özgü öğrenci modeller.
uç sınıfı hedeflerBant genişliği veya gizliliğin gerektirdiği yerde kameraya yakın analiz.
toplu poz ön ucuBirçok vücut tek kareyi paylaştığında oyuncu başına maliyetin amortismanı.

Bu hattın beslemek üzere tasarlandığı sorgu yüzeyi bilgi tabanı API’sinde tanımlanmıştır.