モーションコントロールによるリアルタイムビデオ生成に関するクールな新作。 MotionStream は、1 つの GPU で秒未満のレイテンシ ストリーミングを可能にします。 以下のビデオのように、画像のどの部分が動くか、動かないかを制御することもできます。 👏 @xxunhuang、@jhshin2000、そしてチームに!

@xxunhuang @jhshin2000 彼らのアプローチは、オブジェクトやキャラクターを動かす以外にも、非常に興味深いユースケースを可能にします。 たとえば、シーン内でカメラを移動することもできます(上の例)... または、参照ビデオのモーショントラックポイントを使用して、新しいイメージフレームを「アニメーション化」します(下の例)。