本文概要:
1. 研究團(tuán)隊利用機(jī)器學(xué)習(xí)系統(tǒng)從廣播視頻中學(xué)習(xí)網(wǎng)球技能，實現(xiàn)了真實的動作模擬。
2. 他們使用物理模擬和動作規(guī)劃策略來指導(dǎo)角色的運(yùn)動，并能夠生成穩(wěn)定的控制器。
3. 這項技術(shù)有望擴(kuò)展到其他運(yùn)動領(lǐng)域，并為機(jī)器人學(xué)習(xí)提供方法。
西蒙弗雷澤大學(xué)的研究人員正在開發(fā)一種新的運(yùn)動模擬技術(shù)，通過學(xué)習(xí)現(xiàn)實運(yùn)動員的視頻來生成虛擬角色的真實動作。他們的研究重點是網(wǎng)球，但他們認(rèn)為這項技術(shù)未來可以擴(kuò)展到其他運(yùn)動領(lǐng)域。
該團(tuán)隊使用了機(jī)器學(xué)習(xí)系統(tǒng)，從大量廣播視頻中學(xué)習(xí)網(wǎng)球技能，并將學(xué)習(xí)到的動作模擬為穩(wěn)定的控制器。這個系統(tǒng)結(jié)合了物理模擬和動作規(guī)劃策略，能夠準(zhǔn)確地模擬球拍擊球、發(fā)球、旋球等各種網(wǎng)球動作。
他們還開發(fā)了一個基于物理模擬的糾正系統(tǒng)，用來修正從廣播視頻中提取出的低質(zhì)量動作。
通過這項技術(shù)，游戲設(shè)計師可以讓他們的角色通過模仿現(xiàn)實運(yùn)動員的鏡頭來學(xué)習(xí)移動，并自動生成新的變化和動態(tài)響應(yīng)行為。此外，研究人員還計劃將這項技術(shù)應(yīng)用于機(jī)器人學(xué)習(xí)，讓機(jī)器人通過分析視頻來學(xué)習(xí)技能。盡管目前該系統(tǒng)只限于網(wǎng)球，但他們認(rèn)為將來可以擴(kuò)展到籃球、曲棍球和足球等其他運(yùn)動。
這項研究的成果將于8月6日至10日在洛杉磯舉行的 SIGGRAPH 會議上展示，并已發(fā)表了相關(guān)研究論文。這一技術(shù)的推出將為虛擬運(yùn)動員的動作提供更多的真實感，提高運(yùn)動模擬技術(shù)的水平。
項目網(wǎng)址:https://xbpeng.github.io/projects/Vid2Player3D/2023_TOG_Vid2Player3D.pdf
