清華大學資訊工程系胡敏君教授團隊,在國科會的支持下,開發「AI運動影像分析與VR沉浸式訓練平台」,可透過AI影像分析技術,提供運動員動作指引,或者給予戰術的建議。而該平台只需透過智慧手機就可以操作,並結合VR頭戴式設備,給予更具現場體驗的沉浸式影像訓練。該研究成果已陸續發表於多個國際頂尖會議與重要國際期刊,也獲得2021年台灣運動科技發展協會運動科技應用獎銀獎與優選。
|
清大資工團隊展示結合AI辨識的VR技術運動訓練平台。左為清華大學資訊工程系胡敏君教授 |
胡敏君教授表示,此AI運動影像分析技術,可即時從影片中即時偵測重要事件(如投籃、上籃、灌籃等),並即時標註出關鍵的球員。而該系統也可以分析運動員的動作技巧與採用的戰術,讓球員與訓練團動有效率地標註比賽影片內容,並破解對手的策略。
此外,也可從比賽影片中重建場景和物件的三維(3D)資訊,以任意視角重播賽事的內容,幫助運動員打造沉浸式的VR模擬訓練環境,協助強化技巧與戰術的認知,進而改善運動技能。
另一方面,透過分析大量賽事影片,團隊也研發出各種生成式模型,以籃球為例,除了即時根據進攻者的移動軌跡生成對應的防守者移動軌跡,亦可根據運動員所設定的對手分析其過去的比賽影片,進而生成該對手採取各種動作時所對應的3D動畫,讓運動員在VR環境進行訓練時,更能模擬真實比賽會發生的情況。
為了讓AI技術可落地到運動場域讓一般大眾都能使用,胡教授也與清大資工系朱宏國教授共同帶領學生將所研發之技術延伸成立新創公司(NeuinX),團隊更針對行動裝置所拍攝的移動視角籃球影片,研發精準且即時的物件追蹤與投籃事件分析技術,籃球愛好者可上傳或串流自己拍攝的比賽影片,即時產生投籃事件精彩剪輯與投籃熱點分布。
除了籃球項目,團隊也與清華大學運動科技中心之跨校研發團隊合作,將相關技術進一步擴散應用於輔助桌球、棒球、拳擊、射箭等運動項目之情蒐與訓練。
胡敏君教授表示,希望能透過AI技術提升運動訓練的效率與品質,並將此技術推廣至偏鄉地區,彌平偏鄉學生在運動訓練上的資源落差。