實現(xiàn)射箭賽事數(shù)據(jù)采集與可視化轉(zhuǎn)播,并提供AI解說。
多知8月7日消息,近日,在2024屆奧運會射箭比賽項目全程賽事轉(zhuǎn)播中,商湯科技與上海東方傳媒技術有限公司(SMT)達成合作,聯(lián)合打造“智慧體育-InnoMotion AI賽事轉(zhuǎn)播升級解決方案”,通過三維運動捕捉技術與AR特效渲染引擎,實現(xiàn)射箭賽事數(shù)據(jù)采集與可視化轉(zhuǎn)播,并提供AI解說。
在以往的射箭運動的轉(zhuǎn)播中,觀眾往往只能關注到兩個重點:其一,箭的發(fā)射時間點。其二,是中靶的時間點。
但實際上,箭矢運動中的過程也很重要,卻往往缺乏相應的轉(zhuǎn)播語言。在射箭運動中,箭矢在離弦一剎那,會受到弓弦彈力影響而發(fā)生動態(tài)彎曲,并導致在飛行過程中像魚一般左右擺動。刮風、下雨等天氣變化,也會影響箭矢的運動姿態(tài)。箭矢的最終飛行軌跡,決定了能否命中靶心。準確感知風速、精準掌握力道,才能以最佳的最高點離地距離、速度和飛行距離這些關鍵技戰(zhàn)指標,制勝賽場。這些指標也能很好地反映一名運動員的水平、技術特色、發(fā)揮穩(wěn)定性,以及面對不同環(huán)境的技戰(zhàn)術靈活性。
而商湯與SMT聯(lián)合打造的“智慧體育-InnoMotion AI賽事轉(zhuǎn)播升級解決方案”,可以實現(xiàn)AI三維運動捕捉全程追蹤,讓觀眾也能看清過程。其通過實時捕捉箭矢特征值,結合AI算法融合得出高精度空間3D坐標,并與SMT的AR渲染引擎對接,實現(xiàn)了多元視覺特效的精準疊加,最終完成真實賽事場景的數(shù)字化映射。
要想做到這一點,需要克服捕捉目標小、速度快(箭矢平均速度可達67米/秒,而直徑僅有5毫米不到)、箭矢飛行軌跡不平滑(飛行過程中箭體的動態(tài)彎曲和擺動,增加了軌跡捕捉難度)、室外范圍大環(huán)境復雜(在70米 x 20米室外大場地舉辦的射箭比賽會面臨各種天氣狀況,視覺識別干擾大)等挑戰(zhàn)。
(數(shù)字化特效還原不同箭矢起射位置和整體軌跡,圖源自SMT)
據(jù)介紹,除射箭比賽外,商湯與SMT合作開發(fā)的InnoMotion賽事轉(zhuǎn)播方案,也應用于本屆奧運會乒乓球項目的全程賽事轉(zhuǎn)播,以AI技術呈現(xiàn)乒乓球的轉(zhuǎn)速、落點和軌跡特效。