實(shí)現(xiàn)射箭賽事數(shù)據(jù)采集與可視化轉(zhuǎn)播,并提供AI解說(shuō)。

商湯與SMT聯(lián)合打造巴黎奧運(yùn)射箭比賽“AI解說(shuō)員”

2024-08-07 10:36:50發(fā)布     來(lái)源:多知網(wǎng)    作者:哆啦  

  多知8月7日消息,近日,在2024屆奧運(yùn)會(huì)射箭比賽項(xiàng)目全程賽事轉(zhuǎn)播中,商湯科技與上海東方傳媒技術(shù)有限公司(SMT)達(dá)成合作,聯(lián)合打造“智慧體育-InnoMotion AI賽事轉(zhuǎn)播升級(jí)解決方案”,通過(guò)三維運(yùn)動(dòng)捕捉技術(shù)與AR特效渲染引擎,實(shí)現(xiàn)射箭賽事數(shù)據(jù)采集與可視化轉(zhuǎn)播,并提供AI解說(shuō)。

  在以往的射箭運(yùn)動(dòng)的轉(zhuǎn)播中,觀眾往往只能關(guān)注到兩個(gè)重點(diǎn):其一,箭的發(fā)射時(shí)間點(diǎn)。其二,是中靶的時(shí)間點(diǎn)。

  但實(shí)際上,箭矢運(yùn)動(dòng)中的過(guò)程也很重要,卻往往缺乏相應(yīng)的轉(zhuǎn)播語(yǔ)言。在射箭運(yùn)動(dòng)中,箭矢在離弦一剎那,會(huì)受到弓弦彈力影響而發(fā)生動(dòng)態(tài)彎曲,并導(dǎo)致在飛行過(guò)程中像魚(yú)一般左右擺動(dòng)。刮風(fēng)、下雨等天氣變化,也會(huì)影響箭矢的運(yùn)動(dòng)姿態(tài)。箭矢的最終飛行軌跡,決定了能否命中靶心。準(zhǔn)確感知風(fēng)速、精準(zhǔn)掌握力道,才能以最佳的最高點(diǎn)離地距離、速度和飛行距離這些關(guān)鍵技戰(zhàn)指標(biāo),制勝賽場(chǎng)。這些指標(biāo)也能很好地反映一名運(yùn)動(dòng)員的水平、技術(shù)特色、發(fā)揮穩(wěn)定性,以及面對(duì)不同環(huán)境的技戰(zhàn)術(shù)靈活性。

  而商湯與SMT聯(lián)合打造的“智慧體育-InnoMotion AI賽事轉(zhuǎn)播升級(jí)解決方案”,可以實(shí)現(xiàn)AI三維運(yùn)動(dòng)捕捉全程追蹤,讓觀眾也能看清過(guò)程。其通過(guò)實(shí)時(shí)捕捉箭矢特征值,結(jié)合AI算法融合得出高精度空間3D坐標(biāo),并與SMT的AR渲染引擎對(duì)接,實(shí)現(xiàn)了多元視覺(jué)特效的精準(zhǔn)疊加,最終完成真實(shí)賽事場(chǎng)景的數(shù)字化映射。

  要想做到這一點(diǎn),需要克服捕捉目標(biāo)小、速度快(箭矢平均速度可達(dá)67米/秒,而直徑僅有5毫米不到)、箭矢飛行軌跡不平滑(飛行過(guò)程中箭體的動(dòng)態(tài)彎曲和擺動(dòng),增加了軌跡捕捉難度)、室外范圍大環(huán)境復(fù)雜(在70米 x 20米室外大場(chǎng)地舉辦的射箭比賽會(huì)面臨各種天氣狀況,視覺(jué)識(shí)別干擾大)等挑戰(zhàn)。

截屏2024-08-07 10.40.07.png

(數(shù)字化特效還原不同箭矢起射位置和整體軌跡,圖源自SMT)

  據(jù)介紹,除射箭比賽外,商湯與SMT合作開(kāi)發(fā)的InnoMotion賽事轉(zhuǎn)播方案,也應(yīng)用于本屆奧運(yùn)會(huì)乒乓球項(xiàng)目的全程賽事轉(zhuǎn)播,以AI技術(shù)呈現(xiàn)乒乓球的轉(zhuǎn)速、落點(diǎn)和軌跡特效。