假设你已经找到了(le)自己(jǐ)的(de)座位,并开始欣赏选手们的精彩表演。但受(shòu)限于人的(de)视力(lì)、角度等问题,观众很难捕捉到比赛(sài)的精彩画面;并且,对于一些专业(yè)性较强的运(yùn)动,观众需要专业(yè)解说才能感受到运动的(de)美感。
例如,在(zài)被(bèi)誉(yù)为冬奥会(huì) " 国际象棋(qí) " 的(de)冰壶运动中(zhōng),由于冰壶壶体(tǐ)较小(xiǎo),视距较远,并容易(yì)受到运动员身(shēn)体遮挡(dǎng)干扰,座位席(xí)上的观众不得不借(jiè)助于望远镜(jìng),或(huò)者现场大屏幕来观察细节。
为(wéi)了解决这个难题,商汤基于视觉 AI 感知、深(shēn)度学习、三维建模(mó)和空间定位等(děng)人工智能(néng)技术,打造了「冰壶运动轨迹捕捉」技术。
该技术克(kè)服了超大(dà)空间环境下基于远视距对(duì)较小物体运(yùn)动轨迹精(jīng)准捕捉(zhuō)的难(nán)题(tí),通过对真实场(chǎng)景的数字化(huà)映射,实(shí)现对运动冰壶(hú)的(de)检测跟踪和轨迹捕捉。同时,结合实时渲染(rǎn)、虚(xū)实同(tóng)步技术,系统(tǒng)可以将冰壶(hú)轨迹进行精准还(hái)原,并将画面转(zhuǎn)化为视频流,输出至网络平台和现场大屏幕。
凭借该(gāi)技术,不论是线下,还是线上,观众(zhòng)都(dōu)可以近距离观(guān)察冰(bīng)壶(hú)运动(dòng)的细(xì)节、运动规律和赛况;解(jiě)说员也能分(fèn)析(xī)运(yùn)动员的状态和投壶技(jì)巧、战(zhàn)术等,实现「AI 观赛(sài)」。
与旷视类似,商汤(tāng)在导航方面推出了「AR 导航(háng)」,但侧重于室外,服务对象主要为(wéi)奥(ào)运村的运动员和工作人员(yuán)。
在(zài)张家口冬奥(ào)村中,由于奥运(yùn)村及周边面积较大(超 30 万平米),要在短(duǎn)时间内构建高精(jīng)度三(sān)维地图(tú),对(duì)技术要求很(hěn)高;而且,村内建筑风格统一(yī),加上冰雪覆盖,这种环境下,很(hěn)难基于图像(xiàng)来(lái)实现精(jīng)准地识别自身(shēn)位置。
对(duì)此,商汤通过 GPS 与视觉融合的(de)数据关联方法和参数分块优(yōu)化方法,以及综合(hé)利用视觉(jiào)、蓝牙、GPS 等信(xìn)号等(děng)技术(shù),并针对冰(bīng)雪场景,训练了不同天气(qì)条(tiáo)件下鲁棒的图像特征,从而在复杂场景(jǐng)下(xià),实现(xiàn)了(le) 6 自由(yóu)度空间(jiān)定位。
据了解,该导航系统可以实现大尺度场景下厘米级的三维地图构建和部署,并解决了动态复杂场景下实现(xiàn)精准定位跟踪等难题。用户打开手机专属 APP,打开摄像头识别周(zhōu)边环境,即可定位自身位置,输入目的地后,跟随 AR 虚拟箭头,即可进行导航。