商湯科技推MR虛實融合創新平台SenseMARS火星

2020年07月28日15:50  
 

近日,2020世界人工智能大會(WAIC)隆重召開,受到新冠疫情的影響,本屆大會主要以線上播出的形式呈現。作為全球領先的人工智能平台公司,商湯科技將創新的MR技術應用於WAIC,在商湯企業論壇中為觀眾呈現了一場AI+MR的“環球之旅”,並基於領先的SenseMARS火星混合增強現實平台,為大會專門構建了一座虛實融合的MR展區。

SenseMARS火星混合增強現實平台是商湯原創SenseAR平台的全新升級,融入了更多AI及MR的技術和能力,可在多種系統平台和終端設備上實現極具沉浸式的虛實融合視覺效果和互動體驗,以更好地滿足和引領市場及行業的需求。SenseMARS中的MARS是Mixed and Augmented Reality System的簡稱,又有“火星”之意,表達這一平台可以跨越終端、跨越系統、跨越行業,並為用戶帶來“跨越時空”的無限可能。

商湯為2020世界人工智能大會定制打造的“虛擬展區”

商湯為2020世界人工智能大會定制打造的“虛擬座頭鯨”

基於商湯領先的AI技術,SenseMARS平台具備專業級高精度三維數字化地圖構建、跨平台和終端的空間感知計算、全場域厘米級的端雲協同定位等空間定位和構建能力,可支持Android/iOS/Web/小程序等系統平台,以及手機、平板電腦、MR眼鏡等多種終端設備,從而實現室內、室外等不同場景的MR特效、導航和導覽等功能。

基於商湯的高精度三維數字化地圖構建技術自動重建的室外大尺度場景三維地圖

SenseMARS的導航導覽功能結合了商湯領先的視覺定位技術,區別於Wi-Fi和藍牙等方法,無需布置額外設備,隻要預先對環境進行拍攝採集,即可實現厘米級的定位精度,有效解決了傳統室內定位技術成本高、精度低的問題。目前,這些技術和功能已應用於博物館、展覽館、風景區、機場等文旅場景,以及商場、醫院等線下場景,讓觀者更具身臨其境的體驗和參與感。

此外,SenseMARS平台還整合了商湯業界領先的人臉關鍵點技術、人體分析技術,以及手勢跟蹤及檢測技術,可以針對人臉、人體、手勢進行准確識別和分析。結合MR的特效玩法,商湯已將這些技術廣泛應用於短視頻、直播等應用領域,帶來美顏、美體、貼紙、表情互動、手勢互動等多種MR特效,更豐富了線上互娛平台的創新玩法。

商湯3D Avatar打造“虛擬主播”

商湯3D Avatar打造“虛擬教師”

不僅如此,SenseMARS還可根據對人臉和人體的檢測,生成專屬3D Avatar虛擬形象,並可實現真人驅動。3D Avatar可以靈活應用在視頻、直播、虛擬觀眾席、游戲等多種場景中。該方案同樣適用於在線教育場景,在時下火熱的雙師課堂中,由Avatar形象來替換線上老師進行授課,能夠很好地避免換老師給孩子帶來的不適應﹔而在線上K12直播教學中,形象獨特、鮮活的Avatar虛擬老師,則比普通老師更能吸引學生的注意力,教學內容也更加生動,有利於教學質量的提升。

在過去幾年中,商湯已經將AI技術與AR和MR相結合,並不斷探索在這一領域的創新和應用。2019年10月,商湯聯合湖北省博物館打造了“虛擬曾侯乙編鐘”,通過MR的形式讓兩千年前的樂器任意敲響﹔12月,商湯還與故宮文化合作,在“金榜題名”展覽中等比例還原虛擬的孔子,讓現代人也能與孔聖人行禮互動。今年,商湯還通過MR技術將“海洋館”搬到了WAIC大會現場,讓嘉賓可以觀看一頭長達15米的虛擬座頭鯨在場館中自由翱翔。

商湯聯合湖北省博物館打造“虛擬曾侯乙編鐘”

商湯與故宮文化合作等比例還原“虛擬孔子”

基於領先的原創AI技術,商湯將賦予SenseMARS平台更多的能力,並將其開放給更廣大的開發者,共建AR/MR的創新生態。未來,隨著5G技術的普及,AR/MR技術也必將得到更廣泛的應用,實現更大尺度甚至城市級的虛實融合體驗。商湯也將繼續攜手更多合作伙伴,共同探索MR技術的應用潛力,賦能更多行業和領域,推動爆款應用的創新落地,加速整個產業的發展。

(來源:商湯科技)

(責編:葛俊俊、韓慶)
掃描關注上海頻道微信掃描關注上海頻道微信 掃描關注上海頻道微博掃描關注上海頻道微博