商汤大模型赋能杭州亚运会,AR黑科技打通虚实空间
杭州第19届亚运会进入最后2天倒计时!
“智能亚运”将带来哪些创新体验?
打开手机支付宝小程序“智能亚运一站通”,选择“AR服务”,朋友们即可开启虚实融合的亚运探索之旅!
基于商汤琼宇SenseSpace领先的NeRF技术构建的沉浸式亚运数实空间,还将带来极具未来感的观赛体验。
实景AR观亚运:虚实融合享赛事
作为杭州亚运会官方智能视觉服务独家供应商,商汤为杭州亚运带来诸多科技互动选项。
来到场馆附近,市民观众即可通过支付宝小程序中“AR亚运之声”和“AR亚运迎宾秀”,与亚运吉祥物开展趣味互动。
去往杭州奥体中心场馆群和黄龙体育中心场馆群的观众,商汤“AR场馆导航”将扮演专属“指路人”,一键到达目的地,通行无忧。
在场馆中通过亚运“AR智能屏”,还可一站查询各种赛程和场馆信息,并与吉祥物“虚实合拍”留念。
戴上 “AR眼镜”,观众还能在映衬于实景上的虚拟世界中,领略西湖文化、拱宸春色和良渚遗址风貌,体验足球、举重、摔跤等多种运动项目,身临其境感受杭州智能亚运魅力。
商汤还特别打造“AR智能巴士”,将在亚运运动员村和媒体村提供接驳服务。
基于商汤SenseMARS火星混合现实平台和自研L4级自动驾驶解决方案,AR智能巴士可精准识别车道线、交通信号灯,预测行人、车辆的运动方向并做出决策和路径规划,实现自动停留接驳,安全接送乘客至目的地。
AR巴士的车窗被一块超大屏幕代替,将杭州的实时街景与西湖风景等杭州特色美景及亚运主题虚拟元素巧妙融合,释放“智能亚运”的无穷魅力和浓郁的杭州韵味。
为了让AR体验更流畅、更精准,商汤还通过算法模型创新,有效解决亚运场馆相似场景、弱纹理、动态场景多带来的技术挑战,更好地满足夜间环境应用需要,实现了更高实时性和准确性。
亚运数实空间:亚运场馆掌上游
在提供线下实景AR观亚运体验同时,商汤还创新打造线上虚拟空间沉浸式体验“亚运数实空间”,让大家足不出户,通过手机便可在亚运场馆的数字世界中感受真实亚运。
在亚运数实空间中,亚运吉祥物“江南忆”化作金牌导游,带领观众在高空视角鸟瞰宏伟壮阔的亚运馆群全貌,还可通过自由视点实时漫游“大莲花”、“小莲花”、游泳馆等标志性亚运场地,欣赏艺术感、科技感和运动感并存的建筑设计,同时也可享受亚运迎宾秀、亚运之声、亚运知识科普等互动体验。
商汤琼宇SenseSpace大规模实景3D内容生成平台,为亚运数实空间提供了亚运场馆群场景NeRF模型的高质量重建支持。
凭借领先的隐式神经辐射场(NeRF)技术,商汤琼宇可支持平方公里级城市场景的三维数字化复刻生成,具有厘米级重建精度,可还原场景的真实细节和光照效果;还支持对复刻生成的场景NeRF模型进行再编辑和再创作。
为响应亚运场馆竣工时间要求,商汤还通过全新的多源数据联合重建和NeRF模型拼接技术,将不同时间段和不同片区的场馆影像进行融合重建和拼接,形成完整的亚运场馆NeRF实体全貌,首次做到了2平方公里场馆群跨区域、跨时间段、跨光照变化的联合三维复刻与融合。
通过商汤琼宇重建的城市实景三维模型,在未来也可作为城市数字资产,复用于更多的数字孪生应用场景。
商汤期待以创新技术激发大众热情,传递亚运精神,助力AI技术与大众体育的创新交融。