不到5m²的乒乓球台上,AI又玩出新花样:
描绘运动轨迹:
转速、旋转方向可视化:
呈现击球落点:
你以为AI炫技?NO!乒乓大战,选手对抗技巧和战术意图一览无余,以往无法直接呈现的观赛细节直观表现出来了!这就是10月举办的2023世界乒乓球职业大联盟球星挑战赛(WTT)兰州站赛事转播中,商汤科技与上海东方传媒技术有限公司(SMT)合作的最新成果。双方联合打造的「智慧体育-AI赛事转播升级解决方案」,通过三维动作捕捉技术与AR特效渲染引擎成功实现乒乓球赛事数据采集与可视化转播升级。
乒乓球赛转播
要过瘾还要看门道
乒乓球竞赛,打的是紧凑和紧张。传统赛事转播通过超高清、多机位、慢镜头等方式,主要能体现运动员击球、得分等动作姿态,对“弧线、旋转、落点”等乒乓球技战术关键要素表现很少。如果让解说员语言讲解,也较难跟上比赛节奏。因此,普通观众很难看出其中门道。针对这个问题,AI就扮演了赛场转播的“第二解说员”,能够在转播画面中增加相应的动效演示。
弧线轨迹:能够反映击球路线和力度,可以判断球员击球方式和意图。转速转向:能够反映击球变化和攻击力,是乒乓球比赛的核心技战术指标(行业测量难点)。落点:能够反映球员战术路线和击球质量,有效地控制落点就能控制比赛节奏。
无感知3D动捕
堪比“飓风中拍子弹”
这项成果难点在哪?乒乓球竞技赛中:
球速可轻松超过100公里/小时,甚至达到170公里/小时
- 可能出现多达24类有效旋转球,旋转速度达数千转每分钟
从快速变化的球场中精确跟踪直径4厘米的乒乓球,并有效识别转向、计算转速,其难度堪比飓风中拍摄飞行的子弹。
商汤联合SMT开发的「智慧体育-AI赛事转播升级解决方案」,通过AI算法突破,实现了基于无感知3D动作捕捉技术对专业赛事数据的高精还原与提取:针对球速转向:商汤自研无感知3D视频动捕技术,可实现在比赛中实时采集每个球的转速和转向。同时与SMT合作开发基于机器学习的乒乓球转速转向AR可视化系统,可以实时定位回溯乒乓球的转速转向数据,结合转播车慢动作回放系统,就能实现超高速回放画面中AR可视化呈现乒乓球的转速转向。针对轨迹落点:商汤与SMT合作通过AI技术实时采集乒乓球的落点和轨迹数据,将落点和轨迹的原始坐标数据进行后台实时归类统计,即可实现多种形式的数据可视化呈现。无感知3D动作捕捉技术
这也是商汤与SMT首次合作打造的成功落地案例。从今年4月WTT澳门站现场测试到10月WTT兰州站赛事转播,在乒乓球轨迹跟踪及转速采集上打造了垂直领域标杆。「智慧体育-AI赛事转播升级解决方案」,极大丰富了乒乓球赛事转播的展示方式与视觉效果,使观众能更直观地看懂比赛;同时使得采集更加丰富的赛事运动数据成为可能,为基于数据的多元应用延展创造了条件。在10月举办的2024上海广播电视台(SMG)合作创新大会中,凭借这一方案与双方联合孵化的创新合作模式,商汤荣获“SMG 2023年度创新伙伴”奖。接下来,双方将在体育领域继续深化合作,以科技创新赋能WTT赛事,并持续深挖AI技术在多元体育品类的技术拓展。