大数据文摘出品
编译:小七、蒋宝尚
世界杯来啦!熬夜看比赛时,有没有那么一瞬间想要飞到俄罗斯在现场欢呼?
一个新的系统或许可以给你观看足球赛事更现场感的体验!
CVPR2018的大会上,刚刚展示了一种在咖啡桌上观看世界杯的新可能。
由Facebook、Google和华盛顿大学合作研发的这个以足球比赛为主导的AR系统,可以在比赛时拍摄2D视频,并以3D形式再现。
这样你就可以在咖啡桌上观看这样的世界杯了。比如这样👇
更真实一点,你还可以看到周围重塑的观众👇
同步还原是这样的。可能不如现场看来得好,但至少,这种实时感已经比在电视上让人激动多了👇
这一“桌面足球”系统由Facebook、Google和华盛顿大学合作研发,相关论文和研究正在盐湖城的CVPR会议上展示。
大数据文摘微信公众号后台回复“足球”下载这篇论文
来不及读论文的同学也可以直接戳下方视频了解实现原理👇
论文中提到,这个系统的核心方法是估计每位运动员的深度图: 在足球比赛视频中提取球员的3D数据,然后用CNN进行训练,最后与身体姿势和深度估计技术相比较,并在真实的YouTube足球片段上显示结果。
“桌面足球”系统将比赛视频作为输入,并仔细研究跟踪每个球员及其动作,然后将玩家图像映射到从足球比赛视频中提取的3D模型上,并在3D场地上展示出来。这样基本上就将FIFA 18(一款足球游戏)与现实生活结合,产生了一种微型混合。
因为源数据是二维动态的,且分辨率很低,所以为每个玩家可靠地重建逼真且合理的3D姿势是一项相当重大的成就。
尽管从视频中看,这个系统目前还很不完美:你需要AR眼镜来观看比赛,球赛人物的位置是估计的,并不能和真正的球赛同步,球员步伐不太平衡,看起来像是在场上跳舞。
但是这个想法还是让很多人振奋不已。如果系统可以从多个角度拍摄整个比赛(它也可以直接从网络上获取视频),那么在实际比赛结束后几分钟内,就可以进行3D重播。
观看电视体育赛事最大的缺点,也许就是每个人坐在那里都是盯着一个方向,看到的也是完全一样的东西。如果人们可以分散开来,选择立场,从不同的角度观看比赛并分析策略,可能会定义一种新的体育赛事观看方式。
不仅如此,能够聚集在一个中心位置,并从多个角度来观看比赛,这是多少球迷的心愿!
而当前我们所需要的就是发明一种完美的、价格适中的全息显示器,它可以从各个角度来显示比赛。
作为Facebook、Google和华盛顿大学的合作项目,此项研究正在盐湖城的计算机视觉和模式识别(CVPR)会议上展示。
展示链接:
http://cvpr2018.thecvf.com/
相关代码链接:
https://github.com/krematas/soccerontable
相关报道:
https://techcrunch.com/2018/06/19/football-matches-land-on-your-table-thanks-to-augmented-reality/
【今日机器学习概念】
Have a Great Definition
Contributors
回复“志愿者”加入我们