软件资讯

浅谈AR泛娱乐-直播场景中的AR玩法

发布时间:2020-04-08 09:55
其实直播中应用AR技术已不是什么新鲜事,也许大部分用户并不感知,这也正体现出AR虚实融合的真实感。应用在直播中的AR技术,将舞台布景的工作简化为虚拟影像的制作,提高观赏效率的同时大大降低了成本。
直播盒子
最近两三年内,直播行业发展迅速,从PC端游戏直播衍进,到今天移动端各种娱乐直播泛滥,应用在直播中的技术也越来越丰富。前AR功能性产品暂未覆盖用户核心痛点,许多企业从娱乐化方向探索AR的价值。作为典型泛娱乐类别的直播场景,AR的应用也越来越广泛。下面笔者将从几个方面做简要分析:
一、以主播为中心的直播AR玩法
这是当前的普遍的直播场景,核心在于直播盒子主播。通常模式是,主播进行才艺表演直播,用户通过手机或者电脑查看主播直播,进行留言、点赞、打赏等行为,最常见的就是AR特效玩法了,可以分为三类:
1.屏幕级:
这种泛指出现在屏幕端的各种特效内容,比如火箭升空、游艇、鲜花等等。严格意讲,这类内容不属于AR,但表现在直播场景中,特效内容是对主播所在的环境及屏幕做了效果增强,我们简单归类为AR特效吧。当前这种屏幕级的特效最普遍,而且成本较低,甚至不需要滤镜效果,直接特效视频或者序列帧即可满足。
2.人像级:
此类AR特效要比屏幕级的特效更有技术含量,同时效果更酷炫。人像级别的AR特效依赖AR技术中的识别跟踪算法,例如人脸特征识别,叠加虚拟道具且稳定跟踪。此外,还有类似手势识别触发AR特效、五官动作识别触发AR特效等。相比之下,人像级的AR特效虚实融合效果更好,更具吸引力。
这类特效可以是模型,也可以是图片动画,虽然在各种美图相机中,AR贴纸屡见不鲜,但是应用在直播场景中显然更有趣,而且技术难度更高。
3.场景级:
除此之外,在直播场景中还包括一类场景级的AR特效。 场景级的AR特效要求技术更高,不仅仅是对人像的简单识别跟踪,要求对环境做感知融合。例如即时定位与地图构建技术识别环境特征,例如真实物体检测与虚拟三维构建实现虚实遮挡,例如人像分割、背景分割等虚实融合效果。
二、以用户为中心的直播AR玩法
上面说的是以主播为中心的直播宝盒AR玩法,也就是当前常见的直播形式。这种玩法,用户只是参与体验和观看。那么什么是以用户为中心的直播AR玩法呢?
直播场景核心在于内容,如果转变一下思路,由用户决定内容,那AR玩法就更丰富了。
将平时看不到的甚至虚拟的影像、直播,通过AR技术实时呈现在眼前,如同身临其境。前几年VR直播在一些晚会包括明星演唱会都应用过,全景视频流直播,营造真实的现场沉浸感。对于AR直播来说,AR视频、AR全景都是可行的。
不过当然AR直播也有缺陷,需要打开摄像头查看内容,且不解决核心用户痛点,因为此类AR视频直播用户完全可以通过web或手机查看替代。所以,这也是这个场景没有发展起来的原因之一。当然,如果限定下条件,限定内容和实时性,AR视频直播还是有一定价值的。
视频形式的AR直播,不具有立体感,效果比较差。如果可以结合真人光场建模,实时影像投影,将真人模型实时投射到现实场景,可以360度立体查看,肯定相当刺激。
上是笔者对于AR直播场景的一些分析和猜想,目前看后一种直播场景比较受限,应用范围、技术能力还没有完全覆盖。但是对于AR泛娱乐来讲,直播场景对于普通用户已经开始广泛认知,结合新技术做爆点突破也未尝不可,期待AR直播~