欢迎光临散文网 会员登陆 & 注册

虚拟现实直播技术,为您提供全新的视觉盛宴

2023-03-27 14:41 作者:创意云  | 我要投稿

近年来,随着元宇宙概念的火热,虚拟直播也逐渐被大家熟知,相比于传统的直播模式,虚拟直播利用计算机技术和 AR/VR技术,通过三维建模、实时渲染合成等手段,将虚拟形象或虚拟场景与真实世界的物体、环境进行融合,打造出沉浸式的观看体验。那么,虚拟直播的核心技术到底是什么呢?为什么它能够突破传统直播的瓶颈呢?让我们一起来了解一下吧。


vLive虚拟直播是元宇宙时代的直播新方式,是元宇宙数字内容交互生产的载体。

运用5G+实时渲染技术,在绿幕环境下进行拍摄,通过Studio Bridge传输到云端,实时完成抠像、融合与数字化,再推流到全直播平台。广泛应用于电商直播、娱乐直播、在线教育、虚拟发布会等领域。

 


虚拟制片技术

通过运用虚拟制片技术,即通过计算机实时渲染图像与真实演员的表演融合在一起,在拍摄现场就能将完整的、带有特效、光效的画面实时渲染,并且能够实时可视化呈现的一种全新直播方式。

    

3D建模技术

传统的直播通常利用绿幕拍摄实时抠像,再叠加平面的图片或视频作为背景,合成后推流到直播平台。目前大部分绿幕直播都属于这一类,节约了硬装修成本。但缺点也很明显,背景缺少空间透视关系,代入感不强。场景是虚拟直播的核心,利用3D建模技术具有灵活度高、高逼真度、能够实现复杂模型等特点,可以更好地还原出真实世界的场景。

目前,3D建模技术主要有以下几种:

1.三维建模:通过3D建模技术将一个场景进行三维立体重建,展现出场景中的各个元素;

2.计算机图形学:将3DMAX、 Maya等软件进行整合,创建出一个虚拟世界的模型;

3.渲染引擎:通过渲染引擎将所需的图像和视频进行渲染输出。

 



实时渲染技术

实时渲染技术可以根据直播的需求,对虚拟人物或场景进行建模,然后利用渲染引擎将模型从一个点变成面、再变成体。此外,在实时渲染技术中,除了虚拟人物建模和三维场景建模外,还需要对实时场景进行实时渲染。在场景中的每个点都需要被实时地更新、计算。这一点也是实现虚拟直播效果的关键环节。

数字人是元宇宙数字内容交互的载体,链接了现实世界与虚拟世界。

角色驱动技术

当虚拟直播接入数字人直播时,角色驱动技术主要分为物理驱动和渲染驱动。物理驱动就是通过建模,将演员的模型制作出来,并与演员的动作相匹配。渲染驱动则是通过在渲染引擎中为每一个角色创建一个单独的动画,并将其与演员的动作进行绑定。观众可以在播放时,直接在屏幕上看到演员的动作和状态。

 

AI实时动作捕捉技术

在虚拟直播中,实时动作捕捉技术是一项必不可少的关键技术,它是指通过动态捕捉设备,将主播的面部表情、肢体动作等捕捉下来,并通过三维建模技术将这些动作和表情呈现在虚拟主播身上,从而使虚拟主播的动作与真人主播高度一致。

目前,市面上常用的实时动作捕捉设备有两种,一种是传统的视频捕获设备(如光学摄像机),另一种是基于摄像头的深度相机(如结构光摄像机)。两种设备都可以实时采集人、物的动作数据并将其保存到计算机中,但由于光学摄像机无法获取人物的面部表情信息和深度信息,所以在实时性方面会有一定限制。而结构光摄像机由于可以采集到更多的面部表情信息和深度信息,因此它具有更高的实时性。

 

动捕设备和采集设备

目前,市场上的虚拟直播主要分为动捕设备和采集设备两大类。动捕设备是一种基于物理感应的虚拟物体追踪技术,主要用于实时动作捕捉。动捕设备可以通过传感器直接与摄像机、人物、背景等发生物理互动,并将物体和人体的运动轨迹数据传输到电脑中,从而实现对人体或物体的实时跟踪。而采集设备则是一种通过专业采集设备来实现对人体或物体运动轨迹数据采集的技术。采集设备能够将人体或物体的运动轨迹数据实时传输到电脑中,从而实现对人体或物体的实时追踪和分析。目前,采集设备主要分为三种:人/机器人跟踪器、视频采集卡和摄像机。其中,摄像机是最为常用的采集设备。

蓝海创意云元宇宙技术支撑服务

依托蓝海创意云数字内容生产全流程服务体系所构建的元宇宙时代数字基建能力,结合过去十年积累的云端超大规模视觉计算能力和超高清视频低延时传输技术,成功打造了国内领先的元宇宙技术支撑服务能力。

为什么垂直行业可以在元宇宙打通最后一厘米,和用户实现全时、全量和全域的亲密接触?元宇宙商业成功的关键因素主要有两个,其一是对客户需求和运营交付的洞察,其二便是对客户关系和客户流量的运营,在这两个关键方面垂直行业是具有竞争力的。

 未来十到十五年的历史性变化是非常值得我们期待和观察的,元宇宙作为数字时代的跃迁者,是众多数字技术的集成创新,其未来发展势头仍然强劲,应用场景和生态也将得到进一步的完善。


虚拟现实直播技术,为您提供全新的视觉盛宴的评论 (共 条)

分享到微博请遵守国家法律