采用虚拟演播室技术,可以制作出任何想象中的布景和道具。无论是静态的,还是动态的,无论是现实存在的,还是虚拟的。这只依赖于设计者的想象力和三维软件设计者的水平。许多真实演播室无法实现的效果,对于虚拟演播室来说,确是“小菜一碟”。例如,在演播室内搭建摩天大厦,演员在月球进行“实况”转播,演播室里刮起了龙卷风等等。有的电视台已经起用了虚拟主持人,并且成为了,他们不仅可以配合真人的主持人主持节目,而且还可以单主持节目。这些都是虚拟演播室创造性的体现。
虚拟演播室的产生,给视频节目制作、电视广播带来了一场革命。
三维虚拟演播室的跟踪技术有4种方式可以实现,网格跟踪技术、传感器跟踪技术、红外跟踪技术、超声波跟踪技术,其基本原理都是采用图形或者机械的方法,获得摄像机的参数,包括摄像机的X、Y、Z、(位置参数)Pan、Tilt、(云台参数)Zoom、Focus(镜头参数) 由于每一帧虚拟背景只有20ms的绘制时间,所以要求图形工作站实时渲染能力非常强大,对摄像机的运动没有更多的限制,一般适合电视台,对节目制作要求较高的用户使用。
另一种方法是预生成三维背景,即要制作好背景的三维模型,然后预先定义好摄像机的运动和参数设置,根据这些数据生成每台虚拟摄像机的视图画面,运用色健将前景和相应的虚拟背景结合起来。这种方式可以生成比较真实的虚拟背景,对图形工作站实时渲染能力要求不高,摄像机只可以切换机位(摄像机机位须事先与背景调整好比例和透视关系),不可以做其他的运动,这样的虚拟演播室适合学校以及电教,投资较小,要求不高的用户使用。
虚拟演播室中摄像机在拍摄过程中有平移X、纵移Y、高度移Z、水平角、俯仰角、镜头变焦ZOOM, 聚焦FOCUS等变化,这些参数的改变会引起所摄图像视野与视角的改变,为了模拟人物所 在的三维环境,计算机须根据这些参数不断调整三维视图。而摄像机跟踪部分的作用正是 收取摄像机的位置信息和运动数据,实时地跟踪真实摄像机,以前景与计算机背景“联 动”。
由于这种“联动”是以高速计算机运算的结果,而这种运算永远需要一个运算时间,所 以这种“联动”是有时间差的。只是设计者限制这种时间差在一个人眼不易察觉的范围 内,因此要求前景摄像机只能在一个有限的速率内改变位置参数。
目前虚拟演播室的摄像机 跟踪系统主要有摄像机参数图形识别和以传感器为基础的跟踪系统两种方式。同时这也是虚拟演播室两大类别的主要区别之处。
(1)摄像机参数图形识别跟踪系统
图形识别跟踪系统又称网络跟踪系统,作为一顶图像处理的基本 识别技术,利用已知特殊图形定位摄像机参数已有十多年的发展历史。摄像机参数图形识别 跟踪系统的基本原理是需要一个画有特殊网格的蓝色背景幕布,它将摄像机所 拍摄的画面送到数字视频处理器中进行处理,通过对诙画面中网格各具的不同特征 和透视关系进行计算,得出有关摄像机的运动参数。
在虚拟演播室发展的初期这顶技术应用 于虚拟演播室中的摄像参数定位,具有的一面,它省去了传感器跟踪系统所必然带来的 对云台的改装,并可使一套识别跟踪系统与多个摄像机相连,但它的先天不足也使其在应用 上遇到了许多问题。
,由于一套识别跟踪系统只能同时跟踪并处理一个方位信号,因而在原理上图形识 别跟踪系统就只能为场景生成系统提供一个机位的参数,从而使场景生成系统只能生成一个 主输出画面。如果场景生成系统有能力生成并合成一个或一个以上的预监画面,为能跟踪除 主输出之外的一个或一个以上的摄像机参数就须相应地增加识别跟踪系统,也就是说,如 果想要同时监视4个摄像机的合成画面,除了要有4套背景生成及合成系统外,还须配置 4套图形识别跟、
虚拟演播室发展到现在,对预监机位甚至是双画面特技的要求越来 越强烈,而利用图形识别跟踪技术所能达到效果很难让人满意。另外,由于该技术的核心是 一套图形识别跟踪系统,一旦图形识别跟踪系统出现故障就将导致整个系统崩溃而无法播 出,所以利用这种技术进行直播是相当危险的。同时,图形识别跟踪技术产生的系统延时一 般也传感器跟踪系统,给摄像师的操作和演员的表演都带来了难度。
二,图形识别跟踪系统通常要在蓝幕上用不同的颜色标注识别图形,因而对虚似演播 室背景灯光的要求也就相应提高,同时为了能将蓝幕和网格同时用色键器键除,色键器的键 阈值就须相应提高并加速,从而使色键器很难实现如透明体、烟霎,阴影等效果。而阴影 作为人手与虚拟场景结合的关键因素,却是虚拟播室效果真实感的重要标志。
三,图形识别跟踪系统在所识别的画面中要求至少有一个可识别的图形(如网络)才 能定位摄像机参数,因此当摄像机镜头推上或人手遮挡使画面中没有可识别图形时,图形识 别跟踪系统根本不能工作,这也就是说单纯利用这种系不能进行人物特写的拍摄。目 前的解决方法是求助机械传感系统,也就是要在镜头上安装机械传感器才能完成特写的拍 摄。但其实一旦安装了镜头传感器,只要再安装云台传感器就能构成一个标准的传感器跟踪 系统,图形识别已毫无意义。
四,在参数釆集精度上图形识别跟踪系统也受很大的限制,摄像机距离蓝幕过远或过 近以及摄像机自身的分辨率都会影响参数精度,特别是当背景被虚焦时,易带来画面的抖动。
2)摄像机参数传感器跟踪系统
随着虚拟演播室技术的诞生和发展,摄像机参数传感器跟踪系统的技术也得到了迅1速的 发展,其参数精度、参数釆集速率都足以满足虚拟演播室技术的要求,在与云台和镜头的配 合安装上也有多种方式可供选择,并且其成本和价格也在逐步降低。特别是目前许多云台和 遥控云台上安装了能满足虚拟演播室要求精度的参数传感器,甚至一些镜头生产厂商为能扩 大销售也开始在其镜头上安装传感器,我们甚至可以预见,随着演播室和虚拟演播室自动化 的发展,摄像机参数传感器跟踪系统很可能成为演播室云台和镜头的标准配制。
摄像机参数 传感器跟踪系统要求对每个在虚拟演播室中使用的机位都安装传感器,这种方式固然令系统 造价随着机位的增加而提高,但其优势也是显而易见的。由于每个机位都有传感器,虚拟演 播室的主控系统可以同时获取每个机位的参数,因此有可能为每个机位提供虚拟背景与合成 画面。
虚拟演播室采用的图形算法和跟踪技术研发出来的虚拟演播室系统。通过传感系统跟踪摄像机各种参数并传递给虚拟演播室计算机处理系统,该处理系统根据传感参数实时产生一个有空间感的虚拟场景,并与演播主体之间保持一致的空间透视关系。视频色键器对摄像机获得的前景信号与虚拟演播室系统产生的背景信号进行处理,从而实现演播主体(播音员、演播人物等)与虚拟场景的合成。因为虚拟演播只需在一个蓝色背景下进行,利用它进行节目制作与播出,无需为不同的节目搭建不同的演播室或场景,所以在有效利用演播室资源方面,成本优势是显而易见的。还可以与非线性编辑系统结合使用,将虚拟演播的节目直接输出到非线性编辑系统中进行编辑播出,并可将编辑结果记录到网络共享存储器中,实现演播资源共享。
在电视节目制作、播出等各环节数字化程度越来越高的情况下,奔涌科技新推出的全数字虚拟演播系统,全部采用数字接口进行内部信号传输。可将终合成的数字信号直接送到数字视频编辑网络进行编辑或播出,避免了信号转换过程所带来的信号质量下降问题,无疑可以更好地满足电视台数字化发展的需要。