央视录音师技术分享:VR音频到底是什么?

http://www.audio.hc360.com2017年06月28日09:52 来源:慧聪音响灯光网作者:曹徐洋T|T

音响灯光

    慧聪音响灯光网报道    还记得18年前那部颠覆了所有人想象的电影——《骇客帝国》么?当基努·里维斯插上管子进入母体的时候,其实他就是进入了一种VR情境!只不过电影里的版本可能是10000.0,我们现在还只是1.0,什么?1.0就不算未来已来?咳咳,我会告诉你我是个标题党么?!

  言归正传,说回VR。也许你不知道VR是什么,但是你一定听说过VR,因为现在VR实在太火了,有多火呢?

  

  詹姆斯去年拍摄了一部12分钟的VR宣传片

  

  谢耳朵在《生活大爆炸》里玩VR

  

  比尔盖茨和巴菲特上演的VR首富版《速度与激情》

  

  看见没?VR已经火到了汪星球

  Oculus的创始人帕尔默曾说:“像《骇客帝国》一样的VR体验也许永远都不会实现,但我们能做到的就是改进我们现有的:音效、触觉和视觉的构建,在未来能够真实地复制更多体验。” 我们今天就来聊一聊怎么改进音效。

  当我第一次接到制作VR音频的任务时,是一脸懵X的——VR是什么?好在有度娘!

  ——摘自百度百科

  

  看完以后更懵了

  VR音频到底是什么?

  经过半年的摸索,我总结了一个不是很全面的说法:VR就是能提供全方位无死角的视听模式的一种技术。

  好了,该说我们的重点了——VR音频。

  在着手制作前,我们一定会想到一个问题:VR需要一个什么样的声场呢?

  要弄清这个问题,我们先来回顾音频技术的发展轨迹:从单声道、立体声、5.1、7.1一直到22.2,我们一直在靠增加音箱数量来将声场还原得更逼真。但是还原这些声场都有一个共性或者说一个前提,那就是声场的方向永远是不变的——我们明确定义了声场的前后左右,才能开始着手构建声场。

  环绕声模式下的固定声场

  但是VR来了,这个方向不变的前提被瞬间打破了,观众带上VR眼镜只要转转脑袋,前后左右就被重新定义了,这时候我们还原声场的要求也被提到了一个新高度——我们需要让声场动起来,而且还是跟着观众的头部来动。这个跟随头部转动的声场就是VR音频要还原的声场。

  那么,对于VR来说,什么是最重要的呢?在回答这个问题前先来回答另外一个问题:你为什么喜欢在电影院里看电影而不是在家中?答案往往就简单的三个字:沉浸感。个人认为在VR技术还不很成熟的今天,VR的一切技术手段都应以增强沉浸感为目的。也许有一天,随着沉浸感的无限增强,增强到如《骇客帝国》中一样,你就分不清虚拟和现实了。

  明确了制作方向,剩下的就是如何实施了,怎样增强沉浸感呢?

  我们先来看看用传统音频的制作方式会怎样。假设我正在用VR眼镜看一场晚会,在观众席中有一台VR机位,我一定会时不时地环顾四周,感觉就像自己置身其中。但是如果使用传统音频技术,伴随着头部的转动,我听到的声音却是一成不变的,甚至连身边人的声音都听不到,真实感和临场感就会大打折扣。

  如果我们使用VR音频技术呢?由于有了头部跟踪技术以及三维声技术,我们可以仅仅通过普通的立体声耳机就得到一个逼真的VR声场,这个声场与传统声场最大的不同就在于,“通过声音寻找画面”。什么意思?还用刚才的例子:我用VR眼镜看晚会,机位就设置在观众席中,我通过耳机听见后排有个观众在大声叫好,我想看看他长什么样子,于是我转过身去看。这个过程就是“通过声音寻找画面”。

  这种“通过声音寻找画面”的方式,在现实生活中是不是频繁发生?我走在单位的楼道里,听到身后有人叫我,我回身看是谁;我走在大街上,头顶有飞机飞过,我抬头看飞机在哪儿……在现实生活中越常发生、与现实生活越接近,这样的体验就越有沉浸感。

  VR音频的未来

  引申一下,我还想说说一些自己开的脑洞——VR音频的未来

  当观众带上VR眼镜转动头部的时候,其实就是把镜头的移动权交给了观众。可以想象在不远的将来,家用带宽足够的情况下,我们将能够实现每一个VR摄像机对应一路推流,用户在自己的终端上可以自由切换镜头,将镜头的切换权也交给观众。想看什么就看什么,这才是上帝该有的待遇!

  在我刚成为一名“电视民工”没多久,就听到一句话:“audio follow video”(音频遵从视频),这让我深深地感受到了“歧视”,凭啥我就要follow你!现在VR来了,扬眉吐气的日子到了。来,跟着我开的这个脑洞进来扬眉吐气一下。想象一下,在未来我们拍了一部VR版的《人民的名义》,由于VR的视角是完全自由的,祁同伟和育良书记正在飙演技的时候你却一直盯着高小琴看,导致漏掉了很多推进剧情发展的关键画面。这个时候也许就需要“video follow audio”了,通过声音来引导观众去看不容错过的那些关键画面。

  “若干年后,你戴上VR眼镜,看到已经逝去的亲人与你一起围坐在餐桌前其乐融融——吃着老的饭,聊着老的天,他们似乎并未走远。摘下眼镜,你才发现,眼角有两行泪水潸然而下。”

  过去未去,未来已来。

  (手绘题图:@曾明)

  ​ 作者介绍:曹徐洋

  中央电视台音频部录音师,毕业于中国传媒大学电子工程专业

  参与《2014索契冬奥会》CCTV前方IBC音频系统的设计、搭建及直播工作

  参与制作《60周年国庆阅兵》

  参与制作《天宫一号及神舟八号发射的直播报道》

  参与《2017CBA全明星赛VR直播》音频系统的设计、搭建及直播工作

  参与《2017年春晚VR直播》音频系统的设计、搭建及直播工作

  参与《2017年体坛风云人物颁奖VR直播》音频系统的设计、搭建及直播工作

  参与《2017年无锡亚洲乒乓球锦标赛VR直播》音频系统的设计、搭建及直播工作

责任编辑:苏桂霞

免责声明:凡注明来源本网的所有作品,均为本网合法拥有版权或有权使用的作品,欢迎转载,注明出处。非本网作品均来自互联网,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。

LED显示屏十大评选《慧聪LED》经典工程更多>>

慧聪市场

一周话题人物 [人物关注排行榜]

[赵海天]深圳大学建筑与城市规划学院教授
据了解,目前有不少的舞台灯光企业正在研究如何跨界到商业照明领域,商业照明市场前景如何?[详细]
[凌子斌]锐丰股份总经理
慧聪音响灯光网采访了锐丰股份总经理凌子斌,邀请他就音响灯光行业并购以及资本运作等一系列热点话题一一作答[详细]
[刘云辉]采访明道灯光总经理
刘云辉认为,实行股份制让明道灯光飞速发展,中国舞台灯光正走向国际。[详细]
资讯中心 产业研报 企业中心 人物中心 产品微门户

企业媒体关注榜

话题人物排行榜

1 周宝宁 深圳宝业恒实业 董事长
周宝宁
深圳宝业恒实业 董事长
2 罗安武 前沿科技 总经理
罗安武
前沿科技 总经理
3 陈玉兰 舒伯乐上海区 销售经理
陈玉兰
舒伯乐上海区 销售经理
4 张育铭 海天电子 销售总监
张育铭
海天电子 销售总监
5 刘幼海 上海先进半导体制造有限公司 总裁
刘幼海
上海先进半导体制造有限公司 总裁
6 津贺一宏 松下电器 社长(总裁)
津贺一宏
松下电器 社长(总裁)
8 马修阁 深圳市洲明科技股份有限公司 副总经理
马修阁
深圳市洲明科技股份有限公司 副总经理
8 眭世荣LED产业联合会 会长
眭世荣
LED产业联合会 会长
9 林肇基 欧司朗光电半导体亚洲公司 首席执行长
林肇基
欧司朗光电半导体亚洲公司 首席执行长
10 谢宜云深圳联腾科技有限公司 执行总裁
谢宜云
深圳联腾科技有限公司 执行总裁
收起