听！梅西在说什么？（转自微信）
原创作者： 苑学成
央视音频（WeChatID：yangshiyinpin）
今晚22点阿根廷将迎战法国，残酷的淘汰赛即将开始。。。。
央视音频几位小编是阿根廷的球迷，他们趁着昨夜没有比赛，彻夜未眠，使用之前的比赛录像调试系统，仔细地分析了CCTV5 App里过往比赛的视频，结果。。。。
有了惊人的发现！
他们竟然听到了梅西与队友的交谈内容！
小编们一边反复重放梅西说的话，一边学习西班牙语，终于在今天给翻译出来了——
梅西说：我是利奥梅西……
你们都过来……
2018年俄罗斯世界杯作为三台合并后，中央广播电视总台第一个大型国际赛事转播项目，当然要第一时间为全国球迷观众提供最高规格、最高质量的赛事直播。在总台快速技术升级的大背景下，CCTV5手机客户端也首次领先于其它所有播出途径，开通了多角度切换功能，其中的“耳机听三维声”更是中央广播电视总台第一次三维声直播，恐怕也是国内迄今为止最大规模的一波三维声直播——让您犹如置身于观众席，请您过“足”瘾。
央视音频凭借着独一无二的平台、殷实的家底儿、和一波又一波优秀人才的优势，低调而高速地推动着三维声技术的发展并不断地提升着制作能力。借2018俄罗斯世界杯的契机，也是借CCTV5手机App技术升级的春风，率先为移动端用户带来了“耳机听三维声”的沉浸式体验。
本届世界杯全部64场比赛，我们与CCTV5完全同步，以三维声格式转播其中的58场，我们已成功转播完小组赛，马上1/8决赛就要开始了，如果你还没听过，赶紧来感受一下，再不听就来不及了。
如果大家对“三维声”还没有形象的认识，那么可以先回头看一下往期
请戳-----> 三维声来啦！
很多朋友们一看到那满屋子的喇叭就心烦意乱了，要装这么多音箱多麻烦！的确，想在家实现多个扬声器的听音环境，确实要花费些银两和功夫，还要征得家里领导的同意。（大权在握的读者请忽略）
而这次的世界杯三维声转播是仅针对CCTV5手机APP的，听音方式也有且仅有一种：“耳机”（不要跟我说你买个耳机也要征得家里领导同意，因为升级后的CCTV5手机APP具备了三维声解码和基于HRTF技术的双耳渲染功能，任何耳机都可以用）。所以我们骄傲且愉快的宣布——您能且仅能简单、便携、随时随地享受三维声！
关于耳机收听三维声的具体操作方法，我们在这里推荐一位央视音频的老朋友的呕心之作：
请戳-->杜比全景声版世界杯赛事收看（听）指南
当然，如果和扬声器环境做对比的话，耳机的效果还是差一点的，所以各位烧友现在就可以开始零存整取积攒银两了，为欣赏未来的大屏端三维声直播做好物质准备。
三维声制作系统
央视音频一直以来都秉承着“不放过、不凑合、不嫌麻烦”的“三不”原则，一听说“有机会直播三维声世界杯？！”老老少少都亢奋起来了，硬是在台里的后期录音棚里搭出了一套集音视频固态延时补偿、三维声制作、视频多画面监看及切换、播出音频编码、播出加嵌、解码质检、视频及分轨音频记录与回放、多重多级备份等功能于一体的复杂系统——快赶上一个小型演播室了。
除了任性的使用了央视音频最新的Lawo mc256+mc236 主备配置的IP化音频EFP系统、9个Genelec 8351加7370低音的SAM扬声器系统，还不择手段的把Protools工作站当做了延时测量工具，Avid MTRX接口更是独当一面，仅用做系统灾备的加解嵌器……
LAWO MC256+36
Lawo EFP机柜
三维声监听控制器，快速对比多个监听源
用来测量延时量的Protools工作站，直接从Lawo收IP音频流
由于系统已经超出了央视音频日常单纯声音制作的范畴，所以也要感谢央视音频的很多兄弟部门以及业内的老朋友们在设备和人力上的鼎力支持。
视频固态延时器，用于校准多路外来信号延时
视频切换矩阵，为了方便记忆、保障安全，直接在屏幕上贴标签了
主解嵌、主渲染、主编码、主解码、主QC机柜
备解嵌、备渲染、备编码、备解码、备QC机柜
外来信号监看、视频收录、多轨音频收录机柜
移动终端耳机体验区
辛苦调试中的央视音频友人
高大上的系统准备好了，要制作出高质量节目，还需要学习不少新知识——Immersive audio content（沉浸式音频内容）、三维声混录、CCTV5 App、双耳渲染……这些内容都是过去的常规播出所没有的，我们慢慢展开来说。
三维声播出制作
这是我们的三维声制作场地，最近也接待了不少前来感受三维声、探（laí）讨（kàn）技（b?）术（sài）的同（qiú）事（mí），我们从交流中总结了一些FAQ，基本上可以概括为四个问题：
1.用啥素材做？
2.怎么做？
3.混录输出的是啥？
4.如何播出给手机APP并用耳机听到？：
Q1：使用什么素材来制作三维声？
A1：本次世界杯的公共信号制作方HBS（HostBroadcast Service主转播商服务公司）给RHB（Rights Holding Broadcaster持权转播商）提供了立体声TVIS（TV International Sound电视国际声轨）、立体声RIS（Radio International Sound广播国际声轨）、5.1声道MCIS（MultiChannel International Sound 多通道国际声轨），还有可选的“Fan corner ambience”（球迷角）、“3D主话筒”、“Cablecam microphone”（鹰眼摄像机无线话筒）、“Outside ambience”（外部氛围）等额外的独立话筒信号，以及随4K信号提供的16声道“Immersive audio content”（沉浸式音频内容）。音频信号的传输方式也包含了PCM、Dolby E、AES67/RAVENNA。
Immersive audio content，就是我们用来制作三维声的16声道“沉浸式音频内容”，包含一套5.1声道Bed，以及10个作为Object（对象）的声道。
表中的内容是靠下面这些话筒拾取出来的：
（上期有读者要求看看现场话筒摆位，我们把摆位图提供给您）
场地话筒、各机位机头话筒、满场的环境效果话筒——其实与我们常规的环绕声制作并没有太大区别，但增加了一套专门为三维声而设计的ORTF-3D话筒：
ORTF-3D可以输出上下两层四方声，很适合体育赛事的5.1+4H声道配置。
Q2：如何制作三维声呢？
A2：使用HBS的16声道素材（也可以说是准成品），在5.1+4H监听环境中混合各个素材的比例，适度调整部分对象的空间定位及声场空间感处理，最后再混合中文评论。咱们一组一组来说：
1至6声道：5.1 Bed
声道概念，直接一对一送入三维声里的5.1声道。3声道预留静音，在俄罗斯的央视前方阵地嵌入了中文评论后回传北京，需要在三维声制作域控制3声道评论声与现场声的比例；
7至10声道：4.0 height
作为对象送入渲染器，在渲染器中将各声道声像位置定位到顶层的四个角；
11至14声道：Stereo Fan Corner
Stereo Fan Corner L和R是两对立体声信号，是分别布置在对战两队球迷聚集区域（多数为球门后方）的立体声话筒信号，其中L是立体声左侧球迷区域，R是立体声右侧球迷区域
拾音距离比较接近观众席，作为对象送入渲染器，在渲染器中定位到了如下图位置：
由于这2组立体声信号的拾音位置与其他吊装观众效果话筒相比更近一些，有时过于突出，我们可能会将其比例适当降低一些，高频清晰度也可以适当衰减；
15声道：English Guide Commentary
英文评论，我们这次直接扔掉了，但未来可以用作多语种对象供用户选择；
16声道：Stadium PA Announcer
对象概念，是现场扩声中的播音员线路信号，是个很“三维声”的元素，我们定位在了头顶正上方，并将其激励出的延时混响等效果声适当分配到了5.1 Bed输出及上方声道输出里，再加上其他声道中话筒直接拾取到的扩声氛围，营造了足量的扩声环境包围感。
除此之外，当然还有传统的均衡和动态处理，依录音师审美使用。
Q3：三维声的混录输出形式是什么样子的？
A3：在本次直播系统中，音频制作系统的输出是6声道声床（Bed）信号和10声道对象（Object）信号，共16个声道，同时并行送给渲染器和编码器，并在电脑Web页面中进行Bed及Object的定义及三维空间声像控制，并将这些控制信息（Metadata元数据）发送给渲染器和编码器。
然后渲染器依据这些元数据负责制作域监听；
编码器负责将音频信号和元数据进行压缩编码。
简单说，混音调音台的输出成品就是一式两份的16声道音频信号，一份给渲染器用来监听，另一份给编码器用来传输。
本系统中，三维声元数据只能使用额外的控制电脑来生成，未来会有越来越多的调音台原生支持元数据的生成及控制。
Q4：如何播出给手机APP？
A4：Q3提到的调音台成品是无法直接播出的，必须引入必要的信源编码技术将16声道信号和元数据压缩到足够小的码率后，才能送到客户端，本次使用的是Dolby DD+编码技术。到达手机后，使用内置的软件解码器将码流解码，并经过“双耳渲染”（将三维声信号按人的心理声学及人头传输特性计算虚拟到两声道）后，变成了最普通的两声道模拟信号由耳机输出。
Coda.
本次三维声直播是一次全新的制作体验，信号源是新的、制作系统是新的、工作模式是新的、播出模式是新的，系统配置也在开始的几天里也经历了大大小小多次调改，我们自己也是一边摸索一边前进。熟悉系统、优化系统、主备切换、应急演练……，通过亲手制作亲耳聆听，三维声的制作目标也越来越清晰了——提供清晰、准确的主体声源细节，营造均衡、立体的三维空间声场，充分满足观众对于沉浸式观赛体验的主观期待。
由于公共信号质量优秀且稳定，所以此次三维声直播的混录工作并不复杂，而在工作模式与流程优化上的实验意义可能占据了更重要的位置。
参加本次直播的小伙伴们每天熬夜，付出了不少辛苦，但收获也是很多的，抽空还是要多吃点儿好的补补身体。
央视音频和我们的朋友们在CCTV5 App恭候您！
耳机听三维声版世界杯！一！直！到！决！赛！
最后，祝梅西今天好运！打开CCTV 5 App直达球场，听梅西今天说了什么。
