微信扫一扫,关注公众号

  • 科技行者

  • 算力行者

见证连接与计算的「力量」

首页 从侏罗纪公园的一声恐龙咆哮开始,30年来DTS如何营造沉浸听觉?

从侏罗纪公园的一声恐龙咆哮开始,30年来DTS如何营造沉浸听觉?

2023-12-12 22:17
----..---.-...-/--...-.-......./-...-....-..--../-............-.- ----..---.-...-/--...-.-......./-...-....-..--../-............-.- ----..---.-...-/--...-.-......./-...-....-..--../-............-.- ----..---.-...-/--...-.-......./-...-....-..--../-............-.-
2023-12-12 22:17 周雅

作者:周雅

很长一段时间以来,人类一直在追求沉浸感的声音。

所谓沉浸感Immersion,从字面意思很好解释:沉浸,即浸泡,浸入水中,多比喻完全处于某种境界或思想活动中,全神贯注于某种事物。

从古希腊时期开始,露天剧场就利用建筑设计,来增强声音的传播,让远处观众也能听到表演,以此营造沉浸感。而后到了19世纪,留声机的发明,让音乐可以被记录下来,并在不同的地方播放,这是一个重要的转折点,因为它打破了音乐体验的空间限制。但早期的留声机由于技术限制,音质并不理想,无法带来真正的沉浸感。

随后的几十年里,人类就一直在追求更高质量、更逼真、更无损的沉浸感声音。相对应的,听觉技术也从单声道,到立体声,到环绕声,呈现阶梯式递进。而每一次技术进步,都始于一个简单愿望:让人们能够更真实地体验这个世界。

到了现代,早在30年前,当导演斯皮尔伯格第一次听到DTS剪辑过的音效时,几乎从椅子上跳了起来——“我惊呆了”,他回忆说,“传统配乐和DTS之间来回切换,DTS听起来是70毫米的六轨声音。”

要知道在当时,电影普遍用的环绕声音频,是记录在胶片齿轮缝隙中的,空间极为有限,可存储的数据量很小,随着放映次数的增多还容易磨损。而DTS则采用CD光盘,单独存储6个声道的音轨数据,音质自然更好。

也正是那一年,斯皮尔伯格在电影《侏罗纪公园》里采用DTS数码环绕声,影片中霸王龙令人毛骨悚然的咆哮声在影院环绕,让1993年的夏天格外科幻,也让DTS这家公司正式进入公众视野。

从侏罗纪公园的一声恐龙咆哮开始,30年来DTS如何营造沉浸听觉?

《侏罗纪公园》的海报的DTS标志,是最早出现DTS的电影海报

DTS公司成立时,全称为“Digital Theater Systems”(数字影院系统),顾名思义,影院领域是DTS最初立足的根本。后来,DTS的含义变更为“Dedicated to Sound”,表示DTS公司致力于更多与声音有关的技术。而现在,这一内涵再次演变为“Dedicated to Sensational”,这意味着DTS正致力于所有能带来美妙体验的技术。

纵观当代的多声道音频技术格式,DTS的最基本及普及的声道配置为5.1声道,其中“5”代表五个全频声道(前置左、中、右和环绕左、右),而“1”代表一个专门用于低频效果(LFE)的低音炮声道,这种配置为电影提供了环绕声体验。5.1声道带来的环绕声感受,让当时的电影沉浸感立马攀升。如今,尽管出现了更高级的多声道格式,如7.1声道、杜比全景声、DTS:X等,5.1声道配置因其相对简单和成本效益,而继续保持着标志性地位。

从侏罗纪公园的一声恐龙咆哮开始,30年来DTS如何营造沉浸听觉?

DTS三十年里程碑

今年,DTS迎来30周年。DTS 品牌三十周年活动上海站12月8日举行,这是继今年9月的北京站之后的第二站,也是DTS三十周年活动的收官之作。

在活动现场,一个有意思的体验来自「家庭娱乐体验区」,无线环绕声技术 DTS Play-Fi与IMAX Enhanced结合,能以无线方式,一键连接家庭的电视、扬声器、音箱、低音炮等设备。

现场工作人员介绍,DTS Play-Fi具备“无线、无损、低延迟、多房间”的特点,兼容性极高,只要是产品支持DTS Play-Fi,就可以通过Wi-Fi,自由连接不同品牌的影音产品。而IMAX Enhanced是由DTS与IMAX合力打造的影音授权及认证项目,具备惊艳画质、震撼音效、超大画幅的独特优势,索尼、TCL、海信、小米、荣耀等都有获得IMAX Enhanced认证的产品。

从侏罗纪公园的一声恐龙咆哮开始,30年来DTS如何营造沉浸听觉?

此外还有DTS:X Ultra、DTS Headphone:X和DTS SoundUnbound,是DTS专门针对电脑、移动设备和游戏体验而打造的解决方案,致力于精准还原音源方位,全方位增强游戏环境音效感知,打造沉浸式的游戏音频体验。在现场的「电竞体验区」,惠普暗夜精灵9游戏笔记本、飞利浦TAG4106游戏耳机、HyperX Cloud III飓风3游戏耳机、红魔DAO TWS氘锋全场景电竞旗舰耳机、以及罗技Yeti麦克风齐上阵,吸引电竞爱好者围观。

在会议间隙,Xperi公司(DTS 母公司)副总裁、大中华区总经理郎正武接受了包括科技行者在内的小规模采访,带来了公司战略核心、解决方案、生态合作等分享。

从侏罗纪公园的一声恐龙咆哮开始,30年来DTS如何营造沉浸听觉?

Xperi 公司(DTS 母公司)副总裁、大中华区总经理郎正武

专注四个赛道,从声音源头出发,玩出不一样的体验

问:DTS目前的战略方向有哪些?

郎正武:今年是DTS 30周年,母公司Xperi现在专注于4个赛道:汽车、消费电子,Stream(流媒体OS战略平台,即operating system)、传统IPTV。在这4个赛道里,DTS的技术都有覆盖。

纯粹以DTS自身战略来看,首先,会继续走消费电子的道路;其次,把汽车的体验做好、做完整;第三,家庭终端层面,在电视、游戏和电脑终端,继续与内容商合作,把内容做起来,包括DTS Play-Fi流媒体平台。接下来,DTS会更积极地跟上游合作,音乐平台、内容制作,更深入地跟创作者、导演、工作室在源头把内容做好、完善好。

同时,DTS希望在影院端继续耕耘。因为影院带来的,是对声音的执着,还有多声道的技术创新。从源端出发,才能在终端玩出不一样的体验。

现在的电影行业,从全球市场来看都会趋于持稳,新兴市场对传统市场的影响很大,所以我们也在探索,怎样从UGC市场带入更好的体验进去。可能不一定是直接跟用户合作,可以从一些平台开始,比如B站、TikTok,平台通常会把大家的内容收集起来,做渲染、优化,是否可以在这样的过程中,把DTS的技术植入进去,从而让用户在播放端有更好的体验。

问:DTS跟车厂合作,仅仅只是软件合作,还是也包括芯片合作?

郎正武:DTS一直都在尝试车载业务,持续运营了五六年,由于汽车业务开发周期通常较长,现在我们在洽谈的项目也要2年后才能看到成果,但现在大家也能看到有车厂推出DTS音效。

DTS与车厂的合作最主要是要软硬件同时加载。软件方面,类似于跟家庭影院的合作方式,比如先在高通或者NXP芯片上“跑”通了我们的技术,再跟车厂做软件上的配合,所以芯片和软件要一起做。

比如人脸识别,算法归算法,但它对Camera(摄像头)的要求也很高。其实我们在做技术销售时,有一套Reference Design(参考设计),我们会跟客户说,建议用什么样的摄像头来捕捉车内状态,碰到一些暗光环境但仍要保持高精准度人脸识别,所以我们会跟车厂做硬件的搭配,但是我们不销售硬件,以纯软件销售为主。

在海外市场,DTS与宝马两个月前做了两个类别的合作:一个是针对声音的体验,叫做DTS AutoStage,纯粹是把声音和内容互动带进宝马车里;另一个是针对安全性的体验,叫做In-cabin Monitoring System(座舱监控系统),它可以侦测驾驶状态,是把安全跟车内娱乐结合在一起。

我们是目前唯一一家软件公司,在汽车领域可以提供这两个同时配套的解决方案,这是一个令人兴奋的消息,我们相信有了宝马加持,很快会有其他车厂跟进。

问:DTS与一些国内视频平台都有合作,如爱奇艺、腾讯、优酷等。未来咱们有可能与国内的音乐平台合作吗?比如QQ音乐、网易云之类的。

郎正武:DTS与QQ音乐其实算是好老朋友,很早就有一系列的合作。现阶段不瞒您说,我们也有计划跟音乐流媒体平台合作,目前不太方便透露。

但最主要,还是希望能够从「端」去引进「多声道」的制作,可以有多个播放源,比如家庭、PC、手机,最终到车载,来打造一个新的多声道声音体验。

混音师好比是画家,DTS给他们更多颜料

问:DTS有没有跟音乐制作人合作的规划?

郎正武:DTS与混音师一直有接触,他们好比是画家,DTS给他们更多颜料,帮他们把画作创作得更丰富。

我们不会毫无头绪,相对会选择与有影响力的混音师合作,因为他们会把DTS的技术带到业界,把电影混音、多声道混音技术普及地更好。

在国内,北京、上海大概有约10家后期制作室做了DTS:X多声道混音的布置,所以合作比较稳定。

Xperi大中华区市场总监Daisy:国内比如中影等录音棚,都是DTS的合作伙伴。今年票房前十的电影里,有八部都有DTS:X,而且大都是中国的混影棚制作。

【编者按】DTS:X技术是一种开放式的音频编码,同时也是基于声音对象的多维音频技术。与现有的环绕声系统不同,DTS:X音频不再受到固定位置的扬声器布局或具体声道信号的束缚,它能根据回放环境的不同,进行灵活调试,从而获得在该环境下最佳的音质表现。

问:刚看到“DTS沉浸式音频制作”场景,里面就一台笔记本、一个耳机、顶多再加一台PC,是否现在个人只要几台设备,就可以组成小型工作室,去进行音频制作?

郎正武:往年来看,沉浸式音频制作,都是以专业角度来看待的。近些年,每个人都可以是创作者,每个人对自媒体行业的兴起都有参与。我们希望能够打造一些工具,让更多人接触到「多声道制作」。

现在很多视频的制作,多以剪辑为主,可以做的各式各样;但音频的制作,还停留在人声加点背景音乐的做法。其实声音的东西很好玩,很能够让你的观众沉浸到你想表达的内容里去,绝对会加分。

像是你刚刚提到的“沉浸式音频制作”设备,如果说在传统混音室里,必须要有七八个音箱,整套设备对于普通内容创作者来说,难以接触到。我们希望,透过我们这样相对简约的设备,用耳机就能很好地监听、然后还原声音,不过在这之前还是有很高的教育市场成本。

从侏罗纪公园的一声恐龙咆哮开始,30年来DTS如何营造沉浸听觉?

“DTS沉浸式音频制作”体验区现场

问:是否有可能是,不一定要收录基于对象的音频,可能只是多声道,然后通过技术把它做成一个基于对象的音频?

郎正武:我们有个技术,它可以抓取任何一段声音,声音里可能有多种元素,它可以从这个声音段里抓取一个特定的元素出来,专门做调整。这个技术以往叫做“人声补强”,做法是抓取这一段的音频频率,当把它提升时,可能其他所有的噪音杂音都同时被提升。

我们现在的做法是Voice Separation(人声分离)或Source Separation(声源分离),用AI算法把这段人声抠出来,像是抠图,但不影响其他的声段,抠出来之后能做什么,想象空间就可以很大,比如可以直接换一种语言;或是把声音调高调低,而不影响其他的观影活动;或是套用一些采样(sample),就能更容易做结合。

用一个技术,把内容串在一起

问:IMAX Enhanced硬件方面的合作日趋成熟,那么内容合作方面有哪些进展?

郎正武:IMAX Enhanced是DTS在国内一个重要项目,我们获得很多厂商的支持,像TCL、海信、小米、飞利浦等。在内容端,我们目前在爱奇艺、腾讯、优酷等平台上有IMAX Enhanced的内容专区。

IMAX Enhanced目前的内容产出周期较长,由于受到疫情以及前阵子好莱坞罢工的影响,片源产出较少,所以目前主要是国内的内容库,但好在,近期国内在放宽海外影片的进口,所以接下来的内容库会增加。

问:DTS Play-Fi的差异化优势是什么?

郎正武:在产业端,你今天选择DTS的生态,用户可以买其他各家的音频产品,可以是三星的、LG的、海信的、TCL的,只要支持Play-Fi,都可以“串”在一起。再加上我们的迭代更新是跟着产业走,会保持开放沟通。如果你只是一家独唱,你自己也会受限。

在用户端,卖场自然也希望用户有多个选择,如果用户看准DTS Play-Fi,他可以选择多家产品,这也是我们的一大优势。

问:关于商业影院,除了DTS:X临境音影厅,为什么现在又推出新的Surround Cinema?

郎正武:我们当时在做DTS:X时,不仅内容端要做全新创作,硬件端也必须要能支持高声道,所以在影院端要投入的成本也挺高。几年运营下来,我们发现有很大一部分影院无法加装天空声道,因此在现有的5.1声道环境下,怎么确保更好的音效?

于是我们推出了DTS Surround Cinema,这是跟影院、行业讨论后推出的新产品,还是希望能够透过我们的调试,确保在没有天空声道的情况下,观影者可以体验更好的电影效果。

分享至
0赞

好文章,需要你的鼓励

周雅

Miranda
关注科技创新、技术投资。以文会友,左手硬核科技,右手浪漫主义。
推荐文章
----..---.-...-/--...-.-......./-...-....-..--../-............-.- ----..---.-...-/--...-.-......./-...-....-..--../-............-.- ----..---.-...-/--...-.-......./-...-....-..--../-............-.- ----..---.-...-/--...-.-......./-...-....-..--../-............-.-