新音乐产业观察原创文章，未经授权谢绝转载

作者 | 朱力克

这两年，随着元宇宙、虚拟现实等新技术的发展，线上虚拟演唱会也逐渐频繁地出现在大众视野中并受到追捧。新技术的引入，确实为在线演出带来了全新的视听体验，一定程度上增强了观众的现场感和参与感。

去年电视节目《The Voice》的压轴表演中，BTS成员在舞台上瞬间复刻出真人分身，与Coldplay进行同台演出，这个效果瞬间惊艳了所有观众。

这背后，则是一项名为体积视频（volumetric video）的技术。和以往常见的计算机生成的虚拟艺人不同，体积视频技术能够在舞台上呈现演员的真实分身，100%还原真实的动作和表情质感。

体积视频已在全球掀起一股潮流，但在国内一直没有很好的应用成果。直到不久前，快手与珠海普罗米修斯视觉技术有限公司（简称普罗米修斯视觉）采用体积视频技术打造了人气主播陈逗逗的线上演唱会，这是国内首个元宇宙真人虚拟直播演唱会，也是首次将真人形象应用至元宇宙的创新尝试。

真人形象走进虚拟直播

8月27日晚，快手人气主播陈逗逗开启了一次虚拟演唱会。虽然这是首次直播，但在短短的30分钟内，观看人数突破3400万，在线人数达到100万，跻身黄金时段全国直播榜单第二名。

和此前大多虚拟演唱会不同的是，直播中的陈逗逗看起来完全是真人模样，但实际上她并不是真人实时出镜，也不是通过数字建模、动作捕捉生成的虚拟形象，而是普罗米修斯视觉利用体积视频采集技术，高效捕捉陈逗逗在真实世界中的三维动态数据，生成体积视频，精确还原她的动作神情。

最终灵活应用于各种场景中，呈现出明星本人带领观众在中国风的山川河流乃至群星璀璨的太空宇宙中遨游的效果。

不仅如此，此次体积视频技术的应用还丰富了与观众之间的互动体验。

观众专属虚拟形象：观看直播的粉丝也能拥有个人虚拟形象，在虚拟世界中自由穿梭，与主播合唱、舞动。

弹幕多形式展示：粉丝发送的实时弹幕，可以在全场景内，有多种呈现方式如3D环绕等。

实时互动：观众实时提问，主播（陈逗逗）可以实时进行回复观众。

与观众共创场景：通过粉丝点赞助力，演唱会的场景、陈逗逗的服装还可以进行实时切换变化，增强了与观众的互动感，共创舞台。

这场极具科技感、趣味性和互动性的直播，激发了用户极高的活跃度。据这场直播测试为虚拟演唱会行业增加了更多可能性。统计，观众的观看时长高于同类型直播4倍，转化率为同类型直播的5倍，打赏频率高达10余倍。这意味着，利用体积视频技术打造的“真人”虚拟演唱会有着超强变现能力，具有无限的价值突破空间。

其实在这场演唱会之前，普罗米修斯视觉在今年初就与芒果TV合作打造了两场让人惊艳的表演。

“小芒年货节”上，新小虎队演唱《爱》时，体积视频技术还原刻画了新小虎队演唱者的分身，实现了巨大分身与本人同台表演的效果，气氛瞬间达到高潮。另外，言承旭演唱《漠河舞厅》时，体积视频技术为他打造了一个3D舞伴，完美地诠释了歌曲中对已逝妻子的想念。

新小虎队《爱》

言承旭《漠河舞厅》

普罗米修斯将陈逗逗演唱会和“小芒年货节”两个案例带到带到行业面前，开启了体积视频这一新技术在国内音乐娱乐领域的落地尝试。体积视频为线上演出增添了一种全新的视觉体验，而且表现力更好、可塑性更强、制作成本和时间成本更低。

全新视觉效果如何实现？

体积视频技术让真人在线上演唱会有更好呈现，使用场景也近在眼前。它具有以下特点：

真实还原：传统视频由每秒30帧的静态画面构成，而体积视频则由每秒30个3D静态模型构成，可以精确还原人物的表情、动作，是现阶段唯一能够完整和有效记录现实世界动态三维影像的方法。

如果将之应用至线上演唱会的制作中，它可以让明星以真实形象跟与观众互动交流，更有助于明星与粉丝、观众的信任建立和情感链接。

完美与场景特效融合：通过体积视频采集技术，可以获得百分百还原度的人物动态模型，能将人物完美融合到任意虚拟场景中。

而且表演场景中所有的动画特效都能直接作用到人物身上，譬如陈逗逗演唱会中雨滴可以落到她的身上、场景中的水能准确地呈现出她的倒影。

采集容易：在特制的专业摄影棚内，通过360度镜头的捕捉，以3D形式录制真人表演数据，数据上传到云端，通过自研算法对数据进行算法重建，最终就能生成体积视频。

制作成本低：比起传统的CG建模动辄几十上百万的制作费用，体积视频每秒仅几百元的价格无疑更具性价比。它的出现将进一步地降低高品质三维内容的制作门槛。

制作效率高：相比以往通过建模塑造虚拟人物的方式，体积视频的操作无疑效率也更高。“小芒年货节”中的体积视频效果从开始制作到最终成品仅用了一周时间。

行业寻求创新突破

随着生活越来越智能化，人们可以足不出户就可以享受各种便利，甚至是观看演唱会。线上音乐演出作为一种新颖的方式已经拥有广阔的市场需求，而疫情当道，更是促成了线上娱乐的大爆发。

从早期简单的真人真场景直播到后来采用虚拟人进行的线上演出，音乐人和娱乐公司几乎试遍了各种可能的线上玩法。也一直面临着市场上褒贬不一的评价。观众、粉丝对虚拟明星的不满意，对场景与虚拟人的生硬融合、无法拥有“身临其境”体验的吐槽，鞭策着行业寻求创新突破。

通过两次体积视频技术的成功尝试而走入大众视野的普罗米修斯视觉团队，为线上音乐娱乐行业提供很好的解决思路。体积视频能有效提升线上演出人物的“真实”视觉效果，增强表演者与观众之间的互动深度和广度，并提高了制作方的制作效率，自由延伸表演者的更多动作和表情。

在体积视频领域已深耕达8年之久，并由中国工程院倪光南院士担任首席科学家，清华大学团队加持，普罗米修斯视觉通过自主研发的技术手段，不但大大降低了体积视频的制作成本，还使得3D重建更精确、传输效率更高，而且支持从移动端到PC再到VR/AR头显的全平台渲染显示。

让真实的明星在虚拟的元宇宙中开一场演唱会，只是第一步尝试。体积视频让现实与虚拟世界的边界更加模糊,让两个世界的深度交互成为可能，为沉浸式的娱乐体验打开了未来大门。

-全文完-