空间计算时代:虚拟音乐活动的新纪元探索

发表时间: 2024-08-13 15:48

文/VR陀螺


数字艺术发展至今,人们不再满足单纯的听觉体验,享受音乐的方式正在从“被听见”向“被看见”转变,虚拟音乐演出类的活动由此展现出了鲜活的生命力,并在游戏、线下沉浸式演出以及XR内容中创造了无数场视听盛宴。

Ipsos的一项调查数据显示,46%的Z世代和千禧一代对参加VR或虚拟世界中的音乐会的兴奋程度与参加线下活动一样高。而虚拟音乐活动是XR企业非常重视的一大娱乐领域,如今Meta每月都在Horizon Worlds中与不同的艺术家和音乐人合作举办VR音乐会,苹果Vision Pro发售之初就宣布专门为音乐人录制了180度视域的8K 3D视频《艾丽西亚-凯斯:排练室》,作为探索沉浸式空间体验的开门砖。

互联网流行文化和潮流的风向变化极快,虚拟音乐活动这一板块也衍生出不少细分领域:虚拟演唱会、虚拟蹦迪、虚拟派对等具有明确属性但功能不同的活动。

真正让虚拟蹦迪脱离小众走进人们视野的则是红极一时的《修勾夜店》(单日人流量可达数万,巅峰时人气值超过60万):一只在互联网“家喻户晓”的meme小狗cheems头顶冒出一句“蹦起来!”,然后丝滑进入舞池,与另外几万只一起参与这场赛博蹦迪的修勾(小狗)一起在直播间舞动。不禁令人遐想,如果能在VR中为自己的虚拟形象打扮一番,真正来一场沉浸式虚拟蹦迪岂不是更好?


后疫情时代的虚拟音乐活动


在元宇宙爆火前,虚拟音乐演出就已经先吸引了不少人的视线。2019年2月,Marshmello举办了《堡垒之夜》的第一场虚拟音乐演出;2020年4月,Travis Scott也在《堡垒之夜》举办虚拟演唱会,游戏同时在线人数的纪录一度高达1230万;2020年11月,《Roblox》和美国歌手Lil Nas X合作举办了四场虚拟演唱会,吸引了全球3300万名观众在线观看……

从此之后,受到新冠疫情的影响,社交活动减少而宅家的机会变得更多,与此同时,文旅行业也在积极“自救”,瞄准了同时期被热议的元宇宙,也正是线上演唱会、虚拟音乐会和虚拟演出等线上活动占据流量巅峰的时候。

被迫保持线下距离的消费者将不少有线下接触、多人聚集的日常活动转移到了线上,进一步助推虚拟蹦迪/虚拟音乐会的快速发展,可以看到当时有不少类似属性的应用受到关注。

《VRChat》

例如,知名社交应用《VRChat》,其包容性非常强,玩家能通过手势、表情和表情符号表达自己。与朋友参加聊天、写作、绘画、雕刻和观者视频等活动。《VRChat》的玩家们如果想要蹦迪,只要提前设定好自己的虚拟形象(有能力的玩家可以加上动捕设备)之后自由选择各种舞蹈房,也可以进场单纯听歌,或者随着音乐与身边的玩家一起跳舞。

《Party On》

另一款使用虚拟形象进行互动性卡拉OK的应用《Party On》,同样为当时不便出门的音乐爱好者带来了不一样的体验,数百首流行歌曲加上各种面部动作姿势,玩家能与其他用户进行线上音乐派对,到舞台中央演唱或是在台下为演唱者欢呼。该游戏已上线Quest平台,目前仍是App Lab应用。

《MYX》

《MYX》是一款VR夜店主题的应用,玩家可以在App Lab中下载体验,该应用提供了多种音乐活动场景,包括露天演唱会、酒吧等风格夜店和设计时尚的夜店。目前除了预设的背景音乐,《MYX》还会举办活动邀请真人DJ加入演出,为玩家与其他EDM(电子舞曲)爱好者的交流提供了机会。

《AmazeVR Concerts》

苹果Vision Pro上市不久后,180度全景虚拟演唱会应用《AmazeVR Concerts》刷新了沉浸式看演出的体验,特点是在虚拟空间中观看真人演唱会,该应用所提供的视频清晰度远超目前的主流VR头显,让人感觉歌手仿佛就在自己眼前歌唱,用户能做出手势为歌手应援,据称后续还会添加其他音乐人的演出内容。

粉丝们会积极争取看到喜欢的音乐人演出,无论是哪个平台还是哪场线下活动,重视体验的音乐爱好者会希望能在虚拟空间中获得更沉浸和更高质量的视听效果,还有一些希望能与更多人进行交流和互动的社交达人,他们会是虚拟演出的核心受众。

可以看出,即便是身处后疫情时代,虚拟音乐活动的应用层出不穷,无论是在虚拟空间观看真人演出的虚拟演唱会,还是更注重社交互动的虚拟派对类的应用,消费者仍然对以虚拟形式参加演出/活动感兴趣。音乐产业的格局已然发生变化。


Vision Pro沉浸式虚拟音乐类应用领域仍有空白


如今VR虚拟演出等各类音乐活动已不是新鲜事物,但上述提到的部分应用,或是受限于软硬件的技术能力,在可玩性和交互性方面有所欠缺,或是在场景、人物等美术设计上不够吸睛,很难带给用户更加新颖和舒适的体验。

相比于其他XR设备,苹果Vision Pro本身具有强大的硬件优势,以及流畅的手眼交互和更优秀的3D渲染和音效技术,为影视娱乐、办公、赛事直播、教育、工业、医疗、设计等多个领域带来更丰富的感官体验。苹果希望有更多的开发者能够加入到空间计算生态的建设中,根据苹果官方数据,目前专为该设备打造的APP数量已达2500多款,而兼容的iPhone、iPad应用也超过150万个。

陀螺研究院:《Apple Vision Pro空间计算内容生态报告》

有了Vision Pro的硬件能力及其空间体验的优势,或将进一步改善各类虚拟活动的体验。尽管Vision Pro的应用有不少,但大多数内容的质量参差不齐,Vision Pro中更多的是工具类、效率类应用,而娱乐类应用也多是流媒体软件和播放器等视频应用。

除了前面提到的代表性虚拟演出应用《AmazeVR Concerts》以外,能充分结合Vision Pro能力并为用户带来空间体验的沉浸式音乐应用在Vision Pro中却十分稀少。

今年的ChinaJoy,笔者注意到本届参展的XR相关企业并不多,但仍然能看到创业团队的身影,如XR大空间体验、虚拟数字人(动作捕捉)、VR游戏、周边外设、AI等诸多不同品类的产品和互动体验。正是这次出行,笔者在现场发现了一款全新的虚拟音乐类应用《YAZONE》。

据介绍,这是一款由元梦星球推出的空间计算应用,玩家可以选择沉浸式布景、女团和音乐,从不同角度欣赏她们跟随音乐舞动的身姿,本作目前包含2个舞台、15首歌。元梦星球主策划刘晨表示,产品的第一个版本预定将于8月-9月正式上线App Store,届时还会继续增加舞台和歌曲。

随着与《YAZONE》应用开发团队的深入交流,笔者了解到元梦星球团队是归属于美图公司旗下的空间计算产品线,目前正专注于空间计算的产品线开发,本次参展也是为了能向更多用户展示其“空间计算+UGC+AI”的阶段性产品成果。

这款十分强调视听效果的应用与Vision Pro能碰撞出怎样的火花?笔者通过对《YAZONE》应用的体验,注意到了该应用背后蕴藏着的沉浸式娱乐场景潜力和愿景。


空间计算时代下的新音乐应用:多感官、高维度、强沉浸


说起夜店,大多数人都会联想到贵价酒水、炫彩灯光以及震耳欲聋的音乐,或是在卡座上小酌,或是在舞池中摇摆。除了这种类型的夜店,实际上还有很多正在转型成Club或者Livehouse等更注重音乐风格和艺术性的夜店。尽管形式上有所不同,后疫情时代的夜经济与音乐活动仍是刚需。

夜店是如今年轻人社交需求和追求潮流音乐及文化的一种方式。

据元梦星球的主策划刘晨表示,Vision Pro的空间计算能力,结合高精度和高仿真的物理模拟效果,与专业舞者的精湛演出,以及轻度在线互动功能,《YAZONE》在音乐、视觉的同步融合和个性化定制方面更优于其他平台和产品。其产品经理dylan介绍,项目组有来自潮玩/音乐/影视特效等领域的专业人士,让“专业人做专业事”,大家对视觉和听觉的“通感”有着大量尝试和积累。

Vision Pro扎实的硬件基础遇上经验丰富的团队,该应用能以高质量的音乐、舞美、视觉设计等方面的输出将更动感、真实的夜店场景在虚拟空间复刻出来,将音乐元素“具象化”。

音乐导演Zeta表示:“《YAZONE》通过虚拟社交打破真实社交给人们带来的恐惧和疲惫,给现实中不敢去不愿意去真实夜店的人群多了一种选择,得以肆无忌惮地享受夜店的潮流音乐。这种可能性也拓宽了线下音乐节的思路,在听到CJ期间的夜店调研后,我发现这两组人的边界也许并没有那么明晰。没有人不喜欢音乐,只是空间限制了他们,所以我们要打破空间。”

《YAZONE》即将上线Vision Pro,我们作为用户还能体验到哪些内容?

元梦星球的项目经理大狗表示:“我们一直希望音乐的体验不止在听觉层面,在视觉冲击力和表演张力上我们也力求让用户耳目一新。目前版本,用户可以选择自己喜欢的场景,并欣赏不同歌曲在场景中的华丽表现,场景中的伴舞等角色也可以自由切换。用户在场景中也可以切换不同场景位置,体验不一样的效果。”

《YAZONE》的灵感来源于团队头脑风暴产生的风格迥异的“脑洞”以及音乐秀场等跨越时空的艺术作品。而元梦星球的另一款UGC工具《梦之像》为《YAZONE》提供了大量的角色、场景美术资产,同时《梦之像》的UGC功能可以满足产品个性化需求,早在UGC主体功能的研发阶段就做了API接口的封装,用以快速嵌入各种APP,两者具有一定程度的互通性。

《梦之像》也曾为多个艺人以及艺术团队生成了他们的虚拟形象,并在视频平台持续运营。比如《YAZONE》登台的女性领舞,就是来自于喜人音乐的虚拟艺人南流景,她也于去年作为《梦之像》产品的看板娘登台了美图影像节大秀舞姿。

20世纪70年代,DISCO音乐的迷人节奏吸引了全球音乐爱好者,这类充满感染力的音乐也开始成为夜店文化的符号,随着时代的变迁,90年代兴起了全新的EDM音乐,为夜店音乐注入活力,音乐导演Zeta则希望为用户带来更纯粹的音乐盛宴:“在后续的版本里会致力于覆盖经典的舞曲种类,除了当下流行的夜店电子舞曲风格之外,回望时间长河,我们期待把各个年代优秀的音乐和舞蹈还原到这个产品的舞台中来。”

在《YAZONE》中用户能随时调出DJ台,控制音乐的音量、视角切换、还可以打碟。主策划刘晨希望通过尽可能简单的手势设计,去还原真实DJ的操控体验。期望能用这种设计让每位用户拥有舞台之中的掌控感,亲手塑造引领《YAZONE》世界的节奏与氛围。

元梦星球的主程序宜洋还向笔者介绍了一些在应用开发和设计上的考量:“在技术上,为了压榨表现我们放弃了使用visionOS原生UI。在开发的过程中需要使用大量的自定义渲染效果,RealityKit自定义渲染的模块目前支持MR有限的渲染特性,空间计算相关的技术则无法运用到VR场景内。故我们选择使用了Unity引擎的XR相关功能去实现交互。”

考虑到形式差异,笔者也好奇线上蹦迪的用户和会去线下夜店的人群有怎样的交集?有哪些体验和功能是能够借鉴线下夜店的?

项目经理大狗强调,有借鉴线下夜店的基础氛围以及部分现场效果,并收集一些线下参与者的想法,将其转换成线上可体验的内容。但这是不简单的移植,项目组更希望在保留原有气氛和效果的同时,制作一些在线下活动无法表现或者很难表现出的东西,以此丰富用户的体验。

他补充道:“在这次CJ期间,我们受邀参加了多个夜场活动,其中有DJ佩戴AVP使用《YAZONE》与台下观众互动的有趣桥段,很有赛博蹦迪的氛围。CJ结束后,得益于这样的曝光,我们也收到了海内外音乐节、夜店的一些邀请,这部分反馈是非常令人意外的。”

活动中的爱好者也在社交媒体里积极分享着来自现场的影像

可见,走在音乐潮流和审美一线的元梦星球将目标放得更远,《YAZONE》不只是要做Vision Pro的赛博蹦迪应用,更是要做全新的空间计算音乐应用。


写在最后


除了线上体验,《YAZONE》还有更多可发挥的空间,由于其较高的自定义方式以及定制的可能性,应用到歌曲的MV、专辑的概念设计等等创意领域,或是Livehouse、演唱会、音乐节的视觉呈现以及活动整体包装等领域,具有广泛的应用场景。不难看出,《YAZONE》对UGC的创造力表现和发展环境充满信心。

聊到年轻群体和UGC,产品经理dylan肯定了现在的用户创作环境:“当然UGC也有不少挑战,有些创作者可能审核敏感度低,作品质量参差不齐等等。我认为这些问题的关键,在于厂商能否提供一套完善的编辑工具帮助创作者规避审核的风险,同时还能降低创作时技术向的难度,让他们专注创意实现。以及一个长期的社区计划,能把玩家的优秀作品变成官方的一部分,用共赢的模式来持续激励创作者。”

从赛博蹦迪应用走向空间音乐应用,《YAZONE》的野心和愿景清晰可见。随着技术的发展,空间计算/MR头显以及近段时间爆火的AI+AR智能眼镜等,这些可穿戴设备的普及,将进一步激发内容生态的活力。

在AI技术融合方面,元梦星球也做出了不少尝试。主美术云峰表示:“《YAZONE》中常见的有分轨的效果控制,前期的一些概念选型,问答解决一些技术问题等等,有使用AI作为工具和开发辅助。但作为一家极富AI基因的公司,美图集团有着多条AI生产及产品线,在上面提到的UGC工具梦之像中,我们也接入了美图奇想图像大模型Miracle Vision工具链WHEE,它的支持使得梦之像这一UGC工具不仅能够作用于3D资产层面,也可以通过积木搭建的简单玩法就可以渲染出堪比平面海报的2D效果。”

空间计算是全新的领域,对于很多用户和产品开发者来说都是很大的挑战。

主程序宜洋认为:Vision Pro的空间和环境的感知非常令人惊叹,空间定位,相对尺度,环境光感知,阴影模拟,材质反射等,这些数据能够让虚拟物体更真实地融入现实空间。虚拟物体的真实反射效果和阴影投射效果等表现,会大幅地塑造和再定义空间计算下的VR/XR/MR。

每个时代都有追逐潮流和最新娱乐方式的音乐爱好者群体,主策划刘晨向笔者表达出他们还不满足于现阶段的完成度,改变虚拟音乐形式的决心:通过CJ现场用户的直观反馈,更确定产品的开发和优化方案,不仅限于新增多人交互玩法、变更交互手势等功能,同时团队会持续与用户沟通交流。笔者期待有更多的虚拟音乐类应用能与人们的创意产生更有趣的“化学反应”。