漫聊科普 | 和邓丽君在元宇宙的街头走一走_风闻
栗子蘸蜂蜜-漫聊:生活在树上,始终热爱大地,向往天空。2022-01-03 22:10
漫聊科普:「虚拟人」又火了
2021年的最后一个晚上,「虚拟人」又迎来一波讨论热潮。
江苏卫视跨年晚会上,通过虚拟技术实现邓丽君与周深对唱。
来源:江苏卫视2022跨年晚会
虚拟邓丽君(Virtual Teresa Teng)的技术团队来自数字王国(Digital Domain),这是一家著名的特效公司,多次斩获小金人。数字王国设有“虚拟人”经纪部门,艺人包括美国、华人圈的经典明星,目前已与邓丽君、梅艳芳家属签了虚拟肖像权。
在周杰伦2013“摩天伦”巡演台北站,虚拟邓丽君首次亮相,与周杰伦合唱《你怎么说》《红尘客栈》《千里之外》。
来源:数字王国
在之后的“纪念邓丽君逝世20周年虚拟人演唱会”、“邓丽君·传奇全息演唱会”、“经典咏流传”等演出和节目中,虚拟邓丽君多次登台。
「虚拟邓丽君」是如何诞生的
呈现一个屏幕可见的虚拟邓丽君需要虚拟数字建模+实时动作捕捉
虚拟数字建模即根据邓丽君生前照片和影像资料采集外形特征,构建三维模型。
实时动作捕捉是有人穿上传感器进行相应的表演,摄像头对这个人(又叫中之人)的动作和表情进行捕捉。
将捕捉数据赋到三维模型上,就有了会动的虚拟形象。
接下来,还差声音。江苏卫视跨年晚会中邓丽君的歌声,是由歌手陈佳配唱。目前的AI技术还不能很好地生成邓丽君的歌声。
如果想在现实空间中裸眼看到虚拟邓丽君,还需要通过全息投影技术将虚拟形象投影出来。
2019年“经典咏流传”节目中通过全息投影呈现虚拟邓丽君
来源:央视《经典咏流传》
「虚拟人」有哪些种类
按照驱动方式来分,虚拟人可以分为「真人驱动型」和「智能驱动型」
虚拟邓丽君是由真人驱动的虚拟人,动作和表情来源于真实的人。这一类虚拟人互动感更强,多应用于泛娱乐领域,大部分虚拟偶像、虚拟主播都是真人驱动型虚拟人。
另一类虚拟人,是由人工智能驱动的、真正自主的虚拟人,主要用于服务领域,比如微软小冰。
如果按虚拟人原型来分类,可以分为「传奇」、「在世」和「创造」
「传奇」就是像虚拟邓丽君这样,“复活”已故名人,类似的例子还有虚拟马丁·路德·金、虚拟迈克尔·杰克逊等。
虚拟马丁·路德·金重现《我有一个梦想》演讲
来源:数字王国
「在世」即给自己打造一个虚拟数字替身,比如以撒贝宁为原型的小小撒。
撒贝宁与虚拟主持人“小小撒”
来源:央视2019网络春晚
「创造」就是完全没有原型的,像洛天依、翎Ling、AYAYI。
「虚拟人」和「元宇宙」是什么关系
刚刚过去的2021年被很多人称为元宇宙元年,元宇宙是一个与现实世界平行的空间,人通过戴上AR/VR设备进入这个空间,虚拟技术给人提供沉浸感和临场体验。
在元宇宙中,每个人都需要一个虚拟化身来代表自己,这个化身就是以自身为原型的「虚拟人」。
尽管距离理想中的元宇宙实现还有非常遥远的距离,但虚拟人作为其中一环,目前有更多可创造性。
而等到元宇宙真正建成之际,我们是否可以跟虚拟邓丽君在元宇宙见个面呢?