11月6日,腾讯WE大会在北京召开。被称为数字艺术家的真锅大度,受邀参加此次活动。
2016年里约奥运会闭幕式上,一段表演秀让AR技术成为人们热议的话题。当时雷锋网曾发文《“东京八分钟”让AR成为热搜,那么它是怎么实现的?》,介绍了这段AR秀的幕后团队,但至于电视机前观众和现场观众看到的场景是否一致,给我们留下了疑问。而此次活动期间,真锅大度向我们解开了谜底的真相,并讲到他本人对于AR和VR的认识,以及他们所做的尝试。
活动上,真锅大度介绍自己是媒体艺术家、程序员、设计师,最早他的专业是数学,之后才进入艺术及软件领域。他们的团队平时在创作上会做很多新的尝试,例如在身体上装一些传感器,观看它是怎样运作的;用照相机探索一些技术创新;用AI技术进行创作。
加入CG的面部效果
现场他展示了5年前,他们在AR技术上的尝试。比如在自己的照片上,加上CG,再用照相机去拍,最后结合出新的图片。之后,他们利用相机进行无缝跟踪,利用3D扫描技术与CG将结合。最典型的例子是他们在美国西南偏南音乐节上,为Perfume做的演唱会,观众能看到现实和CG不断转化的画面。
现在,AR是他们的主攻方向,也会用无人机做演出。刚开始,先用三台无人机,让演员一起来来跳舞,随后,室内使用24台无人机。真锅大度坦言,他们创作的时候并没有摄像最后的成品,先是尝试,后来慢慢增加无人机数量。他们想把无人机和人进行结合,并且根据人不同的动作,无人机也能够跟随动作来活动。
自己组装的无人机设备
无人机融入MV中
最后的演示中,他们将AR技术,无人机拍摄和CG,以及演员的舞蹈相结合。
他表示,“AR技术非常有意思,最开始设想的东西和最终作品是有很大的 不同。”未来,他们还会加入AI技术,进一步发展AR。
We大会前,雷锋网对这位先锋艺术家进行了采访。对于今年能够参与里约奥运会闭幕式的设计,他感到很荣幸。”东京都组委会邀请我作为一个成员去的,是我为东京都和日本国家政府工作的一个内容。“
闭幕式上,电视机前和现场的观众看到的效果完全不同。
“电视机前,大家看到的AR效果,可能会感到非常不可思议。如果我们在现场不做一些非常酷的表演,气氛不可能起来,我们也考虑了非常现场的效果。”
由于签订了保密协议,真锅大度无法详细地介绍不同之处,但他透露,现场制作的效果他非常满意,“有发光的像胶片似的感觉,地面上演员组成的空间,是通过电视看不到的。”
不管是什么样的表演,真锅大度总会让表演者们全力表达想实现的效果。
“一般跟我合作的演出人员,我都会让演员们主动说,随便说,你想达到一个什么效果,不要考虑任何技术上的障碍。我不希望因为技术上的障碍而遏制演员们自己的想法,希望能够100%用我的技术配合他们的想法。”
AR的运用给以往的表演带来了新的演绎方式。在AR与艺术的结合方面,真锅大度表示,令自己感兴趣的部分在于图像处理技术领域。“比如,现在我眼前看到的桌子、杯子,它的图象处理技术还是比较单一的。今后的话,可能会走向很近似于人工智能的方向。采用这样方式去处理的话,肯定会有更有意思的作品出来。”
“AR技术的话,实际上主要还是照相机,照相机实际上就是照出来的图象,在它的上面再增加资讯信息,然后成为一个AR技术。过去,都会固定一个照相机,之后再把这些你想要的内容放入资讯。现在,等于照相机可以不固定在那儿了,你可以用智能手机这样全视角的移动。之后,这里面的图象桌子、杯子也都可以跟着你进来。
接着再下一步发展的话,就是人工智能的部分。可以告诉这个计算机,这有一个桌子,桌子上是有杯子的,旁边有一个人在打电脑。这个技术实际上不是一个非常远的技术,现在我们已经可以实现了。通过人工智能去拍摄这些图象,再增加信息的话,最终目的还是要做出来这些内容作品,那时候我想做出来的东西会很有意思。”