在刚过去的七夕节,单身汪们想必已经生吞了票圈不少狗粮,但是,慢着,七夕什么时候成了秀恩爱节了?
天地相隔的牛郎织女只有在七夕时能通过鹊桥相见,这不是一场大型异地苦恋大剧吗?
当然,在高科技的今天,神话剧已经演变成了飞机、火车、汽车、轮船、手机等交通工具和通讯工具的大戏。我们更期待的远距离见面方式是这样的:
《星球大战》莱娅公主利用3D投影向欧比旺求助
虽然相隔万里,也能立刻全息投影出现在对方身边。虽然目前还不能不靠任何设备实现这样的全息投影,但是动态3D重建技术已经发展起来,利用AR/MR的头盔设备来呈现。
雷锋网在前不久刚结束的2017SIGGRAPH计算机图形学大会上,邂逅了一家从清华走出来的创业团队Owlii。在会场,他们展示了“全息传送—三维人物的重建与传输技术”,并且通过手机AR做到了实时互动。
人们可以通过手机AR看到身处北京的工程师被“全息传送”到美国洛杉矶SIGGRAPH现场,在会场中走来走去。
雷锋网参会人员在现场与Owlii建立了联系,会后,雷锋网在北京Owlii办公室进行了专访。
(从左到右为:Tech Lead赵一开;CEO温子煜;CTO陆垚)
实时全息传送,压缩技术是关键
走进Owlii位于五道口的办公室,雷锋网一眼看到他们搭建了很多摄像头的摄影棚,他们就是在这里实现动态三维模型的重建。据CEO温子煜介绍,他们根据需求会采用4-20个数量不同的深度摄像头拍摄,之后用算法进行处理,将全息媒体流编码压缩。拍摄人物不需要绿幕,拍摄范围可达10平米。
雷锋网曾报道过微软在去年也实现了全息传送(Holoportation)技术。从技术上来看,Owlii有什么比较优势呢?
温子煜说,“在实时这个上面,目前就只有微软和Owlii做到了。”在SIGGRAGH的展示会上我们看到的用手机观看被“全息传送”的人,这个技术是实时的,同时也要依赖于压缩技术。“去年,微软做实时的传输需要1Gbps的带宽,今年他们做到了50Mbps,而我们将实时传送的全息媒体流压缩到了10Mbps,离线的仅为2.5Mbps,仅用手机4G LTE的无线网络就可以实时加载和交互”温子煜认为,“虽然压缩的同时要保持图像质量很难,但是单说压缩到这么小,就是很难的事情。”
温子煜在现场让工作人员进入到摄影棚,用手机展示了他们的实时三维重建与传输效果,工作人员站到摄影棚,手机上就出现了实时的影像。压缩与图像质量息息相关,雷锋网注意到他们的精度还不错。
我们先来看看Owlii自己拍摄的应用视频吧。
把自己的3D形象放在老板的头上来撒气,迟到了向女朋友亲自磕头认错,这些场景让人忍俊不禁!这也展现出Owlii目前做的事情,他们利用离线的动态三维重建技术,结合了手机AR,与广告商、影视制作生产内容。
三维重建这种技术最早运用于电影特效,但是温子煜并不只是将他们自己定位于影视技术。他认为“三维动态重建和传送技术是跟照片和视频一样等价的媒介,以前照片和视频能做什么,都可以换成3D的形式,以前拍照片来记录自己美丽的时刻,现在用3D重建来全方位完整记录场景,保存回忆,以前视频可以做远距离会议,现在3D重建和传输可以让你真的出现在会场。”其实总结起来,就是记录呈现和通讯社交两个关键场景。
在对实际场景记录呈现方面,三维动态重建是一种新技术形式。3D电影只是一种利用双眼视差造成的屏幕之上的立体效果,VR视频目前大部分是通过360度的视频拍摄和拼接技术,在VR中你其实是从摄像机的机位去看周围的景象的,不能自由挪动位置。而三维动态重建的方式是完全重现一个场景。
英特尔在美国超级碗上对整个球赛现场做了三维重建,当你用VR头盔去看这个内容时,你可以任意切换你的观看点,可以选择任意的观看位置,也能把自己变身成为其中一个球员去融入比赛。
在社交方面,温子煜认为人物是社交和展现的关键。而Owlii目前侧重的是人物的动态三维重建,这也可以解决目前VR中人物只能以虚拟替身的形式出现的问题。温子煜“我们最后是要做社交的,这个东西做到最后,就是telepresence”。
目前,苹果有ARKit,谷歌也刚推出了ARCore,2018年想必是手机AR的大年。Owlii的规划也是先聚焦于手机AR,将3D人物与实际场景结合,为行业提供内容,当然他们的内容也可以用在HoloLens和其他VR头盔。而他们下一步的规划是推出基于VR/AR头显的远程会议解决方案。目前,他们正在改善技术,期望做到质量越来越好,超越视频会议;改进速度、间减少计算资源;减轻设置的难度、深度摄像的数量。
据介绍,现在使用的设备需要几万美元的成本,而他们期望通过集成能将成本降低至1000美元,体积缩小到能够商用。但是在雷锋网看来,要解决社交的问题最起码动态三维重建与传输的技术要做到消费级别,是一个比较长远的发展。
Owlii 于2016年5月份便获得了来自顺为资本,美国中经合集团、鼎翔资本的150万美元天使轮融资。目前已经敲定新一轮融资,未透露具体金额。