感觉自拍不够过瘾?来看看这个能把自拍照片转制为三维立体头像的应用。
加州初创公司推出智能 3D 模型软件 Loom.ai ,利用机器学习和计算机视觉技术,根据用户 2D 平面照片,生成 3D 头像。该公司表示,该技术能做到:
媲美 3D 扫描的的视觉保真度
头像是可动的,像动画人物一样
算法生成的 3A 级面部肌肉,自动契合不同脸型
头像可以通过嘴巴、眼镜、面部肌肉的活动做出各种表情,表现丰富的情感
去除照片光线。生成的头像可以融入各种光线环境,产生不同光照效果
口说无凭,我们来看看实际效果。开发者上传了一帮名人的照片,给 Loom.ai 站台。结果成了这个样子:
看出是谁来了吗?没错,他们是安吉丽娜·朱莉、马斯克和威尔·史密斯。朱莉的性感厚唇很传神嘛,不过那发型是怎么回事?开发人员们,拜托,憋偷懒,给 Loom.ai 加几款发型成么?识别不了披肩长发。你让广大自拍女神怎么办?
忽略头发的问题,我们来看看眼部细节:
是不是很传神? Loom.ai 不仅可以做高仿真的细节,还能让头像高度虚拟化,成为可爱的动漫人物:
这些 3D 头像可以表现伤心、快乐、愤怒和感兴趣的情绪。但目前也只能这样,Loom.ai 只开发了这么几种表情包。该系统需要一分钟来生成 3D 头像,再另外一分钟生成个性化的面部表情包。它使用 Sketchfab (一个 3D 模型的展示、分享网站)来查看生成的头像,上传头像至 Sketchfab 需要五分钟。
好消息是,这家初创公司正在开发让用户改变头像发型(安吉丽娜·朱莉松口气)、眼睛颜色,添加装饰品(眼镜)的功能,以便把 Loom.ai 应用于3D 虚拟世界中的合成动画场景和动态交互。
Loom.ai 是视觉特效艺术家 Mahesh Ramasubramanian 和 Kiran Bhat 的研究心血。这两人的来头都不小。Mahesh Ramasubramanian 此前在好莱坞梦工厂(DreamWorks Studios)工作,为《怪物史瑞克》、《功夫熊猫》这样的动画电影担任视觉效果督导。而 Kiran Bhat 之前在卢卡斯电影公司,为《加勒比海盗》和《复仇者联盟》做特效。
Kiran Bhat,Mahesh Ramasubramanian 和同事 Akash Garg 的 3D 头像。这么有科技感,不愧是 Loom.ai 开发者。
Kiran Bhat 对福布斯说:“我们认为需要把用户带入到(虚拟空间)体验之中。这意味着,要找到一种把普通用户像电影演员那样数字化的方式(但不能那么贵)。”
于是,他们开发出这款只需要一张照片,就能对整个头部进行建模的软件。机器学习算法会识别照片中的面部细节。至于照片中无法获得的信息(毕竟只有脸的正面),人工智能会自动脑补,进行填充。
随着 Loom.ai 处理更多照片,它会不断进步,脑补面部特征和表情的能力会不断提高。
这项技术仍旧在 beta 内测阶段。公测之后,用户只需要登录 Loom.ai 网站,上传脸部正面照片(谢绝 45° 仰望天空),等待两分钟,就可以获得你自己的、或者你想黑的那个人的 3D 头像。开发者尚未公布 iOS 或 Android 手机端的计划。
Loom.ai 将许可给第三方公司使用,让他们把 3D 头像功能加入自己的平台。事实上,已经有些公司在秘密测试 Loom.ai 。开发者拒绝透露这些客户都有谁——除了 Facebook。Mahesh Ramasubramanian 表示:
“Facebook 有海量用户。如果他们用 Loom.ai 技术来把用户的 2D 头像变成会做表情的 3D 头像,我们会很高兴。 ”
随着 Oculus VR 头显的热销,Facebook 甚至在十月份推出了 VR 版的 Facebook,用户可以加入 VR 虚拟空间,可以一起看电影,也可以去火星旅游。但目前 Oculus 的 Toybox 沙盒游戏还是这样的:
可以想象,若举行 VR 情人节集体活动,出现频率最高的一句话会是:“亲爱的,哪个是你?”从这可以看出,Loom.ai 在 VR 的应用潜力几乎是无限的。雷锋网认为,真人 3D 建模是 VR 体验的关键一环——这决定了你能否在 VR 中辨认出熟悉的朋友。将来和女朋友在 VR 中探索世界,登喜马拉雅,漫步火星,你一定不愿像图中这样,两个“光头人”含情脉脉,对吧?
这两年有个很火的 11 区动漫《刀剑神域》(Sword Art Online),不知各位大大是否看过?它的设定中,被困在 VR 游戏“刀剑神域”里的玩家,由于 VR 头显事先拍摄下了真实照片,每个人在游戏里以真面目出现。正因如此,后来桐人和亚丝娜的罗曼情节才成为可能(否则面对千篇一律的网游角色造型,恋爱就谈不下去了吧)。
《刀剑神域》戴着脑电波 VR 头盔(真的是头盔啊)的女猪脚 Asuna
虽然原著出版时,Loom.ai 还未诞生。《刀剑神域》未卜先知得为这类 3D 建模软件的 VR 游戏应用指明了方向。即便是传统桌游、网游,比如《模拟人生》、WOW 和《九阴真经》,如果能让玩家用自己的“真面目”游戏,也应该会更受欢迎吧?
不过,小编更关心的是,能否把自己的 3D 头像应用到动漫、电影里?——那个啥,下次拍《最终幻想》,直接把小编的头像拿去用吧,不要钱。
虽然 VR、游戏、动漫电影可能是 Loom.ai 在将来潜力最大的领域,但不可忽视它眼下就可以掀起的社交革命——Facebook 已经在进行相关测试。若 Facebook、微信这样的社交平台推出一个小游戏,让用户创建、分享自己的 3D 头像,它可能会像此前的“脸萌”一样,迅速火遍大江南北。但这还不是最重要的,更有前景的正是 Mahesh Ramasubramanian 所指出的:让 Facebook 和微信这样的社交应用,支持可动的真人 3D 模型来做头像——当你点开好友主页,看到的不再是她的大头贴,而是会卖萌、会对你笑的三维头像,说不行还能配合表情说个“蓝瘦香菇”,那会多么有趣?至少,玩陌陌这样的应用不必再通过看自拍照“猜真人”了,多年无人问津的腾讯 QQ 秀也可以有新玩法(收费)了:
现版 QQ 秀,童年回忆有木有?
一个颠覆性的事实是:人体 3D 扫描技术一直存在,但从未服务于大众消费者,而 Loom.ai 有能力让它迅速普及。 此前,如果有人想要这么做,要去找专门的游戏、电影工作室,还要付一大笔酬金。所以它根本无法在大众市场商业化。对游戏产品和社交应用来说,由于没人用,也确实没有必要支持真人 3D 头像。
但现在不一样了,通过 Loom.ai ,每个人都可以为自己建立数字 3D 头像。在将来,Loom.ai 是否能支持扫描全身照片,对人体 3D 建模呢?
感兴趣的读者,可以去 Loom.ai 网站预约名单做个登记,开放公测时会通知你,获得第一批尝鲜特权。在此,雷锋网善意提醒 Loom.ai ,公测前务必升级服务器,防火防盗防流量爆,具体请参考黑色星期五和中国双十一。
via dailymail
【招聘】雷锋网坚持在人工智能、无人驾驶、VR/AR、Fintech、未来医疗等领域第一时间提供海外科技动态与资讯。我们需要若干关注国际新闻、具有一定的科技新闻选题能力,翻译及写作能力优良的外翻编辑加入。
简历投递至guoyixin@leiphone.com,工作地 深圳;或投递至wudexin@leiphone.com,工作地 北京。
相关文章:
让人人都可参与 3D 建模和特效制作——周昆丨微软亚洲研究院院友会