本周,大事可不少。Magic Leap受质疑,腾讯公布AR开放平台QAR,微软宣布HoloLens明年入华……快跟随雷锋网一起回顾下吧。
一直以来,神秘的 AR/MR 初创公司 Magic Leap 都受到了广泛关注。该公司在只有宣传视频,没有产品的情况下就获得了 14 亿美元的融资,可谓是近年来最火的初创公司之一。
今年二月份,在没有任何产品发布的情况下,Magic Leap 完成了超过 7 亿美元的 C 轮融资,由中国阿里巴巴领投,估值高达 45 亿美元。包括 Google 、阿里、KPCB 、硅谷巨头 Andreessen Horowitz 基金、摩根大通等在内的高水平投资者都争相向该公司抛去橄榄枝。雷锋网(公众号:雷锋网)也曾多次对 Magic Leap 的消息做过报道。
Magic Leap 宣称的产品原型。图源:The Information
然而就在最近, The Information、The Verge 等多家国外媒体报道指出,Magic Leap 的宣传视频存在误导大众的嫌疑,该公司的技术实际上远远没有形容的那么“先进”,起码目前和微软的 HoloLens 头显就还差得远。The Information 引用了 10 月份对 Magic Leap 公司 CEO Rony Abovitz 的一篇访谈,指出该公司去年发布了一段误导性产品演示。实际上 Magic Leap 在将 AR 技术融合到小型化设备上遭遇瓶颈,并不能像 Abovitz 之前宣称的那样把传统头盔大小的笨重装置变成一副可以日常佩戴的轻巧眼镜。
专注于手部追踪技术的Leap Motion近日推出了移动端平台,包含专门的硬件和软件。新平台基于此前PC端的产品开发,目标是整合到未来的移动设备中去。
PC和Mac版的Leap Motion发布于2013年,当时售价80美元。硬件上这款产品并不复杂,包括两颗摄像头和3个红外LED,重要的是软件技术。最初Leap Motion是为电脑交互设计的,但这种“自然”交互方式却在VR里更受欢迎,因为后者没法用鼠标和键盘进行很好的操作。
Leap Motion也意识到了这一点,并在今年2月推出了专门针对VR的软件更新——Orion,在追踪速度和精度上有很大提升。但硬件方面还是原来的产品,没有更新。移动版的推出可以说是Orion的第二步。
Leap Motion的CTO David Holz在官方博客上发布了移动平台的新消息。专门为移动平台设计的传感器拥有180×180度的视场角(FOV),比之前的140×120有了很大提升。视场角是Leap Motion用户对产品最大的抱怨之一。更大的视场角可以让用户在玩的时候不需要一直把手举在Leap Motion前面,放低一些也可以追踪到。
显卡商AMD近日对其显卡进行了新一代软件升级,主要推出Radeon Software Crimson ReLive版,针对VR方面,更新了LiquidVR技术可实现MultiView和MultiRes渲染,同时,Radeon Pro Software Crimson Relive版图形软件,新增Radeon Loom功能,可对电影级360度VR视频实现实时拼接,可看出AMD对VR内容的重视。
Redeon Loom软件也是一大亮点。该软件可支持360度全景视频实时拼接。通过使用由AMD实施的Khronos OpenVX™电脑视觉框架,用户可以离线拼接多达31台摄像机拍摄的画面,分辨率为8K x 4K,或者实时拼接多达24台摄像机拍摄的画面,分辨率为4K x 2k。
HTC正在推出一个新的虚拟现实体验工作室,专注于内容开发与发行。新工作室被称为Vive Studios,会发行HTC自己及外部工作室开发的游戏。第一个产品是内部工作室2 Bears开发的Arcade Saga(街机传奇),一款射箭类游戏。
众所周知,在虚拟现实领域中内容仍是现在的短板,许多设备都因此而被遗落在角落吃灰。HTC成立新工作室很可能是为了解决这一问题。
Arcade Saga游戏有84个关卡,而且故事背景经过精心设计。玩家在游戏中会扮演一个以自己电脑命名的CPU,未来的CPU们已经诞生了感情与意识,而人类对此感到害怕,玩家的任务就是与名为术士(Warlock)人类帮凶作斗争,捍卫CPU们的自由。(一个疑问是,为什么不是AI领域用到最多的GPU?)
HTC已经在一些娱乐中心推广Vive,还通过创业加速器Vive X支持软件开发。它还在Arcade Saga之前,以非官方方式开发过至少一款游戏,其中一个是二战射击类游戏Front Defense。HTC的说法是这款游戏是由独立的外部公司开发,团队成员恰好是HTC员工。
12月8日,微软在深圳召开WinHEC大会,会上宣布将把Windows Holograohic技术开放给合作伙伴,并计划在2017年让混合现实(Mixed Reality) 成为主流。
“Windows是唯一一个可以整合混合现实生态系统的平台,可为头戴显示设备提供inside-out 追踪技术,为开发者提供标准的输入方式,为消费者提供统一的商店界面。”微软执行副总裁Terry Myerson表示,“2017年,是混合显示走向主流的一年。”
Terry透露,在高端市场,微软增强显示设备HoloLens已经得到中国的批准,开发者版HoloLens以及产品套装将于2017年上半年进入中国市场。
但鉴于其价格,HoloLens还是一款相当小众的产品。而为了能更好地普及,微软已经和其他五家PC商以其他硬件商合作,致力于将具有和HoloLens一样混合现实功能的头戴显示设备,带向市场,而这些设备的价格也将各不相同。
微软介绍到这五家合作伙伴,分别为华硕、宏碁、戴尔、惠普和联想,在Window10大会上曾经公布过。Terry向外媒表示,与PC商合作的头显将随着价格的不同,功能也有所变化,最低价从299美元起。同时,为了让Windows Holographic硬件顺利运行,微软对PC也提出了一定的要求:
CPU:第6代或7代 Intel Core i5 移动双核CPU;
GPU:Intel HD Graphics 620 (GT2) ,或DirectX12
RAM:8 GB+ 双通道
视频输出: HDMI 1.4 支持分辨率 2880×1440 @ 60 HzHDMI 2.0 或显示端口1.3+ 支持分辨 率2880×1440 @ 90 Hz
硬盘:100GB+ SSD (推荐)/HDD
USB:USB 3.0 Type-A 或 USB 3.1 Type-C
蓝牙4.0
在一年前,Facebook 开源了 3D 全景相机的设计,在过去九个月里,公司也设计和制造了这一相机,并公布了规范与代码。Cabral 表示,虽然时间并不长,但他们在相机的设计上花了很大功夫。
他们在六个维度上进行了考量。
首先是计算机视觉。不同角度拍摄的图片在拼接时如何能够无缝拼接?怎样在捕捉素材图片的局部特征点?全景图的视线离不开计算机视觉的帮助,Cabral 认为,它可以称得上是一切技术的基础,
其次是 CMOS 传感器。目前大多数数码单反相机都采用的是这一传感器,因为其结构相对简单,另外成本比起 CCD 而言也低。Cabral 举了个例子,背照式 CMOS。这种传感器的原理在于通过向没有布线层的一面照射光线,以避免线路和晶体管的阻挡。因此光线的开口率就能得到提高,即使是小的影像传感器,也可以拥有高感光度和高灵敏度。
Cabral 提到的第三点是色彩学。在 Cabral 眼中,这是一项非常「复杂」的科学,对颜色的研究甚至还能引申到知觉和心理精神层面。「因此,人类花了 67 年的时间殚精竭虑地进行研究,希望将照相机拍摄下来的颜色以一种人们感到舒适和喜欢的方式呈现。」
接下来是摄影测量法(photogrammetry),指的是研究利用摄影手段获得被测物体的图像信息,通过几何或物理手段进行分析。
除此之外还有光学,在过去的十年二十年里,研究人员也开始对光学进行更加深入的研究。对于 VR 相机而言,如何控制光线进入镜头的方向和方式具有重要意义。
最后一点就是计算机图形了。SIGGRAPH 就是典型的一个计算机图形界的大会,如果没有它的存在,也不会有今天的分享会议了。(嗯,的确是这样的。)
腾讯AR研究员刘骁
12月6日,SIGGRAPH Asia 2016正在澳门举行,今年有相当一部分内容都与VR/AR有关。今天,在腾讯优图实验室、清华大学-腾讯联合实验室以及腾讯AI Lab联合举行的一场分享会议中,来自腾讯的刘骁首次介绍了腾讯“QAR开放平台”,一个增强现实平台。
近些年AR领域越来越火,特别是在广告和游戏等领域。当前的AR可以分为两种:一种是移动AR,另一种是头戴显示器。由于它们使用的传感器不同,通常其追踪技术也不同。
对于希望开发AR应用的开发者来说,目前比较流行的AR SDK有Vuforia、ARToolkit、Metaio和Wikitude。而app开发者遇到的问题是:
1、一些强大的API对入门开发者来说太难了;
2、对轻量级App来说过重;
3、模型渲染需要额外工作;
4、建立识别服务需要额外的工作;
5、一些前沿的功能没有包括进来:SLAM,室外脸部AR等等。