为什么两会记者热衷的全景视频会那么模糊？

via：百度图片

这几天，VR群颇为热闹，时不时会有小伙伴出来刷屏表示，两会记者采用360度全景相机进行新闻报道，甚至还有人开始布道“两会首次采用VR技术，开启国内VR元年”云云。虽然大部分是2D全景的伪VR视频，但记者对这些还是饶有兴趣。

在网上搜索之后，我们可以发现采用全景视频进行两会报道的媒体有五家，分别是新华网、法制晚报、经济日报、光明网以及中新网（不排除遗漏）。这些视频主要通过三种途径进行传播，一种是视频平台比如优酷、乐视视频APP、爱奇艺、得图、UtoVR等，第二种是通过自己的媒体平台，第三种是通过H5页面。

根据相关的报道，上述的两会记者主要采用两种全景视频拍摄方案，第一种是两目一体机比如Insta360、完美幻境Eyesir，第二种是以组合GoPro的多目方案。（还有其他品牌这里就不赘述。）值得一提的是，这些全景拍摄方案的拼接技术均来自其方案本身。比如Eyesir通过硬件实时拼接，而新华社采用的是莱瑞特七目全景相机配套的拼接技术。基本上都是“傻瓜式”操作实现全景拼接。

而这些关于两会的全景视频都有一个共同的特点，用户可以通过鼠标、手机划屏或者传感器等转换视角，看到基于全景相机这一点的360度全景画面。相比于传统的展示模式，这种全景确实让人眼前一亮。正如网上所言，

“全景展示两会的方式，让读者从被动接受新闻场景的展示变成了主动选择，并拥有了身临其境的代入感，让不是人大代表的我过了把官瘾～”

不过，记者也发现一个比较严重的问题：视频的画质普遍差，即使通过优酷会员选择最高的1080P，其观看的效果也不好。事实上，两会所采用的全景相机方案都能够支持4K视频的输出。为什么会出现画质普遍差情况呢？对于硬件这种难以统一讨论的原因，本文暂时忽略，只讨论基于视觉效果的因素。

via：优酷截图

有不少人告诉记者，造成全景视频模糊的主要原因在于优酷等平台的播放器以及带宽水平。对于带宽问题，Insta360 CEO刘靖康是这样解释的：

“1080P对于全景视频来讲是不够的，会很模糊。到4K会比较清楚，但是目前大部分网站的带宽水平不足以分发4K的视频。目前，一般（客户端）视频网站承受的起的就是2~3M，再大的话他们成本受不了，用户也不一定看得了。但是对于好一点的全景视频来讲，码率起码到6M，一般4K的都10几M。”

除了貌似难以解决的带宽问题，不少团队也向记者抱怨优酷等平台的播放器没有进行优化，导致对全景视频的支持力度不够。有人还说，同一个视频在YouTube和优酷上的区别很大。对此，有两种看法。一种来自得图CTO孙其瑞的“播放器后端”观点：这是由于优酷视频压缩、传输及其运营成本的策略造成的。另一种说法来自业内一名知情人士，他表示，

“目前，优酷是在CPU上做计算。当视频解码后，图片会送到CPU，CPU再送回GPU贴图。因为在CPU和GPU之间传送是有效率问题的，所以会先把图片压缩再传输。但最好的方式应该是，视频解码出来之后直接丢到GPU。如果是CPU的话，2048x1024对大多数电脑来讲就非常卡了，而且边长只能是2的指数，所以它会把2048x1024先压缩到1024x512，差了非常远。但如果直接在GPU里操作，就没有边长是2的指数这个限制了。”

尽管如此，记者仍觉得以上这两个原因还不足够说明问题。在记者浏览视频的时候，也会出现如上图的情况：拼接错乱处出现局部模糊影响画面。对此，计算机视觉解决方案商进化动力表示：

“通常出现这种情况是采用后制拼接软件的问题，并非是图像信号的失真造成模糊。主要因为在标准的特征拼接算法流程中，图像会做几次的高斯模糊卷积，从里面选取高频信号，进而消除拼接缝处的重影现象。但是因为相机相对位置的外参估计不准确，造成图像拼接模糊。”

 事实上，拼接处理不好，最终也会影响最后的画面效果。具体来说，拼接包括外参标定、内参标定、颜色矫正、去模糊、最终优化这5个过程。“每个过程的参数选择都很多，方法也很多”，而这些参数都会影响到最后的效果。

对于记者提出的另一个问题：广角镜头的畸变问题对画质的影响。进化动力表示，两个镜头的全景相机的畸变问题没什么办法，因为鱼眼镜头光学特性的原因，镜头边缘处通常会有较为严重的图像信号失真与畸变。不过，还有一个可能，就是用OpenGL或者其他引擎投影到球面上的时候，即显示全景视频的时候，参数选择的问题。“在进行显示投影的时候修改投影参数，虽然能够修复边缘处的畸变问题，但是丢失的图像信号无法恢复，所以仍然会较为模糊”，对方说。

自此，我们可以总结播放器和带宽水平是造成目前全景视频模糊不清的主要原因。与此同时，还有更多原因造成这一效果，这不仅仅是上文讨论到的拼接和畸变，还有硬件瓶颈，比如大多数拍摄灯光的画面都出现晕光效应；还有操作不当引起的，比如曝光不均衡导致拼接后的天空出现“一块白一块蓝”的画面等。

不过，这些问题最终会得到解决，而且，这之后也不仅仅是清晰的2D全景，而是立体全景+更多互动模式。