雷锋网「新智造」按:雷锋网正在启动“新智造成长榜2017”评选活动,我们将对人工智能与机器人行业进行大规模报道、梳理和调研,并联合数十家著名投资机构根据这些创新公司的技术实力、商业能力和成长性进行深度评选,最终从多个领域分别选出一些极具潜力成长性的创新公司。本文为雷锋网「新智造」对报名成长榜的企业“云之梦科技”的报道,讲述其如何从人体3D建模和测量入手,发力虚拟试衣,并积极探索技术在虚拟换发型、直播背景实时替换、智能安防落地的故事。如果你想参与我们的评选,可点击「报名」链接,或通过邮箱xinzhizao@leiphone.com联系我们!
2011年,思科发布了一个视频,一个女生站在一面镜子前,直接隔空挥手、点击就能试穿不同系列、款式、颜色的衣服,“试穿”出满意的衣服后,直接付款就能买下。
深圳云之梦科技创始人董波深知这个视频给服装行业从业者带来的震撼和“诱惑”,在走上技术创业道路前,他在服装配饰行业已经有10余年的从业经历,并为ZARA、沃尔玛和迪士尼做过贴牌代工,他甚至创立了自己的品牌“卡洛迪”。
不过,2008年的金融危机直接让董波的公司遭遇重创,为了让企业转型重新走上正轨,他说自己几乎尝试了所有的办法。而在服装行业多年,对于库存风险以及当季爆款严重依赖设计师经验的情况,他有非常深的体会。所以,尝试“虚拟试衣”,帮助服装电商企业增加销量,减少退换货,同时,用试衣的数据反过来指导设计,减少新产品的不确定性,也是他非常关注的点。
董波告诉雷锋网新智造,早在2012年,他就组建了一个10几人的技术团队,研发虚拟试衣软件,一开始,他从自己最熟悉的服装配饰入手,后来又扩展到服装。2014年,云之梦科技正式成立,成为了一家专注于人体感知与大数据应用的创业公司。
3D人体测量建模系统:5秒钟完成全维度人体3D建模
云之梦的技术路线和思科的概念视频类似,通过深度摄像头对人的体形、姿态包括外貌等进行识别、理解和恢复,有了人体三维模型,再通过对衣服的数字建模,用户就可以在“智能试衣镜”前进行虚拟试衣。
为了让人体三维模型的创建更快、更准确,云之梦一开始就着重建立自己的人体数据库,目前,他们已经采集了几千个人体三维模型数据,这些数据可以让算法迭代更准确。
2014年,刚刚拿出初代产品,在高交会上展出的云之梦引起了一位从新加坡远道而来的计算机视觉领域的博士的关注,他就是后来加入云之梦并担任CTO的吕江波。从浙江大学毕业后,吕江波在比利时鲁汶大学获得了博士学位,之后成为美国伊利诺伊大学香槟分校(UIUC)下属的新加坡高等研究院(ADSC)招募的首位研究人员。他联合领导并从事“动态大场景中的视觉数据建模与分析”的研究工作。他还是视频技术的著名国际学术期刊IEEE TCSVT编委、2012年度荣获最佳编委奖,同时,他也是IEEE的高级会员。
对于自己研究过的领域,吕江波充满了兴奋,他告诉雷锋网新智造,“动态大场景中的视觉数据建模与分析”可以应用于无人机、机器人等各个领域,让机器看懂更复杂的情况。在做研究的过程中,他也一直在关注怎样把所研发的东西应用于实际,最终,他在2016年正式加入云之梦,并从新加坡举家来到深圳。
目前,云之梦的虚拟试衣既有在线版软件,也有线下的“虚拟试衣镜”。对于线上试衣,云之梦主要作为技术提供商为电商平台提供解决方案;对线下的服装品牌,云之梦目前已经推出了两款智能硬件:一款是配备了2K分辨率大屏幕和一个深度摄像机的智能试衣镜,它可以快速感知创建人体的模型,之后就可以试穿其中存储的衣服数据。
另一款是有更高技术门槛的3D人体测量建模系统,它的第一代机型是用多个测量数据的Kinect摄像头,分别分布于被测量人体的前方和后方,可以在3-5秒之内建立基于点云关系的三维人体模型。
雷锋网新智造分别试用了两款产品发现,试衣镜创建的人体模型并不精确,在人脸和身体的连接处还有一点拼接痕迹,但还是能够基本体验换装后的服装效果,云之梦表示,在新一代产品中,已经解决了这个问题;而3D人体测量建模系统创建的人体模型则真实很多,而且是真正的可以拖拽、转动的三维模型,不过,由于是在开放环境下,复杂的光线等因素会造成在创建基于点云的三维模型时,一些点“飞出”人体,这就是噪点,表现在人体模型上即一些地方会产生“缝隙”。
云之梦希望快速创建精确的人体三维模型,所以现在他们还开发了封闭环境下的3D人体测量建模系统,它的外观是一个太空舱的形状,而在封闭状态下,可以最大程度地建立准确的三维模型。
这个封闭的系统也将被放置在线下店中,目前已经有很多家服装企业表达了购买意愿,其中意愿最强烈的是做服装定制的企业。传统的服装定制,非常依赖量体师,而后者的培养、薪资都要耗费高昂的时间和金钱成本,精确的3D人体测量建模系统,将大大减少量体师的工作,也为企业降低成本。
应用场景延伸:虚拟换发型、直播背景实时替换、智能安防
采访中,雷锋网新智造还和云之梦的产品总监强胜轩进行了交流,他也展示了云之梦的一款新产品——够咖,一款基于人像与背景识别分割技术实现的视频制作应用,它可以帮助视频主播在直播时实现实时的背景切换。
这个产品可以将人从静态甚至动态的背景中精准识别并进行完美实时的视频分割,呈现出的分割结果非常稳定,边缘也很清晰,够咖可以让主播瞬间置身于人潮涌动的埃菲尔铁塔下,抑或是专业的新闻主播间。
在对人体三维建模研究的过程中,云之梦也积累了人脸识别、人体测量、人像分割、三维重建、视觉跟踪理解等核心技术,除了试衣,这些技术还可以应用在多个领域,够咖就是一个实例,目前,它已经和一家知名的直播平台达成了合作。
董波告诉雷锋网新智造,云之梦正在和一家全国连锁的美发集团合作,基于人脸识别、人体测量等技术,开发虚拟3D换发应用,直接落地美发店中。在顾客做头发前,店员可以用iPad向顾客展示不同发型的效果,甚至,顾客还可以看自己试穿不同衣服的效果并直接下单购买,美发店也能获得相应的提成。
另外,因为有对三维人体的感知与数据积累,如果应用于智能安防,云之梦的技术也能获得不一样的效果,比如,它可以更多维的辨识观察对象,感知到潜在危险人员的体形和步态特征等。
回想起自己的创业历程,并不懂技术的董波形容自己是“无知者无畏”,现在,云之梦已经获得了千万级别的Pre-A轮融资,公司也已经发展到100多人,其中技术团队占了7成。而对于这样一家公司,技术上的投入可能还要在很长一段时间占比较大的比例,对于一个创业公司来说,这也是很高的要求。