智现实想要把现实世界装进你的VR眼镜

智现实想要把现实世界装进你的VR眼镜
2017年05月09日 15:04 87870虚拟现实

在目前绝大多数的VR视频中,只能看不能动是其中最大的尴尬。瞄准这一痛点,深圳智现实结合SLAM扫描建模以及全景拍摄,做出了能“动”的VR视频。

在87870办公楼一层的会客室里,87君见到了来访的深圳智现实科技CTO黄扬帆。

这次到北京,黄扬帆是来参加母校清华的创业大赛,顺便见一圈投资人。令87君惊讶的是,黄扬帆是北京人,为了更接近华强北这个全球最大的消费电子产品世界工厂,宁可把公司安置在离家几千公里之外的深圳……

离开工作的安逸区、远离自己的家人,为了梦想到远方打拼,在成功者的自传中,这样的故事并不少见。

丨同窗、同室到同行 清华三剑客的创业路

十年前的三位清华小“鲜肉”

深圳市智能现实科技有限公司(简称“智现实”)成立于2016年7月,三位联合创始人都是清华大学基础科学班的同学,也是一个寝室的舍友。CEO简伟华此前是腾讯视频VR和AI的技术负责人,主导过BigBang、王菲等多场演唱会的VR直播制作。黄扬帆是CTO,之前曾担任完美世界、FreeWheel主管工程师,ZEPP技术架构负责人。另一个联合创始人廖颖担任CIO,美国北卡州立计算机硕士,前MicroStrategy公司大数据科学家,拥有3项美国科学专利。

在黄扬帆看来,智现实的成立多少有些“意外”。去年4月清华校庆,他们几个毕业10周年的同学一起回到学校。校庆上,有个同学带来了一台国产VR相机进行拍摄,也就聊到了VR。结果发现,他们几个舍友,或多或少都在从事一些与VR相关的工作,因此一拍即合,经过几个月的筹备,正式在深圳成立了智现实这家公司。

成立不到一年的智现实,目前还没有进行任何的外部融资,完全是靠B端项目的流水和几位联合创始人的出资维持。

丨从VR直播到实景漫游

智现实官网宣传PV

87君第一次接触智现实,是在去年11月。那时他们在做深圳高交会的直播……说实话,那时87君对他们在做的事情兴趣不大。在国内,包括微鲸、数字王国、大麦以及Upano、火柴全景等公司都在做类似的事情,更不要提NextVR、诺基亚这样的国外巨头。

毋庸置疑,每家涉足VR直播的公司都掌握了一定的核心技术,但是受IP资源、带宽和拍摄技术、市场空间以及最关键的潜在受众规模的限制,VR直播始终没有走出小众的圈子。即使去年王菲演唱会这样瞩目的盛事,“王菲+谢霆锋(数字王国)+VR”这样的话题组合,不仅没获得好评,还因为服务器崩溃、直播画面模糊,让一众铁粉大失所望。

“VR直播噱头居多,实际产生有用的内容太少,”黄扬帆谈到,智现实做了一段时间VR直播之后,也发现虽然一些展会会为此买单,但是目前国内的带宽成本太高,普通人接受程度不高,想要让VR直播真正普及,至少要等到5G时代到来。

所以在去年11月,智现实开始尝试解决“实景漫游扫描”这一行业的技术痛点。到今年2月,第一个商业项目博洛尼家具店正式落地。4个月的时间,智现实自主研发了一套从扫描、后期制作到分发的实景漫游解决方案。

丨智现实如何实现“实景漫游”

智现实“实景漫游”案例

实景漫游指的是,利用全景相机、深度相机以及传感器从多个角度对现有的场景进行全方位的扫描,生成数字化的空间并进行展示,用户可以在里面360°的观看并进行移动。上面的表述不太像人话,简单来说实景漫游就是现在全景图的升级版,全景图只能站在原地上下左右360°转头看,而全景漫游则意味着人可以在“图片”里走动。

名字上来看,全景漫游和全景视频差别不大,但是里面的核心技术却是天壤之别。全景视频的核心是多个机位画面的拼接,而漫游在这基础之上,是要把扫描的现实空间构建成一个数字场景。比较了解虚拟现实行业发展的人,对这个技术一定不会太陌生。从原理上来看,把现实空间扫场构建成场景,这个技术很接近谷歌的AR平台Tango的技术。

Matterport官网售价

目前国际上,最有名的同类产品就是已经完成D轮融资的Matterport。在官网上,Matterport Pro3D相机的价格在3600美元。同时,根据基础级、专业级、商用级的不同,收取每月49美元、99美元、149美元的云端服务费用。

黄扬帆向87君展示了一个他们做过的虚拟看房的案例。如图所示,在一个虚拟的房间中,看房者可以前后左右自由的走动,观察房间各处的细节,甚至打开墙上的电视……而87君此前看过的实景VR看房,除非使用全3D建模,否则的话只是在各个房间扫描全景图片,用户的视角只能在这些房间之间进行切换。

黄扬帆介绍了这项技术的原理:“在采集端,我们使用智能机器人搭载全景相机、深度相机以及传感器,同时在场景内采集视觉数据、深度信息和位姿信息,并做了SLAM的运算。基于SLAM信息可完成场景的3D建模,而将采集来的全景视觉数据组织成智现实独创的二维图像序列,结合SLAM即可将实景还原到模型之上。最终,生成的模型通过手机显示器等终端展示。”

智现实实景漫游编辑器截图

拍摄传统的视频(包括全景视频)是以时间为维度,每一秒连续播放数十张静态的图片,让画面在人眼中动起来。而智现实的全景漫游,则是以空间为维度,加入了视觉数据、深度信息和位姿信息,在既定的路线图上(智能机器人的行动路线),让用户可以自由的“走动”。而这,更像是把现实搬到了游戏的空间。

实际的使用中,这项技术还有一些限制:比如用户需要按照事先规划的路线移动,而这也是智能机器人搭载的配件所扫描的3D建模场景;这个时候,一些机器人走不到的地方就无法进行扫描;而深度相机的功能也在不断完善中,比如现实空间中一些比较复杂的物体,建模还可以做的更精细;再比如展示全景漫游的时候,不论是在H5还是在App上,都需要接入智现实的SDK,因为展示的是智现实独创的二维图像序列,需要单独算法支持,否则就只能播放成全景视频……

但是智现实这项技术真正的价值在于,一个现实中真正的空间,可以通过数字化的方式被100%的实景记录,并最终在VR中还原出来。利用相机扫描、利用VR观看,人们可以无视实际空间的距离,从视觉上无比拟真的来到一个远在万里的地方——

尽管目前,这还是个只能看,不能摸的空间。

丨2C or 2B?这是一个问题

智现实在深圳的办公室

家住北京的黄扬帆这次从深圳回到北京,前前后后见了十几个投资人。

“这项技术更适合应用在C端!现在首要任务是寻找与C端的结合。”

去年双11期间上线的淘宝buy+,最大的特色是可以穿越到海外购物。淘宝的技术人员用全景相机在海外的名店实体取景,制作成全景的图像,网购用户可以戴上VR头盔,在这些海外名店中,像真实购物一样写意的逛街。

然而上述只是理想的状态,实际的体验,是在店中有多个光圈,把视野中心放在光圈上可以实现移动。黄扬帆介绍,这种技术实际上是用全景相机扫描了多段全景视频,选择不同的光圈实际上是在播放不同的视频,看起来就像是观众“走了”起来。

87君体验了一个智现实给某购物中心做的案例(NDA的原因不能上图和详细说明)。在商场中,87君可以前后左右自由的移动,上下电梯,一路上观看各个柜台的商品。黄扬帆表示,技术上,完全可以实现经过某个商铺的时候,弹出这个商铺的介绍,甚至把每个商品进行建模,在场景中观看、展示。

与全3D建模相比,这项技术的成本也大大的降低。黄扬帆计算了一下,算上机器人和各种相机、传感器,一套设备的成本在8万元左右,产品化之后,黄扬帆预计可以把成本降低到3万。购买完硬件之后,与全3D建模相比,一个场景后续扫描制作的成本基本可以忽略不计,只需要根据需求,添加场景中一些物品的建模和交互。不论时间还是人力的成本,都会大大的降低。

比普通全景拍摄体验更好,而比全建模成本又更加可控。一些投资人看到了这项技术在游戏和影视领域的机会,希望他们切入更大的C端市场。

“我们从技术上来说,ToB、ToC都没有问题。但是就目前的硬件和市场来说,ToB的业务更务实一些,也能做出稳定的营收。同时,公司的B端业务不但可以带来现金流,也可以为C端业务提供技术储备。”黄扬帆表示,智现实现阶段可以在做ToB的同时,继续研发产品,降低成本并让产品小型化、流程智能化。以B端业务为基础,积累到的技术和资本,可以保证智现实随时切入C端市场。

2015年、2016年VR被资本看好,一些“聪明”的VR公司靠鼓吹生态,拿下了大笔的投资。但在“资本寒冬”到来之际,低调和务实的VR公司,才有可能走的更远。

而只有时间才能证明,在VR行业最困难的当下,激进者和保守者,谁才是笑到最后的那一个。

财经自媒体联盟更多自媒体作者

新浪首页 语音播报 相关新闻 返回顶部