铅笔道是国内专业的创投信息服务商,为客户(投资机构、创业者等)提供创投新闻、投融资数据、研究报告等信息服务。旗下主要分为两大业务:媒体与数据。
创新公司IDG投A轮 他推20目一体VR摄像机 10K画质拼接无缝 B端营收3百万
连然2017/04/04
文章约2400字,阅读需要6分钟

◆ 量子视觉创始人张聪

文| 铅笔道 记者 连然

导语

3月18日,张聪落地北京。他此行前来,是为开发了一年的一体化VR摄像机AURA筹备发布会。

张聪的父母都是科研工作者,他从小生活在浓厚的学术氛围中。博士毕业,家人本来期盼着他继续从事学术工作,在深度学习领域作出更多的技术突破。

但张聪选择了创业,他更想将自身所学落地,真正产生一些价值。他于2015年9月成立量子视觉,专注打造VR整体解决方案。

今年3月21日,量子视觉正式发布拥有20个镜头的一体化VR摄像机AURA,与实时监控软件AURA WORK 、后期制作软件AURA STUDIO等配套出售,定价98000元,主要面向B端用户。

注: 张聪承诺文中数据无误,为其真实性负责,铅笔道已备份录音速记,为内容客观性背书。

Kolor被收购激发创业灵感

2012年,读完上交博士课程的张聪来到香港中文大学,以研究助理的身份,跟着王晓刚、汤晓欧教授在多媒体实验室研究深度学习与计算机视觉。与他同在一个实验室的,还有韩庆龙和黄之燊。

3年后,三人即将完成博士学位。他们有两种选择:一是进入大学或研究院,做一名大学教授或研究员;二是到企业中做项目的开发与预演。

但这两种都不甚合意,他们想要将自身所学落地,亲自见证其价值如何。

4月29日,正在实验室里讨论未来去向的三人收到一条新闻推送,“美国运动相机制造商GoPro宣布收购法国VR软件公司Kolor”。

Kolor开发的软件可以将多个照片、视频合成360度全景照片或视频,这对他们仨来说并不算难。

全景图像拼接属于计算机视觉领域的通识存在,张聪他们在之前的研究中就曾参与过这方面的课题,并发表过相关算法的论文,不过在那会儿,他们还没意识到这是创业的契机。

受此消息触动,三人毕业后,先在深圳租了一间办公室,通过组装小蚁相机来尝试拼接出全景图片,开始介入VR领域。

◆拼接起来的小蚁相机

此前,Kolor没能完全解决全景图像拼接中的问题,可改进之处颇多。张聪便打算在相机组装的基础上,制作出一套没有拼接缝隙,且能实现3D效果的软件与算法。9月,量子视觉成立。

起初,他们购入6台小蚁相机,简单组装后,基于传统的计算机视觉拼接方法,制作出一张全景图。不过由于相机的排布问题,拼接的过程并不顺利。

于是他们想通过增加相机数量和改变相机的排布方式,来改善拼接过程与效果。两个月的时间,他们先后尝试以不同的方式将8台、12台、16台甚至20台的小蚁相机组装起来,但效果仍不理想。

软硬件互推

12月,张聪带着组装起来的小蚁相机们和研发出的图像拼接算法,去找了在VR领域有不少投资经验的松禾资本合伙人伍经纬。

伍经纬认可张聪团队先研究算法与技术,再由此衍生其他业务的方向,很快决定投资量子视觉的天使轮。

与此同时,前火乐科技研发总监曾作为加入量子视觉,他曾研发过包括坚果G1智能家庭影院、坚果P1便携智能投影等6款畅销硬件产品,拥有不少硬件供应链方面的资源。

融资逐渐到账,考虑到增加数量和改变排布方式不奏效,团队想到更换更高水准的相机。于是,Gopro和索尼单反取代了小蚁相机。

先后试过20台Gopro与6台索尼A7S2的组合后,拼接效果仍未达到理想状态。他们意识到除相机水准外,传统的计算机视觉逻辑本身的不足是更加根本的问题。

去年年初,团队沉下心来,基于更迭的深度学习与计算机视觉知识,从根本上对计算机视觉算法做了重新推导,实现图像从基于缝隙的平滑过渡到像素级拼接与过渡的升级。

基于新算法,团队对硬件排布有了新的理解,“我们知道什么样的排布方式适合我们的算法”。于是从软件反推硬件,3月,团队推出相机VISIONGO——由20个Gopro拼接而成,同时推出的还有由14个BMPCC(专业高清摄像机)搭建而成的解决方案。

接着,团队试水影视拍摄,先后拍摄制作了张楚《晃动一下》MV和黄晓明《万水千山总是情》的VR版本,画面为4K3D,基本无拼接缝隙。

张聪对成片画质基本满意。但由于拍摄设备为相机拼接而成,使用与后期处理并不方便,若提供给第三方使用,不便只会更甚。“相机的设置与组合、素材整理、帧的同步、图像的拼接等,都是难处。”

这不是张聪想要的,他成立量子视觉的初衷,是希望让所有人都能方便地使用团队的技术与解决方案来拍摄、制作VR图像与视频。

基于此,他开始尝试开发一体式硬件。“当时想的是做出一款设备操作简单、参数可统一设置、且拥有配套软件的整体解决方案。用户只需学习一两个小时就能上手操作”。

筹备硬件开发的同时,6月,张聪拿到了IDG资本对量子视觉的A轮投资。

资金进入加速了开发进程,依托深圳强大的电子物料供应链资源,在踏过硬件结构、相机同步、素材存储与导出等一系列坑后,10月,量子视觉推出拥有20个镜头的VR摄像机AURA,并与暴风体育合作了中国网球公开赛的VR直播。

◆VR摄像机AURA

面向B端推整体解决方案

不过当时,张聪没有急着开发布会和做市场的宣传推广,他决定先继续提升硬件设备的稳定性与画面质量,等整体使用逻辑足够清晰时,再正式向公众推出。

接着,团队围绕AURA陆续作出软件与硬件方面的开发与优化。软件上主要包括实时监控软件AURA WORK与后期制作软件AURA STUDIO的推出。

AURA WORK实现了实时监看各个镜头画面、远程设置单个或多个镜头参数等功能,便于影视内容制作者及时根据现场情况调整相应参数。

AURA STUDIO则可一键快速导出、拼接、剪辑素材,并通过本地或SaaS服务器进行3D拼接和立体深层渲染。其还可与其他后期特效软件无缝衔接,简化后期操作。

硬件方面,根据量产条件,团队对硬件设备作出了包括修正排布序列等调整,并多次与工厂配合开模、调模。

与此同时,团队也积极尝试制作VR版本的行业应用:如与万科、中粮集团深度合作,为其拍摄制作VR版本的宣传素材;为美联英语制作VR版本的英语教学内容;与新疆广电部门合作制作“带你游新疆”的VR旅行内容等。

去年,量子视觉制作的VR行业应用作品累计30余部。谈及涉足行业应用的原因,张聪解释道,在拍摄制作这些作品的过程中,一来能及时发现技术与产品在应用中的问题并调整改善;二来这也是对相机市场需求的验证;此外,通过制作这些项目,也能实实在在赚些钱,“30个项目下来,收入约300万元”。

3月21日,量子视觉正式发布了20目一体化VR摄像机AURA,其水平方向为16枚视场角90度的广角镜头,顶端和底部则为4个视场角为190度的鱼眼镜头。

AURA支持H.264、H.265视频编码标准,最大可以输出25fps的10K 3D影像、60fps的10K 2D影像及120fps的6K 2D影像。

它也支持VR 直播,可实时输出6K、30fps的画面,并可通过RTSP协议进行有线或无线实时监看。

软件方面主要包含实时监控软件AURA WORK和后期制作软件AURA STUDIO等。

AURA整套解决方案主要面向B端用户,售价98000元。目前以官网直销为主,后期量子视觉将会提供云端的拼接服务,“这是为了统一降低成本,免得用户需要花大钱请专业人士来做拼接”。

接下来,张聪会将主要精力放在AURA整套解决方案的出售与发货上,同时也将继续优化硬件。

/The End/

编辑   杨雨晨    校对   吴泽骞

我是本文作者连然,崇拜科学性感,立志做人工智能、VR/AR界的女战士,相关行业创业者求报道,欢迎微信勾搭:futurey1。

相关文章

    热门评论

    目前还没有评论~

    打开铅笔道APP,发表评论
    APP内打开