◆ 量子视觉创始人张聪
文| 铅笔道 记者 连然
►导语
3月18日,张聪落地北京。他此行前来,是为开发了一年的一体化VR摄像机AURA筹备发布会。
张聪的父母都是科研工作者,他从小生活在浓厚的学术氛围中。博士毕业,家人本来期盼着他继续从事学术工作,在深度学习领域作出更多的技术突破。
但张聪选择了创业,他更想将自身所学落地,真正产生一些价值。他于2015年9月成立量子视觉,专注打造VR整体解决方案。
今年3月21日,量子视觉正式发布拥有20个镜头的一体化VR摄像机AURA,与实时监控软件AURA WORK 、后期制作软件AURA STUDIO等配套出售,定价98000元,主要面向B端用户。
注: 张聪承诺文中数据无误,为其真实性负责,铅笔道已备份录音速记,为内容客观性背书。
Kolor被收购激发创业灵感
2012年,读完上交博士课程的张聪来到香港中文大学,以研究助理的身份,跟着王晓刚、汤晓欧教授在多媒体实验室研究深度学习与计算机视觉。与他同在一个实验室的,还有韩庆龙和黄之燊。
3年后,三人即将完成博士学位。他们有两种选择:一是进入大学或研究院,做一名大学教授或研究员;二是到企业中做项目的开发与预演。
但这两种都不甚合意,他们想要将自身所学落地,亲自见证其价值如何。
4月29日,正在实验室里讨论未来去向的三人收到一条新闻推送,“美国运动相机制造商GoPro宣布收购法国VR软件公司Kolor”。
Kolor开发的软件可以将多个照片、视频合成360度全景照片或视频,这对他们仨来说并不算难。
全景图像拼接属于计算机视觉领域的通识存在,张聪他们在之前的研究中就曾参与过这方面的课题,并发表过相关算法的论文,不过在那会儿,他们还没意识到这是创业的契机。
受此消息触动,三人毕业后,先在深圳租了一间办公室,通过组装小蚁相机来尝试拼接出全景图片,开始介入VR领域。
◆拼接起来的小蚁相机
此前,Kolor没能完全解决全景图像拼接中的问题,可改进之处颇多。张聪便打算在相机组装的基础上,制作出一套没有拼接缝隙,且能实现3D效果的软件与算法。9月,量子视觉成立。
起初,他们购入6台小蚁相机,简单组装后,基于传统的计算机视觉拼接方法,制作出一张全景图。不过由于相机的排布问题,拼接的过程并不顺利。
于是他们想通过增加相机数量和改变相机的排布方式,来改善拼接过程与效果。两个月的时间,他们先后尝试以不同的方式将8台、12台、16台甚至20台的小蚁相机组装起来,但效果仍不理想。
软硬件互推
12月,张聪带着组装起来的小蚁相机们和研发出的图像拼接算法,去找了在VR领域有不少投资经验的松禾资本合伙人伍经纬。
伍经纬认可张聪团队先研究算法与技术,再由此衍生其他业务的方向,很快决定投资量子视觉的天使轮。
与此同时,前火乐科技研发总监曾作为加入量子视觉,他曾研发过包括坚果G1智能家庭影院、坚果P1便携智能投影等6款畅销硬件产品,拥有不少硬件供应链方面的资源。
融资逐渐到账,考虑到增加数量和改变排布方式不奏效,团队想到更换更高水准的相机。于是,Gopro和索尼单反取代了小蚁相机。
先后试过20台Gopro与6台索尼A7S2的组合后,拼接效果仍未达到理想状态。他们意识到除相机水准外,传统的计算机视觉逻辑本身的不足是更加根本的问题。
去年年初,团队沉下心来,基于更迭的深度学习与计算机视觉知识,从根本上对计算机视觉算法做了重新推导,实现图像从基于缝隙的平滑过渡到像素级拼接与过渡的升级。
基于新算法,团队对硬件排布有了新的理解,“我们知道什么样的排布方式适合我们的算法”。于是从软件反推硬件,3月,团队推出相机VISIONGO——由20个Gopro拼接而成,同时推出的还有由14个BMPCC(专业高清摄像机)搭建而成的解决方案。
接着,团队试水影视拍摄,先后拍摄制作了张楚《晃动一下》MV和黄晓明《万水千山总是情》的VR版本,画面为4K3D,基本无拼接缝隙。
张聪对成片画质基本满意。但由于拍摄设备为相机拼接而成,使用与后期处理并不方便,若提供给第三方使用,不便只会更甚。“相机的设置与组合、素材整理、帧的同步、图像的拼接等,都是难处。”
这不是张聪想要的,他成立量子视觉的初衷,是希望让所有人都能方便地使用团队的技术与解决方案来拍摄、制作VR图像与视频。
基于此,他开始尝试开发一体式硬件。“当时想的是做出一款设备操作简单、参数可统一设置、且拥有配套软件的整体解决方案。用户只需学习一两个小时就能上手操作”。
筹备硬件开发的同时,6月,张聪拿到了IDG资本对量子视觉的A轮投资。
资金进入加速了开发进程,依托深圳强大的电子物料供应链资源,在踏过硬件结构、相机同步、素材存储与导出等一系列坑后,10月,量子视觉推出拥有20个镜头的VR摄像机AURA,并与暴风体育合作了中国网球公开赛的VR直播。
◆VR摄像机AURA
面向B端推整体解决方案
不过当时,张聪没有急着开发布会和做市场的宣传推广,他决定先继续提升硬件设备的稳定性与画面质量,等整体使用逻辑足够清晰时,再正式向公众推出。
接着,团队围绕AURA陆续作出软件与硬件方面的开发与优化。软件上主要包括实时监控软件AURA WORK与后期制作软件AURA STUDIO的推出。
AURA WORK实现了实时监看各个镜头画面、远程设置单个或多个镜头参数等功能,便于影视内容制作者及时根据现场情况调整相应参数。
AURA STUDIO则可一键快速导出、拼接、剪辑素材,并通过本地或SaaS服务器进行3D拼接和立体深层渲染。其还可与其他后期特效软件无缝衔接,简化后期操作。
硬件方面,根据量产条件,团队对硬件设备作出了包括修正排布序列等调整,并多次与工厂配合开模、调模。
与此同时,团队也积极尝试制作VR版本的行业应用:如与万科、中粮集团深度合作,为其拍摄制作VR版本的宣传素材;为美联英语制作VR版本的英语教学内容;与新疆广电部门合作制作“带你游新疆”的VR旅行内容等。
去年,量子视觉制作的VR行业应用作品累计30余部。谈及涉足行业应用的原因,张聪解释道,在拍摄制作这些作品的过程中,一来能及时发现技术与产品在应用中的问题并调整改善;二来这也是对相机市场需求的验证;此外,通过制作这些项目,也能实实在在赚些钱,“30个项目下来,收入约300万元”。
3月21日,量子视觉正式发布了20目一体化VR摄像机AURA,其水平方向为16枚视场角90度的广角镜头,顶端和底部则为4个视场角为190度的鱼眼镜头。
AURA支持H.264、H.265视频编码标准,最大可以输出25fps的10K 3D影像、60fps的10K 2D影像及120fps的6K 2D影像。
它也支持VR 直播,可实时输出6K、30fps的画面,并可通过RTSP协议进行有线或无线实时监看。
软件方面主要包含实时监控软件AURA WORK和后期制作软件AURA STUDIO等。
AURA整套解决方案主要面向B端用户,售价98000元。目前以官网直销为主,后期量子视觉将会提供云端的拼接服务,“这是为了统一降低成本,免得用户需要花大钱请专业人士来做拼接”。
接下来,张聪会将主要精力放在AURA整套解决方案的出售与发货上,同时也将继续优化硬件。
/The End/
编辑 杨雨晨 校对 吴泽骞
热门评论
目前还没有评论~