4K无缝实时拼接:TurboX助力猫眼视觉打造VR全景相机
2016年是VR的元年。VR硬件迅猛发展,使得这个从90年代就被期待和梦想的科技真正进入大众生活。但是VR作为一个内容驱动型的终端,还面临很大的瓶颈,那就是内容领域较为匮乏。VR全景相机——被行业广泛认为将是今年一个非常好的VR内容突破口。
在今年的两会上,数千家媒体无论在内容拼抢,还是报道形式的创新上展开了一场科技感十足的新闻大战。全媒体融合发展需要最前沿的科技设备与之相配合,记者朋友们纷纷使出高招,采用当下最酷炫的VR直播来进行新闻报道,带给观众“身临其境”会场的体验。这些装备中,最吸引眼球且佩戴起来最轻松的,莫过于法制晚报记者头戴的VR全景相机——CAT360 VR全景摄像机,这个昵称“猫镜”的设备,搭载了基于高通骁龙650高性能芯片的中科创达TurboX TM 智能大脑平台,由2个摄像头即可实现4K全景内容采集及本地实时拼接。
法制晚报记者头戴VR全景相机——CAT360 VR全景摄像机
TurboX TM智能大脑平台驱动VR内容采集设备发展
谈到VR内容,就得经过内容采集、后期制作等过程,那就必须有VR底层技术作为支持。由于VR强调完全沉浸,因此内容的采集过程对图像分辨率、质量和拼接技术等都有很高要求。对于大多数全景相机厂商和创业团队来说,他们主要聚焦在产品定义、上层应用的开发、满足用户的差异化需求,很难投入大量人力和时间去开发操作系统。VR底层系统的开发需要花费太多的时间和精力,而中科创达的TurboXTM智能大脑平台,将为创新创业公司及OEM厂商解决这个难题,并帮助合作伙伴加速导入新产品并实现量产。
中科创达TurboX TM智能大脑平台
中科创达这款基于TurboXTM智能大脑平台的智能相机解决方案,基于Qualcomm骁龙650/625处理器,实现了多路、4K高清H.265的视频拍摄和网络传送功能。在强大的CPU和GPU以及开放的操作系统支持下,TurboX TM提供了人脸识别、运动追踪、智能学习和实时全景视频拼接等丰富算法。该解决方案包括硬件PCBA设计,双鱼眼镜头的选型和效果调优,双镜头组装及整机散热解决方案、拼接和畸变校正算法,并且搭载了全新优化的智能操作系统和配套的手机APP,真正做到一键拍摄,一键分享和一键云存储的Turnkey Solution。TurboX TM解决了市面上许多同类产品无法达到的诸如机内实时拼接,双镜头白平衡和曝光同步以及自动畸变校正,并且利用了高通骁龙芯片的强大计算能力和超低功耗,整机功耗低于3W,实现一次充电可以连续工作一小时以上的续航能力。创新创业公司及OEM厂商可以在TurboXTM VR全景相机解决方案的基础上,在三个月甚至更短的时间内开发出自己的全景VR相机产品。这也是中科创达一直传递的‘一半的时间,一半的成本’的概念。
搭载TurboX TM智能大脑平台的“猫镜”获好评
中科创达与猫眼视觉是技术合作伙伴,“猫镜”是双方共同设计研发的一体化VR全景相机。“猫镜”搭载了基于高通骁龙650高性能主芯片的中科创达TurboX TM智能大脑平台,是TurboX TM 在智能相机领域一个非常成功的案例。
猫镜作为全球首款"真4K,可直播"VR全景摄像机,其涵盖了4K 30FPS高清摄影、本地实时拼接、4K Wi-Fi直播推流、UVC、低功耗和快速启动等一系列关键技术。首先,猫镜通过中科创达的双Camera模组校准和拼接算法实现了把两个镜头拍摄的内容进行实时的无缝拼接,生成无死角的VR全景内容;其次,猫镜支持4K 30帧H264/H265全景视频拍摄,并可以通过独立支持网络直播功能而不需要额外的视频拼接和转发服务器,用无线网络实现视频流推送服务,大大降低了VR直播的门槛。此外,通过手机APP客户端,还可以实现低延迟的RTSP本地Wi-Fi预览功能,以及丰富的相机配置管理功能。同时,这款VR全景摄像机重量只有160g,内置高通28nm的四核低功耗处理器,并支持128GB的存储扩展,是目前最轻体积最小的4K VR全景摄像机,具有很好的便携性,未来可广泛应用于教育、旅游、娱乐、传媒、房地产等多个领域的VR全景录播、直播。
值得一提的是,猫镜全景摄像机2016年首次亮相“全国双创周”即引来极大关注,作为创新型代表产品向国务院、各部委、北京市各级领导作了重点展示,获得领导们的充分肯定。同月,猫镜全景摄像机在“2016移动智能终端峰会”上荣获“墨提斯奖”年度“虚拟现实技术创新奖”奖项。目前,猫镜全景摄像机已是中国移动咪咕视频基地、中国青年报、法制晚报等媒体选定的专用VR全景拍摄设备。
中共中央政治局委员、国务院副总理汪洋听取“猫镜”产品汇报
“墨提斯奖”年度“虚拟现实技术创新奖”奖项
近年来,中科创达在智能硬件产业链各领域进行布局,致力于用户体验的提升,希望与产业链合作伙伴一同推动智能硬件产业发展。中科创达不仅在VR设备上可以提供一站式解决方案,在VR内容需求领域上更是加大技术研发,不断给产业链的合作伙伴创造新的技术价值和产品价值。