阿里云创新中心 > 我的项目 > 实时VR3D一体式相机与解决方案
实时VR3D一体式相机与解决方案
视点创新让人人都可以拍摄或者直播自己的3D电影(视频)
https://www.viewpt.cn 深圳视点创新科技有限公司
项目描述
  • 项目名称: 实时VR3D一体式相机与解决方案
  • 一句话描述: 视点创新让人人都可以拍摄或者直播自己的3D电影(视频)
  • 所在地: 广东省 | 深圳市
  • 行业: VR/AR
  • 公司全称: 深圳视点创新科技有限公司
  • 产品类型: 硬件及其他
  • 项目描述: 项目介绍 深圳视点创新科技有限公司专注于实时VR 3D&3D软硬件产品&解决方案的开发与服务。 视点创新解决了传统VR 3D&3D视频(电影)拍摄时利用2台摄像机/电影机/单反成本高、复杂、非实时的痛点,这些问题点同时也导致VR 3D&3D视频(电影)的严重缺失。 视点创新相关产品&解决方案是通过VR 3D&3D一体式相机为载体,结合实时算法&软件,实现人人都可以拍摄自己的VR 3D&3D视频(电影),实现实时直播&录播三维立体的3D视频(电影),展示自己的3D创意,快速丰富VR 3D&3D视频(电影)内容。 现核心成员有4人,都是来自华为、NOKIA/三星、富士康供应链体系的软件/算法、供应链、营销的资深人士。 视点创新是业内第一个将实时VR 3D一体式相机开始商业化应用的团队,应用于海外VR 3D直播平台。 在实时VR 3D领域,视点创新暂时没有直接的竞争对手;区别于360°全景相机,视点创新专注180°VR 3D&(90°)3D相机,二者在硬件形态、视频格式&输出方式、应用场景都极为不同,也导致关键技术&路径的极大区别。 基于5G的普及,和观看端/VR视频平台的发展情况,视点创新现阶段主要输出直播/录播产品定制&解决方案的TO B业务,后期将根据市场状态,推动TO C产品的商业化及渠道建设。 视点创新的目标是在实时VR 3D&3D领域,做到第一,覆盖TO C、TO B市场,并结合VR 3D&3D视频内容端,形成VR 3D&3D视频(电影)相应视频格式、播放等的标准。 深圳视点创新科技有限公司将不断推进产品&方案的研发,将帮助视频领域的客户形成新的利益增长点。 项目背景&VR及VR相机现状 1、2021年,国家发布了“国民经济和社会发展第十四个五年规划和2035年远景目标纲要”,其中虚拟现实和增强现实是数字经济重点产业,并且“内容采集制作等设备”被标列; 2、视点创新的VR 3D产品&解决方案就是内容采集设备,区别于传统的360°全景(2D)视频,VR 3D相机拍摄的180° VR 3D视频是如同3D电影一般立体生动的,也更吸引人; 3、 现有VR相机绝大多数为360°全景相机,以沉浸式2D视频为主,适合拍摄无主题&无主人公的场景,比如看房、动物园、公园等等,观看者自由选择观看角度; 视点创新所专注的实时VR 3D&3D相机,拍摄3D电影一般的三维立体视频,适合拍摄有主题&主人公的场景视频,比如体育直播、娱乐表演、家庭拍摄、培训&教育等等,需要观看者有关注视角,具备沉浸感的同时,获得三维立体的观感体验; 以上,2种VR相机在硬件形态(视频格式)、视频输出形式、应用场景的不同,也导致所依赖的关键技术&路径的不同; 所以,现阶段,视点创新暂时没有直接的竞争对手; 4、根据高盛报告预测2025年全球VR产业将在300亿美金以上,VR相机市场2021年预测容量为50亿+元,未来年复合增长率将达到30%; 5、海外Youtube、Facebook、Twitter等社交及视频网站已经支持180° VR 3D视频,现在已经有少量180° VR 3D视频发布; 6、现在的3D电影及180° VR 3D视频的拍摄,都是通过2台摄像机/电影机/单反完成的,需要对2条视频进行专业处理后,再进行后期编辑,这导致视频制作有成本高、复杂、非实时的痛点,严重阻碍了3D视频的丰富; 比如被苹果收购的NextVR直播NBA就是用2台RED电影机进行,通过服务器算法后进行的;国内,中国电信拍摄VR 3D视频是通过2台单反拍摄; 7、随着5G快速落地,高带宽低时延的特性,解决了超高清VR 3D视频实时传输的问题; 8、全球知名电子品牌 华为、苹果、OPPO、小米、三星等等都已经推出或即将推出VR/AR头显或者眼镜,随着观看终端的开始推出和普及,VR视频将会占据80%以上的流量,而三维、立体的VR 3D&3D视频(电影)将会占据主流; 2021年9月份,字节跳动90亿收购了国内VR头显品牌PICO; 2021年Oclus quest2这个型号预计单款销量800万-1000万台; 观看端的快速发展趋势,决定了对VR内容,特别是VR视频需求将会急速扩大; 9、传统的2D视频及视频平台的商业模式,已经很难让2D视频制作方获得更多的利润,急需新的视频技术,形成新的商业模式,获得新的利润增长点; 以上,市场对VR 3D&3D视频需求和现有拍摄设备的视频产出,已经有着痛点和矛盾; 视点创新将利用独有的核心技术,形成VR 3D&3D软硬件产品&解决方案,实现实时、简单、低成本的生成VR 3D&3D视频(电影); 技术核心 实时VR 3D&3D是系统化的项目,涉及硬件&算法&APP&解决方案; 要实现真正的商用,研发过程中需要经历硬件的必然时间周期、算法&软件生成和优化、部件&整机测试等等,由此形成技术、时间、实施经验等壁垒; 1、实时VR 3D&3D相机&解决方案,必须达到以下商用化要素: a 能实时直播和录播输出VR 3D&3D视频,快速分享给别人; b VR 3D&3D视频人眼必须观看舒适,身临其境,并且能长时间观看不眩晕; c 能长时间工作,相机工作稳定输出效果如一VR 3D&3D视频,比如直播环境为365天,每天在室温20-35℃环境工作8小时以上; 2、算力平台上,视点创新打通了13+套的海思平台/安霸平台/新AI芯片(签署了保密协议,不能透露品牌),适配各型号Sensor的实时输出视频的需求;3、视点创新打通SONY&三星 10+款Sensor; 4、同时,为了适配SENSOR及场景需求,视点创新形成了20个镜头模组; 5、基于以上及场景需求,视点创新生成了10+硬件方案(算力平台+SENSOR),覆盖1080P/4K/5.7K/8K分辨率; 一套硬件从设计到软件&算法适配、测试完毕,在没有任何问题的情况下,至少需要3个(工作)月; 就现有10套完整可商用的方案,至少需要30个(工作)月(累计时间); 6、三大重要的实时基础算法,远远领先行业: 双目水平校正精度在2个像素内; 实时VR 3D&3D视频畸变低于0.5%; 双目&多目并发时序在0.00001秒以内; 7、解决了硬件算力匹配问题,同时通过软件动态调整实时工作功耗; 8、通过纳米散热,微噪声风扇等等方式,形成软件动态功耗+硬件散热的多种组合方案; 9、整体硬件上,解决结构强度、精度、散热等问题,解决了镜头模组相关材料、精度、受热形变一致性对清晰度的影响等等一系列问题; 10、在和海外项目对接过程中,形成了可靠的与视频服务器端的对接参数与技术服务路径; 协助客户打通 视频采集端-视频服务器端-观看端 三位一体,端到端的服务; 9、在其他重要应用&场景&图像优化算法上,视点创新已经有基础,将完善后应用于商业化产品和解决方案中: 基于双目的视频深度信息提取 多目视频人像抠图算法 光流拼接算法 AI跟踪算法 基于多机位相机的3D建模 等等 基于以上,现阶段,视点创新的技术和方案领先行业2-3年,同时已经可以快速满足客户要求,提供成熟的产品定制&解决方案。 市场分析 1.高盛预测2025年,VR产业规模为300亿+美元。 2.VR相机市场2021年预测容量为50亿+元,未来年复合增长率将达到30%; 视点创新实时VR 3D产品&解决方案的目标是VR相机市场份额第一名,计划在2025年,视点创新的市场份额目标要超过50%; 3.相关VR头显、AR&VR眼镜等观看端年复合增速率53%,预计2025年销售4500万以上,这将极度刺激对视频内容需求,而视频内容的丰富也将帮助消费者购买终端; 4.2021-2025年,全球VR直播规模将从11.61亿美元增至41.13亿美元; 5.海外欧美、韩国、日本市场由于观看端普及达到5-10%,海外社交及视频平台支持VR 3D&3D视频(电影)格式;同时由于竞争的原因,海外成人2D向3D迁移在加速,这是刚需; 6.国内由于观看端的普及率较低,视频平台还没完全支持VR 3D&3D视频(电影)格式,但TO B的应用场景在加快商用; 7.现阶段还没有直接的竞争对手,国内外竞争对手主要的产品和技术路径还是围绕 运动+360°全景(2D)视频,比如Insta360; 180° VR 3D视频对比360°全景(2D)视频在算法和硬件上要求高非常多,如下图,360°全景视频水平拼接错位,由于是2D视频并不影响观看,但VR 3D视频绝对不行; 同时,由于视点创新已沉淀了10+以上的硬件方案+算法+软件,可以定制化的为TO B客户输出解决方案,这是现有竞争对手无法做到的。 8.目标客户: 海外极限运动爱好者 3D视频拍摄爱好者(Facebook、Youtube上有相关频道、群组) 海外合法成人视频网站(欧美、日本) 直播平台(比如快手、抖音等,已接触快手) 电视台直播体育/娱乐(央视已经开始春晚360°全景直播) 视频网站(爱奇艺等) 婚庆公司(现在已经开始用2台单反进行拍摄了) 国内各级政府的数字党建视频3D化等等 基于以上,VR视频,特别是VR 3D&3D视频(电影)将获得消费者的喜欢,并在快速发展VR市场获得更大的市场份额,而视点创新作为VR 3D&3D产品&解决方案输出方,将帮助客户快速生产VR 3D&3D内容,也将自我发展壮大。 现阶段目标市场(客户)&市场实施计划 基于商业模式,全球VR行业发展及预测,结合产品规划落地,具体实施计划和节奏: A.目标市场(客户): 1、录播视频&电影平台的3D频道,比如爱奇艺的VR,Youtube、Facebook等 2、直播平台转3D直播,娱乐直播(舞蹈、表演等)、购物直播等; 3、培训&教育3D直播&录播,舞蹈、武术、健身等等; 4、国内红色党建相关视频的3D化; 5、婚庆市场视频3D化; 6、电视台体育赛事3D直播; 7、海外成人VR 3D的直播&录播; 8、极限运动的3D视频拍摄; 9、远程医疗 以上,视点创新提供的VR 3D相机产品,实现实时录播&直播VR 3D&3D视频(电影),做到上手即用,即拍即分享,哪怕孩子都能拍摄自己的3D电影; B.市场拓展计划: 基于5G发展及VR行业发展状况,对中国及全球市场,有如下计划: 1、 欧美、韩国、日本市场由于观看端普及达到5-10%,将同时推动To C&To B的覆盖 - 明确代理商,通过Ebay、亚马逊等方面进行销售 - 寻找代理商,覆盖欧美市场的线下渠道 成本销售和方案输出并举; 确保代理商50%以上的利润; - 基于5G的发展,需要通过代理商&客户&宣传,与运营商产生业务关系 - 覆盖欧美、日本、韩国等娱乐及成人方面的VR 3D&3D直播/录播平台 - 新产品将通过Kickstarer&Indiegogo等众筹平台汇集首批订单 2、中国是个巨大的市场,但基于观看端普及不足的情况,主要覆盖To B市场,To C市场根据实际情况再进行线上销售: - 配合中国3大运营商在5G VR上的利用和宣传,推动产品进入运营商的销售体系。其中,中国电信采购了韩国的VR 3D拍摄设备,设备是由2台单反组成的,拍摄的视频效果并不好 - 婚庆摄影市场。中国婚庆摄影市场有600+亿(人民币)规模,但行业竞争激烈,这个行业急需有新的视频技术,拓展从业人员的新的利润来源 - 随着中国VR观看终端的不断推出,结合VR观看端品牌方进行合作,联合推出产品 - 在官网建立销售页面,覆盖VR视频拍摄公司及团队 - 对接中国传统2D视频&直播平台,输出产品 - 培训&教育视频制作方 - 远程医疗
创始人
张耿
CEO
创始人介绍 清华大学计算机硕士,12年华为工作经验,20年软件行业经验,长期从事平台软件系统设计和分析工作。 曾任知名相机公司研发负责人,负责VR全景/180° VR 3D相机的研发,并完成VR180 软件框架搭建