科技讯7月6日消息,由科技和媒体新闻学院联合举办的第五季“媒体开物沙龙”今日在北京师范大学京师大厦召开,本次沙龙的主题为“虚实之间:如何用VR技术讲好故事”。
IDEALENS联席CEO刘天成介绍说,VR的交互过程首先要有优秀的穿戴设备,一些人佩戴VR设备会感到眩晕,作为硬件厂商,前提是能让用户看得清楚,其次才是看得舒服。当VR视频摆脱了传统观看模式,增加了各种交互,VR视频和VR游戏的界限将会被打破,VR技术最终会让VR视频看得得更清楚更舒服。“看清楚,到看明白,再到看通透,VR技术也在不断的发展。”刘天成说道。
VR的未来是什么?在刘天成看来,VR很快就会向AR过渡,现实和虚拟可能有一个结合的过程。当VR向AR过渡的时候,或许我们的内容就会跟实际的景别相结合,可能对整个内容的设计和把控就会更加复杂,但是前景会更加诱人。(冉冉)
以下是刘天成在媒体开物沙龙中的演讲实录:
感谢媒体,感谢北师大,非常高兴有机会跟各位沟通一下。讲这个话题我是又兴奋,又忐忑。所谓兴奋,之前我最早是做内容出身,是电影导演,对内容来说并不陌生。所谓忐忑来说,这还是专注于硬件的企业,对内容端较少涉及。但是兴奋和忐忑之后还是愿意跟各位沟通一下。我今天演讲的题目是“看见不远的未来”。我出去的时候经常拿这个做题目,我觉得有各种各样的不同的解释方式,今天讲的VR片的拍摄主要还是让大家以看为主,怎么样体现得更好的,能够展示出我们看的效果。所谓未来是讲现在确实还没有很成形的VR成片出来,VR内容到底是什么样的,大家都还在探索阶段。但是这个未来一定是不远的,因为有这么多同仁在努力,有这么多学者、专家、同学们、从业者,所以我相信未来一定不远。今天主要讲讲VR硬件的发展和VR叙事之间的关系,因为我们是专注底层算法,我们的科技、硬件制造的公司,跟各位沟通一下。
VR和AR两个概念各位要做一个区分,好多人VR和AR不太分。一个是在虚拟的世界里面发生的,一个是在真实的世界上进行叠加的,今天主要讨论的是VR的概念。VR的发展历史跟各位梳理一下,可能跟各位想象不同,1962年就有第一台VR设备了,一直发展到现在才算进入成熟完善的阶段。需要跟各位强调的概念就是什么是VR?很多人对VR的概念大概还停留在手机上装盒子,大概能看电影的状态。但是其实学界定义的VR应该是有一个交互的过程,首先我们要看到,看到会有一个反馈,反馈以后,我们的外部会有一些动作,进行动作捕捉,再有一个反馈,这是完整的VR定义,而这个定义对内部创作来说也是特别有意义,就像前面几位专家讲的,必须有点选和交互的过程,可能这个视频本身才变得更有意义。
关于VR,我们其实把它分成四个阶段。第一个阶段就是概念形成,第二个阶段就是现在我们所处的阶段,就是VR设备开始进入各个应用领域,大家开始注重这种体验感觉了,我们是硬件公司,我们就从硬件的角度来说,当然这种硬件的指标也直接决定了内容的生产。首先请大家记住四个点,一个好的VR一定有一个优秀的可穿戴的设计,为什么要这样子呢?特别简单,如果我们顶着特别重的机器大家戴着特别不舒服的话,你是没有兴趣关注它的内容的。第二点是有超大视场供应系统,动态响应和位置出追踪。首先优秀可穿戴的设计是怎么样的呢?这是我们自己的产品,也为我们自己打一个广告,我们这个主机重量低于300克,戴起来是比较没有负担的,这是类似夹子的螺旋状的,大家可以体验一下,三秒钟完成佩戴,并且有很好的兼容眼镜的佩戴,目前可以佩戴两小时以上。舒适型的目的是为了告诉大家如果没有一个很好的穿戴的体验我们是不太可能谈内容的制造以及分发的。
另外是超大视场光学,人眼能看的角度就叫做FOV,就是视场角,如果视场角比较小的话,就像戴着望远镜看世界,肯定没有任何沉浸感,FOV比较大的时候才能有比较好的观影体验。一般120度到220度是很好的,因为有些时候,手指头在太阳穴的位置可能看不见,但是你依然能够感知它,这就是人体构造的可爱之处。目前我们的产品做到120度,还不够,我们下一步准备做到180度。另外是高动态的响应性能。戴VR大家都觉得晕,一个是有时延,你脑袋转动的时候,画面要感知,画面要跟着头一起旋转,中间就涉及到感知的过程,如果过程不同步的时候,等于人在动,画面没动,就会晕。另外是刷新率,很模糊,画面就会一愣一愣的,如果有90赫兹到120赫兹的刷新率就会很好。这两个决定了戴这个设备是晕还是不晕。
作为一个硬件厂商能够给大家带来的感觉就是要让大家看清楚,这一点特别重要,做VR内容总得有人看,为什么我看你,不去看电视、电影?那看得多清楚?但是我们讲了很多,视角不同,沉浸感,这是VR带给我们的最新奇的感觉,但是前提是你得看清楚、看舒服,这是基矗大家想象一下,为什么有一段时间,所谓汽车电影院很流行?就是大家坐在车里看电影,但是现在汽车电影院都关停了,就是因为你看着不舒服,不如在电影院里。如果看得舒服、看得清楚、看得感觉很不错的基础上,下一个命题又来了,VR内容到底怎么做?前面几个专家一直在说,因为我自己本身并没有做过VR内容,好像不太有立尝底气去讲这个。前一段时间我们在日本开发布会的时候,请漫微的阿维(音)给我们站台,阿维先生虽然年纪很大了,但是他愿意拥抱这种改变。这种改变一定不是坏事,简单说,当有声电影出现的时候,那种拍默片的导演就会觉得末日到了。当特技特效出来的时候,只会用摄像机实景拍摄的人也会觉得是一种破坏。VR这种最新奇的方式出现的时候,依然有人会觉得这种方式对电影是一种破坏。但是我们发现电影经历那么多破坏也没有死。我们要拥抱这种改变,这种改变一定是有意义的。
VR硬件领域内很有意思的位置跟踪系统。以前戴一个头盔如果只能简单地进行一些观看的话,它基本上就变成了一个手机加壳子,为了避免用手机看视频的时候睡着了砸在脸上,VR的效果仅仅是如此,因为有了位置追踪系统以后,你就会变得跟VR的内容是可接触、可点选,甚至是可互动。它就实现了这么一种可能性,图上渲染得很炫,但是实现起来并不是特别困难,手套上都有感知的系统,点来点去的时候就会反馈到头盔中,会有各种各样的不同的效果,就像刚才各位专家讲的是一个道理,只不过从VR头盔变成手部的动作。接下来的发展会让它的响应时间非常短,而且支持多人在线。这个时候可能大家越听越像游戏,分享一个小观点,在我看来,当我们的视频摆脱了简简单单只看不动以外,当我们有一些选项的时候,其实我们所谓的视频内容跟游戏之间现在正在一点一点被打破,我觉得这种打破并不是一件坏事,很有可能产生新鲜的内容形态,但是我们今天主要是讲视频内容,所以不多说了。通过这些,怎么让大家看明白?这个明白很重要,以前我们看任何的视频内容都是单向输出的过程,很多时候导演用的手法太高超,很多人看不懂,还得看第二遍,这种感觉不太好。就像以前有一些有意思的想法,叫文化快餐,言语中的意思就是没营养。科技的发展或者艺术的发展最终的目的就是让大家用更小的成本看得更明白。让内容的展示会更清楚更明白。
未来内容会怎么做?我们提出VR3.0时代,基于广场技术的VR时代,像游戏建模一样,真正出现出来一个模型,人戴着头盔可以走进去,可以通过各种角度看。这个事能不能实现呢?其实并不是特别难,主要是传统的虚拟现实和工厂技术根本是不同的。最终实现什么结果呢?在看一个电影或者电视剧的时候,演员在演,你可以在任何时间、任何角度、任何位置观看他们的表演。这种内容好像也是一个非主流的内容,但是其实在戏剧中已经有了实现,比如说像有那种体验式的戏剧,我不停地在演,人可以走到演员跟前看,不停地在发声,在不同的角度推进故事的发展。光场的技术就可以实现,但是目前的压力比较大,因为要处理的数据量太大了,可能目前仅仅是想象阶段,但是我们想象未来可能还会有这种可能。所以这种东西我们管它叫看通透,看得特别地通透,各个角度、各个方位,如果要看得很通透,也就是说我们简简单单地把一个二维,我们通过二维的手段展示出来的东西变成一个全方位的、立体的,我们不能把它叫作三维的,因为每个角度都照顾到,一点瑕疵没有的情况下,跟现在相比可能升了好几维,对观众来说有这样的体验真的是非常通透,虽然目前没有实现,但是将来是有实现的可能性的,各位创作者可以提前做准备。
视觉神经解码技术时代。学理工科的知道,人脑反馈给人眼的世界可能不是最真实的世界,说句得罪女性同胞的话,各位女孩是不是平时在家老爱照镜子?大家有没有觉得别人给你拍张照片跟你在镜子里看自己是不一样的,觉得要丑好多?其实特别遗憾地告诉大家,你本来就长这样,是你的大脑欺骗了你。你每天看镜子的时候,人脑会有一个暗示,我很美,你会找到自己最好的角度,但是相机中才是真正的你。通过改变这种脑视觉的认知活动有可能会创造出一些更新鲜的视觉体验,但是这个就更远了。目前来讲,我们其实是做硬件的,所以就不跟大家过多地去谈一些就事论事的东西,带大家普及一下,如果要做好的内容,就一定要有好的承载,所以大家还可以关注头显,因为VR头盔头显是最直接,也是唯一的方式,目前这三种都是带线的,下面就是各种主流的对标,标黄字的是我们自己的,大家不用细看了,肯定各项指标都很好,不好的指标我也不会写出来。但是我们的东西确实挺好的。中国国内是比较多做VR一体机的,所谓一体机大家应该明白,就是脑袋后面没有拖根线,所有的处理都在头盔里面完成,各项指标我们家确实都挺好的。
重点跟各位介绍一下我们这个头显设备其实是很愿意跟所有的内容方进行合作的。游戏我们叫开发者,其实视频的内容我觉得也叫开发者,这种开发就是说我们共同在现有的科技力量的推动下,在探索、在开发各种呈现出最好的一种视觉内容的可能性,我们跟三星有过一个合作,目前大概的情形是这样子的,就是我们的产品大家简单地过一下,FOV比较低的时延、比较高的刷新率、比较清晰的画质。另外可以做强互动的视频,当然也需要各位跟我们进行沟通和合作。
接下来跟各位介绍一下,我们一直在说拍的过程,拍的过程其实我们也愿意跟各位帮帮忙,我们是基石,希望各位踩着我们做更好的内容。我本人是做内容出身的,所以我深知摄像机对拍摄工作的重要性,我们公司也研发了这样一个360度的全景摄像机。重点谈一点我们希望解决的问题,很多的时候,摄像机的幕数比较少,大概三幕、四幕,这比较轻便,也好处理,但是缝合的时候过渡是不自然的,但是肯定是摄像机的幕数越多越清楚,但是幕数越多对技术的要求就越高,目前这个团队是算法领先的团队,工程师研究出了最高大概14幕专业的摄像机。什么概念呢?基本上保证缝合的角度,因为缝合的点会特别多,基本会比较比较自然,拍摄出来比较细腻。因为我们的算法比较强,我们并没有依赖外置计算机进行配合,目前采用内置的一体化的解决方案,就是拍的同时可以在内部实现缝合,比较进行实时预览,这个话的意思就是我们可以做直播,更简单地说就是可以做直播,并且真的做直播。最左边是在日本东京发布会现场的VR摄像机,右面几个是在国内分会场进行VR直播的过程。这款产品肯定也有很多类似的,但是为什么我们把它做得这么大、做得这么重,甚至有点煞有介事的样子?因为我们觉得随着VR内容的不断发展,我们对于设备的要求应该是摆脱了那种原来的样子,应该越来越专业,但是这个对内容制作者还是很有必要的。不仅仅在直播中有用,在录播中同样有用,并且我们把它做成3D的效果,未来的状态在带宽足够的情况下,您可以戴着眼镜,可以实时地看到一个3D的VR的全景直播。这是我们对于VR内容方面,我们希望从硬件的角度给大家做出的支持和帮助。接下来我们会有一系列的活动,都在做,我们也在不断尝试。
VR的未来是什么?在我看来,VR很快就会像AR过渡,AR就是增强现实,现实和虚拟可能有一个结合的过程。我们公司也在做AR相关的,左边这个是AR的一个简单的示意,这是实景拍摄,没有做任何后期渲染,并且所有的处理都是用了一台iPhone6手机,并不是说用了很好的处理器,我们就是希望力图通过算法上的优化,能够用比较中等性能,甚至是低等性能的移动平台来实现AR的过程。当VR向AR过渡的时候,或许我们的内容就会跟实际的景别相结合,可能整个对内容的设计和把控就会更加复杂,但是前景我觉得会更加地诱人。
以上就是在一个专业的技术公司,从硬件立足的角度对于VR内容想谈的一些想法,给各位的一个支撑。我们是一个比较低调的技术公司,也再次感谢主办方,也希望和在座的各位,尤其是北师大的各位老师、媒体的各位老师、业界的公司前辈们多多地合作,尤其是各个VR导演们,希望咱们一起努力,能够让VR内容从梦想到现实,就像我今天演讲的题目一样,我们希望能够遇见不远的未来。
谢谢大家!