英伟达张建中:VR技术的下一破局点有哪些?

发布于:2016/7/27 0:00:00 | 337 次阅读

    以下内容根据英伟达副总裁兼中国区总经理张建中及青瞳视觉联合创始人祖厚超在极客 2016 奇点·创新者峰会「What's next about VR 」闭门论坛上的演讲整理而成。
    我觉得很多人都认为是 VR 是很新的技术,大家都认为 2015 年是 VR 的元年。其实我认为 VR 这个技术大家把它看的太新了,其实 VR 是一个很古老的技术,它从我们很多人没有出生之前,60 年前,VR 就已经开始有人尝试了。要一个大型的设备把人装进去,感觉或者模拟,所以说 VR 本身不是一个新科技是一个古老的技术,但是在这个过程当中有许多的科研工作者花很多时间来让 VR 技术进步。
    事实上,每隔 10 年、20 年,VR 技术都有不同的变化。在这些变化当中,我们看到大概在 1968 年的时候就有人把 VR 戴在头上移动了,跟现在我们形式上类似了。
    大家认为 2015 年 VR 元年的时候,这个时候才开始有代的头盔,大家体验的时候觉得一下子很震撼,觉得 VR 科技有很大的飞跃。如果跟历史比较一下,是什么原因导致 2015 年头盔能够给消费者带来次震撼的效果,而不是像 60 年的 VR 只能在实验室里面让模拟,就是因为我们在 2015 年的时候发布了新的 GPU。
 

    我们准备在下一代把它整体性能提升三倍。在不停的变化当中,VR 真正能够进入消费、进入实用阶段,GPU 的性能是要有很大很强的计算能力的提升,才能满足我们用户的需要。
    10 年前我们可能还没有 GPU,GPU 时间很短,这几年发展很块,带来是整个计算能力的提升,我们今天的 VR 头盔,你去看的时候,你发现很多 VR 的体验都让人不尽如人意,觉得分辨率不够高。当我们每个人的手机有了视网膜屏之后,当你看到点再也看不出来之后,那个就能满足我们用户的需要。今天带上头盔你会发现每张图片像素是很粗的,直到有一天像素很细之后,你的眼睛不用挑剔图象质量的时候,那时候 VR 的品质就会跟今天很不一样。
    在 VR 世界中有很多应用,我们在开发的时候需要很多的现实模拟,你一定要有很好的方法去模拟真实的世界,要有工具帮助我们开发者开发出更好的内容。
    每个人都知道,人跟机器的交互最简单的还是靠人自己。你会看到很多用户体验方面一定会有很多公司研发更好更新的科技进行人机交互,我们今天看到很多合作伙伴在不同阶段开发出很多有趣的设备,这些不同的设备在几个月当中会迭代得非常快。我知道有很多公司开发的人机交互在多人互动的 VR 交互方面已经非常成熟了,其中的方法还是一个人机友好的交互方式。
    没有好的内容技术的应用是不会成熟的,内容驱动技术发展,技术发展也带动了内容的进步,在 VR 系统当中内容的开发商才是的关键。VR 的引擎和内容是非常重要的。
    这几个点结合起来可以把整个 VR 行业从传统带向新的阶段,就可以在整个内容方面有一个很大的提升,但是这些提升需要一个强大的 GPU 性能去驱动。去年的产品已经是世界最快的,但是只能达到 60 帧。我们放大成两个左右眼睛渲染的时候,假设分辨率是 3000×1680,计算能力需要 450MP/S,基本上你要扩大 7 倍的渲染能力,你的 GPU 计算能力要有 7 倍,但是知道这个是非常困难的。
 

    这是我们今年发布的产品,这也是在所有的网站跟销售当中卖的的显卡,GTX 1080,只有它才可以满足 HTC Vive。提升的 7 倍的渲染力,我们在 1080 的显卡上做到了。在整个 GPU 性能提升之外,我们在里面加了很多 VRWorks 套件的技术。在这个里面我们把它增加了一个新的渲染引擎,在 GPU 渲染的同时,不只是渲染眼睛看到的部分,它把你的左右方向全部渲染完了,当你的头左右移动的时候就不需要再做工作了。如果 GPU 在渲染一个 360 度镜像的时候性渲染完,你在头盔移动的时候就不需要再计算了。这种方法可以把整个看到的面或者你的眼睛能看到的视角范围内的画面全部渲染完。这样的方式在 GPU 能力不够的时候,就可以达到很好的性能,你的头左右移动的时候不需要再渲染一遍。
    我们把眼睛看到的画面折射成你的眼球的曲面,用这样的方式把 GPU 的图形图象渲染能力提升 7 倍,这样的好处可以让所有的计算当中减少了很多计算量,你会看到 VR 的性能在 1080 显卡当中比 GTX960 提升了 7 倍。可以让 HTC Vive 达到 140 帧。
 

    我们都知道在 VR 的世界当中不只是眼睛去看,所以我们要看到你的视觉、听觉、触觉等各个方面模拟出自然世界当中各种各样的效果。我们利用人的五官,眼睛、耳朵、手、皮肤我们把这些感觉增加进去,专门做了一套 VRWorks 套件,实实在在模拟现实中的一切,物体跟物体之间的碰撞,物体跟物体之间的轨迹,都可以根据重力加速度模拟。
    同时我们也做了非常好的一些开发工具,这些开发工具当中包括了很多物理模拟的 SDK,其中有 PHYSX,拆分成小颗粒做很多分子运动的模拟,也可以做很多流体的模拟,可以做很多细搭的建筑物,精细到每个细小的小块,让它产生实际的效果。可以看到很多战争的场面,破碎的物体。
    怎么样体现这个,我们为了让很多开发者学会使用这些新的 SDK,我们做了一款游戏叫FUNHOUSE,建议每个人欣赏体验一下 FUNHOUSE 带来的效果,我们打算把源代码开放在网上,让所有的开发者自己下载。我们也打算跟国内的游戏开发社区,给大家提供相应的技术支持,教会每一个开发者有能力开发出更加逼真的自然的游戏效果。
    这个效果到底怎么样,我建议每个人找到设备去体验,这个模型做的很简单,简单的物理特效模拟游乐场,所有的运动轨迹是一样的,如果篮球可以产生重力加速度,反弹和碰撞产生的结果都是非常真实,气球破碎之后粒子的状况,如果游戏开发的好,可以开发的很细,如果开发的很细对于我们的 GPU 就会很麻烦,你会很快秒杀我们的 1080,有的人可能会买 4 块,也是促进我们尽快研发下一代 GPU。其实很多人玩家觉得这个显卡太慢,这也是 GPU 为什么这几年加速发展的过程。

    为了让这些东西做的很好,AUDIO 是非常重要的一点,为了把这个做好,这个也是非常简单就是声音的折射和反射,对于 GPU 来说非常容易,因为在 GPU 有一个引擎专门做光线追踪,如果有到声音里面更加容易,声音源没有那么,反而光源会很多,我们把这个算法加进 VRWorks 套件里面。当然我们每个人都会迫切需要 Volta 尽快上市,好消息是它会很快,坏消息是还要等两年。
    今年如果我们是投资人你会发现投资的两大科技点一个就是 AI,一个就是 VR,所有这一切就是基于 GPU,如果一个企业不懂 GPU 研发,你投资给它是有点浪费的,因为它很难找到技术源泉驱动他的应用。
    总结一下 VR 里面,我相信 VR 当中对于我们整个生态系统来讲,无论是做 HMD、引擎还是游戏公园,大家如果有什么技术帮助可以找我们 NVIDIA,我们也愿意跟所有的同行,所有的生态系统的合作伙伴共同把 VR 推向一个新的高度,这个点是非常好的点,的投资和的开发点,起步点是一样的,没有先后,中国有机会超过其它国家,我们也希望中国的开发者能成为最的开发者,谢谢大家!

参与讨论
后参与讨论

//评论区

推荐阅读

智能网联汽车国际标准法规协调专家组(HEAG)召开工作会议

近年来智能网联汽车快速发展,新技术不断涌现,与相关产业融合度持续提升,正在推动全球汽车产业发生深刻变革。为应对此种形势,欧、美、日等汽车工业发达国家和地区都加大了智能网联汽车的国际标准法规协调的参与力度,在联合国世界车辆法规论坛(UN/WP.29)和国际标准化组织(ISO)层面,智能网联汽车相关国际标准法规协调活动正快速推进。 为更有效地支撑上述组织的国际标准法规协调活动,2017年全国汽车标准

0215jiejie | 发布于:2022-12-01 0评论 0赞

苹果推出搭载M2芯片的新款iPad Pro 799美元起售

据苹果官网,苹果推出搭载M2芯片的新款iPadPro。 11英寸wifi版起售价为799美元,wifi+蜂窝网络版起售价为999美元;12.9英寸wifi版起售价为1099美元,wifi+蜂窝网络版起售价为1299美元。

0215jiejie | 发布于:2022-10-19 0评论 0赞

新能源汽车领衔 “中国智造”加速登陆欧洲市场

全球五大车展之一巴黎车展时隔四年再度启幕。在这场被视为“全球汽车行业风向标”的盛会上,国内外汽车品牌云集,长城汽车、比亚迪等再次领衔中国汽车出海。 长城汽车欧洲区域总裁孟祥军表示:“欧洲是长城汽车最重要的海外市场之一,巴黎车展是长城汽车向欧洲市场展示GWM品牌和产品的最佳机会。长城汽车正在研究汽车行业碳排放的整个生命周期,到2025年,将推出50多款新能源产品,全力支持可再生能源使用,为全球用户

0215jiejie | 发布于:2022-10-19 0评论 0赞

严监管时代来临,电子烟“通配”大战走向何方?

针对通配烟弹厂商的一系列诉讼的结果,将对生产通配烟弹的品牌未来在电子烟行业的发展产生深远影响。 10月1日,《电子烟强制性国家标准》正式实施,中国电子烟监管全面生效。而在电子烟行业进入规范化、法治化阶段前夕,一场围绕着通配烟弹的争论在行业里发酵。 “通配”是电子烟从业者约定俗成的概念。换弹式电子烟由烟杆和烟弹组成,“通配”烟弹指的是非品牌商生产、可与品牌烟杆匹配使用的烟弹。多位业内人士表示,被

0215jiejie | 发布于:2022-10-19 0评论 0赞

Bourns 全新大功率分流电阻器

采用金属感应引脚,专用于大电流应用中进行精确测量 全新分流电阻器专为电池管理系统、大电流工业控制和电动汽车充电站 提供高可靠性、高成本效益的解决方案 美国柏恩Bourns全球知名电子组件领导制造供货商,宣布新增12款CSM2F系列功率分流电阻器,扩展其产品组合。全新系列采用铆接通孔金属传感引脚,可满足大电流应用中对电压测试点精确定位日益增长的需求。最新型Bourns?CSM2F系列分流电阻器

0215jiejie | 发布于:2022-10-18 0评论 0赞

请尊重元宇宙“这个筐”

元宇宙是个筐,啥都往里装,但区别在于有的像聚宝盆,有的像垃圾桶。国庆假期刚结束,中青宝“90后”董事长李逸伦便亲自上阵,玩起了元宇宙婚礼。靠着老板首秀和代言,中青宝顺势推出“MetaLove元囍”App,正式进军元宇宙婚礼赛道。 就产品而言,如同其他元宇宙产品,李逸伦的元宇宙婚礼“新奇与吐槽齐飞”:有人说是有趣的尝试,有人则认为像QQ炫舞结婚系统。要知道,QQ炫舞是一款推出了十余年的老游戏。

0215jiejie | 发布于:2022-10-13 0评论 0赞

边缘计算:突围商业模式痛点

截至8月末,中国5G基站总数达210.2万个,中国5G发展已经进入下半场。随着5G加速融入千行百业,互动直播、vCDN、安防监控等场景率先大规模落地,车联网、云游戏、工业互联网、智慧园区、智慧物流等场景也快速走向成熟,这些更大流量、更低时延、更高性能的场景涌现,对边缘计算的刚性需求势必爆发。 GrandViewResearch预测,即使在新型冠状病毒肺炎疫情肆虐全球的背景下,边缘计算和5G网络市

0215jiejie | 发布于:2022-10-13 0评论 0赞

商务部回应美商务部升级半导体等领域对华出口管制并调整出口管制“未经验证清单”

商务部新闻发言人10日就美商务部升级半导体等领域对华出口管制并调整出口管制“未经验证清单”应询答记者问。 有记者问:近日,美国商务部在半导体制造和先进计算等领域对华升级出口管制措施。同时,在将9家中国实体移出“未经验证清单”过程中,又将31家中国实体列入,请问中方对此有何回应? 对此,商务部新闻发言人回应称,中方注意到相关情况。首先,通过中美双方前一阶段共同努力,9家中国实体zui终

0215jiejie | 发布于:2022-10-13 0评论 0赞

TCL华星官宣与奔驰合作:推出全球首款横贯A柱的车载显示屏

今年1月,奔驰带来了VISIONEQSS概念车,其中控台采用了一块完全无缝的47.5英寸曲面显示屏,横贯整个A柱,令人印象深刻。今天,TCL华星正式官宣与奔驰达成合作,并认领了VISIONEQSS上这块全球首款横贯整个A柱曲面的车载显示屏。 根据TCL介绍,这款显示屏采用了完全无缝的超薄一体化设计,将仪表盘、中控与副驾娱乐显示融为一体,并能够与3D实时导航系统相辅相成。 同时,这块显示屏还采用

0215jiejie | 发布于:2022-10-12 0评论 0赞

半导体板块暴跌 谁最受伤

国庆假期后首日开盘,上证综指时隔5个月再次失守3000点,与此同时,半导体板块也再度走低,其中,北方华创、雅克科技等个股跌停。10月11日早盘期间,半导体板块持续下挫,北方华创、雅克科技再度跌停。截至下午收盘,北方华创、雅克科技维持跌停状态,华海清科、拓荆科技-U、盛美上海、清溢光电、海光信息的跌幅则超10%。同日,半导体板块中的119只个股中超五成呈现下跌趋势。 在半导体板块遭遇下挫的同时,北

0215jiejie | 发布于:2022-10-12 0评论 0赞