Redian新闻
>
AR头显的黑科技已出现!英伟达的这个技术有啥魔力?

AR头显的黑科技已出现!英伟达的这个技术有啥魔力?

Science/technology

 点击上方“全球风口”关注公众号

你好,我是王煜全,这里是王煜全要闻评论。

最近,英伟达发布的40系新显卡因为售价和中低端产品性能不太让人满意,反而是不少AI应用让人眼前一亮。

这当中新发布的第三代深度学习超级采样技术,也就是常说的DLSS非常值得关注,今天它被当作游戏领域的“黑科技”,未来很可能会成为AR头显的“黑科技”。

今天我就和你好好谈谈DLSS技术的原理、来历,以及我为什么认为它会是AR产业非常重要的技术拼图。

DLSS技术原理并不复杂,简单说就是通过人工智能算法,不消耗更多算力的情况下让游戏画面的清晰度、流畅度再上一层楼。

有点类似各种黑客电影中,通过算法把一片马赛克的视频转换成能看到清晰人脸的样子。

这项技术英伟达2018年9月就已经推出,当时是20系列显卡的主要卖点。

然而和任何新技术问世时一样,DLSS刚刚登场的效果并不让人满意。主要原因是那时的AI算法并不成熟,不能提供通用的游戏画面增强功能。

任何一款游戏要用上DLSS,必须先让AI把游戏画面都识别一遍,这个过程必须用到英伟达自家的超级计算机训练,费时费力又要额外花钱,最多提供1倍的性能提升,AI还时不时会在画面中添加一些原本不存在的元素,于是没有几家游戏公司愿意支持,玩家也就反应平平。

2020年,DLSS发布2.0版本,技术和应用场景都有了一次大的改进。更新了深度神经网络算法,AI优化不再是基于训练过的游戏场景数据,而是根据上一帧游戏画面自动优化出新的画面,通用性大幅增加,已经让一部分玩家愿意使用这个技术。

今年的DLSS第三代又有了新进步,画面优化不只基于上一帧,会同时计算前后两帧,AI识别画面时除了物体边缘,还能通过场景中的光影变化反推对应的速度、光照数据,不但进一步提高性能,还解决了光影复杂场景中会出现鬼影,AI重建不合理等问题。

这一更新,让新版的4090显卡性能又有了飞跃,很多游戏把画面设置调到最高,再打开DLSS,还能让游戏帧数再提高1倍以上,对比3090的话能达到2.5倍的性能提升,确实非常有黑科技的感觉。

不过,无论是让画面变高清,还是让画面更流畅,这些应用对于DLSS技术而言都还很简单,它最大的潜力其实是解决AR硬件的算力瓶颈。

为什么这么说呢?

AR设备要成为人类和世界交互的通用界面,既需要能够实时构建对周围环境的3D认知,还要能实时将虚拟数据叠加到现实画面之上。

这当中任何一步都需要大量的算力,还记得1月12日的要闻评论里苹果头显的参数吗?只是为了处理摄像头拍到的高清画面,苹果的AR方案就专门增加了两块芯片,一块负责图像信号处理,一块负责流媒体解码,算力瓶颈已经非常明显。

好在这个问题的解法,进化论已经从人类的视觉原理给出了答案。

每个人都觉得自己眼中看到的画面全是清晰的,但各种研究已经证明,人眼中只有一块非常小的区域——黄斑,能捕捉到高清画面。

这片清晰的画面有多小呢?你把右手伸直,比出一个点赞的手势,这时候大拇指的指甲盖就差不多是人眼能捕捉到的高清画面大小。除了这一小块地方,剩余的部分其实都非常模糊,你之所以觉得清晰,主要都是靠脑补。

这个方案其实就是进化过程中找到的高清环境数据处理,与算力之间的平衡。

现在再看DLSS技术,是不是就发现它的巨大价值了?

模仿人眼成像的原理,我们同样可以采用周边低清数据,视野内少量高清画面+DLSS优化的方式,以更低的算力需求实现对周围3D数据的重建和互动。

DLSS成为AR的一个核心技术也就是顺理成章的事情,虽然今天它还是游戏领域的一个黑科技,未来很可能成为各种移动设备上必不可少的一部分。

甚至可以说,未来的AR头显需要增加的可能不是图像处理芯片,而是一款AI芯片,模拟我们大脑的视觉皮层,随时基于低清的环境数据,为我们“脑补”出高清的世界。

这也就是为什么经常说,我们既要了解前沿技术原理,也要懂得分析技术的应用场景,抓住这两点就很容易找到技术潜在的爆发点。

当然,DLSS本身也只是AI技术的一种应用,未来还会有更多这样的新尝试出现,但你只要能抓住技术原理和应用场景两条主线,就很容易提前看懂未来的“黑科技”正在哪里酝酿。

以上是今天的内容,更多详细的产业分析和底层逻辑,我会在科技特训营里分享。欢迎关注全球⻛口微信号,报名加入!

王煜全要闻评论,我们明天见!

我们还整理了Mass Device手术机器人企业清单辛苦你点下“赞”和“在看”,点击顶部的“进入公众号”,在对话框里发送“科技”二字,你就会获得这份清单。

清单每天更新,所以请跟上全球风口的节奏;如果想要所有行业清单,扫码加入科技特训营,分分钟就可尽在掌握!


【科技特训营】全新的会员订阅制线上书院模式,全年50次“在线直播课程+私享群互动”,你随时可以加入、我持续保持更新!一起互动,伴随成长!让我们为未来五年做好准备,一起探讨把握机遇,决胜未来!


1. 前哨科技特训营直播课程第二季(2021年)共50讲+,除此之外还有5节加餐+公开课。
2. 每讲承诺为1小时视频内容,实际平均时长为2小时。
3. 每周四晚八点准时直播,会员可无限次观看回放。
4. 新入会员,可以无限次回看之前所有视频课程。
5. 本课程为虚拟内容服务,年费订阅服务制。一经订阅概不退款,请您理解。

左右滑动查看内容规划↓
左右滑动查看更多
课程咨询】
请加“创新地图助手”:
微信:innovationmapSM


微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
VR怪圈何时破,奇遇、苹果争推MR头显能否走出尝鲜区苹果MR头显明年到!搭载M2芯片体验比iOS更强…售价要上万,网友:买不起间谍特工电影中的这些黑科技已经成真了风筝苹果全力开发AR/VR头显 旧设备更新放缓HTC发布新款VR头显,这家被淘汰的手机公司有机会卷土重来?这两国的元首大腹便便需要减肥PS5绝配!索尼第二代VR头显上市,创意玩法太上头...首日上线40余款游戏"𝙇𝙚𝙖𝙙 𝙏𝙝𝙚 𝘾𝙝𝙖𝙧𝙜𝙚"广告#创译挑战苹果A17芯片数据曝光,硅谷银行CEO暴雷前套现,微软放出新的全屏广告,库克希望今年推出VR/XR头显,这就是今天的其它大新闻!苹果、华为都能走到一起?「Matter」标准有啥魔力?BB鸭 | 抖音整治违规美食探店;​苹果将发布12寸MacBook和AR头显;​特斯拉上海工厂被曝停产升级咀外文嚼汉字(188)“牛蝦”、 “牛蛙”英伟达的崛起是运气?黄仁勋这样回答!苹果和华为都能走到一起,Matter有啥魔力?AirPods将增加听力健康功能/库克或将加速推出MR头显/《黑暗荣耀》第二季受热捧英伟达4070Ti 6499元起/ 微软要推出ChatGPT版Bing/ 苹果头显被曝售价3000美元... 今日更多新鲜事在此一文盘点NeurIPS'22杰出论文亮点!英伟达AI大佬一句话总结每篇重点,一并看透今年技术趋势美国FDA给出史高评价!?,除皱&提升同时具备的黑科技温哥华也有了!零件先曝光!苹果首款AR/VR头显零件照片曝光让Siri打造“元宇宙”?苹果MR头显内容生态大起底隐匿暴政 信仰的颠覆(六十五)苹果VR/MR头显零件照片首次曝光;蔡司全资收购AR眼镜公司tooz,推动AR产品光学开发和集成2023 苹果春季发布会即将到来!AR头显设备或初亮相!用爱编织梦想邓紫棋「跨越红海」幕后,竟是英伟达AIGC黑科技!苹果MR头显新剧透:无需iPhone配合,还能“隔空打字”2022年AR/VR头显出货量或下降马斯克失去世界首富头衔/ 清华孙茂松当选ACL Fellow/ VR头显可隔空接吻…今日更多新鲜事在此“皮衣刀客”和他的“核弹工厂”:英伟达的诞生AR头显的黑科技已经出现!英伟达这个技术有什么魔力?苹果MR头显快剧透完了!库克的秘密武器,能否拯救暴跌的市值?增26081例!警惕新骗局,巴黎地区已出现!法国人逃离伦敦:生活太贵!巴黎仍是“世界第一城”!花5欧元赚了50万欧定了?苹果MR头显被曝今夏WWDC前发布,官方:希望成为本年热门产品
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。