Redian新闻
>
AR头显的黑科技已出现!英伟达的这个技术有啥魔力?

AR头显的黑科技已出现!英伟达的这个技术有啥魔力?

Science/technology

 点击上方“全球风口”关注公众号

你好,我是王煜全,这里是王煜全要闻评论。

最近,英伟达发布的40系新显卡因为售价和中低端产品性能不太让人满意,反而是不少AI应用让人眼前一亮。

这当中新发布的第三代深度学习超级采样技术,也就是常说的DLSS非常值得关注,今天它被当作游戏领域的“黑科技”,未来很可能会成为AR头显的“黑科技”。

今天我就和你好好谈谈DLSS技术的原理、来历,以及我为什么认为它会是AR产业非常重要的技术拼图。

DLSS技术原理并不复杂,简单说就是通过人工智能算法,不消耗更多算力的情况下让游戏画面的清晰度、流畅度再上一层楼。

有点类似各种黑客电影中,通过算法把一片马赛克的视频转换成能看到清晰人脸的样子。

这项技术英伟达2018年9月就已经推出,当时是20系列显卡的主要卖点。

然而和任何新技术问世时一样,DLSS刚刚登场的效果并不让人满意。主要原因是那时的AI算法并不成熟,不能提供通用的游戏画面增强功能。

任何一款游戏要用上DLSS,必须先让AI把游戏画面都识别一遍,这个过程必须用到英伟达自家的超级计算机训练,费时费力又要额外花钱,最多提供1倍的性能提升,AI还时不时会在画面中添加一些原本不存在的元素,于是没有几家游戏公司愿意支持,玩家也就反应平平。

2020年,DLSS发布2.0版本,技术和应用场景都有了一次大的改进。更新了深度神经网络算法,AI优化不再是基于训练过的游戏场景数据,而是根据上一帧游戏画面自动优化出新的画面,通用性大幅增加,已经让一部分玩家愿意使用这个技术。

今年的DLSS第三代又有了新进步,画面优化不只基于上一帧,会同时计算前后两帧,AI识别画面时除了物体边缘,还能通过场景中的光影变化反推对应的速度、光照数据,不但进一步提高性能,还解决了光影复杂场景中会出现鬼影,AI重建不合理等问题。

这一更新,让新版的4090显卡性能又有了飞跃,很多游戏把画面设置调到最高,再打开DLSS,还能让游戏帧数再提高1倍以上,对比3090的话能达到2.5倍的性能提升,确实非常有黑科技的感觉。

不过,无论是让画面变高清,还是让画面更流畅,这些应用对于DLSS技术而言都还很简单,它最大的潜力其实是解决AR硬件的算力瓶颈。

为什么这么说呢?

AR设备要成为人类和世界交互的通用界面,既需要能够实时构建对周围环境的3D认知,还要能实时将虚拟数据叠加到现实画面之上。

这当中任何一步都需要大量的算力,还记得1月12日的要闻评论里苹果头显的参数吗?只是为了处理摄像头拍到的高清画面,苹果的AR方案就专门增加了两块芯片,一块负责图像信号处理,一块负责流媒体解码,算力瓶颈已经非常明显。

好在这个问题的解法,进化论已经从人类的视觉原理给出了答案。

每个人都觉得自己眼中看到的画面全是清晰的,但各种研究已经证明,人眼中只有一块非常小的区域——黄斑,能捕捉到高清画面。

这片清晰的画面有多小呢?你把右手伸直,比出一个点赞的手势,这时候大拇指的指甲盖就差不多是人眼能捕捉到的高清画面大小。除了这一小块地方,剩余的部分其实都非常模糊,你之所以觉得清晰,主要都是靠脑补。

这个方案其实就是进化过程中找到的高清环境数据处理,与算力之间的平衡。

现在再看DLSS技术,是不是就发现它的巨大价值了?

模仿人眼成像的原理,我们同样可以采用周边低清数据,视野内少量高清画面+DLSS优化的方式,以更低的算力需求实现对周围3D数据的重建和互动。

DLSS成为AR的一个核心技术也就是顺理成章的事情,虽然今天它还是游戏领域的一个黑科技,未来很可能成为各种移动设备上必不可少的一部分。

甚至可以说,未来的AR头显需要增加的可能不是图像处理芯片,而是一款AI芯片,模拟我们大脑的视觉皮层,随时基于低清的环境数据,为我们“脑补”出高清的世界。

这也就是为什么经常说,我们既要了解前沿技术原理,也要懂得分析技术的应用场景,抓住这两点就很容易找到技术潜在的爆发点。

当然,DLSS本身也只是AI技术的一种应用,未来还会有更多这样的新尝试出现,但你只要能抓住技术原理和应用场景两条主线,就很容易提前看懂未来的“黑科技”正在哪里酝酿。

以上是今天的内容,更多详细的产业分析和底层逻辑,我会在科技特训营里分享。欢迎关注全球⻛口微信号,报名加入!

王煜全要闻评论,我们明天见!

我们还整理了Mass Device手术机器人企业清单辛苦你点下“赞”和“在看”,点击顶部的“进入公众号”,在对话框里发送“科技”二字,你就会获得这份清单。

清单每天更新,所以请跟上全球风口的节奏;如果想要所有行业清单,扫码加入科技特训营,分分钟就可尽在掌握!


【科技特训营】全新的会员订阅制线上书院模式,全年50次“在线直播课程+私享群互动”,你随时可以加入、我持续保持更新!一起互动,伴随成长!让我们为未来五年做好准备,一起探讨把握机遇,决胜未来!


1. 前哨科技特训营直播课程第二季(2021年)共50讲+,除此之外还有5节加餐+公开课。
2. 每讲承诺为1小时视频内容,实际平均时长为2小时。
3. 每周四晚八点准时直播,会员可无限次观看回放。
4. 新入会员,可以无限次回看之前所有视频课程。
5. 本课程为虚拟内容服务,年费订阅服务制。一经订阅概不退款,请您理解。

左右滑动查看内容规划↓
左右滑动查看更多
课程咨询】
请加“创新地图助手”:
微信:innovationmapSM


微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
苹果和华为都能走到一起,Matter有啥魔力?PS5绝配!索尼第二代VR头显上市,创意玩法太上头...首日上线40余款游戏美国FDA给出史高评价!?,除皱&提升同时具备的黑科技温哥华也有了!苹果VR/MR头显零件照片首次曝光;蔡司全资收购AR眼镜公司tooz,推动AR产品光学开发和集成AR头显的黑科技已经出现!英伟达这个技术有什么魔力?定了?苹果MR头显被曝今夏WWDC前发布,官方:希望成为本年热门产品这两国的元首大腹便便需要减肥苹果全力开发AR/VR头显 旧设备更新放缓零件先曝光!苹果首款AR/VR头显零件照片曝光邓紫棋「跨越红海」幕后,竟是英伟达AIGC黑科技!"𝙇𝙚𝙖𝙙 𝙏𝙝𝙚 𝘾𝙝𝙖𝙧𝙜𝙚"广告#创译挑战增26081例!警惕新骗局,巴黎地区已出现!法国人逃离伦敦:生活太贵!巴黎仍是“世界第一城”!花5欧元赚了50万欧间谍特工电影中的这些黑科技已经成真了让Siri打造“元宇宙”?苹果MR头显内容生态大起底VR怪圈何时破,奇遇、苹果争推MR头显能否走出尝鲜区2022年AR/VR头显出货量或下降苹果MR头显明年到!搭载M2芯片体验比iOS更强…售价要上万,网友:买不起2023 苹果春季发布会即将到来!AR头显设备或初亮相!HTC发布新款VR头显,这家被淘汰的手机公司有机会卷土重来?一文盘点NeurIPS'22杰出论文亮点!英伟达AI大佬一句话总结每篇重点,一并看透今年技术趋势苹果MR头显新剧透:无需iPhone配合,还能“隔空打字”隐匿暴政 信仰的颠覆(六十五)BB鸭 | 抖音整治违规美食探店;​苹果将发布12寸MacBook和AR头显;​特斯拉上海工厂被曝停产升级苹果、华为都能走到一起?「Matter」标准有啥魔力?英伟达的崛起是运气?黄仁勋这样回答!马斯克失去世界首富头衔/ 清华孙茂松当选ACL Fellow/ VR头显可隔空接吻…今日更多新鲜事在此苹果MR头显快剧透完了!库克的秘密武器,能否拯救暴跌的市值?苹果A17芯片数据曝光,硅谷银行CEO暴雷前套现,微软放出新的全屏广告,库克希望今年推出VR/XR头显,这就是今天的其它大新闻!风筝“皮衣刀客”和他的“核弹工厂”:英伟达的诞生AirPods将增加听力健康功能/库克或将加速推出MR头显/《黑暗荣耀》第二季受热捧用爱编织梦想英伟达4070Ti 6499元起/ 微软要推出ChatGPT版Bing/ 苹果头显被曝售价3000美元... 今日更多新鲜事在此咀外文嚼汉字(188)“牛蝦”、 “牛蛙”
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。