任天堂的“DLSS”？还是DLSS在主机端的预演？

zctang305

任天堂于今天公示了两个新的专利文件（实际上是一个东西）。是关于如何将低分辨率画面在已经训练好的神经网络加持下，通过特定硬件，进行高分辨率上采样的技术。
专利文件地址：
https://www.freepatentsonline.com/y2021/0304355.html

https://www.freepatentsonline.com/y2021/0304356.html

本人没有详细研究。但大致看了一下后认为从描述上看，的确是通过在游戏引擎中植入神经网络和训练模型，并通过特定的FP16计算硬件，把低分辨率画面上采样至更高分辨率。

那任天堂注册的这个专利又有什么不同？虽然专利详情中有多处提及nvidia，tensor core的字样。当然大段大段的专利描述我也没有细看，因为目前有专门FP16向量计算单元的图形处理器也只有nvidia能提供。但从图示中也可以看出，任天堂对于专利的描述似乎和目前nvidia的DLSS有相似之处，但也有不同。这个我也没办法做出判断，毕竟图示中一些关键流程有着大段的详细描述需要翻译。比如训练模型中的对1080P图像做三色分离的8*8像素切割。以及在这个基础上创建540P，并结合context block后做训练，再两相比较优选出画面更好的训练结果。单单从这个方面看，任天堂的这个专利可能是更倾向于单帧重建多于时间性多帧（取决于context block的性质）。

但任天堂也明确使用专门的硬件去做这个工作会有极大的性能优势（专门提了tensor core）。最后完成的神经网络和训练模型会通过网络向终端设备进行部署。从这个操作手段上看，的确也很“DLSS”。说明它至少还是需要迭代和更新的。个人推测可能更倾向于是一个在技术上偏向DLSS1.0，而易用性方面更接近2.0的简化版。

以上除了专利公示地址外，都是个人粗糙了解了一下之后的看法，也可能是完全错误的。如果有人能完整翻译专利内容，有相关技术的人做解读，那就更好了。

reddit相关讨论：https://amp.reddit.com/r/GamingL ... _patents_published/

寂静之声

这是为下一代机器做技术准备么

沃丹。尤米尔

注册了未必用，注册专利这东西抢一个名额是一个

bbpoo

DF之前有一个视频，分析了DLSS对Switch的作用

comptjkl

彭博社收到11家开发商提供的消息，均指向任天堂于2022年秋季推出搭载升级版芯片的SWITCH OLED版本

该用户已被禁言

按照任地狱近20年的硬件走向，下代机器的技能不会超过ns的三倍，也就是顶多3t的浮点，比起xss都不如的，说到底就是个满血1080p的水平，当然我欢迎任地狱猛抽我的脸能出个超过4t性能的机器

el-melfes

reddit上说这个专利的注册时间是去年3月，就在DLSS 2.0两天之后

Alex的测试来看，目前老黄那边也没有芯片能提供手持设备玩转DLSS的

328928249

山风海涛 发表于 2021-10-1 16:44
按照任地狱近20年的硬件走向，下代机器的技能不会超过ns的三倍，也就是顶多3t的浮点，比起xss都不如的，说 ...

谁跟你说NS的技能有1T了。233。下一代机能有PS4就烧香吧。不过CPU肯定比美洲豹要强了吧

328928249

el-melfes 发表于 2021-10-1 17:17
reddit上说这个专利的注册时间是去年3月，就在DLSS 2.0两天之后

Alex的测试来看，目前老黄那边也没有芯片 ...

Orin S这芯片能玩DLSS不

该用户已被禁言

328928249 发表于 2021-10-1 21:15
谁跟你说NS的技能有1T了。233。下一代机能有PS4就烧香吧。不过CPU肯定比美洲豹要强了吧 ...

NS满血大概0.6-0.8吧，所以我说超三倍也就乘四大约3T，
个人觉得这个是上限了，