N卡VSR和madVR NGU sharp对比

fatezeroart

不知道为什么有人会说N卡这个新出的VSR是仅仅依靠提升画面锐度来提升画面清晰度

https://github.com/emoose/VideoRenderer/releases/tag/rtx-1.0
用这个魔改的MPC VideoRenderer可以在DirectShow的播放器中用，potplayer里视频渲染器选MPC VideoRenderer，VSR就能给potplayer用了

以下画质对比都是在potplayer中进行

madVR NGU sharp设置





原生480p未处理画面  https://imgse.com/i/ppFzqIA




madVR NGU sharp  https://imgse.com/i/ppFzbad



N卡VSR  https://imgse.com/i/ppFzXGt



原生1080p未处理画面  https://imgse.com/i/ppFzOPI



明显madVR的NGU sharp锐化感最甚，放大了锐化带来的铃振伪影和锯齿感，N卡这个VSR除了视频放大算法，更多的做的是对视频压缩块状伪影的消除，以及边缘特征的抗锯齿检测，在锐化上反而是做的很轻度的算法比NGU sharp这种来的轻，个人理解VSR这个算法用来看分辨率低下的老动漫效果是非常好的，很有效去除视频压缩带来的块状伪影，视频降噪以及平滑锯齿，也没有启用过重的锐度提升算法影响原动漫的风格

fatezeroart

yuanye8887 发表于 2023-3-2 22:36
开了几档？

4档，低挡位下效果也差不了多少

fatezeroart

pdvc 发表于 2023-3-2 23:05
楼主用错NGU了吧，动画应该用NGU-AA或者A4K-GAN啊

NGU aa  https://imgse.com/i/ppki1vq


锐化软一点，边缘抗锯齿检测也是远不及VSR的

fatezeroart

archxm 发表于 2023-3-2 23:09
吹上天，它也是小众，小众玩具，有啥好比的，又不是不能用

不是吹啊，只是它就不是靠锐度提升画质这算法是用来干什么的特点要澄清，有强烈的压缩伪影去噪功能看一些真人视频可能会反向抹除一些视频细节是缺点

fatezeroart

ykdo 发表于 2023-3-2 22:53
请教一下：
1. NGU anti-alias和NGU sharp有啥区别？

anti-alias就是抗锯齿，锐化软一点但锯齿检测还是不如VSR，目前应该只能在MPC VideoRenderer和madVR中二选一

fatezeroart

hsmms 发表于 2023-3-2 23:18
主要是在处理方式上，ngu sharp更加接近原生画面，而NGU anti-alias有线条抗锯齿作用所以这玩意用在动画 ...

看7楼，NGU aa的效果，自己对比

fatezeroart

hsmms 发表于 2023-3-2 23:25
AI超分辨率原理上就存在锐化的步骤，你说没有怎么可能？

还有就是不要觉得画面看上去没有过度锐化就认为 ...

看我1楼写的有轻度锐化，可没说没做锐度提升处理，还是你觉得NGU sharp这么重度的锐化的处理，都显著放大原480p视频带来的铃振伪影和锯齿感了就不是锐化了？

fatezeroart

hsmms 发表于 2023-3-2 23:26
直接给地址我自己测

视频标题不写了，阿鲁斯的巨兽OP

fatezeroart

hsmms 发表于 2023-3-2 23:32
你难道不知道ngu sharp由于过于追求忠实了导致了会把一些铃振伪影这些瑕疵问题一并放大的问题吗？

还有 ...

我1楼madVR参数不都写了？只改了image upscaling里的NGU sharp，挡位调成very high，其他可没动过谢谢

fatezeroart

hsmms 发表于 2023-3-2 23:33
我知道，但是我要跟你一样质量的片源

油土鳖上下的，你自己搜标题吧就有

fatezeroart

hsmms 发表于 2023-3-2 23:36
所以说你ngu sharp完全就在白用了，你难道不知道ngu sharp要配合rca算法吗？

你要的RCA开启对比呗不开这个只是单纯对比放大算法，RCA用来去除压缩伪影和锐度提升又没什么关系


NGU aa+rca 细节涂抹更多了  https://imgse.com/i/ppkATqx

fatezeroart

hsmms 发表于 2023-3-2 23:51
下了个跟你标题一模一样的480p的，怎么感觉完全不一样？

https://ibb.co/hdknfC8

https://youtu.be/oD6e5vREbhI 你点下480p对比下你截图清晰度
这里下480p，你这截图清晰度明显是1080p的当然不用比

fatezeroart

hsmms 发表于 2023-3-3 00:10
你为什么会觉得这玩意可以无脑拉高？

ngu sharp+RCA才是真正意义上的完全体，RCA能有效控制ngu sharp本 ...

不把RCA拉高你是不是又要说RCA的去压缩伪影效果不够强？我上面截的ngu aa你觉得锐化很多？ngu sharp才是

RCA调默认的8级强度，质量选high总行了吧，配合ngu sharp自己看




https://imgse.com/i/ppkVpp4
https://imgse.com/i/ppkEzhF

fatezeroart

hsmms 发表于 2023-3-3 00:11
一样的片源啊，所以我才奇怪你那画面效果到底是怎么实现的？

然后我发现你480p原生的那张似乎就存在问题 ...

480p视频下载下来，potplayer打开进度条点到35秒自己看

fatezeroart

hsmms 发表于 2023-3-3 00:31
就是一样啊，就你提供的底子原片哪里那么多的压缩伪影？

我都把RCA关了都没有你那么多的压缩伪影 ...

视频下载下来，暂停播放，鼠标进度条点到35秒，有个瞬间的画面清晰度就是这样，正好在potplayer的暂停画面上

fatezeroart

hsmms 发表于 2023-3-3 00:48
你这一帧好像刚好卡在825帧过度到826帧之间，太难定位了。不过根据825帧跟826帧还是没法还原你那效果。

...

反正我是用potplayer暂停点到35秒的画面就是，你要的madvr osd信息

fatezeroart

hsmms 发表于 2023-3-3 01:06
问题不就出来了吗

你怎么会有那么的X Y的步骤？

这叫xy步骤？视频暂停点到35秒不就是，你别关心瞬间的帧质量怎么样，在这个瞬间帧质量上有区别的就是不同放大算法的比较，而且我就是用potplayer点到完全相同的同一帧，确保是相同帧进行比较

fatezeroart

hsmms 发表于 2023-3-3 01:12
你看下madvr osd信息，你没看到那么多的X Y步骤

这个有什么关系？madvr全部重置设置恢复默认，只要把视频尺寸拉伸放大就有了

fatezeroart

hsmms 发表于 2023-3-3 01:26
问题大了，你这个信息说明你的画面被缩放了好几次。

查了下这个只是提示你放大算法正常工作的提醒信息啊，我把系统分辨率调到1024 X 768不触发放大，就没这个信息了，但这也只是提醒你放大倍率没到触发的条件，不工作罢了，换mpc播放器一样有，你看看是不是madvr版本不一样导致的，还有只是这个暂停瞬间帧比较模糊，稍微错开点截图就和你的截图差不多了，不是madvr的问题只是帧质量的差别


系统分辨率缩到1024 x 768不满足放大倍率触发条件就没有了，很正常



错开这个瞬间帧的质量，和你截的图质量也差不多

fatezeroart

hsmms 发表于 2023-3-3 02:49
那问题估计是你说的那样。

osd有这个信息在也不一定功能都在生效，系统分辨率设到和你一样的1080p一样没有，放大触发倍率的问题

fatezeroart

hsmms 发表于 2023-3-3 03:16
已经知道那玩意怎么出来了，在特定放大系数分辨率下就会出现，这并不是问题。

其实你要测试不需要改你显 ...

所以你说的这个就是放大倍率触发条件区别，不是madVR设置原因造成画面区别，还是我说的只是帧质量的区别

fatezeroart

hsmms 发表于 2023-3-3 03:53
找到你那帧画面了，不过说真的你那帧明显属于烂帧。

即使不放大也存在问题，只不过是ngu sharp把这问题 ...

烂帧问题虽然极端点，但网络视频上各种低清，低码率流造成的烂帧可是非常多的，比AI压缩伪影只是其次，相比VSR，NGU sharp在我眼里锐度控制明显过锐尤其看老动画片方面，不如NGU aa和Standard保持原片风格自然，和VSR比也一样，当然每个人口味不一，你觉得NGU sharp锐度控制更好那自己用就行了

fatezeroart

hsmms 发表于 2023-3-3 04:53
老动画要看情况的，我的建议是ngu sharp +rca 3-6+soften edgen 2-3这种最好，会比ngu aa好好多。

我说 ...

就算加了soften edgen对比原片还是锐，不如NGU aa这种线条锐度控制得自然，锐化方面这个真只是个人喜好问题

fatezeroart

LambdaDelta 发表于 2023-3-3 04:54
你这就一个deblock的问题，
vsr自带了deblock效果而已，
madvr也不是不能开，

28楼就是madvr开rca的效果，细节涂抹的更多，去视频块状压缩伪影本来就是VSR这个算法的特点，至于整体色调？只能说在一些细节处理有那么点区别

fatezeroart

chungexcy 发表于 2023-3-3 05:45
这纯粹就是madshi的锅，ngu就不该改名成sharp。。。

关于ngu的讨论，在doom9论坛上都有记录。最早开发的 ...

开到8级+NGU sharp就是我35楼截的效果了，视频去噪程度降低但也不能很好的去除压缩块状伪影了，你想要忠实还原双线性那madVR里直接调成Bilinear不就行了，和waifu2x这种离线更复杂的AI网络没得比，现在有个新出的可以实时运行的Real-ESRGAN算法 2x_AnimeJaNai和waifu2x做的应该就挺类似你可以自己试试
https://github.com/the-database/mpv-upscale-2x_animejanai

fatezeroart

hsmms 发表于 2023-3-3 05:50
我觉得你并不是需要什么锐度控制而是需要ngu aa线条抗锯齿功能

对于动画来说ngu aa是非常适合的，尤其是 ...

这个不只是抗锯齿，你在低分辨率下只加强线条锐度，也不做抗锯齿和伪影处理，就会放大锐化带来的缺陷感，效果好不好我是觉得这种情况下过重的锐化感不好

fatezeroart

LambdaDelta 发表于 2023-3-3 09:04
我没看出madvr哪细节涂抹更多，我只看到左上角整块云内部的细节都被vsr抹平了。你用Photoshop看下就能发 ...

28楼RCA开到最大人脸细节都被涂抹没了，RCA开低就不能像VSR那样很好消除块状伪影，视频去噪方面madVR的RCA弱一档

fatezeroart

LambdaDelta 发表于 2023-3-3 12:24
完全不认可你这种说法，你看下你的480p原图，
眼睛下部本来就已经糊成一片了，vsr属于是额外增补东西了， ...

就眼睛部分，对比480p原图，28楼你看下RCA开最大眼睛里面部分的线条都给你磨掉了VSR保留的更多，这不叫保留细节只能叫模糊化处理，RCA开最大模糊化处理明显很重

fatezeroart

chungexcy 发表于 2023-3-3 11:49
额。。。

我所说的“因为双线性缩小算法的还原”指的是神经网络的训练过程。。。比如NGU AA的训练目标可 ...

waifu2x和Real-ESRGAN使用场景都是针对动漫的，你要对比实时高效型算法的话Anime4k系列更接近，降噪方面madVR的RCA开低不能很有效去压缩伪影，n卡这个VSR在实时降噪方面更强

fatezeroart

yinqingyu9 发表于 2023-3-3 21:47
若问一下，本地视频怎么设置才能用到VSR

看主楼，下载改版的MPC-VR，安装好后在基于DirectShow的播放器，mpc，potplayer之类播放器设置里把视频渲染器调成MPC-VR，打开视频放大播放，在mpc中按ctrl+j打开osd，看到osd信息出现Nvidia-VSR-requested就说明启用成功了