看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

) a. G4 X( t  [6 E( M9 V前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
7 T! o% a* K4 Z3 M/ u% `


最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。

6 L  u* c  A2 l* {: p7 ]/ n
5 I* Z) M. Q1 ^* Z* |* Y+ b  l
, Z  }- D1 a" a/ ]% T6 y不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。

" y. n, F- f; T1 j3 k) b! d$ j- K
' |* m& f. O" }! `$ [
4 z8 S& g6 ^* l. D* s  u5 y有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
你别说，还真有。
' \- E8 I$ e' Q传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
$ G$ B( J# b' @2 j2 z举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。

+ t) a; Q+ \# I. K6 H" M

而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
! f( e1 w3 V7 f* V9 R哎呦，想想都觉得香。
要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
( ^+ d8 U" O! j. J传统AI修复前 ▼
' w+ ]' w( B/ ]+ o

4 ]( F) }  Q' f9 s7 {* S
- U1 R5 F2 B, K* f; |' h* j6 d修复后 ▼
0 t# n( a" D1 j! t8 a: i9 K2 M5 d- @


上手试试呗。
( l! z3 e8 X3 W8 L: V  D' H0 f# o先来介绍一下测试环境。
这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
. l  d$ o5 p) A1 u# Y' I* ]' M由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。



然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。


5 X% B, m% }4 C
4 |* u1 s' p, f+ x3 |装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
; S, J  c2 k8 e. |: S毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？



/ C' P( X6 q" Q我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
( v; c/ |2 M$ A1 t5 q1080p 分辨率下效果 ▼
( R, o4 v, M, `# ?& I6 X5 O
3 G. |: l0 t" b4 _- G  D- @, I

' F& @  [3 a/ c" E至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
7 i' @# i. I0 r4 r* O4 X细节上，画质的确有提升，边缘明显锐利一些。

  D( h: u4 K& }! o* D; Y: `$ m

1 `; H& f1 s0 i! g1 }但真要说它带来了什么整体观感上的变化？

& N* |/ T+ D0 t+ c+ x+ ?

几乎没有吧。。。
分辨率1080p ▼
! i/ x* m  y# y, ]


- s$ p# {  U1 z. X; Z2 t: g而且真要和原生 4k 比起来，那还是差了不止一点。

$ L, L+ U6 X6 g* a/ ?7 [

既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
( ]9 C3 X+ T- M3 @$ z7 ^腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？
, `* Z' h9 W" \, N2 T" M


5 ^, i- C# _9 }, ]3 b" V先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
! f% K. E+ ]5 Z, S7 l3 l- v5 l腾讯视频720p ▼


6 _! m3 G, n1 h2 O5 @% ~
比较静态的人物也优化的不错，至少美颜效果有了。
爱奇艺720p ▼
  K& J. V7 ^6 d. B& Z
  ~; `' H7 f1 X6 h
  U' p# J/ e9 l& B/ z/ T, n
而到了运动场景，那就完全是翻车现场。
  z$ |# \/ @5 E  ]. M* E) ~7 d0 k* SAI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
5 g% l6 o! ~  e0 M  g% P1 y腾讯视频720p ▼
4 F# v# v* g$ Y  `
- }6 H' G& o, _6 u9 @1 z: ]! d9 `
: X* Q( S) e9 l: C! f. i) _; c. Y
6 L: n* c+ Z- H& G9 G2 @' e. V9 D而场景中快速运动的人，更是让情况恶化了。
- t; Y8 P3 h0 V都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
  u4 }0 N4 `+ h2 O7 ~0 \  v哼哼，露出 AI 脚了吧 ▼

) _/ I5 O! T: F4 `" m
4 Z$ B( u" F2 R. Y
除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
# m0 c* T* O  J+ I& k& t

) J8 A0 P* ^" b* Y6 Q7 }# f$ {
1 l8 M  _8 j# I& N7 Q# a. x  W就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
/ Y/ x8 s( i1 ^: \) Y总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
+ C$ p( q" }9 `5 a要知道，之前的 AI 修复可是能把一个 DVD
4 |4 B! D/ M+ T# |' v# \; W（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼


/ [" A3 Z  t) w
) t# Z  C! v9 @0 M; s5 C如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
0 C# L/ `" w& T! s! T6 N比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。

hilalchemist

太炫酷了,满满的科技感