看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

, ~6 x9 C1 p" ^8 H) |

8 P& z- J& S4 I' b* s( B前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
( l. L0 W# i/ f+ `+ |
" U  O/ ?! s" V. b: z( X0 ]- {
  z/ Y' s. w, R- N9 g/ y
* @; z# W: B/ f% x最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。
- v: I7 {4 ~. s' J3 o


不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
( Y* x- ]3 t3 R% y6 f1 S& s: L就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。
: w# }# i2 Q( I


; O2 {, i0 C, l- h) R) r6 I有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
7 u5 o8 y5 j5 s" S你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
" S4 h4 y: E& v举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
2 v7 L" T- L% ~6 v. N9 k) Q

, |" J2 a" L" d8 C3 h+ E
& `3 {( w& p/ u6 ]( r0 ]1 P+ y而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
% Y* g7 M) c5 U% X* v7 {$ |6 |哎呦，想想都觉得香。
" n9 o# S, }& P: o& ?要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
传统AI修复前 ▼
  H# L! x! A! E$ B" v, U" L
: O/ E, e* X4 x% M1 @4 s+ n$ a% ?8 X

* W  c! {: ?, u+ r4 K/ U9 H修复后 ▼
" x3 K- i) Q! G3 o  T. X, i

$ L) x7 m7 N) i5 X% _7 E
上手试试呗。
8 H3 O$ u% h  u; j先来介绍一下测试环境。
这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
# H% M+ f3 L: l: |6 F" |: k由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。
7 o; {1 d# M2 z2 X( C1 S$ I

+ e$ K7 g( [+ R  V
) @  X3 W7 q) p/ z( j" p然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。
$ S, f; L. w9 Y. O9 ?7 m5 m3 c
$ Q0 n, \6 c+ E8 r! J, s1 Y

! F) s2 W" s" R9 _装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
+ Z3 d( D+ ~" s, n: s' X毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？



& a5 D; D1 w- K2 P& q7 z我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
9 y! _7 B! O6 S6 K0 O* b1 O从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
1080p 分辨率下效果 ▼
7 W6 w" M* E* {6 x3 S$ z2 U
# w6 [$ S! Q" e, {  e
5 K, m+ {: p# }8 t
5 w: H( B/ _8 I至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
细节上，画质的确有提升，边缘明显锐利一些。
( K) `+ K3 |% @4 c. o- P: G. ~
4 w) H+ `" V: e+ C  E8 {
1 t5 V# Y4 B4 }% G& O7 l9 _) q/ J- I
" a$ k3 l" C- p' M# S+ x但真要说它带来了什么整体观感上的变化？

6 `0 d/ w; k' w/ H
1 g: d$ `  K5 z) G% W
几乎没有吧。。。
分辨率1080p ▼

) T; B8 ~+ U  Q/ v0 [; z9 f

1 a% `3 ~$ I' w. m而且真要和原生 4k 比起来，那还是差了不止一点。
  j! T6 T& D# q8 Y
8 o- Q; R5 D- Y, u3 ]. |
9 X( u" Q* s2 V% I+ _
既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
, V3 d: i% v" K/ N8 @腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？

, O# }4 b- r1 k; E) [8 E7 y: C. j

' ]& @8 b/ ^; ]/ _. \2 G$ ^/ {先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
腾讯视频720p ▼

  f8 H+ d' J7 h* A- d; i

9 V# m: {) i6 e: T5 H比较静态的人物也优化的不错，至少美颜效果有了。
爱奇艺720p ▼

7 u, J6 A2 N6 t

5 C  \5 d  i- t9 p而到了运动场景，那就完全是翻车现场。
; F0 m$ H4 W; l& _3 l1 @  [! R7 hAI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
1 M3 {2 O2 D  w6 w' H这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
腾讯视频720p ▼
4 ?7 S" O, w0 {2 p; n/ p: T5 ~
3 y- f) }- N0 c" M

5 s2 N* u! ^7 R* b而场景中快速运动的人，更是让情况恶化了。
都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
( ?; h& m7 C$ m( w& E" p3 Z/ w哼哼，露出 AI 脚了吧 ▼

" `, V( R; d8 p: E) P% z* ]- A
' J# o5 q8 Z; {8 @4 m! I
除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼

6 a& M5 _* n% {9 d$ P) s

就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
) a( a; c# T/ W  H总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
要知道，之前的 AI 修复可是能把一个 DVD
: s* u" R- Z0 j  L（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼
5 w3 G: j9 x& g, ]7 S1 ~0 s) P/ w

7 b% v2 C3 u, j' i7 e) D7 M
3 W! W7 G& H3 g( i如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
& D! G" P! @: e, w6 D. z不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。

hilalchemist

太炫酷了,满满的科技感