看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

# B  l! z) D) t, J
! {% W6 D, l7 R+ w
前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。

1 k# L+ m. c. s& L6 b

最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
" H* Z. p( G/ j1 K3 q: q哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。



不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。
3 ]8 \5 m+ c: `7 ^+ e# o
8 g4 u8 m3 i/ V- S* Z1 S( y/ x
8 A- T- x9 X9 b; o
. }. x* b' f/ Z2 T有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
! c' V2 S# |/ m  }  R2 o  H1 C$ f& W你别说，还真有。
. C7 w' f) {( @+ f$ [传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。

+ i0 |; A7 _: ^# n- |, j
& r1 u: L: H, u
2 Q5 u0 |* H  O# o而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
6 L9 y3 ~  q' [0 W8 k. O哎呦，想想都觉得香。
要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
传统AI修复前 ▼


2 Q: S0 \" O: Q! k9 N) o4 S! F9 Q  ~
/ {: P6 B5 O/ b& W2 [修复后 ▼


+ c" @4 s5 F% O% X! [0 P
上手试试呗。
先来介绍一下测试环境。
% k2 }0 v1 k' T, E这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
9 s" e1 ]; D( G1 m6 t由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。
6 Y1 P6 Z  d' C/ F
, v; a) I; D' S; [/ j

& v3 A: x+ J7 U3 f# Q7 H% @然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。

0 b6 r; Q$ w# O* k; T3 Z

装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
老黄的新技术，能击穿叔叔吗？



  q; r$ j$ i3 ^2 l( _我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
, i" Q& M' M& @  F从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
) J" K5 i; O8 O0 k: [+ x" i. I1080p 分辨率下效果 ▼
. K, W! ^* n9 R) V% ^, `) M
: u0 Z: n$ S7 [
3 I3 B/ }) W, D4 c; g% J
$ e, S; O9 b% u. _  b1 B; C至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
* J- D. P# ?1 v$ Z细节上，画质的确有提升，边缘明显锐利一些。
$ S* Z6 o& C3 t0 j4 [

' p0 h1 r+ N3 k
但真要说它带来了什么整体观感上的变化？
; P( c5 H. u% f2 c" }9 i6 G- x
4 k4 y. w& m7 o

2 ^# l* A& w. E/ B/ x几乎没有吧。。。
/ R$ M, G4 P  \* y8 D/ k分辨率1080p ▼

" P( J& S0 N  N: b/ r

而且真要和原生 4k 比起来，那还是差了不止一点。
' r1 {0 X- g& r$ ]+ L  u+ h! {

# O" x) {/ w: a0 h  P
  q* P8 \0 M* s! I/ C9 p既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
, q  g# d" W: V3 n: U腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？
; a, X  h; ^% \4 J$ a
7 Z0 D* t; W0 R, `+ s! ^

先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
; h2 g9 J& ^# {& Y在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
0 w. B) W/ {0 g) h. w腾讯视频720p ▼


1 R  |6 }9 k8 \8 e. ~
& }- w8 |6 V  H1 F比较静态的人物也优化的不错，至少美颜效果有了。
' O5 |: n0 B$ `( e1 Q4 |( c. K( F爱奇艺720p ▼


, ^3 _# |' Q' ^2 n$ R$ [( Y1 ^
4 P: S! S8 s( @/ G! Y, I而到了运动场景，那就完全是翻车现场。
AI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
) K0 B% a0 @9 M8 {1 B8 C1 u8 o+ K  `这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
腾讯视频720p ▼


2 |& ?; G& n1 L
' i7 h6 i* @+ {' J  H6 x* v7 }8 |而场景中快速运动的人，更是让情况恶化了。
都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
哼哼，露出 AI 脚了吧 ▼


. \" M6 T2 o5 N. J) h
$ B) k5 v6 k. }% h除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼



  {( z- `% ?- f. o就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
8 x& a3 {. l1 K2 N! `& L9 }要知道，之前的 AI 修复可是能把一个 DVD
& k7 @& {9 K3 J5 X! i2 K（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
" Q0 I6 i# R. D瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼

; w+ n5 P; a2 i/ R
: I1 R* T, K6 A! Q7 A( @
如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
) Q* n! M1 ]2 G% u0 A$ k. C+ S比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。
7 y+ |+ p$ {, R* k' n$ P

hilalchemist

太炫酷了,满满的科技感