看高清视频不用开会员，英伟达新技术真有这么厉害？ ...

子非魚_

前段时间，爱奇艺限制高清内容投屏的事情闹得沸沸扬扬。
1 r' u" H9 u* [) B" ~

& h4 X# _1 M' \
最后在高强度的舆论压力下，爱奇艺还是。。。退了一步？
2 X' Q& w3 z6 n& p4 V1 r哦，只对老会员退了一步，新会员想要高清投屏，还是要额外花钱的。


$ p4 D9 e# ?" M
不管爱奇艺这事儿做的有没有谱，但在如今这个万物皆可AI 的时代，视频分辨率不够的问题可能已经不是个事儿了。
就在前几天，英伟达正式实装了一项 AI 视频超分辨率技术，它利用 RTX 显卡的 AI 能力，能把低分辨率（ 小于1440p ）的视频，直接 “ 补像素 ” 显示器的分辨率。
% F  E! A" w# K7 E4 W

4 d+ o( k$ P) Q4 Q$ P
) d0 D( g+ x7 G1 {( S有差友可能会有疑问，AI 视频修复，这不是一个两年前的火星话题嘛，还能有什么新花样？
8 u2 s( g6 K3 {. t% {' ]  N6 Z你别说，还真有。
传统的 AI 视频修复，往往需要远超视频长度的计算时间，才能输出成片，也就是说，它做不到实时的修复。
举个例子，up 主“瓜瓜Mars”为了修复一段5 分钟的陶喆演唱会视频，用 1660Ti 跑了三个小时。
: t' W& v; `) r/ ?

+ z, H( V& h$ I- b  Y2 H6 b, s
( }* p- n* c) r! R. l- g$ p  J而这次，RTX 视频超分辨率可以在播放视频的同时，把 720p 甚至是 480p 的视频，直接超到 4k！
哎呦，想想都觉得香。
1 X& j+ z# I3 z. @  [* I5 r+ H要是老黄的新技术，效果有传统的 AI 修复的八成功力，是不是以后只要不看版权内容，就可以不用为了高清视频开会员了？
& o0 V* {# g6 a/ K4 Z  {传统AI修复前 ▼



: \, Z6 c- j" u& \! U$ E. m$ w修复后 ▼
' Q/ }: N/ S& z0 U
6 T3 P+ {( p, g- J/ [0 Y1 J# U
# o0 S; h0 l% S0 F% N% v. C7 P
2 L% D3 U! S5 W  n) I. t上手试试呗。
' C& m% `# S; D( R8 @' H2 S先来介绍一下测试环境。
这个 RTX 超分辨率一共分成4档，档位越高，对显卡性能要求就更高，效果更好。
: P+ |# ^- Y* c- u由于要至少要 3070 才能开满4档，所以托尼这次就拖了张 3070Ti 看看效果。
/ G  m4 k$ f5 `; t" [( l) ?

- {+ ]/ ~5 t8 k
然后又从小黑胖那借了块 4k 显示器，这样就能把最高到 1080p 的视频，直接优化成 4k。


4 I' d, O" h& R$ y6 k& u6 I
  T6 n* ~- }' L/ U装完了高配的测试平台，首先来看看在 B 站上超分辨率的效果如何。
毕竟很多 B 站用户并不是来看付费的版权内容的。对于他们来说，充大会员只是为了看高清视频。
6 |4 n. h9 d8 h' O5 E老黄的新技术，能击穿叔叔吗？


7 E) \/ T2 I' X
6 P+ m8 T% V! P* {$ R4 o, \我们找了个差评硬件部的视频，这个视频的 1080p 画质被 B 站压缩的比较狠，看看老黄的新技术能不能给它救回来。
从不开超分辨率，到开 4 挡质量，最明显的变化，就是人物被自动美白了。
5 H1 r  S, _; F6 v1 Y1080p 分辨率下效果 ▼

$ g% y! g0 r$ `

' z( w# W% P: n. W/ }: X" ?至于总体画面质量嘛。。。一眼看上去是没有啥的，但要说它开了和没开一样，那也不至于。
细节上，画质的确有提升，边缘明显锐利一些。

2 N5 [# m, }8 |: `( B  h

但真要说它带来了什么整体观感上的变化？
* |8 c/ z0 o! x
1 g' ~; f, ?) V& F

几乎没有吧。。。
分辨率1080p ▼

  ]/ y  k* K: I$ J  c

而且真要和原生 4k 比起来，那还是差了不止一点。

$ e# l( F7 |  y8 |: T& G. E

既然把 1080p 超到 4k 效果不显著，那在原视频是 720p 的情况下呢？
# E( P. s3 n; a/ n! W: i腾讯视频和爱奇艺的免费用户，最高就只能享受 720p 的“准高清”视频，英伟达的这个技术，有没有可能是考虑到这种情况？
% c' L1 v5 q& ~6 ?. B8 r
8 ~" ~# V) o) G; x7 `0 ^( I; z
+ T) B: h- ?6 V- B6 [2 ^; f; A, R' {
先说结论：有效果，但是由于原始视频质量实在太低，在一些场景效果惨不忍睹。
/ A( ~# J0 C! }; \# n6 Y! E在几乎静态的景物画面里，能很明显的看出开了超分辨率后画面清爽了很多，甚至压缩造成的色块都消失了。
腾讯视频720p ▼
5 F4 Y* f* H, F) z; D
# A7 w, n% [# G
3 D9 \* o5 g. `" S: Y+ S* Q  [* P0 ?
比较静态的人物也优化的不错，至少美颜效果有了。
爱奇艺720p ▼
8 D; L- [3 O7 z; d! L, y$ a  w

8 W9 u. _5 a- O# v/ t
而到了运动场景，那就完全是翻车现场。
; b( A5 Z  ?/ }+ u1 l# i# z+ P; pAI 超分辨率最应该解决的问题 —— 视频过度压缩产生的色块，竟然完全没有修复。
这就让视频整体观感变化不大，依然一坨，清晰干净不起来。
7 B; }1 O# U/ a& Q  x腾讯视频720p ▼
: k8 P( g9 O# ~/ f/ K$ u9 u9 R/ l2 e
6 L4 H! }9 @) [+ f& b3 |
* {+ Y; w% T7 A) h. x! e7 T
& B2 d& L3 n4 [$ j4 H而场景中快速运动的人，更是让情况恶化了。
' E+ K; m  I* S8 [% u  w) \, u2 l都说看 AI 先看手，没想到这个用在生成式AI上的定律，在超分辨率 AI 上也有用。
哼哼，露出 AI 脚了吧 ▼
& K0 [) w" @6 t7 S& J2 A7 M


7 i) E: M6 h9 [除了 AI 的传统艺能，它甚至还会往人类脸上 P 一对酒窝。。。
其实是AI伪影，上一帧的衣领被AI当成酒窝留下来了 ▼
- F* ?8 A: o- c8 a$ n6 ?0 k+ z


8 s' l  `: X' F6 L' o8 T就以目前这个表现，这种实时超分辨率的 AI 还是砸不了视频网站的饭碗。
+ A+ L& r. J# H) Z. e总而言之，目前 RTX 视频超分辨率只在比较窄的场景有明显的提升，并没有两年前 AI 修复视频那种焕然一新的感觉。
7 a6 B- ^! d! R- l要知道，之前的 AI 修复可是能把一个 DVD
（ 720×480 ）分辨率的视频修到 4k 级别的清晰！
2 C+ \5 v- ^) G瓜瓜Mars，【4K修复】陶喆《Melody》史上最强现场版 ▼

- N: y4 H% j) T% {$ n# s. k

2 p( W" F1 a  b) ~如果在未来，随着 AI 能力和显卡算力的进步，实时生成的超分辨率视频也能接近传统 AI 修复的水平，那它或许真的能带来一些变化。
比如像画质不清晰的老电影或者老电视剧，现在想看高清还需要人工修复，以后直接交给显卡，它实时边修我们边看也不是不可能。
# \5 H6 S) _0 y不过现在这效果，还是挺图一乐的，有 30、40 系 N 卡的差友不妨可以试试。
$ v) g4 ^! x$ _

hilalchemist

太炫酷了,满满的科技感