全面融入AI的第二代骁龙8，能否成为手机未来的“最优解”？ ...

一般小丑鱼

: T* I) |( ^% [　　作者|ByArsT
" ]( b& M7 {; p　　第二代骁龙 8如约推出，在我们看来，未来一年内Android平台手机的发展路线已经被彻底敲定了。
　　如果对这场发布会有所关注的朋友，一定会注意到一个有意思的地方。
　　从发布会开始到结束，高通几乎通篇都在讲自身产品在AI方面的优势，反复强调用户体验和AI赋能。
6 c( p/ k( c7 f" A3 s9 p　　介于高通大篇幅对AI的介绍，我们认为高通下一步的方向，就是要用AI来加强产品的使用体验，以此为未来手机产品发展划出一条新的方向。
8 T- c# M( ?% o& N. a9 H
　　图源：高通官网
& p) O/ }# W4 z% c( F. Q* c　　近两年，国内一直在强调“智慧手机”这一概念，从早期的用户操控手机，再到手机辅助用户，手机正在从单纯的工具变为辅助消费者的“助手”。
8 L2 s! Y& c8 K! R% i　　从手机厂商的愿景来看，“智慧手机”的下一步，就是如何让手机理解用户，成为消费者在数字世界的“管家”。
7 G/ E# f2 W; ]) b　　在迈入“下一步”的环节当中，AI是至关重要的一环。第二代骁龙 8采用了与AI深度融合的方式，来增强消费者的使用体验。
　　那么，AI算力与产品体验的融合，会成为未来手机的“最优解”吗？
　　更强大的AI算力，能为消费者带来什么？
/ i3 B1 H- m# a; {6 X) ]  r. r( v　　在谈及智能手机未来方向之前，我们先来聊聊第二代骁龙 8的AI算力。
　　在近两年的移动平台上，AI正逐渐从幕后转为台前，成为厂商们宣传的重点。尤其是与AI深度融合的第二代骁龙 8，算力的强弱是贯穿所有特性的关键。
) y' y. G- r. @$ ?1 G
! L' R9 g  }+ \9 n/ c　　图源：高通官网
' L% Z/ b( q- A# m7 S, o1 W　　在全新的第二代骁龙 8移动平台上，高通AI引擎的核心Hexagon 处理器实现了重大升级，Hexagon 处理器包含标量加速器、向量加速器和张量加速器，针对对于现代AI十分重要的张量加速器，高通将其尺寸翻倍，同时还引入了全新的微切片推理，并增加了独立的供电系统。

　　图源：高通官网
　　需要注意，基于这颗Hexagon 处理器，第二代骁龙8是目前唯一一颗支持INT4精度AI计算的移动平台。
　　与此前经常提起的浮点计算精度模式相比，支持INT4精度计算能够在移动平台上以有限的计算资源，运行更多神经网络模型，在不损失精度的情况下精简AI模型以降低功耗。
/ t2 ?5 ~- b5 S3 Z) g0 v　　在持续AI推理计算任务上，第二代骁龙 8相比第一代骁龙 8移动平台性能提升了4.35倍，能效提升60%，从32位浮点运算到4位整数运算，能耗降低了整整64倍。
4 m# C) e, \" j
　　图源：高通官网
: n5 D7 Z7 V( W; [　　只谈及数据，我们很难从中理解到升级进步的幅度，那我们就从功能角度进行理解。
　　AI的赋能，让手机有了语言理解的能力，这一技术被称为自然语言处理（NPL），未来搭载第二代骁龙 8的移动设备，能够更快的理解和分解人类语言。并且由于算力的提升，在本地就能实现更精准的语言理解能力，通过本地进行翻译、理解，在消除网络波动的同时，还能更好的保护消费者的“大数据隐私”。
　　基于第二代骁龙 8的AI性能，小米也宣布会在2023年推出离线版小爱同学，支持离线对话、语音唤醒、离线翻译等功能。
' M0 c1 e+ ?  ~/ |- I8 {: `
2 J* K; E9 h. G' k$ R  a2 w　　图源：小米官网
　　这是语音助手的一种全新形态，这些都与消费者的产品体验息息相关。
　　为手机加入看世界的“眼睛”
( L/ X3 D) B! D6 r　　相比于前面比较“缥缈”的AI算力，“高通传感器中枢”会让手机变得更“拟人化”。
　　在第一代骁龙 8上，高通传感器中枢就发挥了强大的作用，用于处理一些需要长时间运行的新特性，比如语音助理、活动检测、环境理解，以及低功耗感知摄像头（人脸解锁扫描）。利用AI的强大算力，来为我们处理手机上的音频、视觉以及传感器的信息，帮助设备侦测周围环境并作出相应调整。

　　图源：高通官网
* q+ x$ o: F( t, b; {* I　　在第二代骁龙 8上，高通为其内置了两颗 AI协处理单元和一颗DSP，用来提升高通传感器中枢的能力。
9 Z- _) B! m& g. c# N4 c　　在加入更多的AI协处理单元后，高通传感器中枢在“始终感知能力”上，得到了大幅提升。在提高设备AI性能、加快处理速度的基础上，提升了音频和传感器的始终感知能力，并且解锁了“始终感知摄像头”的全新能力。
2 h, B9 h; T" [　　“始终感知摄像头”最重要的一点，就是为手机加入能够看到世界的眼睛。
1 x" J6 s& Q! u. f( F　　搭载第二代骁龙 8的手机，可以在后台持续运行摄像头的功能，并且依托于AI算力，将一切都留存在手机当中，避免隐私泄露。
　　比如，熄屏下只需对着二维码，就可以实现扫码的行为，手机自动弹出扫描出来的窗口；如果有陌生人在身旁，前置摄像头也可以对其进行识别，并且自动隐藏通知，当感知到陌生人离开后重新开启；当用户躺下时，手机会自动更改屏幕方向，无需进行手动更改。
9 w. q! j/ [) O$ [% }. h% {
　　图源：高通官网
　　高通传感器中枢的功能远不止此，对于语义识别、日常操作学习等，高通传感器中枢都能有着比较不错的表现。
1 Y% U9 e$ g6 B　　除此之外，为了带来更强大的AI影像体验，高通选择在Hexagon 处理器和Qualcomm Spectra ISP之间，增加了一个名为“Hexagon直连”的物理连接，在两者之间建立了直接连接通道。
- y6 f1 U, @0 P& x- ]9 ]
* z$ A0 F# u8 u7 }2 G* h8 H+ j　　图源：高通官网
9 ^: {# B3 X7 B　　而这一操作，除了让智能手机能够从多个层面认知外部世界之外，还获得了一个全新而独特的、具有AI能力的ISP，高通将其称之为“认知 ISP”。
　　拥有独立AI的拍照系统
　　近两年，计算摄影成为手机厂商的不二选择，除了能够保证更优质的成像效果之外，还能让更多零基础人群体验到拍摄的乐趣。
　　但事实上，计算摄影只是AI拍照系统中的一环。
$ h7 \2 b/ I( |8 s　　2018年，高通推出了首款支持“计算机视觉（CV-ISP）”的ISP：Spectra 380，如今又推出了全新认知 ISP，高通一直想让AI深度介入影像系统当中。
　　此前的AI摄影有着较大的局限性，手机拍摄与AI引擎介入之间有着先后顺序，在手机进行拍摄后，系统才会调用神经网络来对图片进行优化和计算，在耗时耗电的同时，还会影响拍摄速度和质量。
$ k* p' u: E  i5 M& Y$ V0 T6 U* q　　简单来说，就是先拍照，再AI。
' P4 _. m% w4 q) C! t% Z3 T5 [　　由于第二代骁龙 8在Spectra ISP与Hexagon 处理器之间建立了物理层面的直连通道，两者之间可以进行实时的、大量的数据交换，相当于为Spectra ISP带来更强的AI认知能力，去更好的理解世界、环境、物体、光线等等。

　　图源：高通官网
4 W3 o, M; }, }/ ]; t0 a$ P　　所以，有了强大AI性能的影像系统，有了更多新的玩法。
# C1 T$ R. O8 C9 u  x　　高通为搭载第二代骁龙 8的移动设备加入了名为“语义分割”的AI照片编辑技术，能够将画面中多种不同的元素进行自定义编辑和分割，将每个物体分割变成类似“Photoshop”图层一样，在拍摄时根据每个物体的种类，进行编辑分类、柔化皮肤、锐化草地等等，整个过程在拍摄时都在实时运行，甚至在按下快门前，也就是取景框当中就可以实时看到这一切。

* B" [" J: g, y8 z9 g　　图源：高通官网
/ b% X+ Y0 h% D$ r: j3 x　　“语义分割”能做的远不止这些，第二代骁龙 8还能实现对捕捉画面的情境感知，比如在拍摄面部时，会对表情进行智能检测，识别嘴唇、牙齿、皮肤、头发等，还能识别出手表、头盔、眼镜等，且智能的消除掉反光和炫光，对不同细节完成针对性的优化。

　　图源：高通官网
　　这相当于，在拍照的同时，还有一个优秀的“P图师”在 进行实时服务。
　　“语义分割”的实现，意味着手机拥有了类似人类的思维，能够知晓“美与丑”，从另一方面说，也是为手机影像带来了新的“生命”。
( s2 L$ |9 f- n) c( w! ?　　不管多强大的AI影像也需要更强势的硬件支持，最后我们再来简单聊聊第二代骁龙 8在基础影像上的一些进步：
) D3 Z9 b4 d' Q2 w9 _: }) \) V9 J　　第二代骁龙 8依旧是18-bit 的三ISP，支持HDR 10、HDR 10+、HLG、杜比视界。单摄像头最高支持2亿像素，在支持30fps、多帧降噪（MFNR）以及零延迟拍摄（ZSL）条件下，单摄像头支持一亿像素，双摄像头支持6400万像素+3600万像素，三摄像头最高3600万像素。
5 C# }, h- V) T. o, W! V+ t" }. T　　在视频拍摄上，第二代骁龙 8支持拍摄8K HDR@30fps的画面，并且同时拍摄6400万像素照片，支持4K@120fps视频拍摄，并且加入了AV1编码格式，最高可播放8K HDR@60fps视频。

　　图源：高通官网
& j9 [$ d' _- t, A. X% D2 N　　此前，由于各大手机厂商的硬件和调教风格不同，拍摄出来的照片时好时坏，稳定性欠佳。基于这一情况，高通选择了与影像厂商进行联合调校，合作出特定传感器针对第二代骁龙 8进行优化，支持了包括索尼的四曝光数字重叠技术（QDOL-HDR）、三星的ISOCELL HP3 2亿像素传感器等技术。
　　由于高通已经对部分传感器调校完毕，相信未来会有更多的手机厂商选择这几款传感器，使用起来也更为方便。
% S( J4 e& h0 ?2 l, w; I　　5G也要加入“AI”
$ W3 b: N# k- X" `2 P2 x; x) ^1 w3 I　　在文章开头，我们聊到了AI与体验的融合会不会成为手机的未来发展方向。
- }+ {/ Q) V1 L1 n/ l" j) x　　在这一点上，高通有着更为“激进”的想法，甚至在5G基带中也塞入了一颗AI处理器。
　　第二代骁龙 8搭载了骁龙 X70 5G调制解调器及射频系统，成为首个以AI赋能的移动平台基带。
) F+ R; D* k; |; C　　在基带中加入AI，比我们想象中的要更为有用，AI可以大量介入到网络传输当中，实时优化关键参数和条件，比如信道状态反馈、毫米波波束成形、天线调谐和其他自适应功能，大幅度降低功耗，提升连接速度。
. n& V* u9 I9 N; S6 H" }, r
　　图源：高通官网
* }2 N1 C7 C1 }　　搭载第二代骁龙 8的移动设备5G传输速度，甚至能达到10Gbps。
1 z; O5 |/ W) s% |+ O& }　　除此之外，X70 5G基带还支持双卡双通（DSDA）5G连接。早前的双卡双通最大的问题就是需要两套射频系统，并且由于信号过于复杂，还会对WiFi、蓝牙等信号造成影响。

　　图源：高通官网
　　如今第二代骁龙 8通过自研的射频信号软件虚拟化技术，实现了5G+5G/5G+4G的双卡双通，当卡一在进行数据传输或进行通话时，卡二同样仍旧可以进行数据传输或进行通话，不会影响手机使用状态。
　　在WiFi连接上，第二代骁龙 8支持WiFi 7（802.11be）连接，在下载速度上最高能达到5.8Gbps，同时这也是全球时延最低的WiFi，低于2ms。
+ k  _- [/ h' F8 [$ y/ b$ c　　光追技术：更贴近真实的游戏体验
　　聊了AI技术的加入对手机体验上的影响，我们再来聊聊游戏方面。
! ]8 X: W. {& n* [; g4 c0 Z　　第二代骁龙 8改变了处理器架构，带来更为强大的性能，以及支持了更先进的游戏技术：光线追踪。
+ U4 u: t+ u1 X: q　　第二代骁龙 8搭载了一个基于Cortex-X3的Kryo超大核，主频达到了3.2GHz，大幅度提升了单线程性能。此外，这次第二代骁龙8在架构上进行了调整，从早前的1+3+4的架构变成了1+2+2+3的架构，四个性能核心（2 x Cortex A715 + 2 x Cortex A710），频率均为2.8GHz，三个效率核心Cortex A510，频率为2.0GHz。
+ D+ D$ a9 j2 o0 q5 a3 [　　四个性能核心的改变，让第二代骁龙 8在日常多线程负载上，有了更好的表现。
6 W  F- f. v( E0 R. u　　根据官方说法，第二代骁龙 8的CPU性能提升了35%，能效提升了40%。
* D$ R0 {. D7 V$ ~9 ?: g: N' p+ L9 {9 h
　　图源：高通官网
　　在GPU上，全新的Adreno 740 GPU在性能上同样实现了跃进，相比第一代骁龙 8有着25%的提升，在能效上提升高达45%，并且新加入了Vulkan 1.3的支持，有着30%的Vulkan提升。
　　我们再来聊聊光线追踪技术。
　　在过去两年里，包括三星、OPPO、Imagination等公司纷纷发布了各自的手游光追技术，但由于技术不够成熟、软硬件协同不够，仍旧面临着各种问题。
　　如今高通终于下场，在第二代骁龙 8上实现了光线追踪能力。

　　图源：高通官网
　　光线追踪技术的加入，能够影响整体画面的真实度，提供不同材质更真实的反射，以及真实阴影和环境光遮蔽等光学反射效果。
* F8 N7 T9 L6 U, h/ z/ G- D& s
* ?) D; d/ s8 D! k4 f# s# U　　图源：
" v7 b+ p8 [' [5 s/ Y　　高通官网
: o7 G1 {2 _6 r2 y) S3 D8 t! x　　简而言之，光追技术的加入会进一步加深手游的“真实性”。
　　对消费者来说，一个高质量手游时代即将到来，并且随着移动平台的性能不断加强，会有吸引更多3A端游厂商向着移动游戏平台进行迁移。
# g; D$ W- ^: k* n　　目前，网易游戏已经宣布与高通合作，未来会基于第二代骁龙 8移动平台为《逆水寒》添加实时光追技术，实现更真实的游戏画面。
+ b! G- L8 I" W3 x: @' W　　融入AI的第二代骁龙8，能否成为手机未来的“最优解”？
　　答案是，会。
　　我认为，如今移动设备的性能确实存在“溢出”的现象，如何增强消费者的使用体验，是一切问题的关键。
　　高通通过第二代骁龙 8，以AI赋能语言理解、手机视觉、AI拍照、5G传输，能够从全方位对手机体验进行提升，让手机理解用户的每一个动作，感知整个世界。

: e9 ~) }$ D  |( V; W$ J" r3 F　　图源：高通官网
0 m0 _: a6 \; d! {　　第二代骁龙 8通过全平台的AI赋能案例，向我们证明了，AI的深层次融入，才是未来手机发展的“最优解”。
/ x2 k8 V5 F$ B% I　　从如今高通展示出未来手机的发展方向，我们能够明显感觉到，如今高通在AI领域的领导力和适用性，通过自身的坚实技术，成为手机厂商不可或缺的技术底座。
　　这一情况我们也可以理解为，高通是驱动手机发展方向的幕后厂商。
　　随着第二代骁龙 8的发布结束，有越来越多的厂商宣布采用高通新一代移动平台。目前小米、OPPO、一加、vivo、iQOO以及红魔游戏手机，都已经宣布将会首批推出搭载第二代骁龙 8的手机新品。
: }* g; K' H" S. O+ U　　不知道手机厂商会为消费者提供一份怎么样的答卷呢？