京东6.18大促主会场领京享红包更优惠

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 525|回复: 0

全面融入AI的第二代骁龙8,能否成为手机未来的“最优解”? ...

[复制链接]

1686

主题

678

回帖

6657

积分

论坛元老

积分
6657
发表于 2022-11-23 16:31:16 | 显示全部楼层 |阅读模式 来自 上海

5 N& U8 T' K. W! L" w" G  作者|ByArsT# d$ j4 h* I1 S6 x+ Z4 e9 s; p! P5 Z
  第二代骁龙 8如约推出,在我们看来,未来一年内Android平台手机的发展路线已经被彻底敲定了。: R* g0 \; G/ X( \. H, X. n" y' _
  如果对这场发布会有所关注的朋友,一定会注意到一个有意思的地方。  r3 Y0 B( M! W6 P6 D$ ~# e2 I( D
  从发布会开始到结束,高通几乎通篇都在讲自身产品在AI方面的优势,反复强调用户体验和AI赋能。
+ @4 c1 N' p: H9 _" W  介于高通大篇幅对AI的介绍,我们认为高通下一步的方向,就是要用AI来加强产品的使用体验,以此为未来手机产品发展划出一条新的方向。
- U" S. O! g/ N* [) n8 B+ C$ g, S
8 n* ?: f/ d4 u$ K- X  图源:高通官网
8 K" q" o+ b, V; y  近两年,国内一直在强调“智慧手机”这一概念,从早期的用户操控手机,再到手机辅助用户,手机正在从单纯的工具变为辅助消费者的“助手”。
+ H& c$ ]1 S. B! }  从手机厂商的愿景来看,“智慧手机”的下一步,就是如何让手机理解用户,成为消费者在数字世界的“管家”。
" Y; ?2 A: \/ l& ]( g  在迈入“下一步”的环节当中,AI是至关重要的一环。第二代骁龙 8采用了与AI深度融合的方式,来增强消费者的使用体验。. S7 i3 ^% ^/ T8 z: K
  那么,AI算力与产品体验的融合,会成为未来手机的“最优解”吗?8 p) d. ~% E9 U: U# R; g
  更强大的AI算力,能为消费者带来什么?: C! {9 c. }9 Y! z/ C: z$ J
  在谈及智能手机未来方向之前,我们先来聊聊第二代骁龙 8的AI算力。  F' C0 q- U1 \7 e# @) R
  在近两年的移动平台上,AI正逐渐从幕后转为台前,成为厂商们宣传的重点。尤其是与AI深度融合的第二代骁龙 8,算力的强弱是贯穿所有特性的关键。
6 _; s, ~2 ~) \2 e2 ?# A$ T3 C1 u. y. X* {
  图源:高通官网" b# I0 ^7 ]+ c5 n5 u' F  M( Y
  在全新的第二代骁龙 8移动平台上,高通AI引擎的核心Hexagon 处理器实现了重大升级,Hexagon 处理器包含标量加速器、向量加速器和张量加速器,针对对于现代AI十分重要的张量加速器,高通将其尺寸翻倍,同时还引入了全新的微切片推理,并增加了独立的供电系统。
% l: O7 o  T1 n
$ s6 I2 k1 L" H/ t4 e% x  图源:高通官网
/ D2 F0 {5 \7 H" u$ `$ y; `  需要注意,基于这颗Hexagon 处理器,第二代骁龙8是目前唯一一颗支持INT4精度AI计算的移动平台。
8 [% E2 M' q% u- V) L. p+ `& n  与此前经常提起的浮点计算精度模式相比,支持INT4精度计算能够在移动平台上以有限的计算资源,运行更多神经网络模型,在不损失精度的情况下精简AI模型以降低功耗。
0 h. h0 d1 x: @  g" P, y1 A. p7 _4 {  在持续AI推理计算任务上,第二代骁龙 8相比第一代骁龙 8移动平台性能提升了4.35倍,能效提升60%,从32位浮点运算到4位整数运算,能耗降低了整整64倍。: u$ N8 `8 Q$ E
' l7 Y) M$ w0 ~! J& j& I
  图源:高通官网
9 Q8 ~0 y8 a* e' N9 q4 X" Y1 |7 q  只谈及数据,我们很难从中理解到升级进步的幅度,那我们就从功能角度进行理解。- g+ J$ C+ [9 B8 g3 h
  AI的赋能,让手机有了语言理解的能力,这一技术被称为自然语言处理(NPL),未来搭载第二代骁龙 8的移动设备,能够更快的理解和分解人类语言。并且由于算力的提升,在本地就能实现更精准的语言理解能力,通过本地进行翻译、理解,在消除网络波动的同时,还能更好的保护消费者的“大数据隐私”。
" W4 `! a# B" C( d9 T" @$ ]  基于第二代骁龙 8的AI性能,小米也宣布会在2023年推出离线版小爱同学,支持离线对话、语音唤醒、离线翻译等功能。
0 h' M: r1 x' Y7 q$ }: h5 ?# s% O' X8 k7 c2 C! g. @8 t
  图源:小米官网$ B$ z! G5 v8 i6 B) r
  这是语音助手的一种全新形态,这些都与消费者的产品体验息息相关。! }1 d5 Z; Z& Z+ G! X7 p
  为手机加入看世界的“眼睛”
( g5 O5 B0 i( L  相比于前面比较“缥缈”的AI算力,“高通传感器中枢”会让手机变得更“拟人化”。
; J: g" d9 z9 t  在第一代骁龙 8上,高通传感器中枢就发挥了强大的作用,用于处理一些需要长时间运行的新特性,比如语音助理、活动检测、环境理解,以及低功耗感知摄像头(人脸解锁扫描)。利用AI的强大算力,来为我们处理手机上的音频、视觉以及传感器的信息,帮助设备侦测周围环境并作出相应调整。
$ t7 Z9 @% e0 D6 l% t# g( F5 Q" B  t4 q% i9 N4 _
  图源:高通官网8 M  F0 ^% i9 e1 |, K) S. h
  在第二代骁龙 8上,高通为其内置了两颗 AI协处理单元和一颗DSP,用来提升高通传感器中枢的能力。7 c; `7 ?7 e  F- r
  在加入更多的AI协处理单元后,高通传感器中枢在“始终感知能力”上,得到了大幅提升。在提高设备AI性能、加快处理速度的基础上,提升了音频和传感器的始终感知能力,并且解锁了“始终感知摄像头”的全新能力。
; t! w1 P$ K* V, A( B  b  “始终感知摄像头”最重要的一点,就是为手机加入能够看到世界的眼睛。
& B; G5 g' J1 _' f9 E- K( M0 V9 S  搭载第二代骁龙 8的手机,可以在后台持续运行摄像头的功能,并且依托于AI算力,将一切都留存在手机当中,避免隐私泄露。- L$ O6 u* C- z' k
  比如,熄屏下只需对着二维码,就可以实现扫码的行为,手机自动弹出扫描出来的窗口;如果有陌生人在身旁,前置摄像头也可以对其进行识别,并且自动隐藏通知,当感知到陌生人离开后重新开启;当用户躺下时,手机会自动更改屏幕方向,无需进行手动更改。
7 }: N5 w+ ]! v: o$ r( I+ l" C- G& i2 I* T& X7 [  [
  图源:高通官网
* ~3 v( J# l( o) |, V% x" k, B  高通传感器中枢的功能远不止此,对于语义识别、日常操作学习等,高通传感器中枢都能有着比较不错的表现。9 F2 B; S2 d& A1 h
  除此之外,为了带来更强大的AI影像体验,高通选择在Hexagon 处理器和Qualcomm Spectra ISP之间,增加了一个名为“Hexagon直连”的物理连接,在两者之间建立了直接连接通道。
. ]9 m) c% q6 m+ \& u3 ?* j8 c$ Z3 {7 O- f, {( g4 m1 N0 z
  图源:高通官网
4 h- v# p7 Y9 v; f8 \+ I  而这一操作,除了让智能手机能够从多个层面认知外部世界之外,还获得了一个全新而独特的、具有AI能力的ISP,高通将其称之为“认知 ISP”。
& t: N6 ^% [+ _$ ~1 T; S' g4 W! q  拥有独立AI的拍照系统
& W8 R! B% D/ c; ~. a" h  近两年,计算摄影成为手机厂商的不二选择,除了能够保证更优质的成像效果之外,还能让更多零基础人群体验到拍摄的乐趣。$ M" y- J4 F2 {1 ^- s
  但事实上,计算摄影只是AI拍照系统中的一环。
" W9 x$ x2 A) W7 i0 ]! x3 R& a  2018年,高通推出了首款支持“计算机视觉(CV-ISP)”的ISP:Spectra 380,如今又推出了全新认知 ISP,高通一直想让AI深度介入影像系统当中。
* X7 A3 u4 v# H  此前的AI摄影有着较大的局限性,手机拍摄与AI引擎介入之间有着先后顺序,在手机进行拍摄后,系统才会调用神经网络来对图片进行优化和计算,在耗时耗电的同时,还会影响拍摄速度和质量。
1 r% W) B; t+ a) y: [  a2 y  简单来说,就是先拍照,再AI。
! N; \4 r% a5 Z/ Z: A  由于第二代骁龙 8在Spectra ISP与Hexagon 处理器之间建立了物理层面的直连通道,两者之间可以进行实时的、大量的数据交换,相当于为Spectra ISP带来更强的AI认知能力,去更好的理解世界、环境、物体、光线等等。5 t1 D' O" |! W& i) {

" H/ W$ }3 ?0 F0 V* y0 {  图源:高通官网1 t; y1 v( F7 x$ x4 w5 ~
  所以,有了强大AI性能的影像系统,有了更多新的玩法。- N: U: T3 [8 n% ?1 A3 F
  高通为搭载第二代骁龙 8的移动设备加入了名为“语义分割”的AI照片编辑技术,能够将画面中多种不同的元素进行自定义编辑和分割,将每个物体分割变成类似“Photoshop”图层一样,在拍摄时根据每个物体的种类,进行编辑分类、柔化皮肤、锐化草地等等,整个过程在拍摄时都在实时运行,甚至在按下快门前,也就是取景框当中就可以实时看到这一切。
0 K6 h  s+ n2 X# J% o# q3 ~2 T# m% F: Y  l! A* H
  图源:高通官网: I/ d9 V" P2 [4 I
  “语义分割”能做的远不止这些,第二代骁龙 8还能实现对捕捉画面的情境感知,比如在拍摄面部时,会对表情进行智能检测,识别嘴唇、牙齿、皮肤、头发等,还能识别出手表、头盔、眼镜等,且智能的消除掉反光和炫光,对不同细节完成针对性的优化。
7 h' k+ L; H6 V; S1 d
9 i4 C! F! `# Z5 K  图源:高通官网* o  C" E! b( U, `" S3 e) D
  这相当于,在拍照的同时,还有一个优秀的“P图师”在 进行实时服务。6 J" Z: q( a0 p# j
  “语义分割”的实现,意味着手机拥有了类似人类的思维,能够知晓“美与丑”,从另一方面说,也是为手机影像带来了新的“生命”。% @1 D, ?" X3 K9 l# N7 g( {
  不管多强大的AI影像也需要更强势的硬件支持,最后我们再来简单聊聊第二代骁龙 8在基础影像上的一些进步:
7 X: y% g* g. K. L% a0 P8 {% K  第二代骁龙 8依旧是18-bit 的三ISP,支持HDR 10、HDR 10+、HLG、杜比视界。单摄像头最高支持2亿像素,在支持30fps、多帧降噪(MFNR)以及零延迟拍摄(ZSL)条件下,单摄像头支持一亿像素,双摄像头支持6400万像素+3600万像素,三摄像头最高3600万像素。
' ~( K7 f' p& Y3 D" M6 u- P) k  在视频拍摄上,第二代骁龙 8支持拍摄8K HDR@30fps的画面,并且同时拍摄6400万像素照片,支持4K@120fps视频拍摄,并且加入了AV1编码格式,最高可播放8K HDR@60fps视频。
: g( {0 F, G3 c# t. B* X+ [3 P, C: q6 M3 B. ?, U# D
  图源:高通官网
5 r9 J: X8 {( E$ V5 f& T  此前,由于各大手机厂商的硬件和调教风格不同,拍摄出来的照片时好时坏,稳定性欠佳。基于这一情况,高通选择了与影像厂商进行联合调校,合作出特定传感器针对第二代骁龙 8进行优化,支持了包括索尼的四曝光数字重叠技术(QDOL-HDR)、三星的ISOCELL HP3 2亿像素传感器等技术。" J9 g3 O. i2 ]4 W
  由于高通已经对部分传感器调校完毕,相信未来会有更多的手机厂商选择这几款传感器,使用起来也更为方便。
: {* o: y; M* Q2 Q' n: x  5G也要加入“AI”
% {0 {" x! w3 n3 ]4 L! x  在文章开头,我们聊到了AI与体验的融合会不会成为手机的未来发展方向。
, c& Y, i+ s" n' \0 K  在这一点上,高通有着更为“激进”的想法,甚至在5G基带中也塞入了一颗AI处理器。3 M  B* u% {/ |1 |
  第二代骁龙 8搭载了骁龙 X70 5G调制解调器及射频系统,成为首个以AI赋能的移动平台基带。
, _$ ~* o0 w0 G9 i. E; S; n+ j  在基带中加入AI,比我们想象中的要更为有用,AI可以大量介入到网络传输当中,实时优化关键参数和条件,比如信道状态反馈、毫米波波束成形、天线调谐和其他自适应功能,大幅度降低功耗,提升连接速度。
+ R7 X4 T- D  Q
7 W9 q4 D( I' J1 D& d/ h- k  图源:高通官网
0 j) B( [' k2 Q# m. P  搭载第二代骁龙 8的移动设备5G传输速度,甚至能达到10Gbps。! R$ p+ f8 Q# g. o; ?/ p0 K5 @
  除此之外,X70 5G基带还支持双卡双通(DSDA)5G连接。早前的双卡双通最大的问题就是需要两套射频系统,并且由于信号过于复杂,还会对WiFi、蓝牙等信号造成影响。5 q5 Y  L" ]/ ~' Z" _
$ J; P4 `( f, D" C# R/ L! H+ C1 @
  图源:高通官网
! d# s; J, x0 W  如今第二代骁龙 8通过自研的射频信号软件虚拟化技术,实现了5G+5G/5G+4G的双卡双通,当卡一在进行数据传输或进行通话时,卡二同样仍旧可以进行数据传输或进行通话,不会影响手机使用状态。
, H9 s) o* s1 F  在WiFi连接上,第二代骁龙 8支持WiFi 7(802.11be)连接,在下载速度上最高能达到5.8Gbps,同时这也是全球时延最低的WiFi,低于2ms。  j# w5 n8 U5 @$ o+ i
  光追技术:更贴近真实的游戏体验
% a6 \. S: J6 ]4 A% f- s9 Q0 P  聊了AI技术的加入对手机体验上的影响,我们再来聊聊游戏方面。/ h' A- ^6 `4 P# p( z
  第二代骁龙 8改变了处理器架构,带来更为强大的性能,以及支持了更先进的游戏技术:光线追踪。
: @$ q' h* V* B& }% h/ ]  第二代骁龙 8搭载了一个基于Cortex-X3的Kryo超大核,主频达到了3.2GHz,大幅度提升了单线程性能。此外,这次第二代骁龙8在架构上进行了调整,从早前的1+3+4的架构变成了1+2+2+3的架构,四个性能核心(2 x Cortex A715 + 2 x Cortex A710),频率均为2.8GHz,三个效率核心Cortex A510,频率为2.0GHz。  C+ N7 F- w$ m/ X( i8 i4 R7 t
  四个性能核心的改变,让第二代骁龙 8在日常多线程负载上,有了更好的表现。2 S! u* R+ D% D- z$ \
  根据官方说法,第二代骁龙 8的CPU性能提升了35%,能效提升了40%。2 b9 Y$ M! d2 e+ x+ }' I
5 e" {7 N4 R* s
  图源:高通官网
) W' n4 r5 ~1 A$ o; G  在GPU上,全新的Adreno 740 GPU在性能上同样实现了跃进,相比第一代骁龙 8有着25%的提升,在能效上提升高达45%,并且新加入了Vulkan 1.3的支持,有着30%的Vulkan提升。
% z2 ?, |3 b* k4 A0 U: U' ~  我们再来聊聊光线追踪技术。
4 K' U9 G9 ^; p% Y( g8 b  在过去两年里,包括三星、OPPO、Imagination等公司纷纷发布了各自的手游光追技术,但由于技术不够成熟、软硬件协同不够,仍旧面临着各种问题。3 g4 k( m3 z# i8 t& I- e
  如今高通终于下场,在第二代骁龙 8上实现了光线追踪能力。
! b  _. \# b; S, a+ e: O
, q" O: {# `$ y- U3 ?  图源:高通官网
3 X! ~8 \, W( O  X, P& O  光线追踪技术的加入,能够影响整体画面的真实度,提供不同材质更真实的反射,以及真实阴影和环境光遮蔽等光学反射效果。1 |  D. u: V! _1 C3 b. t
5 `" w, l+ M; _: [7 ?+ ~. T
  图源:+ w4 r7 \' B4 D- K# ]2 i
  高通官网
( @( H$ x" ^* Y( M& T) q1 P" C  简而言之,光追技术的加入会进一步加深手游的“真实性”。7 l' s! V  ]/ B6 \( J0 r0 j" [: a/ n
  对消费者来说,一个高质量手游时代即将到来,并且随着移动平台的性能不断加强,会有吸引更多3A端游厂商向着移动游戏平台进行迁移。
- ]/ R/ s+ {5 B( j4 @9 t9 [  目前,网易游戏已经宣布与高通合作,未来会基于第二代骁龙 8移动平台为《逆水寒》添加实时光追技术,实现更真实的游戏画面。
) Q) w5 z% D& |$ |( `* X/ U$ M  融入AI的第二代骁龙8,能否成为手机未来的“最优解”?
$ G/ ^3 [9 f; {2 A  答案是,会。! m! z$ p+ z4 A1 p) n
  我认为,如今移动设备的性能确实存在“溢出”的现象,如何增强消费者的使用体验,是一切问题的关键。( O  R- U) S2 W3 L+ k" O+ e
  高通通过第二代骁龙 8,以AI赋能语言理解、手机视觉、AI拍照、5G传输,能够从全方位对手机体验进行提升,让手机理解用户的每一个动作,感知整个世界。
6 r5 R/ F0 k7 W( v1 D- @/ ]7 V& E2 j6 t, ^# N
  图源:高通官网5 u& w8 h- S# O
  第二代骁龙 8通过全平台的AI赋能案例,向我们证明了,AI的深层次融入,才是未来手机发展的“最优解”。7 E  ^& B# h3 v7 C
  从如今高通展示出未来手机的发展方向,我们能够明显感觉到,如今高通在AI领域的领导力和适用性,通过自身的坚实技术,成为手机厂商不可或缺的技术底座。7 d* Z' @* m1 ^+ Y
  这一情况我们也可以理解为,高通是驱动手机发展方向的幕后厂商。& k  x: H/ ]% J6 G( t0 o
  随着第二代骁龙 8的发布结束,有越来越多的厂商宣布采用高通新一代移动平台。目前小米、OPPO、一加、vivo、iQOO以及红魔游戏手机,都已经宣布将会首批推出搭载第二代骁龙 8的手机新品。! u8 n! |! \5 |
  不知道手机厂商会为消费者提供一份怎么样的答卷呢?. `& g; E7 U# |5 u4 U) d6 `

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×

帖子地址: 

梦想之都-俊月星空 优酷自频道欢迎您 http://i.youku.com/zhaojun917
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|手机版|小黑屋|梦想之都-俊月星空 ( 粤ICP备18056059号 )|网站地图

GMT+8, 2026-9-19 15:52 , Processed in 0.056005 second(s), 25 queries .

Powered by Mxzdjyxk! X3.5

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表