|
|
机器之心报道
6 a# k0 A: V& T5 s, V编辑:杜伟* ~4 O+ }' d2 J% U
让手机用户也能无门槛体验 Stable Diffusion 的绘图魅力。' {* U2 U, d8 j- t- I& m7 c
我们知道,Stable Diffusion 是一种非常流行的文本到图像生成式 AI 模型,它能够在几十秒内为任何给定的输入文本创建逼真的图像。Stable Diffusion 的参数超过了 10 亿,直到现在,该模型主要在云端运行。
+ |, Q4 s0 A0 [' @+ Q* p4 N; t因此,如何在移动设备端运行 Stable Diffusion 吸引了圈内人士的极大兴趣。此前,有位作者开发了一个应用程序,通过 Stable Diffusion 来生成图像,然后按喜欢的方式编辑。该应用在最新的 iPhone 14 Pro 上生成图片仅需一分钟,使用大约 2GiB 的应用内存。 r" O/ ^% f& x7 o
甚至苹果亲自下场优化,在 iPhone、iPad、Mac 等设备上以惊人速度运行 Stable Diffusion,在半分钟生成一张分辨率 512x512 的图像。如下为苹果设备上运行 Stable Diffusion 和 Core ML + diffusers 生成的图像。) x% s- n7 Y5 ^' v
: S- U7 P" {$ l0 Q8 }0 p% O/ E" K6 N+ {6 |/ |5 S) d) N4 Y3 Y
1 S$ f% C/ n" _& s" J
Stable Diffusion 实现最快安卓端运行
# G0 s7 Y% U ^0 W$ K那么安卓手机上能不能也运行 Stable Diffusion 并快速出图呢?今日,高通的一则 Demo 视频演示了:安卓手机端使用 Stable Diffusion 实现了最快本地 AI 图像生成。+ [+ }# \8 y) w+ p1 e9 v
在如下 Demo 视频中,Stable Diffusion v1.5 在不到 15 秒的时间内生成分辨率 512x512 的图像。高通虽然没有明确说明是哪款手机,但表示该手机搭载了最新的骁龙 8 Gen2 旗舰芯片组。通过在软件层面进行各种自定义优化,使得 Stable Diffusion 以最佳方式实现了运行。
4 P, r5 x7 I6 ?7 z5 |
6 Q4 j1 ^, J _ q- o0 D* F# \5 Y# a9 `
3 T& ~& ?% z8 q) Q( n
高通在其测试设备上生成的一些示例图像如下所示,如「穿着盔甲的、超级可爱的、毛茸茸的猫武士」。
) u# f5 G; x- |# S+ {/ y Z9 \& w2 O3 R5 M+ c1 I: Z# C( j2 Z
! c, s" h" N" E( r' R. ?9 r! Z7 D! N& M ]2 M$ S
在智能手机端以如此快的速度运行 Stable Diffusion,这要归功于高通的全栈 AI 优化方案。该方案显著降低了运行时延迟和能耗,最终实现 Stable Diffusion 安全高效的运行。) g" y3 f8 S5 t$ @6 I
- w* y) g% ^: D1 |: G3 W4 p' F' x. f" R& Q. w9 Z! }
$ ^( x' p/ Y: J d1 B$ P3 B6 V3 H
其实,在高通发布 Demo 视频之前,已经有开发者展示了在搭载高通骁龙 865 的 8G RAM 索尼 Xperia 5 II 上运行 Stable Diffusion。这位开发者名为 Ivon Huang,其博客中详细介绍了相关教程。不过,生成一张分辨率 512x512 的图像需要 1 个小时。与之相比,高通出图的速度实现了巨大的提升。/ j, F8 ? }, j) m4 b+ E& [( ]
* S0 L L& I3 p
: w% A K |- l# G* w2 m
8 l2 x4 Z G6 u1 e
博客地址:
2 ~5 v0 R. V9 I" [8 zhttps://ivonblog.com/en-us/posts/android-stable-diffusion/
8 G5 w( W" N7 r- ]/ m参考链接:2 C# { u( n4 G2 d/ n
https://www.theverge.com/2023/2/23/23611668/ai-image-stable-diffusion-mobile-android-qualcomm-fastest
; c& U" A$ v6 _% A7 Q! Bhttps://www.qualcomm.com/news/onq/2023/02/worlds-first-on-device-demonstration-of-stable-diffusion-on-android4 T9 C: S( Q- Z/ o0 m* {
THE END
3 g/ D& W) C, [$ f) i转载请联系本公众号获得授权* E+ c& K4 M; L' Q- _% S5 ?6 E
投稿或寻求报道:content@jiqizhixin.com |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|