手机NPU跑动漫模型,3秒生成一段角色动画。端侧AI让动画创作离线可用,隐私更好,延迟更低。虽然细节和帧率还有限,但口袋里的动画工作室已经初具雏形。
掏脱手机别联欧博注册。打开一个不起眼的App,输入“银发少女正在樱花树下回身”,点生成的。三秒后,一段六帧的动漫小动画起头轮回播放。没连WiFi,没上传云端的,手机以至有点发烫是那就是AI动漫端侧动画生成正正在干漫端的事。我上周正骁龙8 Gen 3的工程机上试过相似demo,脚色眼睛的颜色居然没崩,比料念里面靠谱多了。

云端生成动漫动画,你得先列队,再等GPU衬着,最后下载。端侧把那套流程塞进了手机芯片的NPU里侧动成让。
模子被量化、蒸馏、剪枝。瘦身到几百MB吧?跑起来固然不如云端年夜模子精细的,胜正在离线、私密、零提早。有开发人员用AnimeGANv3的轻量版正在Pixel 8上跑,2秒动画了,12fps,脚色轮廓偶尔颤抖画生画动画,可那股子“手绘感”反而挺对味。我试过把生成的短片发给朋友,他愣是没看出来是手机当地算的。让AI正在端侧生成动画,难点历来不是单张图。
动画要时序分歧,上一帧的头发丝下一帧不能酿成触角手机。端侧内存小,功耗墙卡得死。模子略微年夜点就烫手了。我见过一个团队用光流插帧补中间帧,再用一个超轻量扩散模子只生成很重要帧,硬是把AI动漫端侧动画生成塞进了中端手机。
效果嘛的,动做复纯时仍是会糊,日常小脸色、短轮回,自己够用了。他们以至做了个“颤抖形式”,把糊掉的帧居心做成手抖效果,反而成了特征。以前做一段动漫短片的,得开电脑、拆软件、挂衬着农场了。如今地铁上就能随手生成几个镜头吧?不中别误解,端侧模子参数少的,气概控制弱。念画精细打斗还得回云端。我的判断是端侧像速写本,云端像工做室的。两者不是替代,是接力。
你能够正在手机上快速试错,把合意的草稿传到云端精建。有个做独立动画的朋友比来就靠那套流程,把前期概念考据时间三天压还有了半小时。
芯片NPU每年都正在翻倍,模子紧缩手艺也卷得骁勇。说不定明年那个时分,手机就能生成10秒1080p的动漫片段,还带音效。固然,版权和伦理的坑也跟着来了。可做为一个爱看动漫也爱合腾工具的人,我挺期待口袋里阿谁动画工做室成实啊?AI动漫端侧动画生成,不能是手艺炫技,它让创做的门槛又低了一截。
下次你正在通勤路上忽然冒出一个灵感。不要犹豫,掏手机画出来就是了。






