要点速达👈
- 🎥 MediaTek与快手推出高效端侧视频生成技术。
- 💪 结合天玑平台AI算力与I2V Adapter模型,实现图像到视频转换。
- 📱 用户可通过设备选取图片,生成自然流畅的视频。
- 🔍 I2V Adapter模型兼容多种扩展模块,实现客制化视频生成。
- 🚀 天玑移动平台集成NPU,加速AI模型运算,提升生成速度。
MediaTek与快手近日宣布合作推出一款高效端侧视频生成技术。该技术结合了MediaTek天玑9300和天玑8300移动平台的强大AI算力,以及快手的AI模型I2V(image to video)Adapter,为用户带来由静态图像生成动态视频的全新体验。
在2024年世界移动通信大会(MWC 2024)上首次亮相后,这项技术进行了进一步的提升。用户只需在设备上选取图片,应用即可智能识别照片中的人物和场景,生成自然流畅的视频作品。这种创新大大提升了视频制作的创意表现和效率。
双方合作充分利用了MediaTek天玑移动平台的先进AI技术,攻克了模型底层适配优化及上层开发的多项技术难题,带来了耳目一新的端侧生成式AI体验。快手提出的I2V Adapter模型,是一种适用于Stable Diffusion文生视频扩散模型的轻量级适配模块,能够在不改变现有文本到视频生成模型原始结构和预训练参数的情况下,将静态图像转换为动态视频。其解耦设计还使其能够与DreamBooth、LoRa、ControlNet等模块无缝兼容,实现客制化和可控的视频生成。
MediaTek天玑9300和天玑8300移动平台集成的NPU(神经网络处理单元)专为生成式AI设计,提供强劲算力和能效。在图像生成视频的应用中,NPU加速AI模型运算,结合快手I2V Adapter模型的适配与优化,实现更快的视频生成速度,同时保持低功耗。天玑移动平台还结合深度学习和实时渲染技术,对图像内容进行深度分析,捕捉关键帧,生成流畅逼真的视频画面。
全球短视频市场正迎来高速增长期,行业对创新高效的视频生成技术需求迫切。MediaTek与快手通过对市场需求和趋势的深刻洞察,推出了先进便捷的视频生成工具,共同推动短视频生态的繁荣发展。