【48812】MediaTek联合快手推出高效端侧视频生成技能先进生成式AI让图画动起来

  2024年7月4日,MediaTek与快手一起宣告,推出高效端侧视频生成技能,一起探究并推进生成式AI技能的改造。该技能是对2024国际移动通讯大会(MWC 2024)上初度露脸的视频生成技能的连续与提高,结合快手的AI模型I2V(image to video)Adapter与MediaTek天玑9300、天玑8300移动渠道微弱的AI算力,在端侧完成由静态图画生成动态视频的立异体会。经过这项技能,用户只需在设备上选取图片,使用即可智能地辨认照片中的人物和场景,生成天然流通的视频佳作,显着提高了视频制造的构思体现和功率。

  两边的协作充沛凭借MediaTek天玑移动渠道先进的AI技能,携手霸占了模型底层适配优化及上层开发的系列技能及工程难题,为用户所带来让人耳目一新的端侧生成式AI体会,将改动用户创作和共享内容的方法。

  I2V-Adapter是快手AI团队提出的一种适用于根据Stable Diffusion文生视频分散模型的轻量级适配模块,作为即插即用的分散模型轻量级模块,专门用于由图画到视频的生成使命。该模块可以在不需要改动现有文本到视频生成(T2V)模型原始结构和预练习参数的情况下,将静态图画转换成动态视频。此外,其解耦规划使得该计划可以与DreamBooth、LoRa、ControlNet等模块无缝兼容,完成客制化和可控的图画到视频生成。

  MediaTek天玑9300和天玑8300移动渠道集成了先进的NPU(神经网络处理单元),为生成式AI而规划,供给微弱算力和能效。在图画生成视频的使用中,NPU可明显加快AI模型的运算,结合与快手I2V Adapter模型的适配和优化,完成更快的视频生成速度,一起兼具低功耗特性。天玑移动渠道可结合深度学习和实时烘托技能,对图画内容做深度剖析,捕捉关键帧,并据此生成流通、传神的视频画面作用。一起,MediaTek的实时烘托技能可保证视频在各类设备上均能带来高画质体现。

  全球短视频商场正迎来高速增长期,职业对立异、高效的视频生成技能的需求日益火急。MediaTek与快手根据对商场需求和趋势的深入洞悉,为广阔新老用户带来愈加先进、快捷的视频生成东西,一起推进短视频生态的昌盛开展。未来,两边将继续深化协作,推进生成式AI技能的逐渐开展,满意商场一直在改变的需求,一起创始和探究短视频技能的新纪元。

其他人还喜欢