1月14日消息,阿里妈妈近日正式推出商用级图生视频AI Native应用——淘宝星辰·图生视频,目前已对淘宝天猫商家开放使用。这一全新的AI Native工具,基于自研的淘宝星辰视频生成大模型,结合了海量电商数据、丰富的设计语言以及业内领先的营销经验,将推动电商AI内容创作的全流程智能化升级。
来源:淘宝官方
从操作上来看,用户只需输入一张静态图片和一段简短的prompt描述,淘宝星辰·图生视频便可基于对该图片的理解,直接生成高质量的5秒视频,生成的视频可达到电影级光影效果。
据官方介绍称,基于丰富的电商数据和设计经验,淘宝星辰·图生视频能自动识别并应用各类商品最适合的展示方式,而且从产品细节到整体风格保持高度协调统一;同时,其能够深度理解图片以及用户的多语言指令,确保生成视频内容与用户意图高度契合;另外,其严格遵循物理规律与动作规范,生成画面流畅自然,提升了视频的真实感和专业性;此外,无论是人脸、商品、还是文字、贴纸等装饰元素,其生成的视频始终保持画面清晰、完整、无抖动或变形,保持视觉一致性。
来源:淘宝官方
阿里妈妈技术人员表示,该团队目前已从0到1完成包括面向生成任务的数据飞轮、自研3D VAE及自研淘宝星辰视频生成大模型(包括Tbstar-T2V、Tbstar-I2V、Tbstar-V2V等)开发,其中Tbstar-I2V大模型已经成功应用于“淘宝星辰·图生视频”工具,为商家提供更为专业的电商图生视频解决方案。
截至目前,阿里妈妈技术团队已经开发出智能生成文、图、视频等一系列“AI智能创作全家桶”,集合在万相营造产品之中,可以帮商家30秒批量生成图片素材,0成本适配虚拟模特,智能视频创意可以完成直播剪辑、模版剪辑、多视频混拼、动效生成等,加上此次推出的图生视频AI工具,将大幅降低商家制作成本,助力商家更好更智能的经营。
来源:淘宝官方
特别声明:以上文章内容仅代表作者观点,不代表本站观点或立场。如有关于作品内容、版权或其它问题请于作品发表后与我们联系。