近日,基于自研的淘宝星辰视频生成大模型,阿里妈妈正式推出商用级图生视频AI Native应用——淘宝星辰·图生视频,目前已对淘宝天猫商家开放使用。这一全新的AI Native工具,结合了海量电商数据、丰富的设计语言以及业内领先的营销经验,将推动电商AI内容创作的全流程智能化升级。

图片来源于网络,如有侵权,请联系删除

让模特动起来,让商品动起来,让背景动起来,这款新AI工具的操作非常简单,用户只需输入一张静态图片和一段简短prompt描述,“淘宝星辰·图生视频”便可基于对该图片的理解,直接生成高质量的5秒视频,生成的视频可达到电影级光影效果,真正大片即视感。

据了解,“淘宝星辰·图生视频”在视频生成过程中展现出其不同于其他同类产品的独特优势。首先,基于丰富的电商数据和设计经验,此工具能自动识别并应用各类商品最适合的展示方式,而且从产品细节到整体风格保持高度协调统一;同时,其能够深度理解图片以及用户的多语言指令,确保生成视频内容与用户意图高度契合;另外,其严格遵循物理规律与动作规范,生成画面流畅自然,提升了视频的真实感和专业性;此外,无论是人脸、商品、还是文字、贴纸等装饰元素,其始终保持画面清晰、完整、无抖动或变形,保持视觉一致性。

“生成视频的速度很快,模特动作自然流畅,而且毫无违和感。”一位已经体验过“淘宝星辰·图生视频”的淘宝服饰商家表示,此产品可结合之前在用的AI模特产品一起使用,无需真实模特和拍摄就能生产出商用级视频,实现全流程AI创作,“真正的提质增效”。
据阿里妈妈技术人员介绍,该团队目前已从0到1完成包括面向生成任务的数据飞轮、自研3D VAE及自研淘宝星辰视频生成大模型(包括Tbstar-T2V、Tbstar-I2V、Tbstar-V2V等)开发,其中Tbstar-I2V大模型已经成功应用于“淘宝星辰·图生视频”工具,为商家提供更为专业的电商图生视频解决方案。
值得一提的是,阿里妈妈技术团队已经开发出智能生成文、图、视频等一系列“AI智能创作全家桶”,集合在万相营造产品之中,可以帮商家30秒批量生成图片素材,0成本适配虚拟模特,智能视频创意可以完成直播剪辑、模版剪辑、多视频混拼、动效生成等,加上此次推出的图生视频AI工具,将大幅降低商家制作成本,助力商家更好更智能的经营。
【纠错】 【责任编辑:王岩】-
新华全媒头条丨高原种子“上天入地” 开启生命新旅程
- 新华每日电讯丨定西之变
- 新华鲜报丨“China Travel”上升112.3%!来过,就会爱上
- 新华全媒+丨特写:春运首日,走上G2025次列车迎新春
- 追光丨在中国最南端城市踢球,是什么体验?
- 记者手记丨WCBA纪录被刷新后的隐忧
- 财经观察丨拥抱经济新引擎 香港蓄势待发
-
萌翻全场!围观7岁社火小鼓手 -
高寒特长隧道藏着守护与思念
