• 我的订阅
  • 科技

阿里巴巴推出atomovideo高保真图生视频框架

类别:科技 发布时间:2024-03-08 00:45:00 来源:浅语科技

3月7日消息,阿里巴巴研究团队近日推出了AtomoVideo高保真图生视频(I2V,ImagetoVideo)框架,旨在从静态图像生成高质量的视频内容,并与各种文生图(T2I)模型兼容。

阿里巴巴推出atomovideo高保真图生视频框架

▲图源AtomoVIdeo团队论文

IT之家总结AtomoVideo特性如下:

高保真度:生成的视频与输入图像在细节与风格上保持高度一致性

运动一致性:视频动作流畅,确保时间上的一致性,不会出现突兀的跳转

视频帧预测:通过迭代预测后续帧的方式,支持长视频序列的生成

兼容性:与现有的多种文生图(T2I)模型兼容

高语义可控性:能够根据用户的特定需求生成定制化的视频内容

阿里巴巴推出atomovideo高保真图生视频框架

▲图源AtomoVIdeo团队论文

AtomoVideo使用预先训练好的T2I模型为基础,在每个空间卷积层和注意力层之后新添加一维时空卷积和注意力模块,T2I模型参数固定,只训练添加的时空层。由于输入的串联图像信息仅由VAE编码,代表的是低层次信息,有助于增强视频相对于输入图像的保真度。同时,团队还以Cross-Attention的形式注入高级图像语义,以实现更高的图像语义可控性。

目前,该团队只发布了AtomoVideo的论文及演示视频,并未提供在线体验地址。同时官方开设了GitHub账户,但仅用作官方网站托管,并未上传任何相关代码。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-03-08 05:45:08

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

刚刚,重磅发布!阿里、腾讯、科大讯飞在列
...阶段该模型主要定向邀请企业用户进行体验测试。另外,阿里巴巴决定未来将所有产品接入通义千问,进行全面改造。4月10日,商汤科技董事长兼首席执行官徐立宣布推出大模型体系商汤日日新
2023-06-20 17:00:00
阿里达摩院免费开放 100 件 AI 专利许可
...能字幕生成”等富有广阔应用场景的专利。据此前报道,阿里巴巴目前已布局多方面的AI技术,此前已经推出了通义千问AI大模型
2023-08-11 15:44:00
阿里巴巴公布图生视频专利
...智能化端到端图生视频天眼查知识产权信息显示,近日,阿里巴巴(中国)有限公司申请的“一种图生视频方法和装置”专利公布。摘要显示,本发明实施例将包含目标对象的源图像输入第一视频生
2025-02-07 17:38:00
Pika、阿里同日炫技!国产视频大模型奋起直追
...同步发表于arXiv,同时宣布开源。论文显示,EMO团队来自阿里巴巴智能计算研究院。值得注意的是,EMO与Sora技术路线不同
2024-03-01 09:26:00
阿里AI新技术,让普通人秒变舞蹈达人
...能轻松变身为舞蹈大师,不再需要亲自上场跳舞!这正是阿里巴巴推出的黑科技——Animate Anyone视频生成模型所做的事情
2024-01-08 11:50:00
阿里CEO吴泳铭:生成式AI让世界有了一个统一的语言——Token
...是从主题演讲还是展览设置,这种云+AI的感觉都很强。在阿里巴巴的高层中,吴泳铭作为技术派,对AI更是情有独钟。他主导阿里之后,从各条业务线,都能明显的看到AI化的痕迹。其中,
2024-09-20 09:51:00
燃爆!奥运8分钟AI影片火了,巴赫主席:感谢中国黑科技
...。短片名为《永不失色的她》(To the Greatness of HER),由阿里巴巴和国际奥委会联合推出。百年奥运史上伟大女性的影像故事在此被浓缩在宝贵的8分钟里
2024-07-30 09:31:00
定格精彩瞬间,巴黎奥运会14个场馆启用“子弹时间”系统
...事直播,分发至全世界。国际奥委会主席巴赫近日表示,阿里巴巴正在推进人工智能技术的广泛应用,把2024巴黎奥运会的云上转播带到新高度。本届奥运会,云上转播正式超越卫星转播,成为
2024-08-02 22:58:00
这款AI神器一个月更新3次,我们用它搞了个动漫风《玫瑰的故事》
...绘应用也发力了,无论是 Domo AI 推出融合风格功能,还是阿里巴巴开源类似项目 Diffutoon,均在社交媒体上引发关注
2024-06-26 09:39:00
更多关于科技的资讯: