• 我的订阅
  • 科技

阿里巴巴推出atomovideo高保真图生视频框架

类别:科技 发布时间:2024-03-08 00:45:00 来源:浅语科技

3月7日消息,阿里巴巴研究团队近日推出了AtomoVideo高保真图生视频(I2V,ImagetoVideo)框架,旨在从静态图像生成高质量的视频内容,并与各种文生图(T2I)模型兼容。

阿里巴巴推出atomovideo高保真图生视频框架

▲图源AtomoVIdeo团队论文

IT之家总结AtomoVideo特性如下:

高保真度:生成的视频与输入图像在细节与风格上保持高度一致性

运动一致性:视频动作流畅,确保时间上的一致性,不会出现突兀的跳转

视频帧预测:通过迭代预测后续帧的方式,支持长视频序列的生成

兼容性:与现有的多种文生图(T2I)模型兼容

高语义可控性:能够根据用户的特定需求生成定制化的视频内容

阿里巴巴推出atomovideo高保真图生视频框架

▲图源AtomoVIdeo团队论文

AtomoVideo使用预先训练好的T2I模型为基础,在每个空间卷积层和注意力层之后新添加一维时空卷积和注意力模块,T2I模型参数固定,只训练添加的时空层。由于输入的串联图像信息仅由VAE编码,代表的是低层次信息,有助于增强视频相对于输入图像的保真度。同时,团队还以Cross-Attention的形式注入高级图像语义,以实现更高的图像语义可控性。

目前,该团队只发布了AtomoVideo的论文及演示视频,并未提供在线体验地址。同时官方开设了GitHub账户,但仅用作官方网站托管,并未上传任何相关代码。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-03-08 05:45:08

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

刚刚,重磅发布!阿里、腾讯、科大讯飞在列
...阶段该模型主要定向邀请企业用户进行体验测试。另外,阿里巴巴决定未来将所有产品接入通义千问,进行全面改造。4月10日,商汤科技董事长兼首席执行官徐立宣布推出大模型体系商汤日日新
2023-06-20 17:00:00
阿里达摩院免费开放 100 件 AI 专利许可
...能字幕生成”等富有广阔应用场景的专利。据此前报道,阿里巴巴目前已布局多方面的AI技术,此前已经推出了通义千问AI大模型
2023-08-11 15:44:00
Pika、阿里同日炫技!国产视频大模型奋起直追
...同步发表于arXiv,同时宣布开源。论文显示,EMO团队来自阿里巴巴智能计算研究院。值得注意的是,EMO与Sora技术路线不同
2024-03-01 09:26:00
阿里AI新技术,让普通人秒变舞蹈达人
...能轻松变身为舞蹈大师,不再需要亲自上场跳舞!这正是阿里巴巴推出的黑科技——Animate Anyone视频生成模型所做的事情
2024-01-08 11:50:00
提效20倍!10万元起家的外贸新兵借力生成式AI弯道超车
...炼、营销优化等,第二部分是一键快速生成广告图,目前阿里巴巴已有成熟应用,第三部分则是企业管理。”阿里巴巴国际站商家产品负责人林豪向南都记者表示,此外用AI生成视频的功能还在探
2023-08-21 16:12:00
一次平扫CT 筛查多种癌症(大健康观察)
...海外版本报记者 熊 建图为周永进正在检查患者的CT片。 阿里巴巴达摩院供图刘伟(化名)不久前来浙江省丽水市中心医院体检,做了一个胸部平扫CT。该院放射科医生周永进在看片子时,
2024-02-27 05:17:00
OpenAI官方宣布ChatGPT将推出新的语音和图像功能
...动。AIGC已然成为了元宇宙领域的连接和输出技术。国内阿里巴巴、百度、腾讯等互联网巨头都注意到了AIGC这一未来的产业富矿
2023-09-26 17:35:00
【科技早报】华为发布超高端品牌“非凡大师”;蔚来称30亿美元融资传言不实
...手,微信广告可直跳淘宝、天猫9月25日消息,双11前夕,阿里巴巴与腾讯广告宣布深化合作。现有IT之家用户发现,微信朋友圈已经上线了淘宝的广告,点击即可跳转到淘宝,而且支持微信
2023-09-26 18:01:00
通义千问 再次“激活”阿里云
...AI 大战,阿里是最新加入战局的巨头,之一。4 月 11 日,阿里巴巴董事局主席张勇,在阿里云峰会上正式发布了阿里的大语言模型工具「通义千问」,并宣布旗下阿里「全家桶」全部接
2023-04-14 10:49:00
更多关于科技的资讯: