• 我的订阅
  • 科技

“杜甫很忙”梗图变视频!智谱AI生成视频模型上线

类别:科技 发布时间:2024-07-27 14:18:00 来源:南方都市报
“杜甫很忙”梗图变视频!智谱AI生成视频模型上线

7月26日,智谱AI CEO张鹏在智谱Open Day上宣布,AI生成视频模型清影(Ying)正式上线智谱清言。南都记者关注到,应用清影生成6秒视频只需要30秒的时间,该功能不仅支持文生视频、图生视频,也支持视频生成视频(以下是利用网络梗应用清影生成的视频 )。

2024年过半,经过一轮“价格战”后,各家大模型企业正在将多模态能力的突破作为大模型发展的下一个关键节点,大模型行业本身也正经历从单模态到多模态,再到全模态的演进。就在本月初的世界人工智能大会上,腾讯集团副总裁蒋杰率先透露,腾讯混元大模型本身正在积极部署多模态甚至全模态技术。本月除了腾讯与智谱,快手视频生成大模型可灵AI也宣布基础模型再次升级,并全面开放内测。

南都记者体验发现,目前清影大模型所有C端用户皆可免费使用清影的文生视频和图生视频功能,不过用户在体验时可能需要排队等待。但用户可以选择以充值的方式来加速,目前24小时内加速价格为5元,1年内使用加速功能为199元。

“杜甫很忙”梗图变视频!智谱AI生成视频模型上线

张鹏在发布会现场表示,在此次生成式视频模型的研发中,坚信大模型最终性能主要与计算量、模型参数量和训练数据量相关的Scaling Law定律,继续在算法和数据两方面发挥作用。“我们积极在模型层面探索更高效的scaling方式。随着算法、数据不断迭代,我们也相信Scaling Law将继续发挥强大威力。”张鹏表示。

据介绍,此次发布的清影(Ying)底座的视频生成模型是CogVideoX,该模型能将文本、时间、空间三个维度融合起来,与Sora采用了相同的DiT架构。同时通过优化,CogVideoX推理速度提升了6倍。理论上,模型侧生成6秒视频仅需30秒时间。

同时,智谱还自研了一个端到端视频理解模型,用于为海量的视频数据生成详细的、贴合内容的描述。这意味着,即使你在使用视频生成模型时给模型下了非常复杂的“咒语”,模型依然可以理解你的prompt指令。

目前,清影(Ying)API 也同步上线大模型开放平台bigmodel.cn,企业和开发者通过调用API的方式,体验和使用文生视频以及图生视频的模型能力。C端用户则能通过清影(Ying)免费体验到AI文生视频、图生视频能力。

2024年过半,经过一轮“价格战”后,各家大模型企业正在将多模态能力的突破作为大模型发展的下一个关键节点,大模型行业本身也正经历从单模态到多模态,再到全模态的演进。除了文生图以外,文生视频也正在朝着更高分辨率、更长时长、更精细的方向发展。

就在本月初的世界人工智能大会上,腾讯集团副总裁蒋杰率先披露,腾讯混元大模型本身正在积极部署多模态甚至全模态技术。本月除了腾讯与智谱,快手视频生成大模型可灵AI也宣布基础模型再次升级,并全面开放内测。

不过,对于多模态大模型的发展现状,近期宇树科技创始人及CEO王兴兴就在世界人工智能大会上表示,目前大语言模型、多模态模型仍难以实现对整个世界的理解,对时间、空间和物理定律的理解还“非常糟糕”。对于多模态模型的发展,张鹏在发布会现场也表示,目前多模态确实还处于非常初级的探索阶段,智谱还将不断探索。

采写:南都记者 林文琪

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-07-27 18:45:01

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

智谱AI“中国版Sora”实测:6秒视频排队2分钟,猫猫很可爱,人手很翻车
...西7月26日报道,今天一早,大模型独角兽智谱AI正式发布视频生成工具清影,可支持文生、图生6秒时长的视频,即日起在PC端、手机App端以及小程序端面向所有C端用户免费开放。先
2024-07-27 09:18:00
Sora再度颠覆AI视频行业,A股哪些公司有相关布局?
人工智能(AI)巨头OpenAI又出王炸,其最新推出的文生视频大模型Sora因其“逼真”和“富有想象力”被广泛赞誉,其生成视频可达60秒也颠覆了传统视频生成领域平均只有4秒的视频生成长度
2024-02-19 08:10:00
智象多模态生成大模型3.0版发布
...主办方供图“智象多模态生成大模型3.0版全面升级图像和视频生成能力。”据智象未来创始人兼CEO梅涛介绍,具体包括画面质量与相关性提升、镜头运动和画面运动更加可控,以及多场景驱
2024-12-28 17:41:00
中国也有Sora同款训练架构公司,清华班底,智谱也投了 | 36氪首发
...是国内大语言模型狂飙的元年。2024年,OpenAI携可生成60秒视频的模型Sora再次登场,立刻带动了国内AI行业对视频、音频、图像、3D等多模态生成技术的探索。目前,生数
2024-03-14 15:12:00
智谱AI发布视频生成大模型,B站参与研发,亦庄提供算力|甲子光年
视频大模型进入百模大战。今年是“视频生成”大模型爆发元年。在过去两个月,我们看到了快手可灵、商汤Vimi、Luma AI
2024-07-27 09:30:00
中信证券:OpenAI推出视频生成模型Sora AI产业围绕多模态不断加码 【中信证券:OpenAI推出视频生成模型Sora AI产业围绕多模态不断加码】财联社2月19日电
2024-02-19 09:23:00
...人工智能大模型“紫东太初”2.0问世 可理解生成音乐和视频 新华社北京6月16日电 在三维场景里实现精准定位,通过图像与声音的结合完成场景分析……中科院自动化研究所16
2023-06-17 07:40:00
更快、更强、更可控:智谱“起舞弄清影”,视频生成卷出新高度!
智谱AI再次放大招,上线AI视频生成功能“清影”——曾被国际科技媒体The Information评为最有可能成为“中国OpenAI”5家企业之一的智谱AI
2024-07-27 10:00:00
科学家开发多模态音乐理解和生成大模型,兼具理解和创作音乐能力
...如生成一段吉他弹奏的音乐,还能根据用户输入的图像或视频生成音乐。图丨通过 M2Ugen 大模型进行多模态音乐理解和生成(来源
2024-04-09 10:25:00
更多关于科技的资讯: