• 我的订阅
  • 科技

meta推出“v-jepa”视频预测模型

类别:科技 发布时间:2024-02-18 04:39:00 来源:浅语科技

2月17日消息,Meta首席AI科学家YannLeCun在2022年推出了JEPA(JointEmbeddingPredictiveArchitectures)模型架构,次年基于JEPA架构开发了一款“I-JEPA”图片预测模型,目前又推出了一款名为“V-JEPA”的视频预测模型。

meta推出“v-jepa”视频预测模型

据介绍,相关JEPA架构及I-JEPA/V-JPA模型主打“预测能力”,号称可以以“人类理解”的方式,利用抽象性高效预测生成图片/视频中被遮蔽的部分。

IT之家注意到,研究人员使用一系列经过遮蔽处理的特定视频训练I-JEPA/V-JEPA模型,研究人员要求模型利用“抽象方式”填充视频中缺失的内容,从而让模型在填充间学习场景,进一步预测未来的事件或动作,进而达到对世界更深层次的理解。

meta推出“v-jepa”视频预测模型

meta推出“v-jepa”视频预测模型

▲图源Meta官方新闻稿(下同)

研究人员表示,这种训练方法能够让模型专注于影片的高层次概念,而“不会钻牛角尖处理下游任务不重要的细节”,研究人员举例“人类观看内含树木的影片时,不会特别关心树叶的运动方式”,因此采用这种抽象概念的模型,相对于业界竞品效率更佳。

meta推出“v-jepa”视频预测模型

研究人员同时提到,V-JEPA采用一种名为“FrozenEvaluations”的设计结构,即“模型在预训练之后,核心部分不会再改变”,因此只需要在模型之上添加小型专门层即可适应新任务,具有更高普适性。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-02-18 08:45:14

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

首个3d人像视频生成模型来了
...人像上。最近,来自新加坡国立大学(NUS)和字节跳动的研究人员,在静态3D模型的基础上,提出了首个3D人像视频生成模型
2023-02-22 19:23:00
迎战GPT-4V!谷歌PaLI-3视觉语言模型问世,更小、更快、更强
...模型与相似的体积大 10 倍的模型相比具有显著竞争力。研究人员使用分类目标预训练的视觉变换器(ViT)模型与对比性预训练的模型(SigLIP)进行了比较
2023-10-17 16:31:00
o1金牌团队揭秘AI超越人类惊人时刻!22分完整版视频全公开
...一个推理模型,也就是会比以往「思考」得更多。在OpenAI研究人员看来,「思考」就是推理的一种最直观的方式。有时候,当被问及意大利首都是什么问题时,我们几乎不用思考,即刻就能
2024-09-23 09:50:00
谷歌推出“文生视频”扩散模型
.../24FPS下约3.34秒视频),虽然这一数据看起来很短,不过研究人员提到,5秒视频长度实际上“已经超过大多数媒体作品中的平均镜头时长”
2024-01-29 11:15:00
...者水平。德国卡尔斯鲁厄理工学院和杜伊斯堡-埃森大学研究人员在新一期人工智能领域学术期刊《知识系统》上发表论文说,他们使用真实的比赛场景而非模拟或人工合成数据来训练人工智能系统
2024-06-26 03:17:00
华人团队爆火instructblip抢跑看图聊天
...劣的天气因素造成的。给我介绍下这幅画进行多轮对话 研究人员表示,正是基于强大BLIP-2,才使得InstructBLIP「看」的更好
2023-05-15 20:17:00
Meta版Sora深夜横空出世,小扎放出16秒高清大片!92页论文曝光技术细节,Llama 3架构立功
...Movie Gen Video沿用了Transformer的设计,尤其借鉴了Llama 3。而研究人员引入的「流匹配」(Flow Matching)
2024-10-08 09:52:00
研究人员提出版权授权方案,能将艺术家风格和IP版权授权给AIGC模型
...代下的“版权授权”方案,为解决该类问题提供了方法。研究人员表示:“我们此次研究的背景是源自于网上冲浪的时候,看到很多艺术家社区呼吁抵制文字生成图像模型,因为模型剽窃能力太强了
2024-06-24 09:13:00
行业报告 | 2023年9月全球AIGC行业月报-要闻篇
...自毁模型"技术,抵制大型AI模型的恶意应用斯坦福大学的研究人员最近推出一项创新性研究,旨在防止大型AI模型被恶意应用于有害任务。他们提出了一种名为“自毁模型”的新技术,通过这
2023-10-18 10:00:00
更多关于科技的资讯:
2025亚太机器人世界杯青岛国际邀请赛在青举行
齐鲁晚报·齐鲁壹点 徐润杰 杨雪 通讯员 杨治峰9月6日至9日,作为2025海洋合作发展论坛的同期活动,2025亚太机器人世界杯青岛国际邀请赛在青岛西海岸新区举行
2025-09-09 09:37:00
电网运行风险防御技术与装备全国重点实验室:他们在!大停电多年未遇,“网”自岿然不动编者按科技改变世界,而位于各大高校院所
2025-09-09 07:43:00
由十几人紧盯变一两人巡检,5G+智能产线“显神通”一根头发丝的1/7!滑块南京造,精度航天级□南京日报/紫金山新闻记者黄琳燕走进南京工艺装备制造股份有限公司(以下简称“南京工艺”)的“5G+智能滑块生产线”车间
2025-09-09 07:43:00
尚诗颖 南昌市新建区象山初级中学摘要:人工智能为中学生外语教育领域引入了新的变革与视角,着重关注学生个性化学习需求及自主学习能力的培养
2025-09-09 06:59:00
共创优质产品体验,从“MagicOS创享家”看荣耀的“听劝”哲学
摘要:以“听劝”的姿态持续进化,才是产品迭代的核心价值坐标。8月底,成都宽窄巷子又一次“出圈”了。年轻人能听Live现场
2025-09-08 08:19:00
网易云音乐教师节特别活动正式上线 百万黑胶VIP免费领
9月5日,网易云音乐教师节特别活动正式启动。本次活动为教师与学生群体都准备了丰厚福利,教师可免费领取100万份专属福利大礼包
2025-09-08 08:20:00
人工智能成“显眼包” 一批高科技产品亮相投洽会
MUGIN EV350全电动碳纤维垂直起降无人机平台,轻量化碳纤维机身设计,兼顾高强度与低能耗,适用于城市巡检、应急通信等场景
2025-09-08 09:01:00
“红房子”成热门国际会客厅 九位国际嘉宾昨做客
英中贸易协会会长詹诚信翻看《厦门日报》。厦门网讯(文/厦门日报全媒体记者 赵张昀 图/厦门日报全媒体记者 杨进福)投洽会的“国际范儿”体现在哪里
2025-09-08 09:01:00
IBM中国企业级AI巅峰论坛首落烟台黄渤海新区 携手盛启AI新世界
论坛现场大众网记者 邢晨 烟台报道9月5日,IBM中国企业级AI巅峰论坛在烟台黄渤海新区成功举办。论坛上,IBM分享了有关企业级AI的最新洞察
2025-09-08 09:10:00
鲁网9月8日讯当今世界,科技浪潮奔涌而来。数字化、智能化,正在改变每一个行业的运行逻辑,也重塑着金融业的未来。对银行来说
2025-09-08 10:42:00
电冰箱能效新国标出台 节能门槛再提升
本报记者 赵 曦 □ 唐 瑞近日,市场监管总局(国家标准委)发布新版GB 12021.2-2025《家用电冰箱耗电量限定值及能效等级》国家标准
2025-09-08 11:05:00
国家网信办等四部门联合发布的《人工智能生成合成内容标识办法》9月1日起正式施行,明确要求AI生成的文字、图片、视频等内容须进行标识
2025-09-08 11:05:00
记者8月26日从市场监管总局获悉,市场监管总局(国家标准委)近日发布新版洗碗机能效水效强制性国家标准。此次修订发布的标准
2025-09-08 11:06:00
技术驱动增长!聊城乖宝研发构筑壁垒,自有品牌营收35亿稳居行业龙头
大众网记者 彭静 聊城报道9月5日,聊城市政府新闻办举行“产业链上的山东好品牌”企业家系列现场记者见面会(四)聊城农副产品加工与大健康产业链专场
2025-09-08 11:18:00
白象旗下网店公司因虚假广告被罚3万,此前因“多半”桶面“多半”为注册商标陷争议
企查查APP显示,近日,尚选电子商务(江苏)有限公司因发布虚假广告,被新沂市市场监督管理局罚款3万元。违法事实显示,该公司在某平台网店发布虚假宣传广告
2025-09-08 11:20:00