• 我的订阅
  • 科技

AI视频生成器Sora引发安全忧虑

类别:科技 发布时间:2024-02-19 07:41:00 来源:每日看点快看

本文转自:中国科学报

本报讯 近日,美国公司OpenAI推出了最新的人工智能(AI)模型——Sora,可以将文字描述转换为逼真的视频。

然而,该视频生成模型在推进AI技术发展的同时,也引发了人们对AI深度伪造视频可能加剧错误信息和虚假信息传播的担忧。

Sora目前可以通过单独的文本指令或文本与图像相结合的指令创建长达60秒的视频。比如根据“一位时尚女性走在充满霓虹灯和城市标志的东京街头”这一文本生成视频,还有一只狗在雪地里嬉戏、车辆在道路上行驶等例子,以及奇幻场景——鲨鱼在摩天大楼间穿梭。

“与生成式AI的其他技术一样,利用文本生成视频的技术会快速升级,这意味着我们距离难以区分真伪的时代越来越近。”美国加利福尼亚大学伯克利分校的Hany Farid表示,如果这项视频生成技术与AI驱动的语音克隆相结合,将在深度伪造人们从未说过和做过的事情方面开辟一个“全新领域”。

据悉,为了更逼真,Sora结合了两种不同的AI技术。一种是类似于DALL-E等AI图像生成系统使用的扩散模型。另一种是将顺序数据根据上下文拼接在一起的“转换器架构”技术,例如,大型语言模型就是使用转换器架构将单词组装成可理解的句子。

不过,Sora生成的视频中仍然有很多错误,比如一个行走的人的左右腿交换位置、一把椅子随意悬浮在半空中、一块被吃过的饼干却没有咬痕等。这表明目前仍然可以检测并鉴别出深度伪造视频。但专家表示,这已然能够欺骗普通人,视频不一定要完美才可信,许多人并没有意识到视频可以像图片一样被操纵。

为此,OpenAI改善模型安全性的“红队网络”专家对Sora进行了测试,试图突破该模型的保护措施,以评估其被滥用的可能性。这项测试至关重要,因为一些人可能会通过生成虚假视频骚扰他人,甚至影响政府选举。

OpenAI表示,在Sora作为产品向公众开放前,他们会采取几项重要的安全措施,旨在防止模型生成涉及极端暴力、性内容、真实政治家或名人等描述的自动化流程。(徐锐)

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-02-19 08:45:12

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

Adobe推视频生成大杀器!最长生成5秒视频,一键重拍成为现实,已开放公测
...版推出。文生模型的功能与Runway和OpenAI的Sora等其他视频生成器类似,用户只需输入想生成的视频的文本描述即可。该文生模型可以模拟真实电影、3D动画和定格动画等多种
2024-10-17 09:52:00
Sora爆火96小时国内大模型进场
...和编辑3D动画、动漫、卡通和电影,是一款零门槛的视频生成器,她向媒体透露,团队如今正准备招人,直接对标Sora。今年1月,字节跳动也发布了MagicVideo-V2文生视频模
2024-02-20 05:20:00
“Sora目前仍不够可靠,应用场景受限”
...,Sora结合了两种不同的AI技术。一是类似于DALL-E等AI图像生成器中使用的扩散模型,这些模型学习将随机图像像素转换为相干图像;二是“转换器架构”技术,其被用于将序列数
2024-03-02 10:00:00
你愿意为“生成式AI”付费吗?
...定位和使用场景。对于一些基础的生成式AI工具,如文本生成器、图像生成器等,可以免费提供给用户使用。而对于一些高级的、具有商业价值的生成式AI产品,如AI助手、AI客服等,可能
2023-10-17 07:31:00
Sora将改写什么
...来完成。此外,于新闻传媒业而言,诸如Sora这样的视频生成器的使用,也会对目前的新闻生产方式和流程等产生一定的重构性作用。当然,文生视频大模型的出现也令人喜忧参半。比如一些文
2024-02-21 14:39:00
首个3d人像视频生成模型来了
...改变,从而生成3D人像视频。然而,该方法的缺点是图片生成器和时序推理模型在不同的阶段分别被优化,导致最终的视频很难保持时间上的一致性。另一种主流的视频生成模型使用稀疏训练的方
2023-02-22 19:23:00
Meta发布AI视频生成器Movie Gen:一键生成高清视频
...10月6日消息,据媒体报道,Meta公司发布了其最新的AI视频生成器Movie Gen,这是一款能够自动生成包含声音的高清视频的创新工具
2024-10-06 08:38:00
meta推出ai视频生成器moviegen
10月4日消息,Meta公司今天宣布了一款新的AI视频生成器MovieGen,该工具能够生成带有声音的高清视频。几个月前
2024-10-05 21:11:00
Adobe神级AI视频媲美Sora!拖拽一键秒生大片,最强PS震撼设计圈
...)中,还有一个新功能,就是生成式工作区。其他AI图像生成器只能产生有限的结果,但工作区可以让我们同时构思多个创意概念,只需输入文本提示,就能快速生成一系列图像。这样,就能方便
2024-10-16 11:59:00
更多关于科技的资讯: