• 我的订阅
  • 科技

专家:openai语音转写工具存在重大缺陷

类别:科技 发布时间:2024-10-29 05:46:00 来源:浅语科技

10月28日消息,当地时间27日,据美联社报道,超过十位软件工程师、开发人员和学术研究人员称,OpenAI的语音转写工具Whisper存在一个重大缺陷:有时会凭空生成大段甚至整句虚假内容。

这些专家指出,这些生成的文本(IT之家注:业内通常称为“AI幻觉”)可能涉及种族言论、暴力措辞,甚至杜撰的医疗建议。

专家:openai语音转写工具存在重大缺陷

专家们认为,这一问题尤其令人担忧,因为Whisper已被广泛应用于全球多个行业,包括用于翻译和转录访谈内容、生成常见消费科技文本及制作视频字幕。

更具风险的是,尽管OpenAI已提醒不应在“高风险领域”使用该工具,但一些医疗机构仍在匆忙采用基于Whisper的工具来记录医生与患者的咨询记录。

报道称,研究人员和工程师在工作中经常遇到Whisper的“幻觉”现象,问题的整体规模尚不清楚。例如,密歇根大学一位研究员在研究公共会议时发现,在尝试改进模型前,他所检查的十份音频转录中,八份含有虚构内容。

一位机器学习工程师透露,在最初分析的超过100小时Whisper转录中,他发现大约一半的内容存在“幻觉”现象。一位开发人员进一步指出,在他用Whisper生成的26000份转录中,几乎每一份都带有虚构内容。

即便是音质良好的简短音频样本,也未能幸免于这些问题。计算机科学家们的最新研究表明,他们审查的 13000多段清晰音频片段中,有187段出现了“幻觉”现象。

研究人员认为,这一趋势意味着,在数百万条录音中将可能出现数以万计的错误转录。

OpenAI的发言人表示,该公司持续研究如何减少幻觉,并且感谢研究者的发现,将会在模型更新中采纳反馈。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-10-29 08:45:03

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

OpenAI语音转写工具被曝严重缺陷:凭空捏造大段虚假内容
...,据报道,OpenAI旗下的AI语音转写工具Whisper被曝存在严重缺陷,竟会无中生有地创造大段乃至整句的虚假信息
2024-10-28 12:59:00
ChatGPT张口就来的“病”应该怎么“治”?
...弱点。」因此,从这个角度来看,是 AI 模型设计的根本缺陷导致了「幻觉」。此外,AI 领域的研究还表明,除了设计理念,AI 模型的训练数据集的限制也会导致「幻觉」,主要包括特
2023-04-14 18:04:00
微软GenAI开发被曝遭遇瓶颈,转攻AI安全推出「抗幻觉神器」
...段阻碍生成式人工智能在现实中更广泛地应用落地的最大缺陷,就是「幻觉」(hallucinations)。幻觉是指缺乏基础数据支持的内容的生成,输出误导性的信息。这种现象尤其与大
2024-10-12 09:51:00
微软研究人员正在测试其他ai模型
...自有AI产品(例如Copilot)来试图攻克AI幻觉,研究一系列工具来帮助机器解决幻觉问题。微软表示,其工程师花了数月时间,通过检索增强生成技术(一种无需重新训练模型即可向模
2024-06-22 09:31:00
生成式AI“卷”应用层,但仍受困于高成本、幻觉和低留存率
...志峰总结说,现有AI应用分布在“3C”领域:作为生产力工具的Copilot、辅助创意(Creativity)落地的图片和视频生成工具
2024-07-08 09:50:00
大模型面临四大关键缺陷,“知识方程”能否通向强人工智能
...我们试图将人工智能再向前推进,就会发现要克服其现有缺陷,还有待技术模式的创新与突破。当下大模型面临4个关键缺陷OpenAI公司推出的ChatGPT是一个AI聊天机器人程序,更
2023-08-23 11:03:00
2023 年度热词,只能是它
...与此同时,它的使用场景越来越日常。9 月,ChatGPT 推出语音和图像功能,能看、能听、能说话。五感是人类和世界互动的方式
2023-12-07 15:47:00
大模型还能怎么创新?复旦教授邱锡鹏:需在新的架构、多模态等方面多做研究
...展机会点在于什么?邱锡鹏:现在很多智能,比如常见的语音识别、人脸识别等等都是专用的,语音识别只能做语音识别,不能做人脸识别。但“通用人工智能”就像人类的大脑一样,能处理所有事
2023-09-28 12:01:00
新华社联合北大发布AI大模型评测:安全可靠成重点,360智脑表现优异
...有两大短板,即实时性和准确性,在企业级场景中是致命缺陷。而搜索引擎可以帮助大模型进行知识更新和知识校正,解决数据滞后和幻觉等问题。360作为国内第二大搜索引擎厂商,拥有天然的
2023-08-14 11:35:00
更多关于科技的资讯: