• 我的订阅
  • 科技

写代码还得靠自己!ChatGPT回答编程问题错误率超50%

类别:科技 发布时间:2023-08-08 17:00:00 来源:驱动之家

快科技8月8日消息,自从ChatGPT等生成式人工智能诞生,就有不少开发者尝试将其作为编程中的辅助工具。

但近日,美国普渡大学的一项研究指出,ChatGPT在回答编程问题时的错误率,出乎预料的高。

据悉,ChatGPT在回答软件编程问题时,错误率超过了50%,并且这些错误很高明,足以骗过三分之一的提问者。

该研究团队分析了ChatGPT对517个Stack Overflow网站上的问题的回答,评估了其正确性、一致性、全面性和简洁性;并对12为志愿参与者进行了问卷调查。

最终的结论是,ChatGPT的回答虽然语言风格良好,但52%的回答是错误的,77%是冗长的。

同时,参与实验的志愿者只有在回答中存在明显错误时,才能发觉问题存在;其他情况下他们会被AI友好且细致的语言风格误导。

这无疑意味着,对于开发者来说,现阶段的生成式AI距离作为编程时的辅助工具还有着较为遥远的距离,甚至可能会起到反作用。

不过,需要注意的是,OpenAI很早之前就在官网告知用户,AI的回答“可能会产生关于人、地点或事实的不准确信息。”

写代码还得靠自己!ChatGPT回答编程问题错误率超50%

返回搜狐,查看更多

责任编辑:

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2023-08-08 22:45:16

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

量子计算第二里程碑,谷歌实现量子纠错突破
...碑(M2)。即有史以来首次通过增加量子比特来降低计算错误率!官方博客称,量子纠错(QEC)通过多个物理量子比特,即「逻辑量子比特」,对信息进行编码。这一方法被认为是大型量子计
2023-02-25 18:57:00
亚马逊首款量子芯片Ocelot发布:量子纠错成本降低90%
...,但当今基于超导或原子量子比特的最佳逻辑量子比特的错误率仍然比已知具有实用性和量子优势的量子算法所需的错误率高出十亿倍。量子比特开销的挑战虽然量子纠错提供了一种途径来弥补当今
2025-03-02 20:39:00
错误率从10%降至0.01%,领英全面分享LLM应用落地经验
随着大型语言模型(LLM)技术日渐成熟,各行各业加快了 LLM 应用落地的步伐。为了改进 LLM 的实际应用效果,业界做出了诸多努力
2024-08-07 09:33:00
量子计算突破:IBM推出新型模块化系统,瞄准2033年超级计算机
...M Quantum Heron,可提供迄今为止IBM最高的性能指标和最低的错误率。该公司还推出了“IBM量子系统二号(IBM Quantum System Two)”
2023-12-05 11:31:00
...置,证明有5个“猫量子比特”的纠错代码在每个周期的错误率从1.75%抑制到1.65%。此前,用更大纠错代码实现错误抑制需要几十个额外量子比特。研究团队在论文中总结称,这项研究
2025-02-27 15:14:00
EMQ 如何用DeepSeek大模型重构可观测性数据分析?
...最大响应时间,以及P95和P99响应时间。·异常情况:显示错误率较高的客户端(错误率超过一定阈值)、响应时间异常的客户端(平均响应时间超过阈值)以及异常追踪(例如耗时特别长的
2025-02-27 14:45:00
...制器生成虚拟化任务和代码,减少工程团队工作量,降低错误率,从而缩短开发周期,提升生产效率。西门子公司技术专家埃里克·斯切潘斯基向新华社记者介绍,从设计、规划,到操作等环节,该
2024-04-26 04:59:00
Google 创始人谢尔盖·布林回归,直面 Gemini、Google、AGI 若干问题
...,我们不能仅依赖突破。我们将继续做各种能做的事,将错误率持续降低。显然,你不希望你的 AI 机器人编造事实,但他们也可能被误导。这涉及到许多复杂的政治问题,关于不同的人如何看
2024-03-11 11:28:00
谷歌突破量子计算技术
...歌扩大技术的应用规模,使其在更大的量子系统上运行,错误率仅降低了4%。但研究人员指出,这是人类首次实现,扩大量子计算机的规模没有导致错误率上升。奈文表示,这表明谷歌已经突破了
2023-02-23 12:31:00
更多关于科技的资讯: