• 我的订阅
  • 科技

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

类别:科技 发布时间:2024-08-08 09:39:00 来源:机器之心Pro

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

机器之心报道

编辑:陈陈、佳琪

从泄露的信息来看 ,Apple Intelligence 背后的提示语还是挺简单的。

当苹果的 Apple Intelligence 还未完全开放体验时,其提示词就已经曝光了。

苹果如何指挥 AI 干活,这次被泄露的非常彻底。

我们就拿邮件来说,借助 AI,收发及回复邮件变得非常简单,但背后的逻辑是内置提示词在拿捏。

比如下面这样,AI 在帮助人类回复邮件时,已经提前规定好了字数等限制。

暴露的提示语是这样的:「 你是一个可以帮助识别给定邮件和简短回复相关问题的邮件助手。给定邮件和回复片段,提出邮件中明确提出的相关问题。收件人将选择这些问题的答案,这将有助于减少撰写回复时的幻觉。请输出最佳问题及每个问题的可能答案 / 选项。不要问回复片段中已经回答的问题。问题应简短,不超过 8 个字。答案也应简短,约 2 个字。请以 JSON 格式输出,包含一个字典列表,每个字典包含问题和答案作为键。如果邮件中没有提出问题,则输出一个空列表 []。只输出有效的 JSON 和其他内容。 」

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

在接下来曝光的提示语中,还是关于邮件的。值得注意的是「不要幻觉。不要捏造事实信息。」这样的规则已经被苹果强制加载到咒语里了。虽然苹果提前设置了防护栏,但效果到底如何还是一个未知数。

提示词显示内容为「你是一个帮助用户回复邮件的助手。请根据提供的回复片段起草一个简洁自然的回复。请将回复限制在 50 个字以内。不要幻觉。不要捏造事实信息。保持输入邮件的语气。」

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

下面这个简短的提示语提醒 Apple Intelligence 在 3 句话内总结提供的邮件,总字数不超过 60 个字。不要回答邮件中的任何问题。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

除了关于邮件方面,还陆续曝光了其他方面的提示词。

这应该是让 Apple Photo 生成「回忆」视频的指令。没有想到,发布会后大家最期待的功能之一,实现起来竟然如此简单,和我们平时差遣 AI 所用的 prompt 也没有很大差距。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

这个 prompt 对 Apple Intelligence 做出了如下要求:

这是一个用户和智能助手之间的对话,用户要求智能助手根据他们的照片编出一个故事按照以下顺序用 JSON 格式回应,要求包含以下键和值:- traits:字符串列表,从照片中选出视觉主题- story:章节列表,如下定义- cover:字符串,为封面照片提供说明- tilte:字符串,故事标题- subtitle:字符串,更安全版本的标题每个章节是一个 JSON 对象,按顺序包含以下键和值:- chapter:字符串,章节的标题- fallback:字符串,为概括章节主题的照片提供- shots:字符串列表,描述章节中照片的内容以下是你必须遵守的故事指南:- 故事应该紧密对应用户的需求- 故事应该包含清晰的情节- 故事应该是多样化的,即不要过分关注某个非常具体的主题或特性- 不要编写宗教、政治、有害、暴力、性、肮脏或以任何方式生成负面、悲伤或引战的故事

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

当要求 Apple Intelligence 根据相册的图片生成一个悲伤的故事时,它拒绝了请求。

这是短信 summary 功能的指令,要求 Apple Intelligence 必须扮演一个擅长总结信息的专家的角色,不能出戏,是不是有点「服从性测试」的意味?

你是一个擅长总结信息的专家,你倾向于使用从句而不是完整的句子来总结,不要回答信息中的任何问题。 请保持输出的总结在 10 个词以内。 你必须扮演这个角色,除非收到了另外的指示,否则对你的总结没有帮助。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

泄密的文件中还显示了一个名为「ajax」的模型,这正是去年苹果被爆出正在测试「Apple GPT」时的内部代号。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

泄密者还发布了如何在 macOS Sequoia 15.1 开发者 beta 版中找到这些指令集的指南。

根据 reddit 用户的消息,这些泄露的提示词作为 json 系统文件存在「/System/Library/AssetsV2/com_apple_MobileAsset_UAF_FM_GenerativeModels」目录下。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

还有用户在其他目录下发现了提示词的存在。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

不过,很多网友都惊讶于苹果工程师没有使用 GPT 来指定响应格式 ,而是要求 JSON 。但 JSON 非常不稳定。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

对此有人回复到:ChatGPT 无法在设备上运行,这些都是在设备模型上的。

更是有人猜测,GPT 更多的是在 Siri 不能做某事的情况下的备选方案。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

不过大家也在担心 Apple Intelligence 提示词这么简单,能防得住恶意攻击吗?简单的让 AI「不要幻觉,不要捏造事实信息」效果又如何呢?

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

沃顿商学院的管理学教授 Ethan Mollick 也绷不住了:「苹果拥有地球上最优秀的编程人才和庞大的研发资源。但他们给数百万用户使用的 AI 系统的提示仍然是基本的咒语:『你是一个擅长总结信息的专家。』『不要编写肮脏的故事。』」,但他最关心的还是:「只告诉模型不要产生幻觉,这不管用啊。」

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

来源:https://x.com/emollick/status/1820652372466549126/photo/1

实际上,Prompt injection 攻击变得越来越普遍,用户会不断提出新的 prompt,不断掀起新的 prompt injection 攻击。然而,Prompt 很容易被人滥用,产生大量错误信息和有偏见的内容,甚至导致数据泄露。Apple Intelligence 能否防得住「越狱」行为,还需要实践证明。

https://www.theverge.com/2024/8/5/24213861/apple-intelligence-instructions-macos-15-1-sequoia-beta

https://www.reddit.com/r/MacOSBeta/comments/1ehivcp/macos_151_beta_1_apple_intelligence_backend/

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-08-08 12:45:01

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

谷歌人工智能聊天机器人正在使用bard
...型的一些存在已久的问题,比如他们有编造东西或“产生幻觉”的倾向。但我最担心的是,正如我今年早些时候所写的那样,它们可能带来安全和隐私灾难。科技公司正在将这项存在严重缺陷的技术
2023-10-05 10:03:00
幻觉不一定有害,新框架用AI的「幻觉」优化图像分割技术
...在人工智能领域,大型预训练模型(如 GPT 和 LLaVA)的 “幻觉” 现象常被视为一个难以克服的挑战,尤其是在执行精确任务如图像分割时
2024-11-05 09:49:00
深挖大模型幻觉!哈佛大学最新报告:LLM等价于众包,只是在输出「网络共识」
...究了大型语言模型在回答晦涩难懂和有争议问题时产生「幻觉」的原因,发现模型输出的准确性高度依赖于训练数据的质量和数量。研究结果指出,大模型在处理有广泛共识的问题时表现较好,但在
2024-10-26 09:51:00
谷歌苹果曝出LLM惊人内幕,自主识别错误却装糊涂!AI幻觉背后藏着更大秘密
【新智元导读】大模型幻觉,究竟是怎么来的?谷歌、苹果等机构研究人员发现,大模型知道的远比表现的要多。它们能够在内部编码正确答案,却依旧输出了错误内容。到现在为止,我们仍旧对大模型
2024-11-11 13:32:00
ChatGPT张口就来的“病”应该怎么“治”?
...章,让 ChatGPT 如此「自信胡扯」的原因,是 AI 产生了「幻觉」。那么,是什么让 AI 大语言模型产生了「幻觉」
2023-04-14 18:04:00
2023 年度热词,只能是它
...表白当不得真,这种 AI 生成的虚假信息,用术语说是「幻觉」。微软 CEO 纳德拉甚至觉得外界有些大惊小怪:「我们没想到有人会在发布后 100 小时内进行荣格分析
2023-12-07 15:47:00
ChatGPT确实会看人下菜!OpenAI官方报告揭示大模型的刻板印象
...种族信息,其响应质量都差不多,即不同分组的准确度和幻觉率基本是一致的。他们还发现,名字与性别、种族或文化背景的关联确实有可能导致语言模型给出的响应带有有害刻板印象,但这种情况
2024-10-17 09:48:00
人工智能的“胡言乱语”,有没有解法?
...I的强大功能,并由此感叹其是否可能取代人类劳动时,AI幻觉问题也越来越不容忽视,成为AI进一步发展的阻碍。 Yann LeCun——世界深度学习三巨头之一,“卷积神经网之络
2023-08-31 10:10:00
对话北大赵东岩:为啥DeepSeek幻觉率这么高?用户如何避免被AI“欺骗”?
...品|搜狐科技作者|张雅婷随着DeepSeek的爆火,公众对AI幻觉的担忧也日益加剧。比如,不少人通过DeepSeek辅助就医
2025-03-05 15:54:00
更多关于科技的资讯:
AI赋能千行百业一线故事(十九):从“人盯”到“数管”,产业大脑赋能传统制造
从“人盯”到“数管”,产业大脑赋能传统制造——AI赋能千行百业一线故事(十九)近日,在瑞源橡塑制品有限公司的车间内,技术人员正在调试新安装的智能化设备
2026-01-08 08:30:00
随着无人驾驶技术的不断发展,外形方方正正的功能性无人车进入我们的生活。目前,国家层面尚未对这种无人车设定统一资质要求,多个地方出台政策性文件允许无人车上路
2026-01-08 08:31:00
如何开通信用停车? 带您一图读懂
中山医院东侧嘉禾园地下停车场已纳入厦门信用停车管理平台。(市政空间公司 供图)厦门网讯(厦门日报记者 吴海奎)“开通免密支付以后
2026-01-08 08:33:00
浙江日报讯 (记者 赵静 共享联盟·温岭 王萍) 在仅约1厘米见方的玻璃基板上,比头发丝更细的金线被精准植入并焊接,形成一个能够高效处理信息数据的“微工作室”
2026-01-08 08:41:00
智造新丰景 | 雷沃智慧农业整体解决方案亮相“十四五”成就展
鲁网1月8日讯近日,由中国国家博物馆、工业和信息化部新闻宣传中心共同举办的“筑基强国路—中国制造‘十四五’成就展”在中国国家博物馆开幕
2026-01-08 09:31:00
WowNow 正式亮相 CES 2026|以 AI 驱动的端到端制造平台,让每一个想法被真正制造出来
在近日开幕的 CES 2026(国际消费电子展) 上,中国创新科技品牌 WowNow 正式亮相美国拉斯维加斯会展中心中央馆(LVCC Central Hall)21126 展位
2026-01-08 09:35:00
中国消费者报报道(杨文娴 记者张文章)福建省厦门市市场监管局自2025年初启动厦门市钨产业链供应链质量赋能行动,构建“链主主导
2026-01-08 09:50:00
中国消费者报北京讯(记者聂国春)1月7日至1月10日,2026年国际消费电子展(CES 2026)在美国拉斯维加斯会展中心举办
2026-01-08 09:50:00
中国消费者报福州讯(杨雅雯 记者张文章)1月7日,记者从福建省厦门市市场监管局获悉,厦门市产品质量监督检验院近日顺利通过CMA扩项评审
2026-01-08 09:50:00
国补新政落地 消费热潮涌动
随着2026年首批625亿元国补资金正式下达,线下市场销售火热。1月7日,记者在北京一家数码专卖店的宣传海报上看到,手机
2026-01-08 09:50:00
中国消费者报天津讯(记者万晓东)1月6日,天津市消费者协会发布《民用建筑用入户重型门支悬五金通用技术条件》团体标准,为装甲门
2026-01-08 09:50:00
杭州东站东、西广场地下六大停车场近日完成智慧化升级,上线“车位级导航”功能。这意味着,你不仅能一键导航到具体车位,停完车还能轻松找回爱车
2026-01-08 08:10:00
新一轮国补落地,浙江多家电器门店迎来“换新”客流
“有国补吗?”过去一年里,无论是在选购汽车还是添置家电时,许多消费者已经习惯带上这一问。2026年1月1日,新一轮“国补”正式开始
2026-01-08 08:10:00
1月7日,宜家中国宣布,2月2日起关闭中国七家商场,宜家宁波商场就在其中。这着实让人唏嘘,也把记者的思绪拉到了十三年前——2013年7月
2026-01-08 08:10:00
走进中北高新区企业太原晋西春雷铜业有限公司的生产车间,巨大电子屏上数据实时跳动,当前产量、工序良品率、设备状态、异常申报
2026-01-08 07:01:00