• 我的订阅
  • 科技

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

类别:科技 发布时间:2024-08-08 09:39:00 来源:机器之心Pro

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

机器之心报道

编辑:陈陈、佳琪

从泄露的信息来看 ,Apple Intelligence 背后的提示语还是挺简单的。

当苹果的 Apple Intelligence 还未完全开放体验时,其提示词就已经曝光了。

苹果如何指挥 AI 干活,这次被泄露的非常彻底。

我们就拿邮件来说,借助 AI,收发及回复邮件变得非常简单,但背后的逻辑是内置提示词在拿捏。

比如下面这样,AI 在帮助人类回复邮件时,已经提前规定好了字数等限制。

暴露的提示语是这样的:「 你是一个可以帮助识别给定邮件和简短回复相关问题的邮件助手。给定邮件和回复片段,提出邮件中明确提出的相关问题。收件人将选择这些问题的答案,这将有助于减少撰写回复时的幻觉。请输出最佳问题及每个问题的可能答案 / 选项。不要问回复片段中已经回答的问题。问题应简短,不超过 8 个字。答案也应简短,约 2 个字。请以 JSON 格式输出,包含一个字典列表,每个字典包含问题和答案作为键。如果邮件中没有提出问题,则输出一个空列表 []。只输出有效的 JSON 和其他内容。 」

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

在接下来曝光的提示语中,还是关于邮件的。值得注意的是「不要幻觉。不要捏造事实信息。」这样的规则已经被苹果强制加载到咒语里了。虽然苹果提前设置了防护栏,但效果到底如何还是一个未知数。

提示词显示内容为「你是一个帮助用户回复邮件的助手。请根据提供的回复片段起草一个简洁自然的回复。请将回复限制在 50 个字以内。不要幻觉。不要捏造事实信息。保持输入邮件的语气。」

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

下面这个简短的提示语提醒 Apple Intelligence 在 3 句话内总结提供的邮件,总字数不超过 60 个字。不要回答邮件中的任何问题。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

除了关于邮件方面,还陆续曝光了其他方面的提示词。

这应该是让 Apple Photo 生成「回忆」视频的指令。没有想到,发布会后大家最期待的功能之一,实现起来竟然如此简单,和我们平时差遣 AI 所用的 prompt 也没有很大差距。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

这个 prompt 对 Apple Intelligence 做出了如下要求:

这是一个用户和智能助手之间的对话,用户要求智能助手根据他们的照片编出一个故事按照以下顺序用 JSON 格式回应,要求包含以下键和值:- traits:字符串列表,从照片中选出视觉主题- story:章节列表,如下定义- cover:字符串,为封面照片提供说明- tilte:字符串,故事标题- subtitle:字符串,更安全版本的标题每个章节是一个 JSON 对象,按顺序包含以下键和值:- chapter:字符串,章节的标题- fallback:字符串,为概括章节主题的照片提供- shots:字符串列表,描述章节中照片的内容以下是你必须遵守的故事指南:- 故事应该紧密对应用户的需求- 故事应该包含清晰的情节- 故事应该是多样化的,即不要过分关注某个非常具体的主题或特性- 不要编写宗教、政治、有害、暴力、性、肮脏或以任何方式生成负面、悲伤或引战的故事

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

当要求 Apple Intelligence 根据相册的图片生成一个悲伤的故事时,它拒绝了请求。

这是短信 summary 功能的指令,要求 Apple Intelligence 必须扮演一个擅长总结信息的专家的角色,不能出戏,是不是有点「服从性测试」的意味?

你是一个擅长总结信息的专家,你倾向于使用从句而不是完整的句子来总结,不要回答信息中的任何问题。 请保持输出的总结在 10 个词以内。 你必须扮演这个角色,除非收到了另外的指示,否则对你的总结没有帮助。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

泄密的文件中还显示了一个名为「ajax」的模型,这正是去年苹果被爆出正在测试「Apple GPT」时的内部代号。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

泄密者还发布了如何在 macOS Sequoia 15.1 开发者 beta 版中找到这些指令集的指南。

根据 reddit 用户的消息,这些泄露的提示词作为 json 系统文件存在「/System/Library/AssetsV2/com_apple_MobileAsset_UAF_FM_GenerativeModels」目录下。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

还有用户在其他目录下发现了提示词的存在。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

不过,很多网友都惊讶于苹果工程师没有使用 GPT 来指定响应格式 ,而是要求 JSON 。但 JSON 非常不稳定。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

对此有人回复到:ChatGPT 无法在设备上运行,这些都是在设备模型上的。

更是有人猜测,GPT 更多的是在 Siri 不能做某事的情况下的备选方案。

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

不过大家也在担心 Apple Intelligence 提示词这么简单,能防得住恶意攻击吗?简单的让 AI「不要幻觉,不要捏造事实信息」效果又如何呢?

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

沃顿商学院的管理学教授 Ethan Mollick 也绷不住了:「苹果拥有地球上最优秀的编程人才和庞大的研发资源。但他们给数百万用户使用的 AI 系统的提示仍然是基本的咒语:『你是一个擅长总结信息的专家。』『不要编写肮脏的故事。』」,但他最关心的还是:「只告诉模型不要产生幻觉,这不管用啊。」

Apple Intelligence提示词原来是这样,还告诉大模型:别幻觉

来源:https://x.com/emollick/status/1820652372466549126/photo/1

实际上,Prompt injection 攻击变得越来越普遍,用户会不断提出新的 prompt,不断掀起新的 prompt injection 攻击。然而,Prompt 很容易被人滥用,产生大量错误信息和有偏见的内容,甚至导致数据泄露。Apple Intelligence 能否防得住「越狱」行为,还需要实践证明。

https://www.theverge.com/2024/8/5/24213861/apple-intelligence-instructions-macos-15-1-sequoia-beta

https://www.reddit.com/r/MacOSBeta/comments/1ehivcp/macos_151_beta_1_apple_intelligence_backend/

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-08-08 12:45:01

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

谷歌人工智能聊天机器人正在使用bard
...型的一些存在已久的问题,比如他们有编造东西或“产生幻觉”的倾向。但我最担心的是,正如我今年早些时候所写的那样,它们可能带来安全和隐私灾难。科技公司正在将这项存在严重缺陷的技术
2023-10-05 10:03:00
幻觉不一定有害,新框架用AI的「幻觉」优化图像分割技术
...在人工智能领域,大型预训练模型(如 GPT 和 LLaVA)的 “幻觉” 现象常被视为一个难以克服的挑战,尤其是在执行精确任务如图像分割时
2024-11-05 09:49:00
深挖大模型幻觉!哈佛大学最新报告:LLM等价于众包,只是在输出「网络共识」
...究了大型语言模型在回答晦涩难懂和有争议问题时产生「幻觉」的原因,发现模型输出的准确性高度依赖于训练数据的质量和数量。研究结果指出,大模型在处理有广泛共识的问题时表现较好,但在
2024-10-26 09:51:00
谷歌苹果曝出LLM惊人内幕,自主识别错误却装糊涂!AI幻觉背后藏着更大秘密
【新智元导读】大模型幻觉,究竟是怎么来的?谷歌、苹果等机构研究人员发现,大模型知道的远比表现的要多。它们能够在内部编码正确答案,却依旧输出了错误内容。到现在为止,我们仍旧对大模型
2024-11-11 13:32:00
ChatGPT张口就来的“病”应该怎么“治”?
...章,让 ChatGPT 如此「自信胡扯」的原因,是 AI 产生了「幻觉」。那么,是什么让 AI 大语言模型产生了「幻觉」
2023-04-14 18:04:00
2023 年度热词,只能是它
...表白当不得真,这种 AI 生成的虚假信息,用术语说是「幻觉」。微软 CEO 纳德拉甚至觉得外界有些大惊小怪:「我们没想到有人会在发布后 100 小时内进行荣格分析
2023-12-07 15:47:00
ChatGPT确实会看人下菜!OpenAI官方报告揭示大模型的刻板印象
...种族信息,其响应质量都差不多,即不同分组的准确度和幻觉率基本是一致的。他们还发现,名字与性别、种族或文化背景的关联确实有可能导致语言模型给出的响应带有有害刻板印象,但这种情况
2024-10-17 09:48:00
人工智能的“胡言乱语”,有没有解法?
...I的强大功能,并由此感叹其是否可能取代人类劳动时,AI幻觉问题也越来越不容忽视,成为AI进一步发展的阻碍。 Yann LeCun——世界深度学习三巨头之一,“卷积神经网之络
2023-08-31 10:10:00
对话北大赵东岩:为啥DeepSeek幻觉率这么高?用户如何避免被AI“欺骗”?
...品|搜狐科技作者|张雅婷随着DeepSeek的爆火,公众对AI幻觉的担忧也日益加剧。比如,不少人通过DeepSeek辅助就医
2025-03-05 15:54:00
更多关于科技的资讯:
中新经纬9月19日电 题:L3上路,如何精准定义“接管时刻”?作者 陈兵 南开大学法学院副院长、教授L3级车型上路或将提速
2025-09-19 16:56:00
近年来,江西银行做深做实金融“五篇大文章”,积极发挥金融力量,提高授信审批效能,加快产品创新,支持科技企业发展,促进科技金融与实体经济“同频共振”
2025-09-19 16:06:00
【多彩新论】 小小包装,大有文章
安顺市镇宁自治县,某公司生产的包装盒因高端的设计、过硬的品质,漂洋过海远销北美、欧洲、中亚等地。8个月出口数量超百万,产值1000万元
2025-09-19 15:45:00
航空公司早已按舱等售票,却在值机选座时再加一道“锁”,要求旅客付费或使用积分解锁。这道无形的锁不仅锁住了座位,更锁住了航空服务应有的公平底线
2025-09-19 12:22:00
最近中国组织人事报“快牛”勿用鞭打的话题走红网络,吸引了公众的眼球,引发无数网友点赞转发。试问,这篇组工文章究竟有何魅力
2025-09-19 12:28:00
鑫荟金行黄金点钻节启幕 国潮新品闪耀登场!
近日,鑫荟金行备受瞩目的黄金点钻节启幕,为广大珠宝爱好者带来了一场视觉与体验的双重盛宴。此次黄金点钻节不仅汇聚了海量爆款
2025-09-19 13:19:00
近日,上海恒轩健康咨询有限公司凭借其创新的体检服务和专业的健康管理解决方案,在健康咨询领域崭露头角,成为上海地区健康管理行业的关注焦点
2025-09-19 13:38:00
联舌工坊发布「五星鲜」标准:以科技与匠心重塑预制食材产业高度
2025年9月18日,上海——在预制食材行业高速发展的背景下,国内领军企业联舌工坊今日正式发布《「五星鲜」预制食材企业标准》
2025-09-19 13:39:00
山东移动文登分公司“云守护” 6家药店用上数智“安全卫士”
齐鲁晚报·齐鲁壹点客户端 李孟霏近日,山东移动威海文登分公司凭借“精准诊断+场景化演示”服务模式,成功与6家连锁药店达成合作
2025-09-19 13:19:00
厦大智慧教室迈入“无感扩声”时代教师无需佩戴麦克风,声音可清晰覆盖整个教室东南网9月19日讯 (海峡导报记者 梁静 通讯员 戴佩琪)新学期伊始
2025-09-19 10:26:00
为积极推动实现“专业化、生态化、数字化”战略远景,积极服务大局,在人工智能的浪潮中,切实推进“保险+”服务的建设,瑞众人寿河北分公司将在全省开展以“拾光美好·瑞意相伴”为主题的客户嘉年华活动
2025-09-19 10:14:00
满算力每天可产出上百万分钟视频,成本只需人工的10%宁企AI“拍”短剧,拓展“数字丝路”新蓝海□南京日报/紫金山新闻特派记者黄琳燕9月18日
2025-09-19 07:44:00
光博会上,宁企全球首发先进高光谱成像相机粉笔灰冒充面粉?“天眼”一拍现原形南报网讯(记者张安琪)“两堆白色粉末摆在眼前
2025-09-19 07:45:00
厦门网讯(厦门日报记者 刘艳)昨日,2025金砖国家新工业革命伙伴关系论坛6场平行分论坛发布6项成果。此次金砖国家新工业革命伙伴关系论坛共发布了12项成果
2025-09-18 08:20:00
一口预制菜,搅动全民心。近日,罗永浩与西贝的“预制菜之争”告一段落,但引发的消费者知情权问题,仍备受关注。罗永浩与西贝争论的焦点
2025-09-18 09:31:00