• 我的订阅
  • 科技

曝Reddit屏蔽多个搜索引擎和AI爬虫,官方称与谷歌合作无关

类别:科技 发布时间:2024-07-26 13:57:00 来源:IT之家

IT之家 7 月 25 日消息,今年 2 月,谷歌宣布与 Reddit 达成一项新协议,Reddit 数据将用于训练谷歌的 AI 模型,并在谷歌搜索结果中着重显示 Reddit 结果。彭博社报道称,这笔交易的金额约为 6000 万美元。从那时起,Reddit 在谷歌搜索中的展示次数也大幅增加。

而最新消息称,Reddit 已禁止其他搜索引擎检索其网站内容。外媒 404 Media 最先报道了此行为,并指出 Reddit 已更新其 robots.txt 文件(IT之家注:网站与爬虫的协议文件),阻止所有机器人抓取网站的任何内容。

IT之家查询 Reddit 网站的 robots.txt 文件获悉,该平台称“Reddit 相信开放的互联网,但不相信滥用公共内容。”其“Disallow”选项设置为“/”,也就是禁止检索网站根目录下的所有文件。

曝Reddit屏蔽多个搜索引擎和AI爬虫,官方称与谷歌合作无关

该文件在今年 6 月首次更新,Reddit 解释说,这一更改是由于“抓取 Reddit 内容的商业实体明显增多并且内容被滥用”。

外媒 9To5Google 则称,Bing、DuckDuckGo、Mojeek 和 Qwant 等搜索引擎都受到了影响,使用“site:reddit.com”搜索内容时,要么不显示最新内容,要么不显示完整的网站结果。

曝Reddit屏蔽多个搜索引擎和AI爬虫,官方称与谷歌合作无关

不过IT之家最新测试,Bing、DuckDuckGo 已重新显示“site:reddit.com”搜索内容。

曝Reddit屏蔽多个搜索引擎和AI爬虫,官方称与谷歌合作无关

Reddit 发言人 Tim Rathschmidt 在给 The Verge 的一份声明中表示:“这与我们最近与谷歌的合作完全无关。我们一直在与多个搜索引擎进行讨论,但无法与所有人达成协议,因为有些人无法或不愿意就他们使用 Reddit 内容(包括他们对 AI 训练的使用)作出可执行的承诺。”

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-07-26 14:45:01

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

为训大模型不择手段的 AI 公司,打破了这个古老的互联网协议
...不过这个规则能长久运行其实纯靠一个人性逻辑——你让搜索引擎抓取你的网站,同时你会获得搜索引擎的流量回报。这也是几位互联网先驱者达成的握手协议,为了造福互联网上的所有人。这种既
2024-02-20 15:28:00
360ai搜索app上线各大应用商城,暂时无收费选项
...的答案。产品功能:AI搜索:用户提出问题后,AI将通过搜索引擎进行检索,读取并分析多个网页的内容,输出精准的结论。增强模式:在用户提问后,AI将进行语义分析并追问以补充更多信
2024-01-30 06:42:00
百度百科屏蔽谷歌/必应等搜索引擎 防止内容被抓取训练AI
近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎,预计是为了阻止这些搜索引擎和其他爬虫,未经授权抓取百度百科的内容用于训练AI
2024-08-29 17:41:00
围攻谷歌!Meta秘密训练AI搜索引擎8个月,苹果与OpenAI发力
...消息,据The Information报道,Meta正在秘密研发一款自己的AI搜索引擎,旨在提升其Meta AI聊天机器人的搜索能力
2024-10-30 09:51:00
OpenAI推出新AI搜索,老伙计微软也默默更新了Bing
...谷歌。根据Statcounter发布的数据,目前谷歌占据了91.05%的搜索引擎市场份额,而Bing占据了3.74%
2024-07-27 09:25:00
花一万元植入DeepSeek,一场没有终点的流量游戏
...型推荐品牌。△安克创新充电宝商品图,图源:网络SEO(搜索引擎优化),这门针对搜索结果做优化的互联网“上古生意”,正以一种新形态复兴—— GEO(Generative Engine Optimization
2025-09-05 14:56:00
互联网30年站点流量排名,几轮颠覆背后是这些趋势在起作用
...网搜索网站TOP50”清单,和今天的视频内容一样,统计的搜索引擎主要是网页端,没把TikTok这类APP应用全部算进来
2023-01-24 13:00:00
本文转自:文汇报滥用搜索引擎优化技术,有偿提供“负面信息压制”服务,干扰用户获取全面准确信息引导“算法向善”,遏制“报喜不报忧” ■本报记者 周辰想象互联网是一张蜘
2023-02-19 06:02:00
华人带队,小扎亲自督战!Meta秘密研发8个月,打造自家AI搜索引擎
【新智元导读】最新消息,Meta 正在研发一款AI驱动的搜索引擎,旨在为使用 Meta AI 聊天机器人的用户提供关于时事的对话式回答,同时降低对谷歌和微软的依赖。你没看错,Me
2024-10-31 09:45:00
更多关于科技的资讯:
于都“织”出老区振兴新图景
本报讯 (全媒体记者李思成) 9月的赣南大地,秋意正浓。近日,记者随“高质量发展中国行·焕新江西”专题活动采访团一行走进赣州市于都县
2025-09-22 07:15:00
近日从太钢获悉,太钢供应用于国家能源局首台(套)重大技术装备项目——扎拉水电站的900兆帕超高强磁轭钢顺利通过叠检试验
2025-09-22 07:26:00
南京微短剧有流量更有“料”
微短剧《平凡警事》海报。微短剧《金箔奇缘》海报。百川短剧剧组在拍摄现场。 中国(南京)游戏谷。□芮天舒韶静王懿闫葛菲地铁里
2025-09-22 07:40:00
为什么越来越多的女生,恋爱前要交换体检报告?
“亲亲许可证”在即将接上吻的那一刻,女友的脑袋往后一躲,闪开了。紧接着,她抬起头,认真地盯着老王,问他,“你有没有幽门螺旋杆菌
2025-09-22 00:56:00
河北日报讯(见习记者康晓博)AI工业内窥镜、无针注射笔、分布式储能路灯、风滚草仿生播种机器人……9月20日,2025河北国际工业设计周活动开幕
2025-09-21 08:12:00
厦门网讯(厦门日报记者 林钦圣 通讯员 江安娜 徐燕) 最近,不少厦门市民都注意到这样一个现象:上班高峰期,正当大家为等候BRT快速公交车而焦急时
2025-09-21 09:00:00
乐陵杨安镇香辛料数智化交易平台正式启动
9月20日,乐陵市杨安镇以“智链未来・香聚全球”为主题的香辛料数智化交易平台启动仪式暨黄河商品交易市场香辛料品种上线仪式隆重举行
2025-09-21 09:25:00
现场签约金额达115亿元!中国制造业民营企业合作交流对接会聚焦“AI+”
大皖新闻讯 9月20日,2025世界制造业大会中国制造业民营企业合作交流对接会在合肥举行。活动现场签约项目10个,总额115
2025-09-21 10:14:00
留交会上首次设立“新招引企业专区”,200多个岗位虚席以待——这里有一份令人“新”动的邀约□南京日报/紫金山新闻记者张甜甜在9月20日举行的留交会现场
2025-09-21 10:24:00
“+”上去,活下来——2025世界制造业大会采访引发的思考
大河网讯 9月20日,2025世界制造业大会在安徽合肥开幕。河南省作为主宾省参会,30家企业参展。在人们的印象中,河南农业可圈可点
2025-09-21 14:48:00
十堰成功举办2025新能源汽车零部件交易会项目路演 十大前沿技术项目集中亮相
十堰广电讯(全媒体记者 耿吉国 通讯员 刘爱理)9月21日上午,2025新能源汽车零部件交易会项目路演活动在十堰国际会展中心成功举办
2025-09-21 15:32:00
河北新闻网讯(王丽英)近日,宁晋县晶龙餐饮管理总公司凭借市场化转型与外向型发展战略的深入实施,成功签约宁晋县产融区学生食堂
2025-09-21 15:53:00
中新经纬9月20日电 题:L2新国标将给智能驾驶立“铁律”作者 江瀚 盘古智库高级研究员智能网联汽车组合驾驶辅助系统或将迎来国家标准
2025-09-21 19:36:00
壹家之言丨“中国味都”迈入香辛料全球数字贸易新时代
9月20日,山东乐陵杨安镇香辛料数智交易平台正式启动,标志着“中国味都”迈入香辛料全球数字贸易新时代。这场发生在鲁北小镇的产业变革
2025-09-21 19:39:00
第三届全国技能大赛丨零售项目选手陈俪夫:以双语匠心赴技能之约
第三届全国技能大赛赛场热潮涌动,零售项目比拼现场,来自长春科技学院英语专业的陈俪夫正全神贯注地完成她的国赛首秀。曾斩获“21世纪杯全国英语演讲比赛”季军的陈俪夫
2025-09-21 18:07:00