ASSOCIATED PRESS
Cloudflare 发布了一款免费新工具，防止人工智能公司爬虫从其客户网站抓取内容，用于训练大型语言模型。这家云服务提供商将此工具提供给所有客户，包括免费方案的用户。该公司表示：“随着我们发现越来越多的恶意爬虫在网络上抓取内容以训练模型，此功能将随着时间推移自动更新。”
在宣布此更新的博文中，Cloudflare 团队还分享了一些数据，展示其客户如何应对抓取内容以训练生成式 AI 模型的爬虫激增。根据该公司的内部数据，85.2% 的客户选择阻止即使是正确识别自身的 AI 爬虫访问其网站。
Cloudflare 还指出了过去一年中最活跃的爬虫。字节跳动旗下的 Bytespider 爬虫试图访问 40% 受 Cloudflare 保护的网站，OpenAI 的 GPTBot 试图访问 35%。按照 Cloudflare 网络上请求数量，它们是排名前四的 AI 爬虫，其他两个是 Amazonbot 和 ClaudeBot。
事实证明，全面且持续地阻止 AI 爬虫访问内容非常困难。更快构建模型的军备竞赛导致一些公司绕过或直接违反了现有阻止抓取器的规则。Perplexity AI 最近被指控未经必要许可抓取网站。但 Cloudflare 这样规模的后端公司开始认真尝试遏制这种行为，可能会带来一些成果。
该公司表示：“我们担心一些人工智能公司有意规避获取内容的规则，会不断调整以逃避爬虫检测。”“我们将继续监视，在我们的 AI 爬虫和抓取器规则中添加更多爬虫拦截规则，并完善我们的机器学习模型，帮助互联网成为内容创作者能够蓬勃发展并完全控制他们的内容用于训练或执行推理的模型的地方。”
原创文章，作者：星阁，如若转载，请注明出处：http://www.xgrl.net/n/202407040909591683.shtml
相关推荐
-
Every Frame a Painting回来了！
Every Frame a Painting 在2014年到2016年间，有一个叫作Every Frame a Painting的YouTube频道发布了28个视频影评，在销声匿迹…
-
“英伟达市值超越微软苹果，专家警示需持续创新维持领先地位”
【转载点新闻】截至周二（6月18日）美股收盘，英伟达（NVIDIA）的总市值超过微软、苹果，成为美国市值最高的上市公司。 经济学家、港股100强研究中心专家、新金融专家余丰慧指出，…
-
亚马逊 Prime 会员日即将来临，优惠不容错过！
lawrence bonkContributing ReporterTue, Jul 9, 2024, 4:50 AM0 亚马逊 Prime 会员日即将到来，将于 7 月 16 日…
-
揭秘Costco：为什么这支股票值得长期持有？
Costco Wholesale（纳斯达克股票代码：COST）是您能买到的较为昂贵的零售股之一。它的市盈率超过 50 倍，市值为 3700 亿美元。在短短五年内，其股价已飙升 20…
-
恒生指数下跌238点，跌破18000点大关；美联储今晚公布利率决定
【转自点新闻】港股今日（12日）持续走低，恒指未能守住一万八关。恒指收报17937.8点，跌238.5点或1.3%，全日成交1151.2亿港元；国企指数报6359.4点，跌92.7…
-
广州新增“高铁进城”线 香港一站直达广州市中心
6月14日电 仅需60分钟，香港西九龙一站直达广州市中心。以后香港人北上去广州市中心饮茶不用从广州南站转地铁了。 图为香港西九龙站 来源： 据广州铁路消息，由中铁十八局承建的新建广…
-
每日金融数据（2024年6月26日）
6 月 26 日电 盘点国内外金融数据（以下货币单位除特别注明外，均为人民币。） 1、周二（6 月 25 日），恒生指数涨 0.25%，报 18072.90 点。恒生科技指数跌 0…
-
焦点热点！武汉空放私贷“浓情蜜意”
武汉空放私贷泛滥：甜蜜与陷阱并存 在武汉这座充满活力的都市中，近年来悄然兴起一股”空放私贷”热潮。空放私贷，顾名思义，是指出借人将借款直接转入借款人的银行卡，不同于传统抵押贷款或信…
-
突发快讯！武汉空放24小时微信贷款“谈情说爱”
突发快讯！武汉空放24小时微信贷款“谈情说爱” 在近日的武汉城区，出现了一种新型的网络贷款骗局——“空放24小时微信贷款”。骗子利用受害者的虚荣心和财欲，通过微信平台伪装成“美女”…
-
特讯快讯！武汉私贷的亲身经历“飞黄腾达”
特讯快讯：武汉私贷“飞黄腾达”的亲身经历 近日，一位武汉市民（化名：小李）分享了他通过私贷实现“飞黄腾达”的亲身经历，引发了广泛关注。 小李曾是一名普通的上班族，收入微薄。近些年来…
