当前位置:首页 > 科技  > 资讯

百度百科大动作!屏蔽谷歌必应,防内容被抓取训练AI?

来源: 责编: 时间:2024-08-22 16:51:00 34观看
导读【ITBEAR】8月22日消息,近期,有报道指出,百度百科采取了新措施,对谷歌、必应等众多搜索引擎实施了屏蔽策略,此举被推测是为了防止这些搜索引擎及其他爬虫未经授权抓取其内容用于人工智能训练。根据百度百科的robots.txt文

【ITBEAR】8月22日消息,近期,有报道指出,百度百科采取了新措施,对谷歌、必应等众多搜索引擎实施了屏蔽策略,此举被推测是为了防止这些搜索引擎及其他爬虫未经授权抓取其内容用于人工智能训练。dHb28资讯网——每日最新资讯28at.com

根据百度百科的robots.txt文件显示,目前仅有几个搜索引擎被授权可以抓取其内容,包括百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider以及宜搜搜索(EasouSpider)。dHb28资讯网——每日最新资讯28at.com

据ITBEAR了解,谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他所有搜索引擎爬虫均被明确禁止访问百度百科的内容。尽管360搜索并未在封禁名单中单独列出,但由于百度百科的策略是禁止所有非白名单爬虫,因此360搜索和其他搜索引擎同样受到了屏蔽。dHb28资讯网——每日最新资讯28at.com

然而,这种屏蔽措施或许只能阻挡一部分访问,仍有许多爬虫可能会通过其他方式继续抓取内容并用于AI训练。dHb28资讯网——每日最新资讯28at.com

dHb28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-16-109396-0.html百度百科大动作!屏蔽谷歌必应,防内容被抓取训练AI?

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 罗永浩冯唐聚餐笑开怀,竟用曾欲收购的苹果iPhone?

下一篇: 从数据治理到数据消费,汽车行业如何用数据驱动业务发展

标签:
  • 热门焦点
Top