发布快讯
内容抓取
8月22
-
防止内容被抓取训练AI：百度百科屏蔽谷歌/必应等搜索引擎
10:52 作者:编辑快科技8月22日消息，据报道，近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎，预计是为了阻止这些搜索引擎和其他爬虫，未经授权抓取百度百科的内容用于训练AI。 百度百科的robots.txt文件显示，目前仅有百度搜索、搜狗搜索、中国搜索（Chinaso）、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。 谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisous…原文连接
