百度百科屏蔽谷歌/必应等搜索引擎 防止内容被抓取训练AI
加入收藏
近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎，预计是为了阻止这些搜索引擎和其他爬虫，未经授权抓取百度百科的内容用于训练AI。 本文来自零六找游戏
内容来自lingliuyx.com
百度百科的robots.txt文件显示，目前仅有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。
零六攻略小程序
谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他一切搜索引擎爬虫均被明确禁止抓取百度百科的内容。 06gmyx.com
零六游戏，游戏平台零六找游戏
虽然360搜索没有在封禁列表中单独列出，但百度百科的策略是禁止一切非白名单爬虫抓取，所以360搜索和其他搜索引擎也都是被屏蔽的。 内容来自lingliuyx.com
不过百度百科这种做法其实也只是防君子不防小人，肯定还有很多爬虫通过各种方式继续抓取内容然后拿去训练AI。 零六游戏，游戏平台零六找游戏
免责声明：我们致力于保护作者版权，注重分享，被刊用文章【本页文章内容】因无法核实真实出处，未能及时与作者取得联系，或有版权异议的，请联系零六找游戏管理员，我们会立即处理!
便捷联系：微信公众号搜<零六游戏>联系在线客服即可
扫码关注微信公众号
微信扫描，关注微信公众号
相关游戏资讯
猜你喜欢内容
热门推荐
手游开服表
