• 丁丁打折网 - 网友优惠券分享网站，有688999个用户

当前的位置: 首页 > 文章列表 > 手机平板 > 百度百科限制谷歌必应等搜索引擎抓取 保护内容免被AI训练利用

— 百度百科限制谷歌必应等搜索引擎抓取 保护内容免被AI训练利用 —

更新时间：2024-08-23 09:35:03　编辑：丁丁小编

【太平洋科技快讯】近日，百度百科已开始屏蔽包括谷歌、必应等在内的多数搜索引擎的抓取权限，此举旨在防止这些搜索引擎和其他爬虫未经授权抓取其内容，用于训练人工智能模型。

根据百度百科的robots.txt文件更新显示，目前只有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数搜索引擎被允许抓取其内容。

谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他非白名单爬虫均被明确禁止访问百度百科的数据。尽管360搜索没有在封禁列表中单独列出，但百度百科的策略是禁止一切非白名单爬虫抓取，所以360搜索和其他搜索引擎也都是被屏蔽的。

尽管百度百科采取了上述措施，但有业内人士指出，这些方法可能只能防止大部分合法的爬虫抓取，无法完全阻止那些通过特殊手段绕过限制的小型爬虫继续获取内容，用于AI训练。

本文转载于：https://www.sohu.com/a/802868653_223764 如有侵犯，请联系dddazheyh@163.com删除

前一篇： AMD将发布锐龙9000系列处理器性能补丁 提高CPU速度及游戏性能

后一篇： 三星Galaxy Tab S10系列十月推出 银、灰两种配色无标准版

热门文章榜

热门优惠券

更多

最新分享

更多