采集说明
BlogFinder 为了自动感知已收录博客站点的最新信息,采用了网络爬虫的方式来采集一些必要的数据。为了让您明确相关的请求来自于本站爬虫,本站在每个发起的外部抓取请求中定义了如下的 User agent 请求标识:
Mozilla/5.0 (compatible; BlogFinderbot/1.0; +https://bf.zzxworld.com/p/bot)
如果您在自己网站的访问日志中看到有类似的访问记录,希望可以予以通行。
根据需要,本站的爬虫只会访问您站点的两个地址:
- 首页地址。这是为了探测站点的可访问状态,获取标题,描述等信息;
- RSS 地址。这是为了通过 RSS 格式协议,获取您最近更新的文章。如果您关闭 RSS 地址,爬虫将不会再访问此地址。但相应的,您更新的文章也无法再通过 BlogFinder 进行分享;
本站爬虫的访问频次很低。访问首页或 RSS 地址每天约在 10 次以内。相信这不会对您的服务器负载产生多大影响。
如果有更多疑问,可以访问了解本站页面,通过最下方的联系方式和站长取得联系。