网站定制

建站知识

拥有21项软件著作权 提供源码和源文件

无锡网站建设聊搜索引擎蜘蛛抓取配额的相关问答

来源:阿凡达建站公司作者:网站建设/SEO优化专家浏览:1645发布日期:2019-08-17

抓取份额是搜索引擎蜘蛛花在一个网站上的抓取页面的总的时间上限:
一、什么是搜索引擎蜘蛛抓取份额?
  顾名思义,抓取份额是搜索引擎蜘蛛花在一个网站上的抓取页面的总的时间上限。对于特定网站,搜索引擎蜘蛛花在这个网站上的总时间是相对固定的,不会无限制地抓取网站所有页面。
  抓取份额的英文Google用的是crawl budget,直译是爬行预算,我觉得不太能说明是什么意思,所以用抓取份额表达这个概念。
  抓取份额是由什么决定的呢?这牵扯到抓取需求和抓取速度限制。
二、抓取需求
  抓取需求,crawl demand,指的是搜索引擎“想”抓取特定网站多少页面。
  决定抓取需求的主要有两个因素。一是页面权重,网站上有多少页面达到了基本页面权重,搜索引擎就想抓取多少页面。二是索引库里页面是否太久没更新了。说到底还是页面权重,权重高的页面就不会太久不更新。
  页面权重和网站权重又是息息相关的,提高网站权重,就能使搜索引擎愿意多抓取页面。
三、抓取速度限制
  搜索引擎蜘蛛不会为了抓取更多页面,把人家网站服务器拖垮,所以对某个网站都会设定一个抓取速度的上限,crawl rate limit,也就是服务器能承受的上限,在这个速度限制内,蜘蛛抓取不会拖慢服务器、影响用户访问。
  服务器反应速度够快,这个速度限制就上调一点,抓取加快,服务器反应速度下降,速度限制跟着下降,抓取减慢,甚至停止抓取。
  所以,抓取速度限制是搜索引擎“能”抓取的页面数。

 无锡网站建设企业

免责声明:本文由13年无锡网站建设公司阿凡达网络整理编写,为生产型企业提供网络营销知识分享,转栽请注明出处:https://wxavatar.net/cn399.html
无锡网站建设

阿凡达网络策划方案能够让您的网站在同行间异军突起,让您的产品更快速、较高价值化的销售出去

让您的网站上线一个月有排名

LET YOUR WEB SITE ON-LIFE FOR A MONTH ON THE BAIDU HOME PAGE

让您的目标客户一眼爱上你让您的目标客户一眼爱上你 400-189-1319

主要业务范围包括:网站建设,营销型网站建设,外贸网站设计,高端网站建设,集团网站建设,企业网站建设,找网站建设公司就选无锡阿凡达建站。

Copyright @ 2012 无锡阿凡达网络科技有限公司 版权所有 苏ICP备13021672号 技术支持:无锡网站建设