当谷歌蜘蛛一次爬行完整个网站,尤其是短时间内快速抓取大量网页内容,对于网站服务器压力会有很大的负荷,从而下次抓取的时候,会每天定量抓取一定的页面数量,这个数量会根据网站的情况自动调整,也可以由用户在Google Webmaster Tool里自行设置。
对于重要的页面,会加大更新的频率
重要页面优先索引和更新,比如网站的首页,分类页等网站中重要的页面会经常被爬取,所以大家在新增资讯页面和产品页面的时候,一定要在这些经常被抓取的页面上有相关的链接进入,从而提高新页面被索引的概率。
当谷歌蜘蛛一次爬行完整个网站,尤其是短时间内快速抓取大量网页内容,对于网站服务器压力会有很大的负荷,从而下次抓取的时候,会每天定量抓取一定的页面数量,这个数量会根据网站的情况自动调整,也可以由用户在Google Webmaster Tool里自行设置。
对于重要的页面,会加大更新的频率
重要页面优先索引和更新,比如网站的首页,分类页等网站中重要的页面会经常被爬取,所以大家在新增资讯页面和产品页面的时候,一定要在这些经常被抓取的页面上有相关的链接进入,从而提高新页面被索引的概率。
家友评论
{{childComment.user.nickName}} (楼主)
{{childComment.time}} 回复({{childComment.childAmount}}) 点赞({{childComment.voteUpAmount}}) 点赞({{childComment.voteUpAmount}})
查看更多评论
{{comment.user.nickName}} (楼主)
{{comment.time}} 回复({{comment.childAmount}}) 点赞({{comment.voteUpAmount}}) 点赞({{comment.voteUpAmount}})