成都seo公司联系电话
当前位置:四川肆合互动科技有限公司 > 新闻资讯 > 网站优化 >

【官方说法】百度蜘蛛抓取频次暴增的原因

发表日期:2018-05-07 10:05文章编辑:何杨浏览次数: 标签:    

  【官方说法】百度蜘蛛抓取频次暴增的原因

  Spider对网站抓取数量突增往往给站点带来很大烦恼,纷纷找平台想要Baiduspider IP白名单,但实际上BaiduSpider IP会随时变化,所以并不敢公布出来,担心站长设置不及时影响抓取效果。百度是怎么计算分配抓取频次的呢?站点抓取频次暴增的原因有哪些呢?

  总体来说,Baiduspider会根据站点规模、历史上网站每天新产出的链接数量、已抓取网页的综合质量打分等等,来综合计算抓取频次,同时兼顾站长在抓取频次工具里设置的、网站可承受的最大抓取值。

  从目前追查过的抓取频次突增的case中,原因可以分为以下几种:

  1, Baiduspider发现站内JS代码较多,调用大量资源针对JS代码进行解析抓取

  2, 百度其他部门(如商业、图片等)的spider在抓取,但流量没有控制好,sorry

  3, 已抓取的链接,打分不够好,垃圾过多,导致spider重新抓取

  4, 站点被攻击,有人仿冒百度爬虫(推荐阅读:《如何正确识别BaiduSpider》)

  如果站长排除了自身问题、仿冒问题,确认BaiduSpider抓取流量过大的话,可以通过反馈中心来反馈,切记一定要提供详细的抓取日志截图。

相关新闻

网站关键词长尾词如何拓展生成从而让它参与排

在成都SEO对优化技术不断的探索过程中发现,相对于做关键词来说,往往更青睐于关键词长尾...

日期:2018-07-10 浏览次数:97

如何通过优化战略实现超越竞争对手

做网站优化排名的核心在哪里?就在如何超越哪些排名稳如狗的竞争对手。那么,如何超越同行...

日期:2018-07-10 浏览次数:164

怎么利用关键词挖掘结合分词技术提升网站系统

网站优化若是具备系统化操作,无论是对网站的掌控精准性,以及推广目标,更加直观且有理...

日期:2018-07-10 浏览次数:54

怎么降低闭站保护对SEO的影响

现实生活和工作中,我们经常会遇到自己的网站中途需要闭站的情况,比如域名需要备案、网...

日期:2018-07-10 浏览次数:162

百度会把什么样的内容容易判断为优质内容?

百度会把什么样的内容容易判断为优质内容?这个话题成都SEO圈来说,是一个老生常谈且百谈不...

日期:2018-07-10 浏览次数:104

seo优化策略:站外优化应该怎么做比较好

搜索引擎优化其实是对网站内容与结构优化的基础上,同时增加网站的外部曝光度,使网站在...

日期:2018-07-04 浏览次数:66