轻松了解百度蜘蛛Baiduspider是什么

SEO问答 seven 396次浏览 0个评论 扫描二维码

轻松了解百度蜘蛛Baiduspider是什么_东莞SEO_专注网站优化技术服务_seven博客

百度蜘蛛是什么?英文名是“baiduspider”,是百度搜索引擎程序。它抓取网上的网页,建立索引数据库,然后使用户能在百度搜索到您网站的网页、图片、视频等内容。

百度根据不同的产品有不同的蜘蛛:

网页搜索 Baiduspider

图片搜索 Baiduspider-image

新闻搜索 Baiduspider-news

无线搜索 Baiduspider

商务搜索 Baiduspider-ads

视频搜索 Baiduspider-video

百度搜藏 Baiduspider-favo

百度联盟 Baiduspider-cpro

百度蜘蛛是怎么工作的:

1、百度蜘蛛通过搜索下载回来的网页放到补充数据区,然后经过各种复杂程序计算过后网页放到检索区,才会形成稳定的排名。所以,只要通过指令就可以找到下载回来的数据。补充数据由于其不稳定性,有可能在各种复杂计算的过程中给k掉,检索区的数据排名相对来说是比较稳定的。百度目前是补充数据和缓存机制相结合,正在向补充数据转变,这是目前百度收录困难的原因,很多站点今天给k了明天又放出来就是这个原因。

2、权重优先和深度优先:

百度蜘蛛从开始抓取页面的起始站点(即一些门户站点)是百度优先抓取的,这样可以抓取更多的网址。为了抓取高质量的网页而进行深度优先抓取,这个策略是由调度来计算和分配的,百度蜘蛛它的工作只负责抓取。

权重优先是指反向连接较多的页面的优先抓取,这也是调度策略的一种,一般网页被抓取抓到的正常范围是40%,60%算很好,100%是不可能的,当然抓取的越多越好。

 

注意:

(1)不建议随便修改title,但可以稍微修改meta description。因为修改title可能会带来网站的大幅波动、一次成型后,尽量不做大幅修改频繁修改meta description,影响的也仅仅是摘要(切忌不要堆砌关键词)。

(2)百度蜘蛛只能读懂文本内容,暂不处理图片、flash等非文本内容,而JavaScript中包含链接指向的网页可能无法收录。

 

 

标签:


青岚SEO博客版权所有丨转载请注明出处丨转载原文地址:http://www.seven1988.com/?p=62
喜欢 (2)
[]
分享 (0)

您必须 登录 才能发表评论!