每一个网站背后都有一个故事!  百万站会员中心 免费加入   设为首页 设为首页   加入收藏 收藏百万站  
站长百事通

SEO名词解释之百度蜘蛛(Baiduspider)

贡献者:站长百事通


SEO名词解释之百度蜘蛛(Baiduspider)

Baiduspider - 百度蜘蛛:

百度是如何收录到那么多网页的呢?这个百度用以抓取互联网上数以亿计的网页的程序,就叫做Baiduspider - 百度蜘蛛。

它是一个程序,夜以继日得在互联网上找寻新的URL,接着抓取URL上的内容,返回到百度的网页暂存数据库。

百度用来抓取网页内容的程序,叫做Baiduspider,抓取其他内容的蜘蛛,则是新的名字:

产品名称                 对应user-agent 

网页搜索                Baiduspider
无线搜索                Baiduspider-mobile 
图片搜索                Baiduspider-image 
视频搜索                Baiduspider-video 
新闻搜索                Baiduspider-news 
百度搜藏                Baiduspider-favo 
百度联盟                Baiduspider-cpro 

不少朋友会在自己的网站日志里看到这个蜘蛛Baiduspider-cpro,现在我们明白它是百度联盟蜘蛛,用以百度联盟程序匹配相应的广告。


下一词条: 静态页面(Static Page)与动态页面(Dynamic Page)
上一词条: 网站百科与绿色百科的定义
开放词条: SEO名词解释之百度蜘蛛(Baiduspider)
开放分类: 首页 > 站长百事通 > 基础术语
现在开始分享此文章!
关于站长百事通
1. 百万站站长百科(wiki.baiwanzhan.com),致力于建设成为内容丰富的站长帮助手册。
2. 百万站站长百事通栏目是关于站长常用资料的一个知识集合,包含大量丰富的建站必读知识。
3. 百万站-百万优秀网站的大本营!百万站官方网站汇聚百万精品网站,与您分享百万精彩网站知识。