当前位置:错新网文章中心网站运营SEO推广 → 百度站长VIP大讲堂(上海站)QA集锦:抓取建库篇

百度站长VIP大讲堂(上海站)QA集锦:抓取建库篇

减小字体 增大字体 作者:admin  来源:本站整理  发布时间:2014-12-9 14:57:38


首先,小编要对各位站长朋友说声抱歉,VIP大讲堂上海站已经过去N久,QA内容今天才发布出来。各位站长参加VIP大讲堂,除了聆听官方声音外,更重要的是可以与百度专家进行面对面的沟通。VIP大讲堂上海站请出了百度spider专家孙权,这是他第一次走出来与站长进行培训交流,课程中抖出干货无数,各位无法参与现场培训的站长除了申请观看培训现场视频外,还可以通过QA记录看看自己心中的疑问是否已被解答。

由于现场QA环节火爆热烈内容超多,故本次仅放出spider抓取建库部分,其它内容请静待下期。

问:为什么收录量像坐过山车一样的,还有为什么有些网页今天在明天就没了?
答:百度会周期建库,且每个库的收录量是恒定的,你老是有新增,肯定会再从库里淘汰一些,反正总是保持那个库是满的。在建库的过程中,你会感觉有波动。具体的怎么筛,哪个页面会留下哪个页面会淘汰,这个策略是有很多的,他随着时间的变化,收录的标准策略也是在发生微调。

问:我们站点使用CDN加速会不会比较容易造成蜘蛛无法抓取?因为有时候修改掉他绑定的什么东西。
答:如果要修改掉一定要通知到上一级,现在不存在这个问题,现在你如果修改掉也可以解析掉,之前可能会存在这个问题。

问:你们百度自己也有一个CDN加速,对抓录排名有没有影响?
答:在使用CDN加速这个问题上,我们对所有站点一视同仁。但我建议你使用技术能力强的CDN服务商,保证站点的稳定和速度,百度会更喜欢。

问:刚才您说IP上的站点数不能太多,那CDN这种情况怎么办?
答:CDN的情况另说,如果我们识别出来是CDN的话不会受站点数量的影响,如果你是提供独立IP的话会有这样一些问题。

问:还是IP上站点数量的问题,如果是主域跟二级域名呢?也受数量限制?
答:我说的是独立域名。当然质量比较好的二级域名也可以认为是独立域名。

问:多个域名,他有相同的一些内容,怎么建库?
答:如果是多域名在同一个主域下面有相同内容的话,不可能所有都建库,而且被建库的那个可能不是你希望的那个,所以尽量不要有相同的内容。

问:刚才讲的IP如果是多域名的话,好几百个IP域名,现在我们也用了CDN,按照刚才的说法,单个IP最多抓多少?1000万是说对站点还是对IP?
答:对IP,但1000万是我举例,不是实际的数据,这个数据不会分享出来的。

问:现在我的网站被很多蜘蛛爬,我想只让百度蜘蛛爬,百度蜘蛛IP多少?能设白名单么?
答:百度蜘蛛IP是不断变的,现在网上的确有一些白名单的说法,暂时是有较的,但不保证今后不会变,所以

[1] [2]  下一页


本文引用网址:

在下列搜索引擎中搜索“百度站长VIP大讲堂(上海站)QA集锦:抓取建库篇”的相关信息:

谷歌搜索 百度搜索 360搜索 雅虎搜索 搜狗搜索 搜搜搜索 必应搜索 有道搜索
你可能还喜欢以下文章
  • 1如何做爱真人示范图片 男女ML常...
  • 2如何做爱更舒服?教你做爱72式...
  • 3林晨钰爆奶门35P完整 武汉工程...
  • 4王梦溪未经处理雅照120P完整艳...
  • 5怎么做爱舒服?真人示范做爱姿...
  • 117岁女孩身份证号大全 18岁女孩...
  • 2女性18岁身份证号大全 成年女人...
  • 37月黑客武林免费送QQ号 部分7位...
  • 4实现帝国cms首页及栏目页的定期...
  • 5网站关键词选取步骤
  • 1合肥艳照门事件 合肥艳照门全套...
  • 2兰州警花王梦溪裸照全集视频 王...
  • 3嫩白少妇与猛男户外疯狂车震遭...
  • 4女人做爱喜欢什么姿势?最容易...
  • 5王梦溪种子完整版 王梦溪1.08G...
  • 1linux服务器在运行210天左右宕...
  • 2Apache Prefork和Worker模式的...
  • 3命令行模式修改文件夹的访问及...
  • 4功能强大的防DDOS攻击SHELL脚本...
  • 5关于远程镜像技术优缺点大揭秘...
  • 赞助商广告

    图片文章导读