|
【如内容违法或虚假，请联系上述邮件删除】各位站长参与百度站长平台VIP大讲堂。除啦倾听官方声音外。更重要的是能够与百度专家中止面对面的沟通.VIP大讲堂上海站请出啦百度spider专家孙权。这是他第一次走出来与站长中止培训交流。课程中抖出干货无数。各位无法参与现场培训的站长除啦申请观看培训现场视频外。还能够经过QA记载看看自己心中的疑问能否已被解答.
由于现场QA环节火爆热烈内容超多。故本次仅放出spider抓取建库部分。其它内容请静待下期.
问：为什么收录量像坐过山车一样的。还有为什么有些网页今天在明天就没啦？
答：百度会周期建库。且每个库的收录量是恒定的。你老是有新增。肯定会再从库里淘汰一些。反正总是坚持那个库是满的.在建库的过程中。你会觉得有动摇.细致的怎样筛。哪个页面会留下哪个页面会淘汰。这个战略是有很多的。他随着时间的变化。收录的规范战略也是在发作微调.
问：我们站点运用CDN加速会不会比较容易构成蜘蛛无法抓?坑捎谟惺狈中拚羲蠖ǖ氖裁炊?
答：假如要修正掉一定要通知到上一级。往常不存在这个问题。往常你假如修正掉也能够解析掉。之前可能会存在这个问题.
问：你们百度自己也有一个CDN加速。对抓录排名有没有影响？
答：在运用CDN加速这个问题上。我们对一切站点厚此薄彼.但我倡议你运用技术才干强的CDN效劳商。保证站点的稳定和速度。百度会更喜欢.
问：刚才您说IP上的站点数不能太多。那CDN这种状况怎样办？
答：CDN的状况另说。假如我们辨认出来是CDN的话不会受站点数量的影响。假如你是提供独立IP的话会有这样一些问题.
问：还是IP上站点数量的问题。假如是主域跟二级域名呢？也受数量限制？
答：我说的是独立域名.当然质量比较好的二级域名也能够以为是独立域名.
问：多个域名。他有相同的一些内容。怎样建库？
答：假如是多域名在同一个主域下面有相同内容的话。不可能一切都建库。而且被建库的那个可能不是你希望的那个。所以尽量不要有相同的内容.
问：刚才讲的IP假如是多域名的话。好几百个IP域名。往常我们也用啦CDN。依照刚才的说法。单个IP最多抓多少？万是说对站点还是对IP？
答：对IP。但万是我举例。不是实践的数据。这个数据不会分享出来的.
问：往常我的网站被很多蜘蛛爬。我想只让百度蜘蛛爬。百度蜘蛛IP多少？能设白名单么？
答：百度蜘蛛IP是不时变的。往常网上的确有一些白名单的说法。暂时是有较的。但不保证今后不会变。所以倡议站点还是经过ua中止判别。我们百度站长平台上有相关的文章。你能够找一下.
问：假如我写r.b.ts只想禁掉动态链接的话。会不会影响动态参数前面正常链接的抓??
答：不会的。你原来的页面还在。肯定会抓.
问：比如我们一个域名我们想把带？号的url全部禁掉。首页我们不要禁掉。怎样弄？
答：?前面有个*。后面再有个*就能够啦.
问：我想啦解。假如我往常收录有5万。大约多长时间才干把我原来收录5万重新抓取一遍？
答：不同站点不好说。一个是你站点做的很好。知名度很响更新很快质量很好就会快；假如你的站点默默无闻。贡献很少。可能就会很慢.
（接上个问题）
问：就是差不多的状况。大约.
答：这个没有人能估出来.
问：百度站长平台上有数据提交的工具。我们实时提交。你们也会实时抓取吗？
答：不会。他会有一层判别.往常只是通知你提交胜利。后面什么时分抓。什么时分建库没有。我们正在研讨要不要把这个分享出来.
问：我网站有一些列表页。都没有链接。担忧百度抓不到
答：往常百度站长平台的站内搜索工具有一个绿色收录通道。在那里提交种子页。我们就知道的.
（接上个问题）
问：提交种子页面必需求用站搜？
答：是的.
问：假如说页面里url特别多的话。蜘蛛会不会有选择性的中止抓??
答：不会。他都会一个不漏给你提出来。但会把JS、CSS这样的链接给过滤掉.但请留意。全部抓取过来之后会中止筛?⒉皇且磺卸蓟峤ǹ?
问：往常很多网站都有自己的站内搜索。都会产生站内搜索结果页。百度不喜欢搜索结果页的话。我们用这个会不会对我们有影响？只是不喜欢还是对我们网站会有惩罚
答：蜘蛛会去抓。抓完之后重要是提取里面的链接.假如只需一两条这样的页面质量不好问题不大。假如整体质量较差。有可能遭到惩罚.
问：新出的时效性文章当时没有被收录。后期能否还会被收录？
答：会
问：站点每天最高爬虫多少次？
答：这个其实说不好。有的站点我们一天会抓一两千万。有的站点只抓几个、几十个。看你的范围和质量。而且这个抓取量也是会依据网站的状况中止调整的.
卫生巾 www.qianjaya.com/：nasw01(关注老榕树网络旗下“网络思维”微信公众号:wlsw360 (每天都有好文章)
本帖如有虚假或违法，请联系邮箱删除，本社区删贴不收任何费用，欢迎举报。老榕树社区属老榕树网络旗下网站，旨在为老榕树用户提供创业咨询、网站建设技术交流、源码下载、提供各种实用工具。如有部分帖子涉及违法、虚假，请你第一时间与社区联系，把需要删除的社区链接提供给我们，我们核实之后，第一时间删除。邮箱：125175998@qq.com | 
发表于 2017-3-13 11:13:28
收藏
分享
淘帖