设为首页收藏本站客户端下载

老榕树社区

 找回密码
 立即注册
社区推荐
 
查看: 105|回复: 0
打印 上一主题 下一主题

[DISCUZ] robots文件

[复制链接]
任务统计:
发布数/完成数/奖励数:
0/0/0
承接数/奖励数/收入数:
0/0/0

0

主题

0

帖子

-1709

积分

限制会员

积分
-1709
扫一扫,手机访问本帖
跳转到指定楼层
楼主
发表于 2017-3-13 11:12:27 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
【如内容违法或虚假,请联系上述邮件删除】拿去用

User-agent: Baiduspider
Allow: /$
Disallow: /*

User-agent: Baiduspider-image
Allow: /$
Disallow: /*

User-agent: Baiduspider-news
Allow: /$
Disallow: /*

User-agent: Googlebot
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: MSNBot
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: YoudaoBot
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: Sogou web spider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: Sogou inst spider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: Sogou spider2
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: Sogou blog
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: Sogou News Spider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: Sogou Orion spider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: ChinasoSpider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: Sosospider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: yisouspider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: EasouSpider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*

User-agent: 360Spider
Disallow: /user/
Disallow: /group/
Disallow: /?*
Disallow: /*?*


User-Agent: *
Disallow: /
复制代码(关注老榕树网络旗下“网络思维”微信公众号:wlsw360 (每天都有好文章)

 

                                                   本帖如有虚假或违法,请联系邮箱删除,本社区删贴不收任何费用,欢迎举报。老榕树社区属老榕树网络旗下网站,旨在为老榕树用户提供创业咨询、网站建设技术交流、源码下载、提供各种实用工具。如有部分帖子涉及违法、虚假,请你第一时间与社区联系,把需要删除的社区链接提供给我们,我们核实之后,第一时间删除。邮箱:125175998@qq.com

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

  • 关于我们| 企业文化| 备案编号:滇ICP备13002355号
  • Copyright 2013 最新最精彩-社区论坛 版权所有 All Rights Reserved
快速回复 返回顶部 返回列表