搜狗,有道这两个哥们每天都很积极,尤其是搜狗

人一个都没拉来,还整天忙活

所以呢,我决定干掉他们

下面是我的样板,大家可以参考下(微软的bing也是一球样)- User-agent: sogou spider

  • Disallow: /
  • User-agent: YodaoBot
  • Disallow: /
  • User-agent: MSNBot
  • Disallow: /
  • User-agent: *
  • Disallow: /author/
  • Disallow: /page/
  • Disallow: /wp-
  • Disallow: /comments/
  • Disallow: /trackback/
  • Disallow: /tag/
  • Disallow: /category/
  • - Sitemap: http://www.ooxx.com/sitemap.xml.gz复制代码