你会在robots.txt禁止360搜索的蜘蛛吗 只看楼主

  • 11# zt1993
  • 2012-9-1 13:28:07
360绝对不鸟robots.txt
不行你试试。。
nhce.njut.edu.cn静止所有robots,你用360试试。再看看百度谷歌。。
  • 12# zt1993
  • 2012-9-1 13:29:57
不仅不鸟。。还照快照。。。
  • 13# Kokgog
  • 2012-9-1 13:34:49
robots是蜘蛛考虑的事.......360自己的那部分靠的是360浏览器用户上传的数据...........
提示: 作者被禁止或删除 内容自动屏蔽
  • 15# winder
  • 2012-9-1 15:03:58
为什么要禁止呢??
提示: 作者被禁止或删除 内容自动屏蔽
  • 17# 萢沫
  • 2012-9-1 15:31:19
dnspod 设置蜘蛛127.0.0.1
没必要吧?囧
这家流氓回跟你遵守robots.txt吗

一堆的垃圾ua 狂爬你
  • 20# 信仰
  • 2012-9-2 06:12:27
为什么要阻止 垃圾百度算法一直在调整排名好多都K出百名了
123下一页