某度白天疯狂爬站

怪人 16天前 8

新站,site 首页都没有。
晚上12点后就不怎么爬了。正常吗
最新回复 (10)
  • wangjianjilei 16天前
    引用 2
    不一定是真百度,可能会伪装的,很羡慕你百度经常来
  • antbt 16天前
    引用 3
    看看域名历史做站情况呗
  • 雪丫鬟 16天前
    引用 4
    那就屏蔽掉蜘蛛
  • ip4 16天前
    引用 5
    被采了?
  • steptodream1 16天前
    引用 6
    有的垃圾蜘蛛根本无视robots.txt 禁止了 别的没了 他还爬
  • citywar 16天前
    引用 7
    爬还不好吗。只怕它不来
  • testuserll 16天前
    引用 8
    采集站伪装的吧。
  • 楼主 怪人 16天前
    引用 9
    wangjianjilei 发表于 2021-9-6 09:59
    不一定是真百度,可能会伪装的,很羡慕你百度经常来
    IP发址也伪装?220.181.108.*
  • 已注销账号 15天前
    引用 10
    我看宝塔统计百度隔几天来一次,一次就来一个,其他时间百度都是0
  • 就这样了s 15天前
    引用 11
    steptodream1 发表于 2021-9-6 09:19
    有的垃圾蜘蛛根本无视robots.txt 禁止了 别的没了 他还爬
    毕竟是君子协议
  • 游客
    12
返回