V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
alwayshere
V2EX  ›  程序员

感觉各个搜索引擎蜘蛛是不是内部都有联系沟通?

  •  
  •   alwayshere · Sep 27, 2018 · 1072 views
    This topic created in 2770 days ago, the information mentioned may be changed or developed.

    Googlebot,yandex bot,bing bot,只要其中一个 bot 爬取量大了,另外的 bot 爬取量马上就降下来了,其中一个 bot 不爬了,其它 bot 立马又兴奋了赶紧来爬,就像内部都相互通知了似的,难道这些搜索引擎都会约定好了谁先上?

    No Comments Yet
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5901 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 31ms · UTC 02:50 · PVG 10:50 · LAX 19:50 · JFK 22:50
    ♥ Do have faith in what you're doing.