有个朋友的网站上线1个多月了,个大搜索引擎都来爬了,谷歌爬的最勤快,唯独搜狗从来没来过,而且在搜狗的站长工具也提交过。耍大牌啊。
1
geeklian 2015-04-22 10:15:49 +08:00 via iPhone 2
搜狗输入法敲几次,搜狗浏览器访问几次,马上就有ddos般的sg爬虫来了
|
2
kiritoalex 2015-04-22 10:17:39 +08:00 via Android
@geeklian 23333333
|
3
jyz19880823 2015-04-22 10:37:26 +08:00
蜘蛛被狗吃了
|
4
gongpeione 2015-04-22 10:47:54 +08:00
@geeklian 23333 没错搜狗爬虫太可怕了
|
5
TimLang OP @gongpeione 真的假的,正打算虚拟机装搜狗浏览器的,被你们说的不敢试了。。
|
6
gongpeione 2015-04-22 10:52:22 +08:00
@TimLang 有段时间被爬的太狠了就把他的UA禁了 _(:з」∠)_ 不知道现在怎么样了就是
|
7
wesley 2015-04-22 11:02:37 +08:00
我在robots里把搜狗的爬虫都禁了, 结果它还是每天不请自来
只好禁IP了 |
8
liujiantao 2015-04-22 14:41:06 +08:00 via Android
不请不来,来了不走
|
9
Xrong 2015-04-22 14:53:55 +08:00 via Android
爬了上万个页面就收录一个首页,好无奈。。。
|
11
sefemp 2015-04-22 15:39:28 +08:00
百度的架子也很大。。。
|
12
Moto 2015-04-22 16:21:07 +08:00
不听话的狗,宰了,我们吃狗肉火锅
|
13
hanwujibaby 2015-04-22 17:05:05 +08:00
搜狐自己的服务都被搜狗的蜘蛛爬死过。。。。
|
14
chaucerling 2015-04-22 17:16:04 +08:00
搜狗现在是鹅厂的
|
15
farnan 2015-04-22 17:28:00 +08:00
做一些外链或者友链试试
|