Baiduspider应该吃点脑白金补补，整天没头没脑瞎转悠

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 4954 天前的主题，其中的信息可能已经有所发展或是发生改变。

该看的不看，不给看的非要看，同一个死胡同天天进去溜达一圈。

2 条回复 • 1970-01-01 08:00:00 +08:00

sivacohan

PRO

2012 年 6 月 18 日

你没写robots文件吗？

weibo

2012 年 6 月 22 日

就是因为写了不管用才吐槽哇。丫根本就无视robots。